쟈누이의 기록습관

1. 에러 원인 there's no more data and the peer has closed the connection. --> 데이터 노드에 데이터가 없어서 연결을 끊어 버리겟슴다 라고 하둡에서 말하는 거라는 것 같다. 2. 해결 방법 말로는 core-site.xml 에 들어가서 ip를 127.0.0.1 ==> 0.0.0.0 으로 바꾸라는 것 같다 3. 참고 링크 https://stackoverflow.com/questions/7949058/what-is-the-meaning-of-eof-exceptions-in-hadoop-namenode-connections-from-hbase What is the meaning of EOF exceptions in hadoop namenode connectio..

1. 에러의 원인 해당 에러의 경우, 로컬에서 작업을 하였을 경우 파일을 저장할 때 주로 발생하는 에러 나의 경우에는 intellij 에서 sftp 파일을 편집하려고 했을 때 발생함 권한 부분만 해결하면 되는 에러 2. 해결 방법 해결방법은 의외로 간단했다. $ sudo chmod -R 777 ./folder 777 권한을 다 주기는 뭐해서.. 시간이 될 때 권한 테스트를 하면서 최소한으로 열수 있는 권한을 파악해야겠다. 파이참에서도 위 방법으로 해결이 가능한 것 같다 3. 참고 링크 https://data-newbie.tistory.com/502 Pycharm remote SFTP file transfer fails: Permission Denied 및 Failed to change timestamp ..

1. 에러 원인 airflow 처음 설치하면서 초기화를 할때 발생하는 에러 2. 해결 방법 에러 해결 방법은 간단하다. SQLAlchemy 를 설치하면 된다 pip install "SQLAlchemy==1.3.15" # or pip3 install "SQLAlchemy==1.3.15" 3. 참고 링크 https://mentha2.tistory.com/208 [Airflow] ModuleNotFoundError: No module named 'sqlalchemy.ext.declarative.clsregistry' Airflow 설정 파일을 초기화할 때 발생하는 오류 해결 방법(airflow initdb 오류) 입니다. Airflow를 사용하기 위해 'airflow initdb' 명령어로 airflow da..

1. 에러 원인 에러는 wtform 을 3.0으로 업데이트 하면서 문제가 발생한것으로 인식이 됨 2. 해결 방법 pip install wtforms==2.2 위 명령어를 써줘 wtforms 를 다운그레이드 시킨다 만약 python < 3.6 이면 pip install wtforms==2.3.3 을 한다 3. 참고 링크 https://exerror.com/modulenotfounderror-no-module-named-wtforms-compat/ [Solved] ModuleNotFoundError: No module named 'wtforms.compat' - Exception Error To Solve ModuleNotFoundError: No module named 'wtforms.compat' Err..

1. 에러 원인 jenkins 에 sudo 권한이 없어서 발생한 에러 2. 해결 방법 편법이긴 하지만... jenkins 에 sudo 권한을 주어 이 문제를 해결... 1) sudo 편집창 연다 $> sudo su - $> visudo # 그 후 아래의 구문 추가 뒤 저장 jenkins ALL=(ALL) NOPASSWD: ALL 위치는 대략적으로 아래와 같다.. 그 이후 shell script 에 sudo 를 붙인다

1. 에러 원인 해당 에러는 git에서 jenkins 서버로 webhook 이 제대로 발생하지 않을 때 일어남 대개 host 가 제대로 연결이 되지 않았을 경우 발생했다. aws 의 경우에는 보안그룹에서 git ip 를 막고 있었던 상황 2. 해결방법 Github의 Webhook은 아래 같이 지정된 IP주소를 사용하고 있다 그래서 젠킨스 서버가 있는 EC2의 보안그룹에 인바운드 규칙을 설정했다. 예전 답변들에는 3개밖에 없었는데 시간이 지나면서 또 업데이트가 되었나보다.. "hooks": [ "192.30.252.0/22", "185.199.108.0/22", "140.82.112.0/20", "143.55.64.0/20", "2a0a:a440::/29", "2606:50c0::/32" ], 아래 링크에..

1. 에러 원인 에러 원인은 최근 github브랜치가 master가 아닌 main이 주 브랜치로 변경이 되어 master 로 기입이 된 브랜치를 찾지못해 발생한 에러같았다. 2. 해결 방법 */master -> */main으로 바꿔준다. 3. 참고 링크 https://honeyinfo7.tistory.com/302 [Jenkins 에러일지] jenkins Couldn't find any revision to build. Verify the repository and branch configuration for this job. 다음과 같은 에러가 발생하였다. jenkins Couldn't find any revision to build. Verify the repository and branch conf..

1. 에러의 원인 git 레포지토리에 ssh-key 를 등록하고 git clone 을 실행하려는데 위 에러가 떴었다... 이 에러때문에 몇일을 고생했는지....... 근본적인 원인은 .ssh authentication 에 문제가 있는 것 같았다. 우선 어디에 문제가 존재하는지 파악을 해야될것 같다. 2. 해결 방법 1) ssh 키값 존재여부 체크 # SSH key 체크 ssh-add -l -E sha256 나의 경우에는 위 명령어를 쳤을 때 아래의 표시가 떴었다... The agent has no identities 위 표시가 떴을 떄는 바로 아래 링크를 참고하여 수정을 하면된다. https://snepbnt.tistory.com/507 [Git Error] Github permission denied:..

1. 에러의 원인 git에 등록을 한 ssh key 를 손실했을 때 발생하는 에러이다 이 때문에 git 에서는 계속 접근을 허락하지 않는 것이다. 이 에러 때문에.....git clone 이 안되서 무지 애먹었다.. 위 에러가 뜨기 전에 아래 명령어를 실행했을 때 #ssh-agent에 추가된 키 리스트 확인 ssh-add -l The agent has no identities 위 문구가 떴을 때 주로 발생한다. 이는 ssh-keygen 을 통해서 ssh key를 만들어 등록을 했지만 정작 ssh 서버에는 등록이 안된 경우이다 2. 해결방법 여러가지 해결방법이 있지만 난 아래 명령어를 통해 해결했다. ssh-add 를 통해 ssh-keygen 으로 만든 ssh-key 를 서버에 등록했다 ssh-add ~/..

1. 에러 원인 ssh-add 명령어를 통해 git 서버에 만든 ssh key 를 등록하려고 하니 발생했다. 찾아본 결과 ssh-agent 를 한번도 실행한적이 없어 발견한 문제라고 한다. 2. 에러 해결 $ eval $(ssh-agent) 위 명령어를 실행한 후 ssh-agent 명령어를 실행하면 Identity added: /home/somjang/.ssh/id_rsa (/home/somjang/.ssh/id_rsa) 라고뜨며 정상적으로 작동한다