Error code 모음/2. Hadoop errors

프로젝트 주의 사항3: cloudera 설치 후 발생할 수 있는 문제들 정리1 : DNS 문제, 구성(메모리 할당) 문제

쟈누이 2020. 3. 13. 17:34
반응형

클라우데라의 문제는 색깔 기준으로 2개로 섹션이 나뉜다.

우선 구성에 들어가 해결할 수 있는 문제들을 해결한다. 

 

1. 빨간색(모든 상태 문제)

- DNS 문제(DNS 관련 문제 가 있다고 계속 뜸)

  allias 로 기입을 했지만, allias 를 통한 노드 이름을 식별하지 못하는 것이기 때문에 나타나는 문제이다

  이럴때는 putty 로 연결되어 있는 노드들에 들어가 노드의 이름을 allias 에서 본래 이름으로 바꾸어 준다.

  그 이후에, cloudera-scm-agent / server / server-db 등을 다시 시작해 준다음에

  재 로그인해주면 된다.

  참고로, ssh 를 써주면 node1 에서 node2로 잠시 접속을 갈아타 일일히 가상환경을 키지 않아도 노드들의 

  이름을 바꾸어 줄 수가 있으므로 편하다

 

2. 노란색(구성 문제)

- 메모리 할당 문제

   구성문제라고 하여 클라우데라에서 권장하는 할당해야되는 노드 갯수들이 있다. 이럴때는 그냥 클릭하고, 들어가서 

   권장사양대로 노드 수치를 바꾸어주거나 무시할것은 무시해도 상관없다.

   우선 할당량을 1로 늘려보면 어느정도 해결이 가능하다

 

그 후에는 위에 클라우데라 매니저를 눌러 본래대로 돌아와 해결이 되었는지 확인한다. 

그리고 설정이 많이 변경이 되서 구성을 변경할 필요가 있을 때는 이 부분에 요청이 뜨면 들어가서 버튼을 클릭해주면 

알아서 클라우데라가 변경한 설정대로 바꾸면서 세팅을 다시한다.

이제 즐겁게 클라우데라는 탐험하면 된다....

 

처음에는 이거 깔기도 힘들엇는데..해보니깐 조금이나마 해볼만하다..하하하하하 

ㅠㅠㅠㅠㅠ

반응형