1. 개요 NiFi 를 윈도우에 설치하는 것은 더더욱 쉽다. 2. 설치 ** 윈도우 환경에 NiFi 를 설치하기 위해선 JAVA 가 설치되어 있어야 한다. 추후 아래 링크를 통해서 설치 하자 ** snepbnt.tistory.com/41 JAVA 설치 방법 자바를 설치하는 방법은 의외로 쉽다. 하단 블로그의 링크를 통해 보면서 설치하면 설치하기가 한결 수월할 것이다 https://wwst.tistory.com/96 [Java 자바 설치방법] jdk다운 환경변수설정, jdk 정상설치 snepbnt.tistory.com 1) NiFi 설치 zip 파일을 다운로드 받는다 https://archive.apache.org/dist/nifi/1.11.3/nifi-1.11.3-bin.zip 정상적으로 다운로드가 된다..

1. 개요 이번에는 NiFi 를 리눅스에 설치하는 방법을 정리하고자 한다. 생각보다는 간단한 것 같다. 2. 설치방법 1) 설치 전 리눅스 시스템을 업데이트 한다 $ yum -y update 만약에 Cannot find a valid 로 시작하는 에러가 나면서 업데이트가 실행이 되지 않는다면, 리눅스 서버가 아직 외부와 연결이 되지 않은 고립된 상태이므로 아래 링크를 통해 에러를 해결할 수 있도록 하자 snepbnt.tistory.com/44 linux error : Cannot find a valid baseurl for repo: base/7/x86_64” pssh 를 이용하여 java 를 설치하려고 봤더니 자꾸 이런 에러가 나타나서 봤더니... 해당 에러는 주로 yum 을 사용할 때 나타나는 에러이..

1. NiFi 란? Apache NiFi는 시스템 간 데이터 전달을 효율적으로 처리, 관리, 모니터링 하기에 최적화된 시스템이다. 대량의 데이터를 수집, 처리하기 위해서 만들어졌다. Dataflow를 쉽게 개발할 수 있고, 시스템 간의 데이터 이동과 내용을 볼 수 있는 UI 제공 실시간 데이터 전송에 필요한 기능 제공 강력한 자원과 권한 관리를 통해 Multi-tenant(여러 조직이 자원을 공유해 사용하는 것) 지원 데이터가 어느 시스템으로부터 왔는지 추적 가능 오픈 소스 여러 NiFi 시스템 간 통신을 지원(site to site) NiFi는 프로세서를 이용해 수집, 변형, 저장을 여러 단계에 걸쳐서 할 수 있다. 실시간 처리에 장점을 가지고 있으며, 스케쥴러가 있지만 배치작업이 약하다는 단점이 존재..

소스트리에서 git ignore 를 하는 방법은 여러가지가 있다 1. 특정 파일 커밋 제외하기 1) commit 할 때 불필요한 파일을 '오른쪽 마우스 클릭'한 후 무시버튼 클릭 2) 그러면 설정창이 나오는데 원하는대로 설정한 후, 이미 업로드가 되어있다면 깃에서 제거 설정을 함으로써 ignore 를 설정 가능 2. git ignore 파일 만들기 특정파일만 무시하기에는 너무 양이 많을 수가 있다. 그럴때는 git ignore 에 특정 경로 등을 설정하여 해당 경로 아래의 파일들이 추가될 경우에는 무시하게 만드는 방법도 있다. 1) 소스트리의 설정 메뉴를 클릭한다 2) 고급 메뉴 클릭 3) 편집 클릭 4) gitignore 설정파일이 뜨면 제외하고자하는 파일 및 경로를 적고 저장하면 끝 3. 참고 링크 ..

깃 리포지토리를 생성하는 법은 생각보다 간단했었다. 시작하기 전에는 과정들이 기억이 나지 않아서, 이걸 어떻게 해야되나..고민이 많았는데 막상 리포지토리를 생성하고 보니 생각보다는 간단했다. 1. 깃 리포지토리 생성하기 1) 생성한 자신의 깃 허브 사이트에 들어가서 New 를 클릭한다 2) 리포지토리 이름과 public 여부와 private 여부를 설정한다음에 생성을 진행한다. public 과 private 는 검색시 외부에 드러나는지 안나는지 여부같다. public 을 선택할 경우에는 인터넷 상에서 누구나 나의 리포지토리를 찾을 수 있다 private 를 선택할 경우에는 인터넷 상에서 누구나 나의 리포지토리를 찾지 못하는 대신에, 내가 선택해서 특정 사람에게 나의 리포지토리를 노출할 수 있다. 여기까지..

깃의 경우에는 별도의 접속 파일을 다운로드 받아서 로컬에서 원격 리포지토리로 직접 업로드를 할 수 있다. 몇번 해봐서 익숙하지만..추후 다시 설치할 시에 참고하기 위해 해당 기록을 남겨둔다. 1. 깃 설치파일 다운로드 아래의 링크에 접속하여 설치파일을 다운로드한다. git-scm.com/ Git git-scm.com 설치파일 다운로드는 두군데서 할 수 있지만, 오른쪽 모니터 화면에 보면 직관적으로 한눈에 다운 받는 곳을 알 수 있다. 해당 부분을 클릭하면, 최신의 깃 release 파일을 다운로드 받을 수 있다. 2. 깃 설치하기 다운로드 받은 파일을 더블클릭하여 설치를 시작한다 1) next 클릭 2) 설치 경로 지정 후 next 클릭 3) 설치하고자하는 구성요소를 선택한다. 웬만해서는 크게 건드리지 ..

리포지토리 삭제는 그동안 참고해서 해왔었지만.. 할 때마다 잊어버리는 것 같아서.. 추후에도 다른 곳에서 서치하지 않고, 내 블로그에서 바로 찾아서 해결하기 위해 기록을 남겨둔다. 삭제방법은 간단하며, 아래의 방법처럼 진행을 하면 된다. 추후에도 동일한 작업시 참고하도록 할 것 git 리포지토리삭제 방법 1. 깃허브 로그인 뒤 삭제할 리포지토리 사이트로 이동 2. 자신이 삭제할 리포지토리로 이동 3. 삭제할 리포지토리에서 우측 상단의 Setting 버튼 클릭 4. Setting에서 스크롤을 밑으로 끝까지 내리면 아래 처럼 Danger Zone 나온다. 여기서 가장 밑에있는 Delete this repository버튼을 클릭한다. 5. 4번 이후, 확인작업을 아래 이미지와 같이 거쳐야 한다. 삭제할 리포지..

원인 git 에서 master의 branch를 만들고 작업을 하다보면, pull request 할 때 conflict(충돌)가 나는 경우가 있다. 이런 경우는 pull origin master를 한 후에 다른 작업자가 같은 라인을 수정하고, 그 수정한 내역을 master 와 합쳤을때(merge) 발생하는데, 즉 나와 다른 작업자가 같은 파일로 작업을 하고 있을 때 수정 내역이 차이가 나는 경우 발생하는 에러라고 보면 된다. 해결방법 이렇게 되면 충돌된 코드를 수정해줘야 pull 또는 COMMIT 을 성공적으로 마무리할 수 있다 우선 깃에 들어가서 충돌이 일어나는 부분을 확인하고 난 후, 해당 코드를 직접 깃에 쳐서 업로드 하거나, 파일을 직접 수정하는 방법이 있을 수 있다.

현재 다른 프로젝트를 진행중인데 거기에서는 이전 프로젝트와는 다르게 GitLab 을 사용중에 있다. 깃랩과 깃허브 둘다 저장소라는 것과 연동방식이 같다는 점에서 크게 차이점은 없지만, 커밋 방식에는 약간의 차이가 존재하는 듯 하다. 깃허브 커밋/푸쉬 방식은 이전에 작성해둔 아래 링크 참고 snepbnt.tistory.com/entry/Git-Hub-%EC%9D%B4%ED%81%B4%EB%A6%BD%EC%8A%A4-%EA%B9%83%ED%97%88%EB%B8%8C-%EC%97%B0%EB%8F%99-%EB%B0%8F-%EC%BB%A4%EB%B0%8B?category=800625 [Git Hub] 이클립스 깃허브 연동 및 커밋 추후 이클립스를 바탕으로한 프로젝트 시 이클립스를 깃허브에 커밋할 일이 많이 있을 ..

git clone 을 한다음에도 위 에러가 뜨는 이유는 다운받은 경로에 들어가지 않고 git 명령어를 사용하려 했기 때문이다. 깃을 다운받고 난 후, 그 경로에 들어가서 git 명령어를 실행하면 해당 에러는 뜨지 않을 것이다. 추후 비슷한 에러 발생시, 아래 링크를 참고하면서 해결할 것 참고 링크 stackoverflow.com/questions/11961600/fatal-not-a-git-repository-or-any-of-the-parent-directories-from-git-status "fatal: Not a git repository (or any of the parent directories)" from git status This command works to get the files a..