🎀 NiFi 파보기

계속해서 업데이트 될 예정 (2022.01.20)

들어가기전에

NiFi를 파보는 글이다. 누군가 NiFi가 뭐냐고 물어봤을 때 자신감있게 설명하고 싶어서 공부해보려한다. NiFi를 빌드하고 실행하는 건 하도 해봐서 할 수 있는데 직접적으로 이렇게 저렇게 사용해보진 않아서 정확한 기능이 뭔지 모른다. (대걍은 알고있지만)

공식사이트에서 NiFi 를 한 문장으로 요약해 "데이터를 처리하고 배포하기 쉽고 강력하며 안정적인 시스템" 이라고 설명이 되어있다.

손풀기로 맛보기 수준 NiFi 설치해보기

앞서 진행하는 NiFi 버전은 1.14.0 이다. 지금 회사에서 사용하고 있기때문에 동일한 버전으로 간다.

Apache Nifi Git으로 이동

tag -> 💫rel/nifi-1.14.0 버전 사용

소스 코드 다운로드

$ git clone -b rel/nifi-1.14.0 --single-branch https://github.com/apache/nifi.git

소스 빌드하기

maven은 설치되어있는 환경으로 가정하겠다.
(yum install 로 패키지 설치하지 말고 apache mirror 사이트에서 apache maven 소스코드 가져오고 conf/setting.xml 에서 mirror 사이트 추가하고 maven 환경설정에 PATH 추가하면 된다. maven 3.6.4 버전)

$ mvn clean install -DskipTests

빌드해본 경험으로 소스코드 수정필요 없이 빌드 잘된다. 만약 안된다면 -Drat.skip=true 옵션을 추가해주자.

여기까지가 설치과정이다. 다른 오픈소스에 비교하자면 매우 간편한!@

소스 실행하기

$ {NIFI_HOME}/bin/nifi.sh start

따로 에러로그가 없다면 정상적으로 실행된것이다.

$ ps -ef | grep nifi

로 nifi port 번호 확인한다.

http://localhost:nifi_port/nifi 접속이 되는지 봐준다.

여기까지의 과정은 단순하게 설치하고 실행하는 과정이지 실제로 사용한다면 설정해야할 것들이 많다.

NiFi Cluster 구축