Data & Database
2023. 6. 29.
NiFi 개요와 특징
NiFi는 NSA(National Security)에서 Apache에 기증한 DataflAgencyow 엔진입니다. NiFi 장점 •Dataflow를 쉽게 개발할 수 있고, 시스템 간의 데이터 이동과 내용을 UI로 볼 수 있다 •실시간 데이터 전송에 필요한 기능 제공 •데이터 추적 가능 •오픈 소스 •여러 시스템 간 통신을 지원 •Multi-tenant( 여러 조직이 자원을 공유 ) 지원 NiFi 단점 •배치 작업을 잘 못함, 원본 소스의 파일들이 목적지에 잘 전달 되었는지 확인하기 힘듦 •현재 실행되는 내용을 확인할 수 없으며, 끝나고 성공 여부만 알 수 있음 •복잡한 연산을 잘 못하지만 Spark, Storm 등과 연동 가능 구성 요소 Processor •특정 업무, 기능 단위로 묶은 것 •Input..