1. 시작 해당 설치는 클러스터 구성 내용을 이어서 작성하며 그 기준에 맞게 작성하였습니다. `node1~3` 은 `/etc/hosts` 파일에 추가해 준 내용이며 아래 링크를 참고하세요 [참고 1 `etc/hosts`] https://hbcha0916.tistory.com/63#4.2.%20%EB%84%A4%EC%9E%84%20%EC%84%9C%EB%B2%84%20%EB%A7%A4%ED%95%91%20%60%2Fetc%2Fhosts%60-1 [zookeeper][Ubuntu] Apache zookeeper cluster 구성하기 1. 시작 업무에서 이중화 요구사항에 따라 규모 있는 cluster를 구성해야 한다. 추후 업무에 내가 정리하고 참고하기 위해 글을 작성한다.(망각 방지) 2. zookeepe..
1. 시작 아래 선행작업이 필요합니다.(Zookeeper 설치) https://hbcha0916.tistory.com/63 [zookeeper][Ubuntu] Apache zookeeper cluster 구성하기 1. 시작 업무에서 이중화 요구사항에 따라 규모 있는 cluster를 구성해야 한다. 추후 업무에 내가 정리하고 참고하기 위해 글을 작성한다.(망각 방지) 2. zookeeper Apache zookeeper 는 분산시스템을 위한 hbcha0916.tistory.com 이제 카프카 클러스터를 구성해준다. 카프카는 Apache NiFi 클러스터와 함께 사용할 것이기 때문에 NiFi 에서 적용하는 기준으로 작성한다. 편의상 Kafka가 설치된 경로를 `$KAFKA_HOME`으로 이야기 하겠다. 1...
1. 시작 아래 선행작업이 필요합니다.(Zookeeper 설치) https://hbcha0916.tistory.com/63 [zookeeper][Ubuntu] Apache zookeeper cluster 구성하기 1. 시작 업무에서 이중화 요구사항에 따라 규모 있는 cluster를 구성해야 한다. 추후 업무에 내가 정리하고 참고하기 위해 글을 작성한다.(망각 방지) 2. zookeeper Apache zookeeper 는 분산시스템을 위한 hbcha0916.tistory.com NiFi를 압축 해제한 디렉토리를 `$NIFI_HOME` 라고 칭하겠다. 2. NiFi Apache NiFi 는 시스템 간의 데이터 흐름을 자동화하기 위해 만들어졌다. Java로 만든 프로그램이다.(JVM 위에서 실행한다.) 3...
1. 시작 업무에서 이중화 요구사항에 따라 규모 있는 cluster를 구성해야 한다. 추후 업무에 내가 정리하고 참고하기 위해 글을 작성한다.(망각 방지) 2. zookeeper Apache zookeeper 는 분산시스템을 위한 조정 서비스이다. Java로 만든 프로그램이다.(JVM 위에서 실행한다.) 각 호스트마다 leader와 follower 역할로 구분되며 모든 쓰기 요청은 leader가 받고 leader가 follower들에게 update를 요청한다. leader가 죽을경우(장애발생) follower 중 하나가 leader가 된다. 3. 목표 한 호스트에 필수로는 Apache NiFi , Apache Kafka , ElasticSearch을 구성하는 것이며 추가로 필요할 경우 더 추가할 예정이다..
