더비창고방

공식 doc link : https://druid.apache.org/docs/0.20.0/development/extensions-core/s3.html 참고 블로그 link : https://til.songyunseop.com/druid/setting_druid_with_emr.html EMR과 함께 Druid를 셋팅해보자! — 전지적 송윤섭시점 TIL 1.0 documentation Docs » EMR과 함께 Druid를 셋팅해보자! Edit on GitHub EMR과 함께 Druid를 셋팅해보자! Versions Druid 0.12.0 Java 1.8.0_161 과정 Java 설치 sudo yum install -y java-1.8.0-openjdk-devel.x86_64 druid User 추가..

https://medium.com/@emergeit/realtime-data-streaming-with-apache-kafka-apache-pinot-apache-druid-and-apache-superset-e67161eb9666 Realtime data streaming with Apache Kafka, Apache Pinot, Apache Druid and Apache Superset Index medium.com Druid 솔루션에대해 공부해보고자 실시간 데이터처리 파이프라인 아키텍처를 찾던중, 위글을 접하게 되었다. 참고해서 실습해본 과정을 기록하고자 한다. Toy project Architecture 개요 플랫폼 : AWS ec2 서버 데이터 파이프라인 구성환경 java version : op..

[목차] 개요 1.1 es-kibana 사용자 인증 및 관리 보안 설정 방법 2.1 elasticsearch 다중 노드 클러스터 사용자 인증 설정 2.2 kibana 사용자 인증 설정 1. 개요 1.1 es-kibana 사용자 인증 및 관리 목표 사용자 별로 ID/PW 를 부여하여, ID/PW를 이용하여 elasticsearch와 kibana 접속이 가능토록 한다. elasticsearch 내부에 .security index를 생성하여 사용자 정보를 저장하여 사용자 계정관리를 한다. 구성도 2. 사용자 인증 설정 방법 elasticsearch-kibana 사용자 인증 설정에는 3단계가 있다 elastic search 다중노드 클러스터 보안 설정 Kibana 보안설정 시스템 계정의 password 설정 2..

[목차] 개요 1.1 Kibana 란? Kibana 설치 및 실행 2.1 RPM으로 Kibana 설치 2.2 Kibana 설정 2.3 Kibana 실행 및 설치 확인 1. 개요 1.1 Kibana 란? ElasticSearch의 index 데이터를 검색하여 분석 및 시각화 하는 플랫폼이며, 다양한 차트와 테이블 및 맵에서 데이터 시각화기능을 제공한다. Kibana는 ElasticSearch의 결과를 보여주는 역할을 하기 때문에 ElasticSearch 설치가 필수이다. 2. Kibana 설치 및 실행 2.1 RPM으로 Kibana 설치 Elastic GPG 키 가져오기 아래 명령어를 실행하여 Elastic GPG 키를 가져온다. rpm --import Kibana 설치를 위한 repo 파일 생성 [ec2..