오늘은 airflow에서 elasticsearch 의 개념과 opensearch의 개요, 수업과 opensearch를 이용한 대시보드 구성 방법을 실습하고 이후 kafka의 이론과 첫 기초단계 실습을 진행하였다. Elasticsearch, AWS OpenSearch 이해ElasticsearchApache Lucene에 구축되어 배포된 검색(원하는 정보를 검색해) 및 분석(데이터 분석) 엔진방대한 양의 데이터를 신속하게(거의 실시간)저장, 검색, 분석을 수행할 수 있음데이터 발생하는 곳 → 전달(지연이 있을 수 있음) → Elasticsearch장점고가용성 : 분산 구조(노드, Replica 샤드)를 통해 서비스 중단 없이 이용 가능데이터를 여러곳에 분산 저장 → 그 한곳이 장애 발생해도 금방 복구, 카..