엘라스틱서치 소개 (Introduction)

출처: Elastic 공식 문서 — "What is Elasticsearch?" (Elasticsearch Guide 8.19) https://www.elastic.co/guide/en/elasticsearch/reference/8.19/elasticsearch-intro-what-is-es.html (최신 문서로 이동된 elasticsearch-intro.html 페이지의 내용을 정리했어요.)

엘라스틱서치가 뭐냐면요

엘라스틱서치(Elasticsearch)를 한 줄로 설명하자면, **분산 검색·분석 엔진(distributed search and analytics engine)**이에요. 동시에 확장 가능한 데이터 저장소(scalable data store)이자 **벡터 데이터베이스(vector database)**이기도 해요. 모두 Apache Lucene 위에 만들어졌어요.

성능이 핵심이에요. 프로덕션 규모(production-scale)의 워크로드에서 **속도와 관련성(relevance)**에 최적화되어 있죠. 그리고 사실상 실시간(near real time)으로 데이터를 검색하고, 인덱싱하고, 저장하고, 분석할 수 있어요. "사실상 거의 실시간"이라는 표현이 중요한 이유는, 데이터를 넣자마자 바로 검색이 가능하다는 뜻이거든요.

엘라스틱서치는 Elastic Stack의 심장(heart)이에요. Kibana와 함께 쓰면서 다음 Elastic 솔루션들을 구동해줘요.

Observability (관측성/가시성)
Search (검색)
Security (보안)

기능이 정말 많아서 전체 목록은 제품 웹페이지에서 볼 수 있어요.

Elastic Stack이 뭐예요?

엘라스틱서치는 Elastic Stack의 핵심 컴포넌트예요. Elastic Stack은 데이터를 수집하고, 저장하고, 검색하고, 시각화하기 위한 제품들의 묶음이에요. 로그나 지표 같은 데이터가 들어오면, Logstash나 Beats 같은 도구로 수집해서 엘라스틱서치에 저장하고, Kibana로 시각화해서 보는 식이에요. 이 스택 전체에 대해 더 자세히 알고 싶으면 Elastic Stack 문서를 보면 돼요.

어떤 데에 써요? (사용 사례)

엘라스틱서치는 정말 넓고 계속 늘어나는 사례에 쓰여요. 대표적인 예를 영역별로 살펴볼게요.

Observability (관측성)

로그·메트릭·트레이스(Logs, metrics, and traces): 애플리케이션, 시스템, 서비스에서 발생하는 로그, 메트릭, 트레이스를 수집·저장·분석해요.
APM (Application Performance Monitoring): 비즈니스에 중요한 애플리케이션의 성능을 모니터링하고 분석해요.
RUM (Real User Monitoring): 웹 애플리케이션에서 실제 사용자의 상호작용을 모니터링하고 정량화·분석해요.
OpenTelemetry: 이미 갖고 있는 계측(instrumentation)을 그대로 재사용해서, OpenTelemetry 표준으로 Elastic Stack에 텔레메트리 데이터를 보낼 수 있어요.

Search (검색)

전문 검색(Full-text search): 역색인(inverted index), 토큰화(tokenization), 텍스트 분석(text analysis)을 이용해서 빠르고 관련성 높은 전문 검색 솔루션을 만들어요.
벡터 데이터베이스(Vector database): 벡터화된 데이터를 저장·검색하고, 내장 또는 서드파티 NLP(자연어 처리) 모델로 임베딩을 만들 수 있어요.
시맨틱 검색(Semantic search): 동의어, 밀집 벡터 임베딩(dense vector embeddings), 학습된 희소 쿼리-문서 확장(learned sparse query-document expansion) 같은 도구를 써서 검색 쿼리 뒤의 의도와 맥락을 이해해요.
하이브리드 검색(Hybrid search): 최신 랭킹 알고리즘으로 전문 검색과 벡터 검색을 결합해요.
검색 경험 구축(Build search experiences): 앱이나 웹사이트에 하이브리드 검색 기능을 추가하거나, 조직 내부 데이터 소스 위에 엔터프라이즈 검색 엔진을 만들 수 있어요.
RAG (Retrieval Augmented Generation): 엘라스틱서치를 리트리벌 엔진으로 써서, 생성형 AI 모델에 더 관련성 높고 최신이거나 사내 데이터를 보충해줘요.
지리공간 검색(Geospatial search): 지리공간 쿼리로 위치를 검색하고 공간 관계를 계산해요.

Security (보안)

SIEM (Security Information and Event Management): 애플리케이션, 시스템, 서비스에서 나오는 보안 데이터를 수집·저장·분석해요.
엔드포인트 보안(Endpoint security): 엔드포인트 보안 데이터를 모니터링하고 분석해요.
위협 헌팅(Threat hunting): 데이터를 검색·분석해서 보안 위협을 탐지하고 대응해요.

이건 엘라스틱서치가 가능하게 하는 검색·관측성·보안 사례의 일부에 불과해요. 산업별로 구체적인 실제 사례가 궁금하면 Elastic의 고객 성공 사례를 살펴보면 돼요.

한 줄 요약: 엘라스틱서치는 Lucene 위에 만들어진 분산 검색·분석 엔진이자, 확장 가능한 데이터 저장소 겸 벡터 데이터베이스예요. Elastic Stack의 심장으로서 검색·관측성·보안 영역에서 사실상 실시간으로 데이터를 검색·저장·분석하는 데 쓰여요.