BaeBox

Scroll : 데이터를 분할해서 읽어오는 기능. pagination 기능이라고 봐도 무방할듯 이러한 쿼리를 날리게 되면, 아래와 같은 결과값을 받게 된다. 해당 _scroll_id를 이용한 쿼리를 날리게 되면, 지정한 size 만큼 데이터를 연이어서 받아올 수 있다. 생성된 스크롤은 지정된 시간(TTL)만큼 살아 있으므로, 그 시간내로 요청을 이어한다면 데이터를 이어 받을 수 있다. 덤. node 에서는 아래처럼 하면 된다. https://www.elastic.co/guide/en/elasticsearch/reference/7.5/search-request-body.html#request-body-search-scroll Request Body Search | Elasticsearch Reference..

* 7.5.2 버전에서는 아래와 같은 docker stack 설정(yml) 코드로는 동작하지 않는다. 최하단 링크에 있는 docker-compose 를 이용하여 Elasticsearch cluster를 구성하는것을 추천한다. ElasticSearch(이하 es)는 기본적으로 하나의 Node 만 이용하는 것을 좋아하지 않는지, 하나의 Node만 떠 있는다면 Cluster 의 상태가 Yellow 로 떠 있게 된다. (그 외에 Green 과 Red가 있다.) Docker 를 통해 cluster 를 구성하는 방법은 두 가지가 있다고 생각한다. 세부적으로 나누면 더 있을테지만, 모두 결과적으로는 같은 짓. elasticsearch.yml (설정파일) 을 작성한 후, 마운트. docker-compose.yml 상에..

Aggregation 의 사전적 정의 : 집합, 집성, 집합체. ElasticSearch 에서의 Aggregation : 특정 단위로 데이터를 묶어서 뽑아오는 방법. SQL 의 group by 와 대응한다고 생각하자. 아래에서 내가 예시로 적을 쿼리들은 아래 링크에서 데이터를 받을 수 있다. 우측에서 ElasticSearch 버전을 선택할 수 있다. 5.x ,6.x , 7.x 버전의 index 생성 쿼리가 조금씩 다르니, 본인의 ElasticSearch 버전을 유의해서 받아야 한다. https://www.elastic.co/guide/en/kibana/7.1/tutorial-load-dataset.html Loading sample data | Kibana Guide [7.1] | Elastic If s..

뭘 설치를 합니까. 우리 문명의 이기 docker 를 사용합시다. 하하하 위의 docker-compose.yml 파일을 작성하고 아래 명령어를 입력하면 elasticsearh 가 실행됩니다. 은 아무렇게나 쓰면 됩니다. docker stack deploy -c docker-compose.yml 이 때, Linux 사용자라면 가상메모리 설정을 해줍시다. elasticsearch 는 일정량 이상 가상메모리를 세팅해주지 않으면 사용이 불가능하거든요. sysctl -w vm.max_map_count=262144 컨테이너가 실행되면 컨테이너 안으로 들어가, curl localhost:9200 을 날렸을때 json 포맷으로 elasticsearch의 상태값이 리턴되었다면 설치 성공! https://www.elast..

아무리 생각해도 따로 글을 쓸 필요가 없는 것 같다. 이해가 필요없는 영역이니 그냥 가져다 쓰면 된다. 링크는 각각 Index 와 Document 단위 명령의 상위 링크이다. **Index API https://www.elastic.co/guide/en/elasticsearch/reference/7.4/indices.html Index APIs | Elasticsearch Reference [7.4] | Elastic www.elastic.co **Document API https://www.elastic.co/guide/en/elasticsearch/reference/7.4/docs.html Document APIs | Elasticsearch Reference [7.4] | Elastic All CR..

ElasticSearch 는 Cluster 구조를 가진다. 분산형 Application 아래 글을 보자. https://bae-codebox.tistory.com/64?category=851145 분산 어플리케이션(Distributed app/system) * 아래 글을 참고하자. https://www.slideshare.net/sunnykwak90/apache-zoo-keeper * Distributed applications (distributed apps) are applications or software that runs on multiple computers within a net.. bae-codebox.tistory.com 지금 읽어보니까 엄청 별로다 간단히 설명해 보자면, 컴퓨터 여러대로..

요런 자료구조를 가진다. Elastic Search Relational DB Index DataBase/Schema Type Table Document Row Field Column Mapping Schema

ElasticSearch 카테고리를 만들고 오래 방치해뒀는데, 이제야 글을 쓴다. ElasticSearch : 검색 엔진 이름 그대로 유연한 검색을 가능하게 해주는 검색 엔진이다. 리소스(특히 메모리)를 많이 잡아먹는데, 먹는만큼 일을 잘한다. 단순히 검색만을 위해서 사용하지는 않고, 대개 DB 기능을 겸해서 사용한다.

이 중 필요한 것만 가져다 써도 됨. 절대 모든 곳을 다 거치지 않아요. 어거지로하면 가능은 하지만... 필요한 데만 거쳐갑니다.

난 언제나 그렇듯 도커로 clickhouse를 띄울거다. https://bae-codebox.tistory.com/1 Docker 란? Docker 란? 가상머신 비스무리한거. 좀 더 정확하게는 컨테이너(=운영체제 수준 가상화)이다. 뭐 얘도 가상머신과 비슷한 거니 가상머신 비스무리한거라고 생각하자. bae-codebox.tistory.com 위와 같은 docker-compose.yml 파일을 만든 후에, docker stack deploy -c docker-compose.yml ch 명령어로 실행해준다. 실행이 완료된다면 , 해당 서버에 8080 포트로 접속한다면 (ex.localhost:8080) 아래와 아래와 같은 이미지를 볼 수 있다. 로그인이 잘 되었다면, 이거저거 누르면서 만지작거려보자.