ClickHouse에서 잘못 적재된 데이터를 지워야 하는 상황이 생겼다. MySQL이라면 그냥 DELETE FROM ... WHERE ... 날리면 끝인데, ClickHouse 클러스터 환경에서는 그게 안 된다. DELETE FROM 문법 자체는 존재하지만, ON CLUSTER를 지원하지 않아 클러스터 전체에 적용되지 않는다. 클러스터 환경에서는 반드시 ALTER TABLE ... DELETE나 DROP PARTITION을 써야 한다. 이 글은 클러스터 환경을 전제로 데이터를 삭제하는 두 가지 방법인 ALTER DELETE와 DROP PARTITION을 비교하고, 각각 언제 쓰는 게 맞는지 정리한다. 방법 선택의 기준은 데이터 양이 아니라 삭제 패턴이다. 작은 양이라도 ALTER DELETE는 파트..

ClickHouse를 처음 접했을 때 가장 혼란스러웠던 건 용어였다. MySQL이나 MariaDB에서는 그냥 테이블 만들고 쿼리 날리면 됐는데, ClickHouse는 처음부터 "Shard", "Replica", "Distributed 테이블", "ZooKeeper"가 튀어나온다. 심지어 테이블도 두 종류가 있다고 한다. 이 글에서는 ClickHouse 클러스터가 어떤 구조로 이루어져 있는지, 각 개념이 무슨 역할을 하는지 한 눈에 이해할 수 있도록 정리해본다. ClickHouse는 왜 클러스터 구조를 쓸까? ClickHouse는 대용량 분석 쿼리에 최적화된 컬럼형 DB다. 수억 건의 데이터를 빠르게 집계하는 게 주 목적이다 보니, 데이터를 여러 서버에 나눠 저장하고 병렬로 처리하는 구조가 기본이 ..

이번에 맥북을 새로 사게 되면서 개발 환경을 새로 새팅하고, 기존에 윈도우에서 개발했던 Spring Boot 서버를 실행했다. 근데 MySQL DB가 연결이 안되는 에러가 발생했다. 새로 새팅한 MySQL의 개발 환경이 안맞는 문제로 발생한 에러였다.     에러access denied for user 'root'@'localhost' (using password: yes)          해결 구글링 해보니 사용자의 비밀번호가 틀렸을 때 나타나는 오류라고 한다. 그래서 비밀번호를 재설정해보았다. + 비밀번호가 MySQL 8에서는 보안성을 높이기 위해 8자리부터 가능하니 8자리 이상으로도 바꿔보기!!!          다른 문제그런데 나는 아무리 비밀번호를 재설정하고 연결하려고 해도 연결이 되지 않았다...

Redis는 key-value 형식의 데이터 구조를 지원하는 데이터베이스이다. 그리고 Redis는 key에 해당하는 value의 값으로 다양한 자료구조를 지원한다. Redis는 String, Set, List, Hash, Sorted Set 등의 자료구조를 지원한다. 그리고 각 자료구조에 맞는 명령어를 통해 데이터를 읽고 쓸 수 있다. 많은 자료구조를 지원하지만, 가장 흔하고 익숙한 String, Set, List, Hash, Sorted Set에 대해서만 소개하도록 하겠다. Strings 문자열(숫자, 직렬화된 객체, 이진수 등)을 저장한다. 512MB까지 저장할 수 있다. 명령어 공식 문서 삽입 SET name giraffe MSET name2 turtle color green rating 10 조회..

in-memory 기반의 NoSQL로, key-value의 데이터 구조를 사용하는 데이터베이스인 Redis를 윈도우에서 설치하고 연결하는 방법에 대해 알아보겠다. Redis에 대한 자세한 설명은 'Redis의 개념과 특징'에서 보면 된다! 공식적으로는 Window 지원 안함 Redis는 공식적으로 Window를 지원하지 않는다. Redis 공식 홈페이지에서 제공하는 파일을 받는다면 Linux 기반의 tar.gz 파일을 받게 될 것이고, 이건 윈도우에서 설치하기가 어렵다. (시도 했으나 포기..) 또한, Redis 공식 홈페이지에 가면 Window에서 Redis 를 다운로드 받을 수 있는 방법을 소개해주고 있다. Install Redis on Windows 홈페이지에서는 WSL2 (Windows Subsy..

데이터베이스라고는 MySQL, Oracle과 같은 RDBMS만 알고 쓰던 시절.. Redis에 대해 ‘캐싱할 때 쓴다, 채팅 서버 만들 때 쓴다, 랭킹 시스템 구현할 때 쓴다..’ 등을 들었다. 하지만 Redis에 대해 전혀 모르고 있었기 때문에 Redis를 왜 써야하는지는 알 수 없었다. 도대체 Redis가 무엇이고, 어떤 특징을 가지고 있길래 Redis를 쓰는 것일까? ❓ Redis란? Redis에 대해 이렇게 한 줄로 소개할 수 있다! in-memory 기반의 NoSQL로, key-value의 데이터 구조를 사용하는 데이터베이스 NoSQL Not Only SQL’로 ‘SQL만을 사용하지 않는 데이터베이스’라는 뜻으로 기존의 RDBMS와는 다른 구조로 데이터를 저장한다. DBMS(관계형 데이터베이스)..