본문 바로가기
728x90
반응형

데이터웨어하우스26

[후기] Clickhouse Ver. 22 Doc 이전에 읽었던 내용을 이력으로 남기고자 한다.독서 기간은 아래와 같다.1회 차 : 2022-03-23 ~ 2022-06-292회 차 : 2022-06-29 ~ 2022-08-253회 차 : 2022-08-25 ~ 2022-09-26페이지가 약 1500였다.   뜬금없이 왠 Doc일수도 있다. 필자도 갑자기 Clickhouse를 하게 되었고 한국에서는 관련 번역본이 없어서 뭐를 참고해야 하나 싶다가 그냥 Doc를 읽어보자 싶어서 정독하였다.   Doc라서 그런지 확실히 전반적인 내용에 대해 모두 나와 있었다. 그래서 클릭하우스가 무엇인지, 어떤 느낌인지 좀 더 자세히 알 수 있었다.   반면 내 업무 외의 내용도 들어있다보니 처음 정독할 때에는 내 업무에 관련이 있는지 몰라서 일단 읽었고, 두 번째 세 번.. 2024. 11. 19.
[Kraft] Kraft 소개 목적  Kraft 도입에 대한 니즈를 소개하기 위함  등장 배경  기존 아파치 주키퍼의 경우 아래의 문제점이 있었음성능적인 부분브로커는 모든 토픽과 파티션에 대한 메타데이터를 주키퍼에서 읽어야 하며, 메타데이터의 업데이터는 주키퍼에서 동기방식으로 일어나고, 브로커에는 비동기방식으로 전달됨. 이 때문에 토픽과 파티션이 많은 대규모 카프카 클러스터에서는 지연이 등의 병목현상이 발생하게 됨관리적인 부분주키퍼와 카프카는 완전히 다른 애플리케이션으로 서로 다른 구성 파일, 환경, 서비스 데몬을 가지고 있음. 결국 관리자는 동시에 서로 다른 애플리케이셩늘 운영해야 함모니터링 등서로 다른 애플리케이션인 만큼 모니터링을 적용하는 방법과 주요 메트릭도 다름 Kraft의 주요 목적  카프카의 구조를 단순화하고 확장성을 향.. 2024. 11. 2.
[Zookeeper] Ver. 3.9.0 Release note 요약 New Feature스냅샷 촬영 및 데이터 스트리밍을 위한 관리 서버 API가 추가됨WatchEvent 발생을 트리거하는 Zxid 통신이 추가됨 ImprovementHTTP TRACE 메소드를 비활성화함TLS - 클라이언트 신뢰/키 저장소의 동적 로딩이 추가됨재귀적 스냅샷 분석 도구를 생성함요청에서 직렬화 데이터를 캐시하여 반복 직렬화를 피하도록 함 BugZkAdaptor.cc에서 GCC 4.7 이상 버전의 경우 컴파일 오류가 발생하는 버그가 수정됨 WishsyncRequestProcessor 성능이 개선됨 참고전체 Release note docIndex of /doc (apache.org)특정 버전 Release note docZooKeeper: Because Coordinating Distribute.. 2024. 10. 31.
[Zookeeper] Ver. 3.8.1 Release note 요약 ImprovementPrometheus 메트릭의 성능 영향을 감소시킴 Sub-taskConnectionMetricsTest.testRevalidateCount에서 NPE 수정함 참고전체 Release note docIndex of /doc (apache.org)특정 버전 Release note docZooKeeper: Because Coordinating Distributed Systems is a Zoo (apache.org) 2024. 10. 28.
728x90
반응형