본문 바로가기
728x90
반응형

전체 글399

[Kafka] 3.4.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.4.0 Notable Changes SASL JAAS 설정 내 문제가 되는 로그인 모듈 사용을 비활성화하기 위해 시스템 속성인 org.apache.kafka.disallowed.login.modules를 3.4.0부터 추가함. 기본값은 비활성화임 New Feature JmxReporter registration을 비활성화함 결과 레코드를 브로드캐스트하도록 허용함 컨슈머 프로토콜에 "generation" 필드를 추가함 Improvement 처리 내 재할당할 때 자동 선호 선출을 막지 않음 --bootstrap-server kafka-strea.. 2024. 2. 17.
[Kafka] 3.3.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.3.0 Notable Changes 새로운 클러스터에서 KRaft 모드가 운영 준비가 됨 키가 없는 레코드에 기본적으로 사용되는 파티셔너가, 하나 이상의 브로커가 느릴 때 이상한 동작을 방지하도록 개선됨. 새로운 로직은 배치 처리 동작에 영향을 미칠 수 있으며 이는 batch.size 또는 linger.ms 설정을 통해 조정할 수 있음. 또한 partitioner.class=org.apache.kafka.clients.producer.internals.DefaultPartitioner를 사용하여 이전 동작으로 원복할 수 있음 위에서 설명한 .. 2024. 2. 16.
[Kafka] 3.2.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.2.0 Notable Changes 프로듀서에 대한 Idempotence 설정이 다른 설정과 충돌하지 않으면 기본적으로 활성화됨. 3.0.0과 3.1.0에서는 버그가 있어 이 기능을 막았고 명시적으로 enable.idempotence를 true로 설정했어야 적용되었음. 3.0.1과 3.1.1, 3.2.0에서는 기본적으로 동작을 함 카프카가 보안 이슈로 log4j와 slf4j-log4j12를 reload4j와 slf4j-reload4j로 교체함 기본 classpath에서 예시 커넥터로 FileStreamSourceConnector와 FileS.. 2024. 2. 14.
[Kafka] 3.1.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.1.0 Notable Changes 아파치 카프카가 자바 17 버전을 지원함 아래 메트릭이 만료되어 다음으로 사용해야 함 bufferpool-wait-time-total > bufferpool-wait-time-ns-total io-waittime-total > io-wait-time-ns-total iotime-total > io-time-ns-total eager 리밸런싱 프로토콜이 이제 제거됨. 따라서, 카프카 브로커 2.4 이전 버전을 사용하는 유저는 2.4 - 3.1 사이 버전을 한번 경우해야 함 New Feature OIDC에 대.. 2024. 2. 13.
[Kafka] 3.0.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.0.0 Notable Changes(다른 항목과 중복될 수 있음) 프로듀서의 메시지 전달이 기본적으로 강력하게 강화됨 idempotence가 활성화됨 acks 가 1 대신 all로 설정됨 주키퍼가 3.6.3 버전으로 업그레이드 됨 Kraft 모드의 미리보기 기능이 가능함 컨슈머 설정 중 session.timeout.ms의 기본값이 10초에서 45초로 증가됨 브로커 설정의 log.message.format.version과 토픽 설정의 message.format.version이 만료됨. 이 두 값은 만약 inter.broker.protocol... 2024. 2. 12.
[Kafka] 2.8.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 2.8.2 Bug 같은 이름으로 삭제되고 재생성된 토픽을 컨슈머가 잘못 처리하는 버그가 수정됨 Admin.listOffsets 내 호환성이 맞지 않는 버그가 수정됨 EOS를 사용하여 셧다운할 때 최신 offsets을 체크포인트가 포함하지 못하는 버그가 수정됨 offset commit failure percentage 메트릭이 제대로 계산되지 않는 버그가 수정됨 협력적 sticky 할당자가 할당 유효성 검증 실패 때문에 멈추는 버그가 수정됨 토픽이 삭제되고 자동생성되면 프로듀서가 회복을 실패하는 버그가 수정됨 주키퍼와의 연결 문제 때문에 카프카 .. 2024. 2. 11.
[시향후기] 에이센트 디퓨저 라이브러리 이번에는 아래의 디퓨저를 시향해봤다. 첫향은 싸한데 끝향은 뭔가 안락함이 살짝 맴도는 기분이다. 우디향 좋아하고 편백 좋아하는 분들은 상당히 좋아할 것 같다. 처음에는 이게 왜 인기가 있을까 싶었는데 계속 맡아보니 알겠다. 가을과 정말 잘 어울리는 향이고 책읽을 때 옆에 두고 위 사진처럼 장가를 바라보며 가을풍경을 눈으로 그려본다면 정말 낭만 그 자체일 것 같다. 싸한 시트러스향 같은 느낌이 어떻게 이런 우디향으로 이어질 수 있는지 신기하기만 하다. 하지만 화장실에는 놓지 않는게 좋을듯 하다. 첫느낌은 시트러스지만 근본은 우디향 가을에 잘 어울림 화장실에는 안 어울릴듯 함 서재 같은 곳에 잘 어울림 재구매 의사 있음 2024. 2. 2.
[시향후기] 에이센트 디퓨저 레몬허브 새로 3+1로 구매한 디퓨저 중 아래를 소개한다. 레몬을 떠올리면 시큼하고 톡 쏘는 느낌이 들 것이다. 코를 대고 킁카킁카 해보니 시큼한 향이 나는데 허브향이 그 시큼한 향의 끝을 잡아주어 '워워-' 하고 안정화시켜주는 기분이다. 시작은 레몬이었으나 끝은 허브라고 봐도 좋다. 과일향이니까 달달하지 않을까 싶었는데 달달하다는 느낌은 크게 없었다. 무겁지 않고 레몬의 가벼움과 허브의 무거움이 어느정도 조화를 이루고 있다. 시트러스계열에 가깝고 머스크도 살짝 느낌이 난다. 레몬향을 좋아하는 사람이라면 머스트잇 템이 되지 않을까 싶다. 봄이나 눈 내리는 겨울에 잘 어울릴 것 같다. 가벼움과 무거움의 조화 봄이나 겨울에 잘 어울림 과일향 특유의 달달함은 다소 적음 레몬향으로 시작하여 허브향으로 끝남 시트러스계열에.. 2024. 2. 1.
[Debezium] 2.5 Release Note 주요 내용 정리 목적 최신 버전 업그레이드 전, 영향도 평가하기 위함 툴별 버전별 호환성 표 Java 11+ Kafka Connect 2.x, 3.x MySQL Database: 8.0.x, 8.2 Driver: 8.0.33 MariaDB Database: 11.1.2 Driver: 3.2.0 MongoDB Database: 5.0, 6.0, 7.0 Driver: 4.11.0 PostgreSQL Database: 10, 11, 12, 13, 14, 15, 16 Plug-ins: decoderbufs, pgoutput Driver: 42.6.0 Oracle Database: 12c, 19c, 21c Driver: 12.2.x, 19.x, 21.x OpenLogReplicator: 1.3.0 SQL Server Databa.. 2024. 1. 30.
728x90
반응형