본문 바로가기
728x90
반응형

데이터레이크16

[Kafka] 3.1.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.1.0 Notable Changes 아파치 카프카가 자바 17 버전을 지원함 아래 메트릭이 만료되어 다음으로 사용해야 함 bufferpool-wait-time-total > bufferpool-wait-time-ns-total io-waittime-total > io-wait-time-ns-total iotime-total > io-time-ns-total eager 리밸런싱 프로토콜이 이제 제거됨. 따라서, 카프카 브로커 2.4 이전 버전을 사용하는 유저는 2.4 - 3.1 사이 버전을 한번 경우해야 함 New Feature OIDC에 대.. 2024. 2. 13.
[Kafka] 3.0.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.0.0 Notable Changes(다른 항목과 중복될 수 있음) 프로듀서의 메시지 전달이 기본적으로 강력하게 강화됨 idempotence가 활성화됨 acks 가 1 대신 all로 설정됨 주키퍼가 3.6.3 버전으로 업그레이드 됨 Kraft 모드의 미리보기 기능이 가능함 컨슈머 설정 중 session.timeout.ms의 기본값이 10초에서 45초로 증가됨 브로커 설정의 log.message.format.version과 토픽 설정의 message.format.version이 만료됨. 이 두 값은 만약 inter.broker.protocol... 2024. 2. 12.
[Kafka] 2.8.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 2.8.2 Bug 같은 이름으로 삭제되고 재생성된 토픽을 컨슈머가 잘못 처리하는 버그가 수정됨 Admin.listOffsets 내 호환성이 맞지 않는 버그가 수정됨 EOS를 사용하여 셧다운할 때 최신 offsets을 체크포인트가 포함하지 못하는 버그가 수정됨 offset commit failure percentage 메트릭이 제대로 계산되지 않는 버그가 수정됨 협력적 sticky 할당자가 할당 유효성 검증 실패 때문에 멈추는 버그가 수정됨 토픽이 삭제되고 자동생성되면 프로듀서가 회복을 실패하는 버그가 수정됨 주키퍼와의 연결 문제 때문에 카프카 .. 2024. 2. 11.
[Debezium] 2.5 Release Note 주요 내용 정리 목적 최신 버전 업그레이드 전, 영향도 평가하기 위함 툴별 버전별 호환성 표 Java 11+ Kafka Connect 2.x, 3.x MySQL Database: 8.0.x, 8.2 Driver: 8.0.33 MariaDB Database: 11.1.2 Driver: 3.2.0 MongoDB Database: 5.0, 6.0, 7.0 Driver: 4.11.0 PostgreSQL Database: 10, 11, 12, 13, 14, 15, 16 Plug-ins: decoderbufs, pgoutput Driver: 42.6.0 Oracle Database: 12c, 19c, 21c Driver: 12.2.x, 19.x, 21.x OpenLogReplicator: 1.3.0 SQL Server Databa.. 2024. 1. 30.
728x90
반응형

티스토리툴바