본문 바로가기
728x90
반응형

컨슈머12

[Debezium] Rebalancing 무한 루프 이슈 상황 하나의 노드에 2개의 디비지움 카프카 커넥트를 띄우고 있었음 근데 각각의 디비지움 A, B가 group.id가 1, 2로 지정되었고 internal 토픽들 3개(status, config, offset)도 모두 1, 2로 각각 지정되어 있었음 group.id를 하나로 통일해줌 이 상태에서 A 디비지움 프로듀서를 내렸다가 올렸더니 아래 에러 내용이 계속 발생함 에러 내용 [2024-02-14 16:59:59,982] INFO [Worker clientId=connect-1, groupId=testpc-source-connect-cluster] Rebalance started (org.apache.kafka.connect.runtime.distributed.WorkerCoordinator:221) [2.. 2024. 3. 1.
[Confluent Jdbc Sink] 10.7.x Release note 주요 내용 정리 목적 주요 변경점 파악하여 인프라 확장 설계시 참고하기 위함 버전별 Release note 요약 Version 10.7.4 오라클과 Postgres dialects에서 NEVER 값에 대해 quote.sql.identifiers 설정값이 동작하지 않는 버그가 수정됨 fetch된 DB 테이블에 대해 시작하거나 기다릴 때 적어도 하나의 타스크가 항상 생성되도록 소스 커넥터 행동을 갱신함 Version 10.7.3 - Version 10.7.2 오라클 JDBC에서 Double 또는 Float 값을 바인딩할 때 언더플로우 이슈가 발생하는 버그가 수정됨 Version 10.7.1 - Version 10.7.0 SQL Server에서 MERGE INTO를 사용할 때 HOLDLOCK을 활성화/비활성화할 수 있는 옵션.. 2024. 2. 21.
[Confluent Jdbc Sink] 10.6.x Release note 주요 내용 정리 목적 주요 변경점 파악하여 인프라 확장 설계시 참고하기 위함 버전별 Release note 요약 Version 10.6.5 커넥터의 로깅을 개선함 Version 10.6.4 JDBC 소스 커넥터가 Sybase jConnect JDBC 4 드라이버를 지원하도록 수정함 SQL문을 조건적으로 마스킹하는 설정이 추가됨 Version 10.6.3 - Version 10.6.2 오라클 DB의 CLOB 컬럼에 대해 setChracterStream에 길이 파라미터를 추가하여 성능을 개선함 Version 10.6.1 Sysbase DB에 JDBC 싱크 커넥터가 널 값을 포함한 레코드를 전송하는 것을 실패하는 버그가 수정됨 BatchUpdateException으로부터 민감성 데이터를 제거함 Version 10.6.0 in.. 2024. 2. 20.
[Kafka] 3.6.x Release note 주요 내용 정리 목적 카프카 브로커의 버전 업그레이드 시 발생할 수 있는 사이드 이펙트를 사전파악 및 대응, 신기술에 대한 도입 검토하기 위함 Release note Clause 3.6.0 Notable Changes 아파치 브로커는 이제 같은 포트에 대해 IPv4와 IPV6 리스너를 가지는 것을 지원함. advertised 리스너는 이미 동작중이고 이 non-advertised 리스너도 적용되는 의미 아파치 주키퍼 의존성이 3.6가 EOF에 도달하여 3.8.1로 업그레이드 됨. 2.4버전의 클러스터에서는 바로 업그레이드가 되고 2.4 미만에서는 2.4 < 버전 < 3.6 사이로 한번 경유해야 함 log.message.timestamp.difference.max.ms 설정이 만료됨. 이제 log.message.times.. 2024. 2. 19.
728x90
반응형