Jeongeun's LAB

  • 홈
  • 태그
  • 방명록

kafka #consumer #burrow #monitoring #lag 1

Kafka Consumer & lag 모니터링 - kafka(4)

Kafka Consumer 다른 메시징 플랫폼과 달리 컨슈머가 데이터를 가져가더라도 데이터가 사라지지 않는다. 이 특징은 데이터 파이프라인으로써 좋은 장점을 가지고 있다. Consumer role Topic의 partition으로 부터 데이터를 가져온다. (= polling) Partition offset 위치 기록 (commit) offset: 파티션에 있는 데이터의 번호 Consumer Group을 통해 병렬처리 파티션 개수에 따라 Consumerm을 여러개 만들면 병렬처리가 가능해져 더욱 빠른 속도로 데이터를 처리할 수 있다. 라이브러리 추가 필수 (Producer 에서의 고려사항과 같음) -> 이전 Producer 블로그 참고 Comsumer 생성 코드 예제 자바 프로퍼티 설정을 통해 기본적인 컨..

Open source 2024.02.28
이전
1
다음
  • 분류 전체보기 (62)
    • OS (17)
    • Network (19)
    • Algorithm (9)
    • Open source (7)
    • Docker (2)
    • Kubernetes (6)
    • Internship (1)
    • AWS (1)

최근글과 인기글

  • 최근글
  • 인기글

Tag

systemtl, #k3s, fhs, journald, k8s, epel-release, aws summit seoul 2024, systemd, logging system, 데보션오픈랩, borg, controller-runtime, dnf-automatic, openlab, 쿠버네티스 구성요소, 오픈랩, 오블완, 티스토리챌린지, journalctl, kubebuilder,

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바

단축키

내 블로그

내 블로그 - 관리자 홈 전환
Q
Q
새 글 쓰기
W
W

블로그 게시글

글 수정 (권한 있는 경우)
E
E
댓글 영역으로 이동
C
C

모든 영역

이 페이지의 URL 복사
S
S
맨 위로 이동
T
T
티스토리 홈 이동
H
H
단축키 안내
Shift + /
⇧ + /

* 단축키는 한글/영문 대소문자로 이용 가능하며, 티스토리 기본 도메인에서만 동작합니다.