devBlog
Kafka 글 모음
기업 기술블로그의 Kafka 관련 글 32개
사람은 떠났는데 권한은 남았다
Outbox·CDC·Kafka로 구현한 ReBAC 인가 동기화와 잔존 권한을 다루는 방법
Grafana Mimir에 Kafka를 도입하기 전 미리 알았다면
partition 1대1 결합과 Mimir Kafka의 운영 포인트
초당 100만 건, LINE 앱에 Apache Kafka 종단 간 암호화 적용기
들어가며: 왜 Kafka 종단 간 암호화인가?LINE 메신저에서는 매일 수십억 건의 메시지가 오갑니다. 이 방대한 데이터는 다양한 시스템으로 전달되며, 그중에는 개인 정보와 같이 ...
운영하지 않는 Kafka, EasyQueue를 소개합니다
 # 운영하지 않는 Kafka, EasyQueue를 소개합니다 Kafka를 직접 띄워보신 적 있으신가요. 처음에는 "이거 그냥 `docker compose up` 하면 되는 거 아냐?"로 가볍게 시작합니다. 그러다 운영 환경으로 옮기는 순간 일이 달라지죠. 브로커
카프카 파티션 개수 산정식 설계 여정
Broker 특성, Latency, Peak traffic, Backfill catch-up을 모두 고려한 과정
45분 배치에서 준실시간으로! 다수 도메인 데이터를 Kafka로 통합한 전환기
…
주문 트래픽 20배를 견디는 재고 처리 구조 만들기
lock 경합을 걷어내고 Redis·Kafka로 재고 처리를 다시 설계한 이야기
AI와 함께하는 Kafka 클러스터 관리: Amazon MSK용 MCP 서버 출시
MCP 서버
공통 Kafka 전환기 [Part 2. 공통 Kafka 전환 여정]
Kafka Streams 기반 EDA 구축 사례: 올리브영 품절 시스템 현대화 프로젝트
…
DynamoDB야 진정해! Kafka와 Redis로 구현하는 실시간 역압력 아키텍처 구축기
Kafka Streams 윈도우 도입기
재고 정산 처리에 Kafka Streams window를 도입하며 겪은 이야기
Kafka Streams 윈도우 도입기
재고 정산 처리에 Kafka Streams window를 도입하며 겪은 이야기
Kafka에서 S3로 실시간 데이터 수집 파이프라인 설계와 구축기
제로베이스 WMS 구축기: Kafka 기반 분산 물류 시스템 설계와 Out-of-Order Events 해결
안녕하세요. 풀필먼트 백엔드 개발을 담당하고 있는 시나브로우입니다. 이번 글에서는 올리브영만의 최초 물류 시스템, GMS(Global Warehouse Management System)를 소개드리고자 합니다. GMS, 최초의 서막 2024년 1…
대규모 트래픽 속 Kafka 를 이용한 개인정보 암호화 및 스키마 전환
약 18억 명의 사용자를 기반으로 운영되는 글로벌 계정 서비스인 삼성 계정에서는 24/7 대규모 트래픽을 안정적으로 처리하고 있으며, 삼성 계정에 관련된 모든 작업은 무중단으로 진행하고 있습니다. 이러한 제약사항 속에서 사용자 Database 내 개인식별정보들을 Kafka 를 이용해 서비스 영향 없이 스키마 전환 및 데이터의 컬럼 단위 암호화를 진행했던 경험에 대해 공유하고자 합니다.
Kafka Connect로 DB 데이터 쉽게 연동하기
Kafka Connect와 JDBC 커넥터를 이용해 DB 데이터를 쉽게 Kafka로 전송하는 방법과 발생 가능한 문제를 해결하는 방법을 공유합니다.
페이지 1 / 2 (총 32개)