Article(s) 관련

DigitalOcean | Cloud Infrastructure for Developers

An ocean of simple, scalable cloud solutions.

Learnk8s — the Kubernetes training company

We help you get started on your Kubernetes journey through comprehensive online, in person or remote training.

Popit | 전문 지식 공유를 위한 팀블로그

---

전문 지식 공유를 위한 팀블로그

NAVER D2

• DigitalOcean | Cloud Infrastructure for Developers
• Learnk8s — the Kubernetes training company
• Popit | 전문 지식 공유를 위한 팀블로그
• NAVER D2

---

DigitalOcean | Cloud Infrastructure for Developers

digitalocean.com

How to Integrate Existing Systems with Kafka Connect | DigitalOcean

---

In this tutorial, you’ll learn how to ingest data into Kafka topics using Kafka Connect - a tool used for reliably transferring data between Kafka and other …

How To Set Up a Multi-Node Kafka Cluster using KRaft | DigitalOcean

---

Learn to create a Kafka cluster with KRaft for scalable, fault-tolerant real-time data processing in this step-by-step tutorial…

How To Manage Kafka Programmatically | DigitalOcean

---

Discover how to master Kafka cluster management with KafkaAdminClient API, kcat CLI, and Kafka Cruise Control for efficient Kafka cluster management…

---

Learnk8s — the Kubernetes training company

learnk8s.io

Scaling Microservices with Message Queues, Spring Boot and Kubernetes

---

Learn how to scale SpringBoot apps in Kubernetes using the autoscaler and a message broker such as Kafka, RabbitMQ or ActiveMQ.

Designing and testing a highly available Kafka cluster on Kubernetes

---

Learn how to design a Kafka cluster to achieve high availability using standard kubernetes resources and test how it tolerates maintenance and total node failures.

---

Popit | 전문 지식 공유를 위한 팀블로그

popit.kr

아파치 카프카(Apache Kafka)의 새로운 협의 프로토콜인 KRaft에 대해(1) | Popit

---

이번 글에서는 아파치 카프카(Apache Kafka)의 새로운 협의 프로토콜인 KRaft에 대해 다룰 예정입니다. 카프카를 사용하면서 초기에는 최신 버전의 릴리스를 추구했지만, 카프카가 점점 데이터 파이프라인의 중심이 되면서 보다 보수적으로 접근하게 되었습니다. 지금까지 KRaft에 대해 크게 고려하지 않았으나 이제는 KRaft에 대한 준비와 주키퍼 모드로 운영 중인 카프카를 마이그레이션 하는 방법 등에 대해서도 심도 있는 검토가 필요한 생각이 들었습니다. 이번에 새롭게 KRaft에 대한 자료 조사도 하고, 마이그레이션 테스트도 진행하면서 경험한 내용들을 간략히 공유하고자 합니다. 전체 글의 내용은 KRaft의 등장 배경과 중요성, 마이그레이션 전략, 릴리스 노트와 향후 계획 등을 설명하며, 총 2편으로 나누어 작성하겠습니다. 먼저 KRaft의 등장 배경과 중요성에 대해 살펴보겠습니다.

아파치 카프카(Apache Kafka)의 새로운 협의 프로토콜인 KRaft에 대해(2) | Popit

---

이번 글에서는 이전 글에 이어 KRaft의 구성 방법, 마이그레이션 전략, 릴리스 노트와 향후 계획에 대해 살펴보겠습니다. 아직 이전 글 을 읽어보지 못한 분들은 이전 글을 먼저 읽어보시기를 추천드립니다. KRaft의 구성 전통적인 주키퍼 모드를 사용하면서 많은 사용자들이 느꼈던 불편함 중 하나는 바로 주키퍼와 카프카 서버를 별도로 운영해야 한다는 점이었습니다. 이는 단순히 별도의 애플리케이션 운영 관리를 넘어서, 추가로 별도의 물리적 서버 자원의 할당까지 포함하고 있습니다. 제가 받은 많은 질문 중 하나도, 주키퍼 물리 서버의 할당과 관련된 주제로, 주키퍼와 카프카를 동일한 서버에서 실행해도 되는지에 관한 것이었습니다. 사실 주키퍼는 카프카를 관리하는 역할을 하므로, 이상적으로는 카프카와 분리된 별도의 서버에서 운영하는 것을 권장합니다. 하지만 이는 강제성을 요구하는 것도 아니고, 서버의 리소스 제약이 있는 경우 주키퍼와 카프카를 동일한 서버에서 실행할 수도 있습니다. KRaft의 등장 이후 카프카 사용자들이 환영한 변화중 하나는 주키퍼의 의존성 제거입니다. 이는 애플리케이션의 관리 단순화뿐만 아니라, 물리적 서버의 리소스 절감도 가능하다고 생각했던 것

---

NAVER D2

Kafka NetworkClient Internals | NAVER D2

---

Kafka NetworkClient Internals

일 3,000만 건의 네이버페이 주문 메시지를 처리하는 Kafka 시스템의 무중단 전환 사례 | NAVER D2

---

일 3,000만 건의 네이버페이 주문 메시지를 처리하는 Kafka 시스템의 무중단 전환 사례

---