Hvad Er Et Kafka Topic – Komplet guide med eksempler

I en verden af moderne softwarearkitektur og event-drevne systemer dukker Apache Kafka ofte op som en central brik. Men for mange begyndere rejser det første spørgsmål sig hurtigt: Hvad er et Kafka topic? Det er en af de mest grundlæggende byggesten i Kafka, og uden en forståelse af topics er det svært at forstå, hvordan platformen fungerer.

Apache Kafka er en distribueret event streaming-platform, der bruges til at publicere, gemme og konsumere data i realtid. Den anvendes i vid udstrækning til mikrotjenester, realtidsanalyse, log-aggregation og event-drevet arkitektur. For at forstå Kafka, skal man først forstå dens logiske struktur, og her kommer topics ind i billedet.

Denne artikel giver en grundig forklaring af, hvad et Kafka topic er, hvordan det adskiller sig fra traditionelle køer, og hvordan du selv kommer i gang med at oprette og administrere dem.

Hvad er et Kafka topic?

Et Kafka topic er den centrale logiske beholder for data i Kafka. Du kan tænke på det som en kategori, en strøm af events eller en log af beskeder. Det er ikke en tabel som i en database, men snarere en append-only log, hvor events tilføjes i rækkefølge. Som Apache Kafka officiel dokumentation udtrykker det: “Very simplified, a topic is similar to a folder in a filesystem, and the events are the files in that folder.”

Indsigter om Kafka topics

• Kafka topics er fundamentet for event streaming og fungerer som uforanderlige logs.
• Hvert topic har et unikt navn, en konfigurerbar partitionering og replikeringsfaktor.
• Topics muliggør asynkron kommunikation mellem producere og consumere i realtid.
• De understøtter både at-least-once og exactly-once semantics.
• Topics kan have en retention policy, der bestemmer, hvor længe data bevares.

Nøglefakta om Kafka topics

Eksempel på et Kafka topic

Forestil dig en webshop. Her kan du have topics som orders, payments, shipments og users. Når en kunde afgiver en ordre, skriver producer-applikationen en event til topic orders. En lager-service, en mail-service og en analytics-service kan alle læse fra det samme topic og reagere på ordren på hver deres måde. Det viser, hvordan én producer kan forsyne mange forskellige consumers med data – en af Kafkas store styrker.

Hvad bruges Kafka topics til?

Kafka topics bruges i en lang række use cases. De er fundamentet for event streaming og muliggør asynkron kommunikation mellem systemer. Almindelige anvendelser omfatter realtidsanalyse, log-aggregation, event-drevet arkitektur og dataintegration mellem mikrotjenester. Topics fungerer som en central bus, hvor data sendes ind én gang og kan forbruges af flere applikationer.

En af de vigtigste egenskaber ved et Kafka topic er, at data gemmes som en append-only log. Det betyder, at events tilføjes i rækkefølge og ikke ændres efterfølgende. Hver besked får en unik offset, som angiver dens position i partitionen. Dette giver mulighed for ordnet lagring, genafspilning af data og høj skalerbarhed.

Forskel mellem Kafka topic, kø og broker

En af de mest almindelige forvirringer for begyndere er forskellen mellem et Kafka topic, en traditionel kø og en broker. Her er en klar opdeling baseret på de faktiske forskelle.

Kafka topic vs queue

I en klassisk kø-model (som i RabbitMQ eller ActiveMQ) forbruges en besked typisk af én consumer, og beskeden forsvinder ofte efter behandling. Fokus er på arbejdsfordeling. I Kafka fungerer et topic helt anderledes. Flere consumers kan læse de samme data, data bliver ikke automatisk slettet efter én consumer har læst dem, og flere applikationer kan abonnere på samme topic. Data kan genlæses via offset, hvilket giver stor fleksibilitet. En god måde at illustrere forskellen på er: En kø er som “én opgave til én medarbejder”, mens et topic er som “et opslagstavle-feed, som flere afdelinger kan følge”.

Kafka topic vs broker

En broker er en Kafka-server, der modtager writes fra producers, leverer reads til consumers, gemmer data og håndterer partitioner og replikering. Flere brokers udgør et Kafka cluster. Et topic er derimod en logisk kategori – det er ikke en fysisk server, men en logisk inddeling af data, der kan være fordelt på tværs af flere brokers. Hvis en broker går ned, kan en anden broker overtage, hvis replikering er konfigureret korrekt.

Sådan opretter du et Kafka topic

Oprettelse af et Kafka topic sker typisk via kommandolinjen med scriptet kafka-topics.sh. Dette script er en del af Kafka-installationen og giver dig mulighed for at oprette, liste, ændre og slette topics. Et eksempel på en oprettelseskommando ser sådan ud:

./bin/kafka-topics.sh --create --topic mit-topic --bootstrap-server localhost:9092 --partitions 3 --replication-factor 1

Her angiver du navnet på topic’et, antallet af partitioner og replikeringsfaktoren. Det er også muligt at oprette topics programmatisk via Kafka API. Ifølge Confluent: Kafka Topics Explained er det vigtigt at overveje antallet af partitioner og replikeringsfaktoren omhyggeligt, da det påvirker ydeevne og tilgængelighed.

Navngivningskonventioner for Kafka topics

Der er ingen håndhævede regler for navngivning af Kafka topics, men der findes bedste praksis, som de fleste følger. Navnet skal være unikt på tværs af klyngen og bør være beskrivende for dataens indhold. Det kan indeholde punktummer, bindestreger og underscores. Et eksempel kunne være order-created eller user.logins.v1.

Ifølge Redpanda guide til Kafka topics anbefales det at undgå for lange navne og at følge en stabil navngivningsstrategi. AutoMQ: Kafka Topic Best Practices fremhæver også, at en konsekvent navngivningskonvention gør det lettere at administrere og fejlfinde.

Sikkerhed i Kafka topics

Sikkerhed er en vigtig del af administrationen af Kafka topics. Kafka understøtter flere sikkerhedsmekanismer, herunder ACL’er (Access Control Lists), SSL/TLS-kryptering og SASL-autentificering. Med ACL’er kan du styre, hvilke producere og consumere der har adgang til specifikke topics.

Det betyder, at du kan sikre, at kun autoriserede applikationer kan skrive til eller læse fra et topic. Kryptering via SSL/TLS beskytter data under transport, mens SASL håndterer autentificering. For en detaljeret gennemgang anbefales Dattell: What is a Kafka Topic?.

Historisk udvikling af Kafka topics

Kafka topics har udviklet sig markant siden platformens oprindelse. Her er en tidslinje over vigtige milepæle:

1. 2011: Apache Kafka open source udgivet med topics som kernemodel.
2. 2014: Indførelse af log-compacted topics for nøgleværdi-lagring.
3. 2017: Kafka Streams gør topics til grundlag for stateful processing.
4. 2020: Kafka 2.7 introducerer forbedringer til topic-administration.

Hvad er sikkert, og hvad er variabelt?

Når man arbejder med Kafka topics, er det vigtigt at skelne mellem etablerede sandheder og konfigurationsafhængige faktorer.

Den dybere kontekst: Topics rolle i arkitekturen

Kafka topics spiller en afgørende rolle i moderne datastrømme. Deres append-only log-struktur adskiller dem markant fra traditionelle køer som RabbitMQ og ActiveMQ. Partitionering muliggør parallellitet og skalerbarhed, hvilket gør Kafka velegnet til høj-throughput applikationer. Topics er desuden omdrejningspunktet i event sourcing og CQRS-mønstre.

Sammenlignet med AWS SQS, som også er en populær messaging-tjeneste, tilbyder Kafka topics en mere fleksibel model med mulighed for genafspilning og flere concurrent consumers. Hvor SQS er designet til enkel og pålidelig beskedsendelse, er Kafka topics bygget til at håndtere store mængder data i realtid med lav latenstid.

Hvad siger kilderne?

Flere autoritative kilder understreger vigtigheden af Kafka topics. Her er et udpluk af citater:

“Very simplified, a topic is similar to a folder in a filesystem, and the events are the files in that folder.”

– Apache Kafka officiel dokumentation

“Kafka topics are powerful, immutable logs that allow you to store, process, and replay streams of events reliably.”

– Confluent Developer

“A topic is the fundamental organization unit for events or messages within Kafka.”

– Redpanda guide

Hvad er det næste skridt?

At forstå Kafka topics er første skridt mod at mestre event streaming. Næste trin kan være at lære om partitionering og replikering i Kafka, eller at komme i gang med at opsætte en lokal Kafka-klynge. For en bredere teknisk baggrund kan du også læse Hvad er en Docker-container? Komplet guide for begyndere, en populær guide på dansk, eller udforsk Skærm spejling: Sådan spejler du sikkert på iPhone og Android for andre tekniske emner.

Ofte stillede spørgsmål