Kafka — Kubernetes tek düğümlü olay akışı aracısı
Bu örnek, küçük ama gerçek bir yığını — tek düğümlü KRaft biçimindeki bir Apache Kafka olay akışı
aracısını — Developer tarafından yazılmış tek bir Aggregate’ten
Kubernetes’e derler; yığın, hiçbir upstream chart olmadan doğrudan resmi Apache Kafka imajından
sentezlenir.
Kafka bir olay akışı aracısıdır: üreticiler kayıtları konulara ekler ve tüketiciler bunları sırayla geri okur. Tek düğümlü KRaft biçiminde aracı ve denetleyici rolleri tek bir süreç içinde çalışır — ZooKeeper ve ikinci bir paketlenmiş hizmet yoktur — bu nedenle sunucunun tamamı durum bilgili tek bir iş yüküdür. Commit günlüğü yerel bir veri birimine kalıcı olarak yazılır. Bir üretici veya tüketici istemci önyükleme uç noktasına bağlanır ve kayıtları orada değiş tokuş eder.
Dosyalar
| Dosya | Rol |
|---|---|
aggregate.yaml | Developer amacı: tek bir broker bileşeni (core/messaging/kafka). |
manifest.yaml | Bileşen türünü Kafka sentez Recipe’ine (kafka) eşler. |
release.yaml | Kubernetes hedefi için operatör kaydı: sunucu hesaplama kaynakları ve commit günlüğü biriminin boyutu. |
Neyi gösteriyor
- Tek bir yazım yüzeyi. Tek bir Aggregate, Kafka’nın ne olduğuna dair doğruluk kaynağıdır; Manifest ise onun nasıl gerçekleştirileceğini söyler.
- Tek düğümlü bir KRaft aracısı. Sentez Recipe’i Kafka’yı bir veri birimine sahip tek bir
StatefulSetve ikiServicenesnesi olarak işler — istemci önyükleme bağlantı noktasını açığa çıkaran birClusterIPve StatefulSet için başsız (headless) bir yönetici Service. - KRaft, ZooKeeper yok. Düğüm hem aracı hem de denetleyici rollerini tek bir süreçte çalıştırır ve tamamen ortam değişkenleriyle yapılandırılır.
- Sabitlenmiş bir küme kimliği. Küme kimliği, imaja olduğu gibi aktarılan sabit bir geliştirici değeridir; imaj onu rastgele üretim yapmadan olduğu gibi okur, bu nedenle işlenen manifest derlemeler arasında bayt bayt aynıdır.
- Kararlı bir duyurulan adres. Aracı küme içi Service adını duyurur, böylece istemciler pod’un kendi ana makine adı yerine bu kararlı adres üzerinden yeniden bağlanır.
- Kalıcı günlük. Commit günlüğü
/var/lib/kafka/datakonumundaki kalıcı birime yazar, böylece kayıt verileri yeniden başlatmalardan sonra da korunur. - Dışa aktarılan bir önyükleme sözleşmesi. Bileşen, önyükleme ana makinesini
ve istemci bağlantı noktasını
usestopolojisi aracılığıyla dışa aktarır, böylece bir üretici veya tüketici ona bağlanır ve orada bağlantı kurar. - Yeniden üretilebilir imajlar. Recipe, Kafka sunucu imajını çözümlenebilir bir etikete sabitler, böylece işlenen iş yükü sabitlenmiş bir sürüme başvurur.
Örneği oluşturun
Bu örneği aşağıdaki komutlarla derleyebilir ya da yapay zekâ asistanınıza sizin için derletebilirsiniz.
Örneği, adını taşıyan yeni bir klasöre yazın:
aggrega scaffold --example kafka-brokerArdından sırada çalıştırılacak komutları yazdırır. İlki yeni klasöre geçer:
cd kafka-brokerDerleme
Bu çalışma alanında .aggrega-config.yaml bulunmaz; bu nedenle standart kütüphane varlıkları hub kayıt defteri hub.aggrega.ai üzerinden çözümlenir ve katalog bayrağına gerek yoktur:
aggrega pull --release release.yamlaggrega build --release release.yamlİşlenen yapıtlar dist/ altına yerleşir. Kubernetes hedefi düz manifestleri
çevrimdışı işler — chart çekmek gerekmez.
Bir yapay zekâ asistanıyla
Aggrega araçlarıyla kurulmuş bir yapay zekâ asistanı da aynısını yapabilir: bu istemi ona yapıştırın.
Yalnızca Aggrega araçlarını kullanın ve kendiniz klasör oluşturmayın. Çalışma alanı klasöründe henüz `kafka-broker` klasörü yoksa `scaffold` aracını `example` değeri `kafka-broker` olacak şekilde ve `dir` olmadan bir kez çağırın: araç örneği yeni bir `kafka-broker` klasörüne yazar. Ardından `build` aracını `workspace_root` değeri `kafka-broker`, `release` değeri `release.yaml`, `auto_pull` değeri true ve `write` değeri true olacak şekilde çağırın. Derlemenin hangi dosyaları yazdığını bana söyleyin; dosyalar `kafka-broker/dist/` altındadır.Neler oluşturulur
Derleme, Kafka sunucusunu üç Kubernetes nesnesi olarak üretir:
- bir
StatefulSet— commit günlüğü/var/lib/kafka/datakonumuna bağlanan kalıcı bir birimde tutulan ve tüm KRaft yapılandırması ortam değişkenleriyle sağlanan tek düğümlü Kafka süreci, - bir
ClusterIPService— istemci önyükleme bağlantı noktasını 9092’de açığa çıkarır, - başsız bir
Service— StatefulSet’in replika başına kararlı kimlik için gerektirdiği yönetici Service.
Kafka imajı kendi sürüm etiketine sabitlenmiştir, böylece iş yükü sabitlenmiş bir imaj etiketine başvurur.