技術書典で頒布した「Kafkaをはじめる」を、インプレスR&D様から商業版として出すことになりました。 同人版では書ききれなかった以下の内容を追加して、全体的に書き直しています。 Apache Kafka v3.x系への対応 トランザクションの仕組みと実装 (Producer…

久しぶりにKafkaネタです。 Change Data Capture (CDC)でデータベースの変更をKafkaのイベントに変換するDebeziumを触り始めています。 PostgreSQLのレコードをKafkaに流すときに権限周りでハマったので、備忘録として残します。 Debeziumのおさらい Debeziu…

Kafkaのメッセージをスキーマ言語でシリアライズ/デシリアライズするためには、 専用のライブラリ(Serdes)が必要になります。 Serdesの1つであるApicurio Registry SerdesをJava/Kotlinで使っていたら、 v1系(1.y.z)とv2系(2.y.z)でパッケージ名など大きく変…

Kafka Tutorialsを進めていたときに、タイトル通りMavenでAvroのスキーマからJavaのコード生成するのにつまづいた話です。 このサイトに掲載されているサンプルコードは全てGradleでビルドされているのですが、自分が良く使っているMavenだったらどうかなと…

前回の技術書典7に引き続き、技術書典8でも技術同人誌を出すことになりました！ ２月になると宣伝する余裕がなさそうなので、今のうちに宣伝しておきます。 techbookfest.org 今回出す本 今回は分散ストリーミングプラットフォームのKafkaの解説同人誌を出す…