ksqlDB là gì? Khác gì so với Kafka Streams?

ksqlDB là engine SQL-based stream processing chạy trên Kafka, cho phép query và transform Kafka topics bằng SQL syntax — không cần viết Java/Scala. Phù hợp cho data engineers và analysts cần real-time analytics nhanh. Kafka Streams là thư viện Java — cần viết code, compile, deploy như một microservice — linh hoạt hơn, production-grade hơn cho complex logic. So sánh:
- ksqlDB: CREATE STREAM orders_by_user AS SELECT user_id, COUNT(*) FROM orders GROUP BY user_id EMIT CHANGES; — zero-code deployment
- Kafka Streams: code Java với KStream/KTable API, test với TopologyTestDriver

KsqlDB chạy trên ksqlDB Server cluster riêng (không phải Kafka broker). Pull queries (point-in-time query from materialized view) và Push queries (continuous streaming). Use case: real-time dashboard, filtering, joining streams cho business analytics. Kafka Streams tốt hơn cho: complex stateful logic, unit testing, CI/CD pipeline, embedding trong microservice.