Pembaruan utama ini mencakup ketersediaan umum (GA) integrasi Delta Lake dan Databricks Unity Catalog, serta akses awal (EA) untuk Microsoft OneLake, membuka kemampuan baru bagi organisasi dalam menghubungkan data operasional dan analitis dalam ekosistem multicloud yang semakin kompleks.
Peluncuran ini menjadi langkah penting bagi berbagai perusahaan yang selama ini kesulitan mengolah data streaming menjadi tabel berkualitas tinggi tanpa proses ETL yang kompleks.
Dengan Tableflow yang kini mendukung Delta Lake, Iceberg, Unity Catalog, dan OneLake, organisasi dapat menyiapkan data untuk analitik dan AI secara otomatis — langsung sejak data dibuat.
“Pelanggan ingin memanfaatkan data real-time mereka dengan lebih optimal, tetapi penggunaan antara streaming dan analitik selalu menghambat mereka,” tutur Shaun Clowes, Chief Product Officer Confluent.
“Dengan Tableflow, kami menutup celah tersebut dan memudahkan koneksi langsung antara Kafka dan lakehouse yang terkelola. Artinya, data berkualitas tinggi siap untuk analitik dan AI begitu data tersebut dibuat,” katanya.
Integrasi Delta Lake & Unity Catalog Kini GA
Melalui rilis GA ini, Tableflow menambahkan serangkaian fitur tingkat perusahaan yang dirancang untuk meningkatkan keandalan dan tata kelola data. Beberapa kemampuan utama meliputi:-Transformasi topik Kafka menjadi tabel Delta Lake yang tersimpan di cloud object storage seperti Amazon S3 dan Azure Data Lake Storage.
-Aktivasi simultan format Delta Lake dan Iceberg dalam satu topik untuk kebutuhan analisis lintas format.
-Sinkronisasi metadata otomatis melalui Unity Catalog, memastikan kebijakan akses, skema, dan metadata tetap konsisten di seluruh platform.
-Dead Letter Queue untuk menangani catatan rusak tanpa menghentikan aliran data.
-Fitur upsert otomatis, menghilangkan proses manual dalam menjaga konsistensi tabel.
-Bring Your Own Key, memberikan organisasi kendali penuh atas kunci enkripsi untuk memenuhi standar keamanan industri seperti keuangan dan kesehatan.
Dengan kemampuan ini, Tableflow menghadirkan alur kerja end-to-end untuk data streaming: mulai dari evolusi skema, kompresi, pemeliharaan tabel otomatis, hingga integrasi dengan AWS Glue, Snowflake Open Catalog, dan Apache Iceberg.
Dukungan Microsoft OneLake: Fleksibilitas Multicloud yang Lebih Luas
Pembaruan lainnya adalah hadirnya Tableflow di Early Access untuk pelanggan Azure dengan integrasi penuh ke Microsoft OneLake. Dukungan ini memberikan keuntungan bagi organisasi yang mengandalkan Azure Databricks maupun Microsoft Fabric—mulai dari pengolahan data real-time hingga lakehouse.Melalui integrasi ini, pelanggan dapat:
-Mengubah topik Kafka menjadi tabel terbuka di OneLake secara instan tanpa ETL manual.
-Mengotomasi pemetaan skema, konversi tipe, dan pemeliharaan tabel.
-Mengakses data langsung melalui OneLake Table APIs untuk analitik dan layanan AI Azure.
-Mengelola deployment melalui UI Confluent Cloud, CLI, atau Terraform.
“Akses ke data real-time sangat penting bagi pelanggan untuk mengambil keputusan dengan cepat dan akurat, serta harus mengurangi kompleksitas dan mempercepat pengambilan keputusan,” ujar Dipti Borkar, Vice President dan GM Microsoft OneLake & ISV Ecosystem.
“Dengan ketersediaan Confluent’s Tableflow di Microsoft Azure, pelanggan dapat mengalirkan peristiwa Kafka ke OneLake sebagai tabel Apache Iceberg atau Delta Lake dan mengaksesnya secara instan melalui Microsoft Fabric dan mesin pihak ketiga populer menggunakan OneLake Table APIs,” jelasnya.
Dengan seluruh peningkatan ini, Confluent memperkuat Tableflow sebagai fondasi bagi organisasi yang membutuhkan koneksi cepat antara data operasional, lakehouse, analitik, hingga model AI.
Integrasi lintas platform, dari Delta Lake, Iceberg, Unity Catalog, hingga OneLake, membuat Tableflow semakin relevan untuk industri layanan keuangan, kesehatan, publik, hingga IoT berskala besar.
Confluent juga membuka akses lebih luas melalui Confluent Cloud, lengkap dengan sandbox gratis untuk eksplorasi awal. Perusahaan dapat meminta demo untuk melihat bagaimana Tableflow bekerja dalam arsitektur mereka.
Cek Berita dan Artikel yang lain di
Google News
Viral! 18 Kampus ternama memberikan beasiswa full sampai lulus untuk S1 dan S2 di Beasiswa OSC. Info lebih lengkap klik : osc.medcom.id
