Tag Archives | Flink

Apache Paimon Rust 0.4.0 duyuruldu

Apache Paimon veri gölü (data lakehouse) formatının Rust programlama dili ile yazılmış yerel (native) kütüphanesi olan Apache Paimon Rust‘un 0.4.0 sürümü duyuruldu. Normalde Apache Paimon Java/Scala ekosistemine (Flink, Spark vb.) dayanıyor. Normalde Apache Paimon Java/Scala ekosistemine (Flink, Spark vb.) dayanır. Rust implementasyonu sayesinde JVM (Java sanal makinesi) kullanmadan, doğrudan Rust ekosisteminden Paimon tablolarını okuma ve yazma imkanı tanıyor. Akış (streaming) veri gölleri, gerçek zamanlı analitik ve veri alımı (data ingestion) için yüksek performanslı bir altyapı sağlıyor. Okuyucular, yazıcılar ve gömülü (embedding) motorlar için paylaşımlı bellek rezervasyonları ve tablo API’si barındırıyor. Yeni sürüm, Go Linux çalışma zamanı gereksinimleriyle geliyor. Önceden derlenmiş Go Linux amd64 kütüphanesinin, glibc 2.38 veya daha yenisini ve OpenSSL 3 gerektirdiği belirtiliyor. Go FFI bağımlılığı da ayrıca libffi.so.8 gerektiriyor. Apache Paimon Rust 0.4.0 hakkında bilgi edinmek için GitHub sürümler sayfasını inceleyebilirsiniz.

Continue Reading →

 

Apache Paimon Rust 0.4.0 edinmek için aşağıdaki linklerden yararlanabilirsiniz.

Apache Hop 2.19.0 duyuruldu

İşlem hatlarının ve iş akışlarının bir tuval üzerinde tasarlanmasını ve ardından bunların ait oldukları yerde çalıştırılmasını sağlayan veri entegrasyonu ve düzenlemesi için açık kaynaklı bir platform olan Apache Hop‘un 2.19.0 sürümü duyuruldu. İşlem hatlarının ve iş akışlarının bir tuval üzerinde tasarlanmasını ve ardından bunların ait oldukları yerde çalıştırılması işlemleri yerel olarak, uzak bir Hop sunucusunda, Apache Spark üzerinde yerel olarak veya Apache Beam aracılığıyla Flink ve Dataflow üzerinde yapılabiliyor. Apache Hop topluluğunun, Apache Hop 2.19.0 sürümünün yayınlandığını duyurmaktan mutluluk duyduğu belirtilirken, bu sürümün, bugüne kadar sunulan en büyük değişiklik setini içerdiği söyleniyor. 6’sı ilk kez katkıda bulunan 22 katılımcı, son üç ayda yeni özellikler, iyileştirmeler ve düzeltmeler üzerinde çalışarak 337 sorunu çözmüş bulunuyor. Apache Hop 2.19.0 sürümündeki en büyük değişikliğin, Hop Marketplace’in tanıtılması olduğu belirtilirken, eklentilerin artık doğrudan Hop GUI’sinden kurulabileceği, güncellenebileceği ve yönetilebileceği ifade ediliyor. Apache Hop 2.19.0 hakkında bilgi edinmek için sürüm duyurusunu inceleyebilirsiniz.

Continue Reading →

 

 

Apache Hop 2.19.0 edinmek için aşağıdaki linkten yararlanabilirsiniz.

Apache Paimon 2.0.0 duyuruldu

Hem akış hem de toplu işlemler için Flink ve Spark ile gerçek zamanlı göl mimarisi oluşturmayı sağlayan bir göl formatı olan Apache Paimon‘un 2.0.0 sürümü, Jingsong Lee tarafından duyuruldu. Göl formatını ve LSM yapısını yenilikçi bir şekilde birleştirerek, gerçek zamanlı akış güncellemelerini göl mimarisine getirdiği belirtilen yazılımın yeni büyük sürümünün, Paimon‘u birleşik bir multimodal olarak ilerlettiği, Java ve Python ile akış, parti ve AI iş yükleri için göl evi sürüm versiyonları oluşturduğu söyleniyor. Buna giden yolda 100’den fazla katkıda bulunanın 1.100’den fazla taahhütte bulunduğu belirtilirken, onun, birincil anahtar masalar, birleştirme motorları, değişim kütüğü üretimi ve birleşik parti ve akış erişimi, nesne depolamaya gerçek zamanlı güncellemeler getirdiği söyleniyor. AI uygulamalarının nadiren sadece satır ve sütunlarla çalıştığı belirtilirken, Apache Paimon 2.0.0’ın farklı bir model sunduğu, görüntüleri, videoyu, sesi, belgeleri ve diğer büyük nesneleri özel olarak saklayan BLOB tipi, beyan edilen bir eleman tipine sahip sabit boyutlu yoğun bir vektörü temsil eden Vekik tipi ve Parquet Varyant ikilisini kullanarak nesneleri, dizileri ve ölçek değerlerini saklayan VARYANT tipi gibi. Apache Paimon 2.0.0 hakkında bilgi edinmek için sürüm duyursunu ya da GitHub sürümler sayfasını inceleyebilirsiniz.

Continue Reading →

 

 

Apache Paimon 2.0.0edinmek için edinmek için aşağıdaki linklerden yararlanabilirsiniz.