Veri Entegrasyonu: Apache Hop 2.3, analiz için verileri daha hızlı yükler

Saberie

Active member
Java tabanlı Apache Hop Orchestration Platform (Hop) veri entegrasyon platformunun 2.3 sürümü, verileri analiz için Vertica veritabanına daha hızlı yüklemek için kullanılabilen Vertica Bulk Loader’ı entegre eder. Yeni atlama sürümü ayrıca belgelerin çeşitli alanlarını günceller ve platformu daha önce kullanılamayan dillere çevirmek için Weblate’e güvenir.


Doğrudan veritabanında


Apache Hop 2.3, ASF üst düzey projesinin JIRA’dan GitHub Sorunlarına geçişten sonraki ilk sürümüdür. Sürümün önemli yeni özelliklerinden biri, daha önce yalnızca harici bir eklenti olarak mevcut olan Vertica Bulk Loader’ın entegrasyonudur. Ancak şu andan itibaren yükleyici, Hop kaynak koduna tamamen entegre edilmiştir. Geliştirme ekibine göre bu, verilerin Vertica’nın analitik veritabanına yüklenmesini “büyük ölçüde” hızlandıracak. Toplu yükleyici, tablo çıktısının dönüşümü olarak “detours” kullanmak zorunda kalmak yerine verileri doğrudan Vertica veritabanına aktarmak için VerticaCopyStream’i kullanır.


Daha kolay ve daha iyi dokümantasyon


Hop ekibi, yeni sürümde dokümantasyon konusuna da değindi. Yeni bilgilerin kaydedilmesi veya mevcut belgelerin güncellenmesi en önemli görevlerden biridir, ancak aynı zamanda can sıkıcıdır. Bu nedenle, Hop 2.3’te işleri basitleştirmeyi vaat eden bazı yeni özellikler vardır: komutlar artık Windows ve Linux/macOS için ayrı sekmelerde anında görülebilir. Netlik adına, özellikle büyük tablolar veya kod blokları artık bir geçiş anahtarı kullanılarak açılıp kapatılabilir. Ayrıca, Pipeline Probe meta veri türünde olduğu gibi Meta Veri Enjeksiyon sayfaları da entegre edilmiş ve güncellenmiştir. Belgelere yeni bir ekleme, blog gönderilerinin ve topluluk makalelerinin bir listesidir.

Blog gönderisi, Apache Hop 2.3’ün en önemli yeniliklerinin bir özetini sunar. Tüm değişikliklerin eksiksiz bir genel görünümü GitHub’daki sürüm notlarında bulunabilir.



(harita)



Haberin Sonu
 
Üst