Amazon, bugün AWS re:Invent in Las Vegas’ta, veri yönetimini ayıklama yükü veya ETL’ye ihtiyaç duymadan geleceğe taşımaya yardımcı olan birkaç duyuru yaptı.
ETL, verileri işe yarayacak şekle sokmaya çalışan her veri bilimcisi ve ekibinin belasıdır. AWS CEO’su Adam Selipsky’nin açıkladığı gibi, bir veritabanındaki uygulama kullanım verileriniz ve veri gölünüzdeki müşteri yorumları gibi birçok farklı yerde verileriniz olabilir. Bunları bir araya getirmek şimdiye kadar önemli bir zorluk oldu.
AWS, Aurora veritabanını ve Redshift veri ambarını kullanan müşterilere üzerinde ETL gerçekleştirmek zorunda kalmadan verileri taşıma olanağı sağlamak için Amazon Redshift ile Aurora sıfır ETL entegrasyonunu kullanıma sundu.
Selipsky re:Invent izleyicisine “Birkaç yıldır çalışıyoruz ve ETL ile uğraşmak zorunda kalmadan analitik ve makine öğrenimi yapmayı kolaylaştırmak için hizmetlerimiz arasında entegrasyonlar kuruyoruz” dedi.
“Ama ya daha fazlasını yapabilseydik? Ya ETL’yi tamamen ortadan kaldırabilirsek? Bu hepimizin seveceği bir dünya olurdu. Bu bizim vizyonumuz, sıfır ETL geleceği dediğimiz şey. Ve bu gelecekte, veri entegrasyonu artık manuel bir çaba değil” dedi. “Bugün, Aurora ve Redshift arasında tamamen yönetilen yeni ETL’siz entegrasyonun önizlemesini duyurmaktan heyecan duyuyorum.”
O işin başındayken, Amazon Redshift ile popüler açık kaynaklı büyük veri işleme platformu Apache Spark arasında benzer bir entegrasyonu duyurdu. Önce ayıklamak, dönüştürmek ve yüklemek zorunda kalmadan verileri iki platform arasında taşımak için karşılaştırılabilir bir yetenek sunar.
Redshift-Aurora entegrasyonu önizleme aşamasındadır. Redshift-Apache Spark entegrasyonu artık tüm bölgelerde mevcuttur.
