IData Merilis Pipeline Data Tanpa Kode Sumber Terbuka untuk Amazon Web Services (AWS) dan Snowflake
NEW YORK, 28 Februari 2023 /PRNewswire/ — https://www.idata.net/ IData Corporation hari ini merilis Pipeline tanpa kode sumber terbuka untuk AWS yang dapat menghemat ratusan jam waktu pengembangan bagi perusahaan. Pipeline dapat dengan mudah mengubah dan memuat file data ke dalam data lake atau ke gudang data seperti Snowflake atau Redshift, semuanya tanpa pengkodean.
Pipeline dapat melakukan pemeriksaan kualitas data, deduplikasi data, transformasi, dan memuat data langsung ke tujuannya (S3, Snowflake, atau Redshift). Notifikasi dikirim secara otomatis saat data masuk, memungkinkan pengguna atau sistem hilir untuk segera memprosesnya.
“Dengan bekerja menggunakan Pipeline sumber terbuka, perusahaan dapat memindahkan talenta pemrograman mereka yang mahal untuk fokus pada AI dan tugas pembelajaran mesin, alih-alih menghabiskan waktu berbulan-bulan untuk membangun saluran data terlebih dahulu”, jelas Todd Takut, CEO IData. “Pelanggan kami dapat mengaktifkan dan menjalankan Pipeline ini di akun AWS mereka sendiri hanya dalam beberapa jam, mengalirkan data hilir ke sistem internal dan eksternal”.
Selain itu, Pipeline menggunakan teknologi Apache Iceberg. Apache Iceberg adalah proyek sumber terbuka yang memungkinkan pembangunan arsitektur Lakehouse di atas data lake. Apache Iceberg menyediakan transaksi ACID, penanganan metadata yang dapat diskalakan, dan menyatukan streaming dan pemrosesan data batch di atas danau data yang ada, seperti S3.
Perangkat lunak IData Pipeline sumber terbuka tersedia di GitHub di https://github.com/idata-corporation/pipeline-server. Dokumentasi teknis tersedia di https://docs.idata.net
IData Corporation adalah perusahaan perangkat lunak cloud terkemuka yang berbasis di Hackensack, NJ. Perusahaan ini terutama bekerja di sektor jasa keuangan dengan perusahaan seperti Freddie Mac, Ameriprise, Bank of America, Credit Suisse dan beberapa lainnya.
SUMBER IData Corporation
