Integrasi nol-ETL Amazon Aurora dengan Amazon Redshift

Aktifkan analitik mendekati real-time pada petabyte data transaksional
Mulai dengan integrasi nol-ETL
Hubungi Support

Mengapa integrasi nol-ETL Aurora dengan Amazon Redshift?

Integrasi nol-ETL Amazon Aurora dengan Amazon Redshift memungkinkan analisis hampir waktu nyata dan machine learning (ML) menggunakan Amazon Redshift pada data transaksional berukuran petabita. Dalam hitungan detik setelah data transaksional ditulis ke Amazon Aurora, nol-ETL dengan lancar membuat data tersedia di Amazon Redshift, menghilangkan kebutuhan untuk membangun dan mengelola pipeline data kompleks yang melakukan operasi extract, transform, and load (ETL).

Manfaat

Mengakses data transaksional dari Aurora di Amazon Redshift dalam hitungan detik untuk menjalankan analitik dan ML hampir secara waktu nyata pada petabita data.

Menganalisis data transaksional Anda dengan cepat mendekati waktu nyata tanpa harus membangun dan mengelola jalur ETL untuk memindahkan data transaksional ke sistem analitik.

Mengonsolidasikan beberapa tabel dari berbagai klaster basis data Aurora dan mereplikasi data Anda ke satu gudang data Amazon Redshift untuk menjalankan analitis terpadu di berbagai aplikasi dan sumber data.

Menjalankan analitik mendekati waktu nyata pada data transaksional tanpa harus mengelola infrastruktur apa pun saat menggunakan baik Amazon Aurora Nirserver v2 maupun Amazon Redshift Nirserver.

Kasus penggunaan

Gunakan analitik Amazon Redshift dan kemampuan ML untuk mendapatkan wawasan mendekati waktu nyata dari data transaksional dan data lainnya untuk merespons secara efektif peristiwa penting yang sensitif terhadap waktu. Analitik mendekati waktu nyata dapat membantu Anda mendapatkan wawasan yang lebih akurat dan tepat waktu untuk kasus penggunaan, seperti penargetan konten, pengalaman bermain game yang dioptimalkan, pemantauan kualitas data, deteksi penipuan, dan analisis perilaku pelanggan.

Melalui integrasi nol-ETL Aurora dengan Amazon Redshift, Anda dapat menggunakan kemampuan Amazon Redshift untuk menganalisis petabita data transaksional yang dikonsolidasikan dari beberapa klaster basis data Aurora. Anda dapat memanfaatkan kemampuan analitis komprehensif Amazon Redshift, seperti ML bawaan, tampilan terwujud, berbagi data, dan akses gabungan ke beberapa penyimpanan data dan danau data. Dengan ML Amazon Redshift, Anda dapat menjalankan miliaran prediksi dengan perintah SQL langsung dengan integrasi native ke Amazon SageMaker.

Memindahkan data dari basis data transaksional ke gudang data pusat sering kali memerlukan pembangunan, pengelolaan, dan pengoperasian solusi ETL pipeline data yang kompleks. Dengan integrasi nol-ETL, Anda dapat dengan mudah mereplikasi skema, data yang ada, dan perubahan data dari basis data Aurora Anda ke klaster Amazon Redshift baru atau yang sudah ada. Integrasi nol-ETL menghilangkan kebutuhan akan manajemen jalur data yang kompleks.

Cara memulai

Untuk membuat integrasi nol-ETL antara Aurora dan Amazon Redshift, tentukan klaster Aurora DB sebagai sumber data dan gudang data Amazon Redshift sebagai target. Integrasi tersebut mereplikasi data dari basis data sumber ke gudang data target. Data tersedia di Amazon Redshift dalam hitungan detik sehingga analis data dapat mulai menggunakan analitik Amazon Redshift dan fungsi ML pada data. Untuk mempelajari selengkapnya, kunjungi panduan memulai untuk Aurora dan Amazon Redshift.

Sumber daya

Harga

AWS tidak mengenakan biaya tambahan untuk integrasi nol-ETL Aurora dengan Amazon Redshift. Anda membayar sumber daya Aurora dan Amazon Redshift yang ada yang digunakan untuk membuat serta memproses data perubahan yang dibuat sebagai bagian dari integrasi nol-ETL. Sumber daya ini dapat mencakup:

  • I/O dan penyimpanan tambahan yang digunakan dengan mengaktifkan pengambilan data perubahan
  • Biaya ekspor snapshot untuk ekspor data awal guna menempatkan basis data Amazon Redshift Anda
  • Penyimpanan Amazon Redshift tambahan untuk menyimpan data yang direplikasi
  • Komputasi Amazon Redshift tambahan untuk memproses replikasi data
  • Biaya transfer data lintas AZ untuk memindahkan data dari sumber ke target.

Pemrosesan perubahan data yang berkelanjutan dengan integrasi nol-ETL ditawarkan tanpa biaya tambahan. Untuk informasi selengkapnya, kunjungi halaman harga Aurora. 

Pelanggan

  • Infosys

     

    Verifikasi pengiriman sangat penting untuk mempertahankan integritas rantai pasokan bagi pelanggan manufaktur, ritel, dan logistik Infosys. Untuk mencapai hal ini, penyerapan data pelacakan pengiriman waktu nyata diperlukan untuk melacak pengiriman dan analitik pengiriman.

    Infosys menggunakan kemampuan nol-ETL untuk menyerap data dalam waktu nyata, memungkinkan pelacakan pengiriman barang dan memberikan visibilitas ke lokasi, status, serta perkiraan waktu kedatangan. Hal ini memungkinkan untuk optimisasi operasi pengiriman dan pengurangan biaya yang signifikan. Dengan pelaporan dan analitik komprehensif nol-ETL, bersama dengan cetak biru industri Infosys Cobalt dan Topaz, pengambilan keputusan yang didorong data kini dapat dilakukan.

    Sunil Senan, SVP dan Global Head of Data, Analytics dan AI - Infosys

  • Intuit

    Intuit adalah platform teknologi keuangan global yang mendukung kemakmuran bagi 100 juta konsumen dan pelanggan bisnis kecil dengan TurboTax, Credit Karma, QuickBooks, dan Mailchimp. Dengan kompleksitas migrasi yang akan datang, Intuit melihat tingkat yang mengejutkan lebih dari 10 juta migrasi profil per hari. Intuit beralih ke integrasi nol-ETL Amazon Aurora MySQL dengan Amazon Redshift untuk menyederhanakan proses penyerapan data mereka dan menghilangkan kebutuhan akan pekerjaan rekayasa yang kompleks.

    Volume data yang besar dan kebutuhan untuk migrasi yang lancar menghadirkan tantangan yang signifikan bagi kami. Selain itu, kami membutuhkan solusi yang memungkinkan kami menganalisis proses migrasi dengan cepat, yang memungkinkan kami membuat keputusan yang cepat dan didorong data. Untuk mengatasi tantangan ini, kami beralih ke integrasi nol-ETL Amazon Aurora dengan Amazon Redshift untuk menyederhanakan proses penyerapan data dan menghilangkan kebutuhan akan pekerjaan rekayasa yang kompleks. Dengan nol-ETL, kami dapat mengirim sejumlah besar data ke Amazon Redshift tanpa perlu penangkapan data atau tugas penyerapan yang terpisah. Hal ini memungkinkan wawasan cepat untuk mendorong keputusan teknis dan bisnis yang penting sehingga menghemat waktu berbulan-bulan yang seharusnya diperlukan. Memanfaatkan integrasi nol-ETL Aurora dengan Amazon Redshift untuk membantu kami menjelajahi pola baru di Intuit untuk migrasi data skala besar dan analitik mendekati waktu nyata.

    Aruna Ghiware, Product Development Manager - Intuit

  • KINTO Technologies Corporation

    KINTO Technologies Corporation adalah pemain terkemuka di industri platform mobilitas dan merupakan perusahaan teknologi yang bertanggung jawab atas pengembangan layanan KINTO sebagai perusahaan layanan keuangan Toyota. Memanfaatkan integrasi nol-ETL Amazon Aurora MySQL dengan Amazon Redshift, KINTO Technologies mampu mencapai jalur data yang lebih tangguh dan kini dapat menerapkan fitur analitik canggih Amazon Redshift ke data operasionalnya hampir secara waktu nyata.

    Sebelum integrasi nol-ETL tersedia, kami menggunakan solusi yang dibuat khusus yang terus mengalirkan perubahan dari basis data inti kami ke aplikasi downstream, tetapi kami menghadapi tantangan performa yang terus-menerus dan berdampak pada beban kerja produksi kami. Untuk mengatasi dampak performa pada beban kerja produksi, kami harus menyetel jalur secara manual agar lebih jarang mengirim pembaruan dan puas dengan data lama di Amazon Redshift. Menggunakan integrasi nol-ETL Aurora MySQL dengan Amazon Redshift, kami selalu dapat memiliki data hampir waktu nyata yang tersedia di Amazon Redshift, sehingga dapat menghilangkan waktu developer yang dihabiskan untuk mengelola jalur data secara manual untuk operasi ETL atau menangani dampak performa terhadap beban kerja kami, yang membantu mengurangi beban operasional kami.

    Hitoshi Kageyama, Executive Vice President - KINTO Technologies Corporation

  • Money Forward i

    Money Forward i berusaha untuk meningkatkan produktivitas dan potensi kreatif tim IT dalam organisasi dengan menyederhanakan tugas berulang, memotong biaya, dan memperkuat keamanan melalui Admina, Platform Manajemen SaaS intuitif mereka.

    Sebelum integrasi nol-ETL Amazon Aurora dengan Amazon Redshift dirilis, beban implementasi dan pemeliharaan operasi ETL kami untuk menganalisis data produk dari Amazon Aurora MySQL di Amazon Redshift begitu menantang. Integrasi nol-ETL Aurora MySQL dengan Amazon Redshift memungkinkan sinkronisasi data hampir waktu nyata antara basis data Aurora MySQL kami dan Amazon Redshift, yang mengurangi waktu untuk membangun lingkungan analisis dari sebulan menjadi hanya tiga jam. Selain mengurangi beban awal pada saat pengembangan, dengan integrasi nol-ETL, dampak pada lingkungan produksi menjadi lebih kecil, sehingga memungkinkan untuk membangun lingkungan analisis dengan biaya minimum dan kecepatan maksimum.

    Katsutoshi Murakami, Director and CPO - Money Forward i

  • Woolworths

    Woolworths adalah peritel Afrika sub-Sahara terkemuka yang menawarkan berbagai macam produk pakaian, barang dagangan umum, dan makanan berkualitas dengan fokus pada inovasi, nilai, dan keberlanjutan.

    Menghasilkan wawasan tepat waktu dari data kami sangatlah penting, karena itu berarti kami dapat segera mendorong keputusan berbasis data di seluruh bisnis kami dan merespons peristiwa kritis yang sensitif waktu secara efektif. Menggunakan penangkapan data perubahan dan koagulasi catatan memakan waktu dan biaya lebih besar dari yang diharapkan untuk diproses. Dengan menggunakan integrasi nol-ETL Amazon Aurora MySQL dengan Amazon Redshift, kami dapat memproduksi hasil yang sama dalam sehari yang seharusnya membutuhkan waktu 2 bulan untuk dikembangkan karena upaya rekayasa yang diperlukan untuk operasi ETL. Latensi data kami berkurang secara signifikan menggunakan integrasi karena data dalam status siap untuk dikueri. Hal ini mendorong kami untuk mengambil keputusan lebih cepat saat peristiwa terjadi. Kami menurunkan upaya rekayasa kami, mengurangi titik kegagalan dalam manajemen pipeline, dan menghemat biaya menggunakan integrasi nol-ETL Aurora dengan Amazon Redshift.

    Raamy Schroeder, Business Intelligence Lead - Woolworths