Data Lake Insight | Huawei Cloud

Hubungi Kami

Data Lake Insight (DLI)

Pemrosesan aliran tanpa server, pemrosesan batch, dan analisis interaktif yang memungkinkan impor metadata dalam jumlah besar dengan cepat ke dalam data lake, penyerapan data mentah dengan cepat ke dalam gudang data, serta integrasi yang mudah antara kemampuan intelegensi bisnis (BI) dan kecerdasan buatan (AI)

Kemudahan Penggunaan

Hasil untuk data berukuran TB dapat diperoleh dalam hitungan detik, pengembangan menjadi sederhana dengan menggunakan Bahasa Permintaan Terstruktur (SQL) standar, dan operasi tanpa perawatan berarti investasi tenaga kerja yang rendah.

Analisis All-in-One

Spark, Flink, dan Trino digabungkan untuk menyediakan pengalaman analisis interaktif yang mulus dalam pemrosesan data batch dan streaming.

Penghematan Biaya yang Unggul

Pemisahan arsitektur penyimpanan dan komputasi membuat biaya lebih rendah, sumber daya elastis, penggunaan kembali berbasis waktu, dan prioritas yang fleksibel.

Sumber Terbuka

Kemampuan analisis lintas sumber disediakan dengan mendukung format data sumber terbuka yang populer dan mengintegrasikan dengan produk BI yang mainstream.

Mengapa Huawei Cloud DLI?

Semua dalam SQL

Dengan mesin multi-model, DLI membuat analisis big data dapat diakses oleh mereka yang tidak memiliki latar belakang big data — yang Anda butuhkan hanyalah pengetahuan tentang SQL. DLI sepenuhnya kompatibel dengan ekosistem dan antarmuka Apache Spark, Apache Flink, dan Trino, serta aplikasi offline dapat dengan mudah dimigrasikan ke cloud. Satu set sumber daya dapat menangani berbagai jenis komputasi, termasuk pemrosesan aliran, pemrosesan batch, dan analisis interaktif.

Kumpulan Sumber Daya Elastis

Kumpulan sumber daya fleksibel dan dapat dengan cepat menyesuaikan dengan fluktuasi permintaan untuk sumber daya offline, real-time, dan interaktif. Ini juga mendukung prioritas tingkat pekerjaan dan terintegrasi dengan DataArts Studio untuk operasi yang lebih efisien, memastikan penyelesaian tugas-tugas penting tepat waktu.

Lakehouse

DLI mengadopsi format data lake Hudi untuk analisis dan mendukung solusi terpadu untuk berbagai mesin, seperti Spark dan Flink. Ini juga memungkinkan penyerapan data secara real-time dan analisis lakehouse menggunakan SQL.

Analisis Lintas Sumber

DLI mendukung berbagai format data dan dapat menganalisis data dari berbagai sumber, seperti cloud, database di tempat, dan database offline, tanpa memerlukan migrasi data. Hal ini memungkinkan penciptaan pandangan terpadu tentang data perusahaan, memberdayakan bisnis untuk berinovasi dengan cepat dan membuka nilai dari data mereka.

Wawasan Tentang Data yang Berharga untuk Setiap Skenario

Analitik Database
E-Niaga
Gaming
Perusahaan Besar
Genetika
Keuangan
Pemerintahan

Analitik Database

Analisis data yang disimpan di basis data relasional, seperti informasi pendaftaran untuk sebuah aplikasi.

Keunggulan

Pengalaman SQL yang Familiar

Sintaks SQL DLI sepenuhnya kompatibel dengan standar ANSI SQL 2003 untuk basis data relasional, tidak memerlukan pembelajaran tambahan, dan memungkinkan Anda menggunakan SQL seperti biasanya.

Kinerja yang Unggul

DLI menggunakan model komputasi dalam memori terdistribusi untuk dengan mudah menangani jumlah data yang besar.

Mengatasi Hambatan

Basis data relasional tidak dapat menangani kueri yang kompleks seiring dengan pertumbuhan volume data.

Serpihan dapat menghambat analisis yang mendalam.

Menganalisis data bisnis dapat memengaruhi operasi online.

Layanan Terkait

CDM

E-Niaga

Pemasaran Akurat

Dalam industri e-niaga, sangat penting untuk mendapatkan informasi dari berbagai sumber untuk analisis korelasi guna mengoptimalkan pemasaran akurat dan meningkatkan laju konversi. Misalnya, menghubungkan "data peristiwa klik iklan halaman" dengan "data pendaftaran pengguna" untuk mengidentifikasi jenis iklan yang disukai oleh kelompok usia yang berbeda, serta menyajikan iklan yang lebih akurat kepada pengguna sesuai dengan usia mereka.

Keunggulan

Analisis Lintas Sumber

Data dapat dihubungkan dan dianalisis antara "data peristiwa klik iklan halaman" yang disimpan di OBS dan "data pendaftaran pengguna" yang disimpan di Relational Database Service (RDS) tanpa perlu migrasi data.

Operasi Murni SQL

DLI telah mengintegrasikan berbagai sumber data, dan pemetaan sumber data dapat diselesaikan langsung melalui pembuatan tabel SQL.

Layanan Terkait

OBS

DIS

Gaming

Analisis Log

Perusahaan game mengandalkan platform analisis data untuk mengatasi tantangan industri dengan memanfaatkan kekuatan data. Misalnya, menemukan saluran iklan berkualitas tinggi, meningkatkan retensi pemain baru, mengoptimalkan aktivitas operasional untuk meningkatkan aktivitas pemain, dan mendorong iterasi produk melalui data.

Keunggulan

Bayar per Penggunaan

DLI hanya dikenakan biaya selama digunakan, sehingga mengurangi biaya lebih dari 50% dibandingkan dengan kluster eksklusif.

Analisis Konvergen

Tiga mesin DLI berbagi metadata, dan data dibersihkan secara real-time sebelum disimpan untuk pemrosesan ekstraksi, transformasi, dan pemuatan (ETL) secara offline. Hasil pemrosesan dapat langsung digunakan untuk analisis interaktif dan eksplorasi data.

Mengatasi Hambatan

Analisis log biasanya dijadwalkan secara berkala, yang mengakibatkan banyak waktu kosong di antara setiap penjadwalan.

Layanan Terkait

DIS

RDS for MySQL

Perusahaan Besar

Analisis Log

Perusahaan besar sering kali memiliki banyak departemen yang menggunakan layanan cloud, yang memerlukan pengelolaan izin untuk berbagai karyawan di setiap departemen. Ini mencakup pengawasan terhadap pembuatan, penghapusan, penggunaan, dan isolasi sumber daya komputasi. Selain itu, mereka juga perlu mengelola data setiap departemen, memastikan bahwa protokol isolasi dan berbagi diterapkan dengan benar.

Keunggulan

Kontrol Izin yang Terperinci

Kontrol izin tingkat kolom; kontrol izin terpisah untuk INSERT INTO/OVERWRITE; kontrol izin baca-saja untuk metadata tabel.

Pengelolaan Terpadu

Gunakan Identity and Access Management (IAM) untuk mengelola pengguna (tidak perlu membuat pengguna DLI terpisah), dan mendukung otorisasi yang rinci melalui IAM.

Layanan Terkait

MRS

Genetika

Pengelolaan Data Gen

Di bidang genetika, terdapat banyak pustaka analisis pihak ketiga berdasarkan kerangka kerja terdistribusi Spark, seperti ADAM dan Hail.

Keunggulan

Dukungan Citra Khusus

Anda dapat mengemas pustaka analisis pihak ketiga seperti ADAM dan Hail berdasarkan citra dasar, yang dapat diunggah langsung ke SWR. Saat menjalankan pekerjaan di DLI, citra khusus di SWR akan otomatis ditarik.

Citra dasar bawaan

Citra bawaan versi Spark/Flink yang disempurnakan Huawei dan citra AI sumber terbuka untuk TensorFlow, Keras, dan PyTorch.

Layanan Terkait

SWR

Keuangan

Kontrol Risiko Real-Time

Untuk meningkatkan kemungkinan mencegah atau mengurangi kejadian risiko, sistem pengendalian risiko diperlukan untuk skenario umum seperti pendaftaran, login, dan pengendalian transaksi.

Keunggulan

Throughput Tinggi dan Latensi Rendah

Dengan menggunakan model Dataflow Apache Flink, ini adalah kerangka komputasi real-time sepenuhnya. Memanfaatkan sumber daya komputasi berkinerja tinggi, sistem ini dapat memproses 1.000 hingga 20.000 pesan per detik per unit pemrosesan pusat (CPU).

Ekosistem Cloud yang Kaya

Dengan menggunakan SQL, aliran data yang telah diproses dapat ditulis ke berbagai layanan cloud seperti CloudTable dan SMN.

Layanan Terkait

DIS

SMN

Pemerintahan

Layar Besar Real-Time

Untuk mengelola pandemi COVID-19 dengan lebih baik, pemerintah perlu menggunakan dasbor real-time untuk memantau data kunci, seperti jumlah kasus terkonfirmasi saat ini, jumlah kumulatif kasus terkonfirmasi, dan kasus impor, menyediakan dukungan data untuk tahap berikutnya dalam pengendalian pandemi.

Keunggulan

Kinerja Kueri dalam Hitungan Milidetik

Mesin openLooKeng bawaan menggunakan banyak teknik optimisasi kueri untuk memenuhi kebutuhan analisis interaktif berkinerja tinggi dalam hitungan milidetik di atas kerangka komputasi dalam memori.

Mudah Digunakan

Metode pengembangan SQL murni dengan kompatibilitas penuh terhadap sintaks ANSI SQL 2003 standar.

Layanan Terkait

CDM

RDS for MySQL

DLV

Inovasi Layanan Berkelanjutan dengan Puluhan Ribu Pelanggan

Mengxiang Group DIANCHU Technology Dragonest

Membantu MengXiang Group Menangani Puncak Lalu Lintas E-niaga

Seiring dengan berkembangnya bisnis perusahaan dan peningkatan jumlah pelanggan, solusi tata kelola data terintegrasi batch-stream Huawei Cloud DLI + DataArts Studio memberikan MengXiang arsitektur yang fleksibel dan data lake berkinerja tinggi untuk menangani lonjakan lalu lintas unik yang dibawa oleh promosi e-niaga, untuk memastikan stabilitas bisnis.

Mendukung DIANCHU Technology dalam Mendirikan Platform Analisis Data

Dengan menggunakan DLI dan DataArts Studio dari Huawei Cloud, DIANCHU Technology telah mendirikan platform analisis data game yang menyediakan analisis real-time terhadap pendapatan, tingkat retensi pemain, tingkat pembayaran, dan metrik lainnya untuk membantu operator merencanakan aktivitas, membantu penerbit dalam penargetan yang tepat, dan mendukung manajemen dalam mengambil keputusan bisnis inti dengan cepat.

Membantu Dragonest Meningkatkan Efisiensi Secara Keseluruhan

Dragonest telah bekerja sama dengan Huawei Cloud untuk meningkatkan kemampuannya dalam melakukan kueri dan analisis terhadap sejumlah besar data dengan cara yang hemat biaya, membantu departemen operasional, perencanaan, dan promosi merespons kebutuhan bisnis dengan cepat dan mencapai aplikasi data yang terintegrasi. DLI menyediakan alat analisis big data untuk membantu Dragonest meningkatkan efisiensi keseluruhan.