Data Lake Insight (DLI)

Data Lake Insight (DLI)

Facilidade de uso

Resultados de dados ao nível de TB podem ser obtidos em segundos; o desenvolvimento é simples com Structured Query Language (SQL) padrão, e operações sem manutenção significam baixo investimento em mão de obra.

Análise integrada

Spark, Flink e Trino são combinados para oferecer uma experiência de análise interativa contínua para processar dados em lote e em tempo real.

Efetividade de custo excepcional

O armazenamento desacoplado e a arquitetura de computação garantem benefícios como custos mais baixos, recursos elásticos, reutilização baseada no tempo e prioridades flexíveis.

Código aberto

Os recursos para análise entre fontes são fornecidas ao permitir formatos de dados de código aberto populares e pela integração com produtos de BI convencionais.

Por que utilizar o DLI da Huawei Cloud?

Completamente em SQL

Completamente em SQL

  • Com mecanismos multimodelo, o DLI torna a análise de Big Data acessível para aqueles sem experiência com Big Data, você somente precisa ter conhecimento em SQL. É totalmente compatível com os ecossistemas e interfaces Apache Spark, Apache Flink e Trino, e as aplicações offline podem ser migradas sem esforço para a nuvem. Um conjunto de recursos pode lidar com vários tipos de cálculos, incluindo processamento de fluxo, processamento em lote e análise interativa.

Pool de recursos de elásticos

Pool de recursos de elásticos

  • O pool de recursos é flexível e pode se ajustar rapidamente a flutuações na demanda por recursos offline, em tempo real e interativos. Ele também permite priorização ao nível de trabalho e integra-se com o DataArts Studio para operações simplificadas, garantindo a conclusão oportuna de tarefas críticas.

Lakehouse

Lakehouse

  • O DLI incorpora o formato de data lake Hudi para análise e permite solução unificada para vários mecanismos, como Spark e Flink. Ele também permite a ingestão de dados em tempo real e a análise lakehouse usando SQL.

Análise entre fontes

Análise entre fontes

  • O DLI é compatível com vários formatos de dados e pode analisar dados de várias fontes, como nuvem, bancos de dados locais e bancos de dados offline, sem a necessidade de migração de dados. Isso permite a criação de uma visão unificada dos dados corporativos, capacitando as empresas a inovar rapidamente e potencializar o valor de seus dados.

Insights de dados valiosos para qualquer cenário

Análise de banco de dados
Análise de banco de dados

Realize a análise de dados armazenados em um banco de dados relacional, como informações de registro de uma aplicação.

Vantagens
Experiência similar ao SQL

A sintaxe de SQL do DLI é totalmente compatível com o padrão ANSI SQL 2003 para bancos de dados relacionais, não exigindo aprendizado adicional e permitindo que você utilize o SQL da maneira que sempre utilizou.

Desempenho superior

O DLI usa um modelo de computação distribuído na memória para lidar facilmente com grandes volumes de dados.

Resolução de gargalos
Bancos de dados relacionais não podem lidar com consultas complexas à medida que o volume de dados aumenta.
Particionamento pode prejudicar uma análise minuciosa.
A análise de dados de negócios pode afetar as operações online.
Serviços relacionados
E-commerce
Marketing de precisão

No setor de e-commerce, é crucial obter informações de múltiplas fontes para análise de correlação, visando otimizar o marketing de precisão e melhorar as taxas de conversão. Por exemplo, correlacionar "dados de eventos de cliques em anúncios de página" com "dados de registro do usuário" para identificar os tipos de anúncios preferidos por diferentes faixas etárias e fornecer anúncios mais precisos aos usuários conforme a sua idade.

Vantagens
Análise entre fontes

Os dados podem ser correlacionados e analisados entre "dados de evento de clique em anúncios de página" armazenados no OBS e "dados de registro do usuário" armazenados no Relational Database Service (RDS) sem a necessidade de migração de dados.

Operação de SQL puro

O DLI integrou várias fontes de dados e o mapeamento de fontes de dados pode ser concluído diretamente por meio da criação de tabelas de SQL.

Serviços relacionados
Jogos
Análise de logs

As empresas de jogos contam com plataformas de análise de dados para superar os desafios setoriais, aproveitando o poder dos dados. Por exemplo, encontrar canais de publicidade de alta qualidade, melhorar a retenção de novos jogadores, otimizar as atividades operacionais para aumentar a atividade dos jogadores e impulsionar a iteração de produtos por meio de dados.

Vantagens
Pagamento por uso

O DLI é cobrado apenas durante o uso, reduzindo os custos em mais de 50% em comparação com os clusters exclusivos.

Análise convergente

Os três mecanismos do DLI compartilham metadados, e os dados são limpos em tempo real antes de serem armazenados para o processamento de extração, transformação e carregamento (ETL) offline. Os resultados de processamento podem ser usados diretamente para análise interativa e exploração de dados.

Resolução de gargalos
A análise de log é geralmente agendada por período, resultando em muito tempo ocioso entre cada agendamento.
Serviços relacionados
Grandes empresas
Análise de logs

As grandes empresas geralmente têm vários departamentos que utilizam serviços em nuvem, requerendo gerenciamento de permissões para vários funcionários de cada departamento. Isso inclui supervisionar a criação, exclusão, uso e isolamento de recursos de computação. Ao mesmo tempo, eles também precisam gerenciar os dados de cada departamento, garantindo que os protocolos de isolamento e compartilhamento adequados estejam em vigor.

Vantagens
Controle de permissões refinado

Controle de permissão ao nível de coluna; controle de permissão separado para INSERT INTO/OVERWRITE; controle de permissão somente leitura para metadados de tabela.

Gerenciamento unificado

Use o Identity and Access Management (IAM) para gerenciar usuários (não é necessário criar usuários de DLI separados) e compatibilidade com autorizações refinadas por meio do IAM.

Serviços relacionados
Genética
Gerenciamento de dados genéticos

No campo da genética, existem muitas bibliotecas de análise de terceiros baseadas no framework distribuído Spark, como ADAM e Hail.

Vantagens
Compatibilidade com imagens personalizadas

Você pode empacotar bibliotecas de análise de terceiros, como ADAM e Hail, com base em imagens-base, que podem ser carregadas diretamente no SWR. Ao executar trabalhos em DLI, as imagens personalizadas no SWR serão automaticamente extraídas.

Imagens-base integradas

Versões aprimoradas otimizadas pela Huawei do Spark/Flink e imagens de IA de código aberto para TensorFlow, Keras e PyTorch.

Serviços relacionados
Finanças
Controle de risco em tempo real

Para aumentar a probabilidade de eliminar ou reduzir a ocorrência de eventos de risco, é necessário um sistema de controle de risco para cenários típicos, como registro, acesso e controle de transações.

Vantagens
Alta taxa de transferência e baixa latência

Utilização do modelo Dataflow do Apache Flink, uma estrutura de computação totalmente em tempo real. Ele usa recursos de computação de alto desempenho e pode processar 1.000 a 20.000 mensagens por segundo por unidade central de processamento (CPU).

Amplo ecossistema em nuvem

Com o uso de SQL, fluxos de dados processados podem ser gravados em vários serviços em nuvem, como CloudTable e SMN.

Serviços relacionados
Governo
Panorama em tempo real

Para uma gestão mais eficaz da pandemia de COVID-19, os governos deveriam utilizar painéis em tempo real para monitorar dados essenciais, como os casos confirmados atuais, casos confirmados acumulados e casos importados. Isso forneceria informações cruciais para orientar as próximas etapas do controle da pandemia.

Vantagens
Desempenho de consulta ao nível de milissegundo

O mecanismo integrado openLooKeng emprega diversas técnicas de otimização de consulta para atender aos requisitos de análise interativa de alto desempenho, alcançando níveis de resposta em milissegundos sobre uma estrutura de computação na memória.

Fácil de usar

Método de desenvolvimento de SQL puro com compatibilidade total com a sintaxe padrão ANSI SQL 2003.

Serviços relacionados

Inovação contínua de serviços com dezenas de milhares de clientes

Inovação contínua de serviços com dezenas de milhares de clientes

Inicie a sua jornada
para

obter insights valiosos

imediatamente
Experimente agora

Mais serviços

Mais serviços