O que é o MapReduce Service?

Programe e gerencie clusters de Big Data de alta disponibilidade com especificações escaláveis, para executar cargas de trabalho de análise de código aberto

  • Provisionamento rápido e manutenção simples

    Provisione rapidamente clusters de Big Data com instalação e configuração automatizadas de software, correções e atualizações de rolamento integradas e operações e manutenção simplificadas.

    Provisione rapidamente clusters de Big Data com instalação e configuração automatizadas de software, correções e atualizações de rolamento integradas e operações e manutenção simplificadas.

  • Armazenamento e computação desacoplados

    Aumente a flexibilidade e reduza os custos usando clusters de computação para análise, enquanto armazena dados sem limites no Object Storage Service (OBS) de baixo custo com 99,9999999999% de durabilidade.

    Aumente a flexibilidade e reduza os custos usando clusters de computação para análise, enquanto armazena dados sem limites no Object Storage Service (OBS) de baixo custo com 99,9999999999% de durabilidade.

  • Segurança de ponta a ponta

    Gerencie permissões de projetos de cluster com a autenticação Kerberos e mantenha usuários e recursos seguros com o serviço Identity and Access Management (IAM). Os dados são criptografados na transmissão e durante o armazenamento.

    Gerencie permissões de projetos de cluster com a autenticação Kerberos e mantenha usuários e recursos seguros com o serviço Identity and Access Management (IAM). Os dados são criptografados na transmissão e durante o armazenamento.

  • Alta disponibilidade e desempenho

    Não há pontos únicos de falha com a alta disponibilidade entre as zonas de disponibilidade. Expanda rapidamente as instâncias, a CPU e/ou a RAM em clusters para disponibilizar um enorme poder de computação.

    Não há pontos únicos de falha com a alta disponibilidade entre as zonas de disponibilidade. Expanda rapidamente as instâncias, a CPU e/ou a RAM em clusters para disponibilizar um enorme poder de computação.

Principais lançamentos

Apache Pulsar, uma plataforma de streaming e mensagens distribuídas de última geração

Apache Pulsar, uma plataforma de streaming e mensagens distribuídas de última geração

O Apache Pulsar é um sistema de mensagens de última geração com armazenamento e computação desacoplados. Esse serviço nativo da nuvem de alto desempenho possui modelos unificados e de streaming. É altamente confiável, de fácil manutenção e boa escalabilidade. MRS da Huawei Cloud integra o sistema de mensagens Apache Pulsar de classe empresarial para fornecer uma excelente opção para plataformas de processamento de fluxos e fila de mensagens.

  • Cenários de aplicação
  • - Criação de filas de mensagens

    - Processamento de dados de fluxo

  • Vantagens técnicas
  • MRS fornece uma arquitetura nativa da nuvem para nuvem híbrida com data lakes em tempo real, offline e lógicos; e uma plataforma de Big Data completa para nuvem pública que é de baixo custo, flexível, segura e confiável. O armazenamento e a computação desacoplados permitem uma escalabilidade mais flexível e você pode aproveitar a configuração de múltiplos locatários, o armazenamento em camadas e uma variedade de modos de assinatura flexíveis (exclusivo, ativo/em espera e compartilhado).

ClickHouse (edição empresarial)

ClickHouse (edição empresarial)

ClickHouse é um excelente banco de dados analítico em tempo real com uma excepcional taxa de compressão e consulta rápida. Com recursos de segurança confiáveis da Huawei Cloud e computação multiarquitetura (x86 e Arm), o ClickHouse pode consultar dezenas de bilhões de registros por centenas de critérios de consulta em milissegundos. É a sua escolha ideal para criar um armazém de análise com grande volume de dados de alto desempenho na nuvem.

  • Cenários de aplicação
  • - Análise em tempo real de grande volume de dados em tabelas planas

    - Análise de relatórios de BI em tempo real

    - Análise de comportamento de usuário

    - Análise de dados de negócios por provedores de serviços de jogos

  • Vantagens técnicas
  • Desempenho supremo, computação multiarquitetura, segurança e confiabilidade, dimensionamento contínuo e elástico, configuração flexível e suporte especializado

Arquitetura do MapReduce Service

Arquitetura do MapReduce Service

Terms & Conditions

活动对象:华为云电销客户及渠道伙伴客户可参与消费满送活动,其他客户参与前请咨询客户经理

活动时间: 2020年8月12日-2020年9月11日

Cenários de aplicação

Use uma variedade de componentes de Big Data para processar, analisar, consultar ou minerar grandes quantidades de dados

Big Data

Migração rápida

Migre Big Data de outras plataformas de Big Data para o MRS em apenas algumas etapas. Um conjunto de ferramentas de migração para cada componente é disponibilizado para minimizar erros e interrupções de serviço.

Vantagens

  • Armazenamento unificado de dados

    Elimine silos de dados com uma combinação de data lakes em tempo real, offline e lógicos. Uma cópia de dados pode ser compartilhada e analisada por vários serviços.

  • Dimensionamento elástico

    Otimize as suas instâncias e dimensione automaticamente a capacidade das instâncias para atender às mudanças de demanda. Este processo reduz muito os custos de migração para a nuvem.

  • Compatibilidade de código aberto

    MRS é inteiramente compatível com APIs de código aberto. Durante a migração, os seus serviços não serão afetados e nenhum código de serviço precisa ser modificado.

Serviços relacionados
Veículos

Internet dos Veículos (IoV)

MRS usa a compatibilidade com APIs de código aberto para fornecer um mecanismo de processamento de dados rápido e eficiente que permite analisar grandes quantidades de dados de status, telemetria e experiência do usuário do carro.

Vantagens

  • Plataforma de dados unificada, full-stack e escalável

    MRS é uma plataforma de Big Data de nível empresarial, nativa da nuvem, com armazenamento e computação desacoplados, para uma escalabilidade mais conveniente e flexível.

  • Processamento de múltiplos mecanismos para cargas de trabalho híbridas

    MRS fornece componentes de código aberto que podem ser combinados livremente conforme a necessidade, com suporte para processamento de serviços complexos em tempo real/offline.

  • Alto desempenho por um preço baixo

    Storm pode obter dados de fluxo em tempo real do Kafka para computação e análise em tempo real com alta taxa de transferência e baixa latência.

Serviços relacionados
Finanças

Finanças e seguros

MRS atende aos rigorosos requisitos da indústria de seguros em relação à conformidade, segurança e confiabilidade. Uma arquitetura tradicional pode ser rapidamente reconstruída e implementada nas empresas de seguros que querem se transformar rapidamente. A transformação digital torna os serviços inovadores e em evolução fáceis e rápidos.

Vantagens

  • Segurança robusta

    Atende aos requisitos regulatórios do setor e protege os dados confidenciais dos clientes.

  • Recursos dedicados

    Fornece clusters de MRS dedicados e recursos exclusivos, além de desacoplar os recursos de computação do armazenamento.

  • Criação flexível, full-stack e O&M fácil

    Permite que os usuários criem uma plataforma de Big Data full-stack com apenas alguns cliques e fornece uma interface de gerenciamento de plataforma de classe empresarial, simplificando a O&M.

Serviços relacionados
Logística

Logística inteligente

MRS é usado para gerenciamento inteligente de rotas de logística e cadeia de suprimentos, melhorando a eficiência das operações de serviço e reduzindo significativamente os custos.

Vantagens

  • Alta taxa de transferência e baixa latência

    Clusters dedicados do MRS Kafka com recursos de alta taxa de transferência, alta disponibilidade e baixa latência facilitam o acesso em tempo real a milhões de mensagens.

  • Análise e processamento rápido de dados em grande escala

    MRS Spark oferece suporte à computação de dados em larga escala. MRS HBase pode carregar e atualizar dados de logística em milissegundos, e consultar e analisar petabytes de dados de séries temporais.

  • Mais inteligência com IA

    MRS usa IA para mineração de Big Data e fornece recursos precisos e inteligentes de previsão e análise para organizações de logística, marketing e gerenciamento de operações.

Serviços relacionados
Elevadores

Internet dos Elevadores (IoE)

O MRS é uma plataforma aberta e única de processamento de Big Data para a gestão inteligente de elevadores. A plataforma é suficientemente flexível e personalizável para se adaptar a quase todos os cenários.

Vantagens

  • Aberto e flexível

    MRS oferece uma ampla variedade de produtos de computação e hardware de armazenamento para atender às necessidades específicas do cenário e ajudá-lo a criar uma plataforma unificada e aberta de Big Data. Ele oferece mecanismos de computação poderosos e uma quantidade ilimitada de armazenamento, além de permitir a integração flexível de componentes de serviço.

  • Alto desempenho e grande capacidade

    MRS Kafka trabalha com ECSs de otimização de rede geral de alto desempenho (C3ne) para implementar o acesso a dados em tempo real para milhões de elevadores.

  • Suporte para IA

    MRS é compatível com GPUs que fornecem computação paralela de alta velocidade em tempo real e computação de ponto flutuante. Esses recursos são aplicáveis à codificação e à decodificação de vídeo, ao Deep Learning e à computação científica.

Serviços relacionados
Gestão hídrica

Gestão hídrica inteligente

MRS Hadoop fornece funções de análise e armazenamento de Big Data unificadas, confiáveis e de alto desempenho para cenários de gestão de água.

Vantagens

  • Plataforma de dados unificada e escalável

    MRS oferece uma plataforma de Big Data de nível empresarial com componentes de código aberto que podem ser combinados de forma flexível, suportando o processamento de serviços complexos offline ou em tempo real.

  • Alta taxa de transferência e baixa latência

    Storm pode obter dados de fluxo em tempo real do Kafka para computação e análise em tempo real com alta taxa de transferência e baixa latência.

  • Integração de vários tipos de dados

    Dados estruturados, semiestruturados e não estruturados podem ser computados e processados, e os dados tradicionais do armazém de dados podem ser facilmente migrados, facilitando a exploração e a análise de dados entre fontes.

Serviços relacionados
Jogos

Jogos em tempo real

Os dados de logs de jogos são acessados por meio do Kafka e do Flume em tempo real. O Spark Streaming processa e analisa os dados em tempo real e armazena os resultados da análise para o HBase ou Hive para rápida análise de anúncios de jogos, consulta e análise de dados e análise de receita.

Vantagens

  • Plataforma de dados unificada e escalável

    MRS oferece uma plataforma de Big Data empresarial com componentes de código aberto que podem ser combinados de forma flexível para atender até mesmo às necessidades altamente complexas de processamento de serviços.

  • Tempo real e alta taxa de transferência

    MRS Kafka e o Flume coletam dados em tempo real e integram-se aos ECSs de aprimoramento de rede geral de alto desempenho (C3ne) para acesso em tempo real de grandes quantidades de dados.

Serviços relacionados
Energia

Gerenciamento inteligente de energia

MRS fornece serviços em nuvem de Big Data empresarial que permitem que os operadores de usinas de energia usem Hadoop, Spark, HBase, Storm e outros componentes de Big Data para fins de manutenção preditiva de dispositivos.

Vantagens

  • Plataforma de Big Data unificada

    MRS oferece uma plataforma de Big Data de nível empresarial com componentes de código aberto que podem ser combinados de forma flexível, suportando o processamento de serviços complexos offline ou em tempo real.

  • Coleta de dados em massa

    MRS Kafka e Sqoop oferecem suporte a vários métodos de coleta de dados, facilitando o acesso em tempo real de milhões de mensagens.

  • Integração facilitada

    As APIs do SQL podem ser usadas para dar suporte à consulta de dados multidimensionais para facilitar a exploração e análise de dados.

Serviços relacionados

Opções de cluster

Implemente rapidamente a partir de um modelo de cluster pré-configurado com componentes pré-instalados

  • Cluster de análise Hadoop Análise de grandes quantidades de dados

    O Spark permite analisar e consultar grandes quantidades de dados e usar o Hive para analisar terabytes ou petabytes de dados.

    O Spark permite analisar e consultar grandes quantidades de dados e usar o Hive para analisar terabytes ou petabytes de dados.

  • Cluster de HBase Armazenamento de dados em massa

    Usa o HBase para armazenar grandes quantidades de dados e consultar dados em milissegundos.

    Usa o HBase para armazenar grandes quantidades de dados e consultar dados em milissegundos.

  • Cluster de Kafka Processamento de streaming de baixa latência

    Usa o Flume para a ingestão de dados em tempo real, o Kafka para acesso em tempo real a dezenas de milhares de registros de dados e o Storm para obter processamento de dados de serviço online confiável, tolerante a falhas e de baixa latência.

    Usa o Flume para a ingestão de dados em tempo real, o Kafka para acesso em tempo real a dezenas de milhares de registros de dados e o Storm para obter processamento de dados de serviço online confiável, tolerante a falhas e de baixa latência.

  • Cluster de ClickHouse Análise em tempo real de grande volume de dados

    Usa o ClickHouse para consultar e analisar grandes volumes de dados em tempo real, acelerando a extração de valor dos dados.

    Usa o ClickHouse para consultar e analisar grandes volumes de dados em tempo real, acelerando a extração de valor dos dados.

Compatível com x86, Arm e ecossistemas de Big Data de código aberto

Os servidores Arm da Huawei estão equipados com o sistema operacional e os banco de dados da Huawei.

Compatibilidade com várias frameworks de computação de código aberto, por exemplo, MapReduce, Spark/Spark SQL, Hive e Storm.

Oferece suporte para o CarbonData, que é um formato de armazenamento de arquivos de alto desempenho.

O Spark SQL é compatível com o Hive SQL.

Novas funcionalidades

Histórias de sucesso

Meitu

Ao desvincular o armazenamento e a computação, o FusionInsight pode dimensionar a capacidade de computação e armazenamento separadamente para atender demandas. Um algoritmo EC substituiu o Hadoop Big Data de três cópias para que uma cópia de dados possa suportar vários tipos de análise e computação, alcançando uma utilização de recursos 40% maior e com redução de custos geral de 30%. Possibilitando que o serviço de Big Data da Meitu atenda eficientemente mais de dois bilhões de usuários em todo o mundo.


Saiba mais

China Merchants Bank

"A plataforma de Big Data FusionInsight da Huawei impulsionou significativamente a inovação no CMB. Agora, podemos fornecer melhores serviços online sob demanda e em tempo real. Antes, só podíamos consultar dados históricos dos últimos 13 meses. Agora, podemos consultar dados dos últimos sete anos. Também podemos alcançar todos os nossos usuários-alvo com 82% menos mensagens SMS do que antes."


— Liu Jing, Gerente do projeto de computação em nuvem de última geração, Departamento de Tecnologia da Informação, China Merchants Bank

Saiba mais

T3Go

O lakehouse da T3Go possui armazenamento e computação desacoplados. Ele é desenvolvido com base no framework Hudi de código aberto e se aplica tanto à BI quanto à IA. Atualmente, nosso lakehouse está hospedado no FusionInsight da Huawei Cloud.


— Yang Hua, Chefe da plataforma de Big Data T3Go



Saiba mais

Inscreva-se e comece uma incrível jornada na nuvem

Experimentar gratuitamente