O Gerenciador do Hub de dados do Brightics distribui e gerencia aplicativos de serviço, configuração e gerenciamento de versão para cada serviço, recomenda valores ideais de configuração, monitoramento integrado, clustering e outros, facilitando a criação e o gerenciamento de um ecossistema do Hub de dados do Brightics.
Brightics Data Hub
Plataforma de dados distribuídos - Ecossistema do Hadoop otimizado para negócios
Gerenciamento fácil do ambiente Hadoop otimizado para suas necessidades comerciais.
O Hub de dados do Brightics oferece a versão mais recente do ecossistema Hadoop de código aberto para gerenciar seus dados e a compatibilidade de cada serviço de maneira eficaz. Você pode gerenciar tudo isso no Gerenciador do Hadoop baseado na Web.
Principais serviços
Oferece escalabilidade e alta estabilidade de gerenciamento fácil e inteligente.
- Vários componentes no ecossistema Hadoop. Instalação e gerenciamento simplificados
- Nível de software comercial Alta estabilidade Conclusão de verificação de estabilidade de código aberto
-
Distribuição Hadoop para empresas com compatibilidade comprovada
Distribuição Hadoop que integrou o Apache Hadoop e 14 dos principais ecossistemas Hadoop de código aberto para garantir compatibilidade e também está totalmente integrado à IA do Brightics.
-
Instalação e gerenciamento convenientes
Oferece instaladores e painéis de monitoramento baseados na Web para instalação fácil e monitoramento integrado de vários ecossistemas Hadoop.
-
Painéis de monitoramento para administradores do sistema
Painel integrado com status de cada serviço e recursos gerais do sistema; também mostra métricas que podem monitorar dados de HDFS e YARN, como capacidade, CPU e uso do disco, indicadores essenciais.
-
Gerenciamento de configuração conveniente e recomendação de valores ideais
Você pode modificar e excluir as configurações de cada serviço e fornecer a função de histórico de versão para a parte alterada. Também indicamos valores ideais para minimizar o impacto no serviço.
01
04
Estrutura
Stack de serviço do Hub de dados do Brightics
* Clique em cada componente para obter mais informações.
- Brightics Data Hub
- Brightics Data Hub Manager
- Data Processing : Map Reduce, Hive, Hue, Livy, Solr
- >Execution Engine : Tez, Spark
- Data Operation : YARN
- Coordinator : Zookeeper
- Data Govemance : Atlas
- Security : Ranger
- NoSQL DB : HBase
- Data Storage for Any Data Type : HDFS
Gerenciador do Hub de dados do Brightics
Processamento de dados
Consiste em Redução de Mapa para processar grandes quantidades de dados de forma rápida e segura, computação paralela distribuída, Hive para resumir/consultar/analisar dados, Hue, Livy, Solr para gerenciar e monitorar tarefas de dados, etc.
Mecanismo de execução
Consiste em Tez, um mecanismo de execução para operações de processamento de dados, e Spark, que faz o processamento distribuído de Big Data.
Operação de dados
O YARN, que faz o gerenciamento de recursos e do mecanismo de execução do Hadoop, está incluído
Coordenador
O Zookeeper, que presta serviços de coordenação distribuída a vários serviços no ecossistema Hadoop, está incluído.
Governança de dados
O Atlas, que serve para linhagem e padrões de dados baseados em meta, está incluído.
Segurança
O Ranger, que é a segurança de dados gerenciados do cluster do Hadoop, está incluído.
Banco de dados NoSQL
O HBase, que é o NoSQL mais usado com base na plataforma Hadoop, está incluído.
Armazenamento de dados
HDFS é um sistema de arquivos distribuído que distribui grandes quantidades de dados a vários nós e processa dados ao mesmo tempo em cada nó.
Casos de uso
-
Armazenamento integr. de dados de seg. públicaIntegra e guarda 14,5 bilhões de dados estruturados e 360 TB de não estrut. de 30 sistemas p/ análise de seg. pública; aceita process. instant. de dados de armaz. em massa/serviço de monit. integrado.
Recursos
-
Estabilidade para negócios
Com verificação e ger. de versão para usardistrib. do Hadoop em usos comerciais e suporta padrões de dados e ger. de acesso com Apache Atlas, Apache Ranger, etc.
-
Ger. fácil e inteligente
É fácil instalar e gerenciar config. ideais com base no UX da Web. Fornece ger. de versão para alterações na config. Gerenciamento intelig. que permite notificar o administrador em caso de problema.
-
Fornece escalabilidade flexível
Oferece armazenamento uso fáceis de dados estruturados e não estruturados e interface flexível para personalizar os negócios.
Especificações
Especificações recomendadas
-
Plataforma do Hub de dados
Servidor x86 com três nós ou mais
– CPU: 16 núcleos/nó
– Memória: 64 GB/nó
– Disco: 4 TB/nó
– Sistema operacional: CentOS, RHEL 7.x -
Computador para usuários da plataforma
– Navegador: Chrome (versão 50.0 ou superior)
– Resolução da tela: 1280 x 900, (recomendada) -
Ambientes de nuvem adequados
SDS Cloud, Amazon Web Service, MS Azure, Google Cloud etc.
Documentação
Soluções relacionadas
Brightics Machine Learning
A Brightics ML é uma plataforma de análise de dados baseada em IA que implementa serviços de análise rápidos e eficientes em uma empresa. Ela fornece um ambiente para a modelagem analítica visualizada, além de suporte à criação de scripts simples.
Vamos conversar
Caso esteja procurando uma solução comercial específica ou apenas precise tirar algumas dúvidas, estamos aqui para ajudar.
