Obtenha atualizações recentes da Hortonworks por e-mail

Uma vez por mês, receba os mais recentes insights, tendências, informações analíticas e conhecimentos sobre Big Data.

Sign up for the Developers Newsletter

Uma vez por mês, receba os mais recentes insights, tendências, informações analíticas e conhecimentos sobre Big Data.

cta

Comece a Usar

nuvem

Pronto para começar?

Baixar sandbox

Como podemos ajudá-lo?

fecharBotão Fechar
cta

Maximiza o valor dos dados em movimento com Big Data da Internet das Coisas

reproduzir vídeo botão de vídeo

Get Started with Hortonworks DataFlow

Download Now
Hortonworks DataFlow (HDF)

Hortonworks DataFlow (HDF)

O Hortonworks DataFlow (HDF) fornece a ´única plataforma de ponta a ponta que recolhe, cura, analisa e atua sobre dados em tempo real, no local ou na nuvem, com uma interface visual drag-and-drop. O HDF é uma solução integrada com Apache Nifi/MiNifi, Apache Kafka, Apache Storm e Druid.

The HDF streaming real-time data analytics platform includes data flow management systems, stream processing, and enterprise services.

Powering the future of data

HDF 3.1 Platform
Kafka Storm NiFi minifi Ranger Ambari

Três componentes principais do fluxo de dados Hortonworks

administrador

Maneira fácil, segura e confiável de gerenciar o fluxo de dados 

Colete e manipule os fluxos de big data da Internet das Coisas com segurança e de forma eficiente, dando visibilidade operacional, controle e gerenciamento em tempo real.

administrador

Insights imediatos e contínuos  

Construa aplicações de analítica de streaming em minutos para captar insights perecíveis em tempo real sem escrever uma única linha de código.

Saiba Mais
administrador

Operações, segurança e governança corporativa 

Gerencie os ecossistemas HDF e HDP com um painel de gerenciamento abrangente para provisionamento, monitoramento e governança.

Saiba Mais

Plataforma integrada de coleta independente de fonte de dados

O HDF oferece recursos completos de coleta de dados em destaque que transmitem dados agnósticos e integrados com mais de 220 processadores. O big data da Internet das Coisas pode ser coletado de fontes dinâmicas, díspares e distribuídas, de diferentes formatos, esquemas, protocolos, velocidades e tamanhos, tais como máquinas, dispositivos de localização geográfica, sequência de cliques, arquivos, feeds sociais, arquivos de log e vídeos.

Mais informações:

  • De que forma o gerenciamento de fluxo de dados agnósticos de fonte de dados em tempo real facilita a movimentação de dados
    Assista ao vídeo
    Saiba mais
    Saiba o que HDF pode fazer para otimizar a análise do log de Edge.Leia mais
Coleta de dados poderosa

RESPOSTA EM TEMPO REAL A DADOS EM MOVIMENTO

Com HDF, a coleta de dados não é mais um processo tedioso. Você pode gerenciar dados em pleno voo com um painel de controle visual para ajustar fontes, juntar e dividir fluxos e priorizar fluxo de dados. O HDF também pode adicionar dados contextuais para seus fluxos para análise e insights mais completos. As trilhas de procedência e auditoria de dados constantes fornecem segurança e governança, conformidade e solução de problemas conforme necessário e em tempo real. Integrado ao Apache NiFi, MiNiFi, Kafka e Storm, o HDF está pronto para o caso de alto volume de processamento para análise e ação imediatas. Kafka permite diferentes taxas de criação e entrega de dados ao passo que Storm oferece analítica de dados em tempo real de streaming e insights imediatos em uma escala maciça.

Mais informações:

  • Como os dados em streaming gerenciados por meio de uma interface de usuário visual em tempo real do Apache NiFi aumentam a eficácia operacional.
    Assistir ao vídeo
Gerenciamento do fluxo de dados em tempo real

SEGURANÇA TOTAL DA FONTE AO DESTINO 

O HDF assegura o fluxo de dados de ponta a ponta e o roteamento desde a origem até o destino com autorização de usuário discreta e detalhada e cadeia de custódia visual em tempo real. Utilize a interface de usuário visual do HDF para criptografar dados em streaming, encaminhar ao Kafka, configurar buffers e gerenciar congestionamento para que os dados sejam priorizados de forma dinâmica e enviados de forma segura. O HDF permite o acesso a dados baseado em função que permite que as empresas compartilhem de forma segura e dinâmica determinadas partes de dados pertinentes. Ele pode facilmente implantar o gerencimanto de fluxo e aplicações de streaming em um ambiente "kerberizado" sem muita sobrecarga operacional.

Mais informações:

  • Veja como o acesso granular de dados é melhor do que o acesso baseado na função
    Assista ao vídeo
Segurança corporativa

CONSTRUÇÃO DE APLICAÇÕES DE ANALÍTICA DE STREAMING SEM CÓDIGO

O HDF inclui um módulo de analítica de streaming completo, o Streaming Analytics Manager (SAM), que constrói aplicações de analítica de streaming que fazem correlação de eventos, enriquecimento de contexto, correspondência de padrão complexo e agregações analíticas, e cria alertas/notificações quando se têm insights. O SAM facilita a construção de analítica de streaming por desenvolvedores de aplicativos, DevOps e analistas de negócios para construir, desenvolver, colaborar, analisar, implantar e gerenciar aplicativos em minutos, sem escrever uma única linha de código. Os analistas usam gráficos criados previamente para construir de forma rápida a análise e criar painéis de controle, enquanto o DevOps gerencia e monitora o direito de desempenho de aplicações padrão.

Os desenvolvedores podem experimentar na criação de apps SAM usando dados fictícios e criar testes unitários para apps SAM usando o novo "Test Mode" do SAM. O novo módulo de operações do SAM dá aos usuários a capacidade de facilmente testar, depurar, solucionar problemas e monitorar a implementação de aplicativos, tornando a operação de um aplicativo em execução ser tão fácil como a criação do aplicativo.

Mais informações:

OPERAÇÕES MAIS EFICIENTES COM O ESQUEMA DO REGISTRO

O HDF inclui o esquema do registro, um repositório central de esquema que permite que as aplicações de analítica interajam umas com as outras de forma flexível. Isso permite aos usuários salvar, editar ou recuperar esquemas para os dados que precisam. Isto também permite fácil fixação de esquemas para cada dado, sem incorrer em sobrecarga adicional para maior eficiência operacional. Com o gerenciamento de versão do esquema, dados de consumidores e produtores de dados podem evoluir em taxas diferentes. E, através de validação do esquema, a qualidade dos dados melhora consideravelmente. Um registro central de esquema também prevê maior governança de como os dados são usados. O esquema de registro é integrado ao Apache Nifi e HDF Streaming Analytics Manager.

Mais informações:

APACHE NIFI REGISTRY

O Apache NiFi Registry, novo subprojeto Apache já incluído no HDF Enterprise Management Services, facilita o desenvolvimento, a gestão e a portabilidade dos fluxos de dados. Fundamental para sua funcionalidade é a capacidade de abstrair programas e esquemas de fluxo de dados para permitir que os usuários acompanhem e monitorem as mudanças do fluxo de dados em um nível mais granular. Os esquemas de fluxo de dados são armazenados em um repositório compartilhado que permite o fácil compartilhamento de maneira global, bem como o versionamento dos esquemas.

Por isso, a exportação e importação de fluxos de dados permitem fácil portabilidade e a migração suave dos fluxos de dados de um ambiente para outro. A funcionalidade melhora significativamente o armazenamento, o controle e a gestão dos fluxos versionados, encurtando ainda mais o ciclo de vida de desenvolvimento de software e acelerando a implantação de aplicativos para acelerar o prazo de retorno.

O que há de novo na HDF

Acelere a gestão, o desenvolvimento e a operação de fluxo de dados

*

Desenvolva, gerencie e converta fluxos de dados facilmente usando o Apache NiFi Registry

*

Acompanhe e monitore as mudanças no fluxo de dados em um nível mais granular

*

Compartilhe e versione esquemas usando o repositório compartilhado para esquemas de fluxo de dados

*

Exporte e importe fluxos de dados facilmente de um ambiente para outro

Aumente a produtividade do desenvolvedor

*

Melhore as operações de transmissão de dados no Hortonworks Streaming Analytics Manager (SAM)

*

Crie apps SAM ou testes de unidade para apps SAM usando o novo "Modo de teste" do SAM

*

Teste, depure, solucione problemas e monitore a implantação de aplicativos com o novo módulo de operações do SAM

Experiência de integração com Kafka 1.0

*

Instale, configure, gerencie, atualize, monitore e proteja clusters Kafka 1.0 com o Ambari

*

Melhore a governança de dados e a conformidade gerenciando as políticas de controle de acesso com o Apache Ranger

*

Novos processadores no NiFi e SAM para usar os recursos Kafka 1.0, incluindo transações e cabeçalhos de mensagem

Guias de usuário do HDF

Obtenha as notas de lançamento do HDF; guias para usuários, desenvolvedores e noções básicas.

Suporte

O melhor suporte da indústria para Apache NiFi, Kafka e Storm na empresa. Conecte-se à nossa equipe de especialistas e receba ajuda durante sua jornada.

Treinamento

Treinamento real ministrado por especialistas em Big Data. Disponível presencialmente ou on-demand sempre que você precisar de nós.