newsletter

Obtenha atualizações recentes da Hortonworks por e-mail

Uma vez por mês, receba os mais recentes insights, tendências, informações analíticas e conhecimentos sobre Big Data.

AVAILABLE NEWSLETTERS:

Sign up for the Developers Newsletter

Uma vez por mês, receba os mais recentes insights, tendências, informações analíticas e conhecimentos sobre Big Data.

cta

Comece a Usar

nuvem

Pronto para começar?

Baixar sandbox

Como podemos ajudá-lo?

* Eu entendo que posso cancelar a inscrição a qualquer momento. Eu também reconheço as informações adicionais encontradas na Política de Privacidade da Hortonworks.
fecharBotão Fechar
cta

Gerente de mensagens de streams

Visibilidade de ponta a ponta nos seus ambientes Apache Kafka®

Gerencie e monitore o Apache Kafka com o SMM

Saiba Mais

Visão Geral

O Hortonworks Streams Messaging Manager (SMM) é uma ferramenta de monitoramento/gerenciamento de operações que dá visibilidade de ponta a ponta em um ambiente corporativo Apache® Kafka®. Com o SMM, você:

  • Obtém informações claras sobre seus clusters Kafka.
  • Entende o fluxo de ponta a ponta de streams de mensagens, desde produtores até tópicos e consumidores.
  • Soluciona problemas no ambiente Kafka para identificar gargalos, taxas de transferência, padrões de consumo, fluxo de tráfego, etc.
  • Analisa a dinâmica de stream entre produtores e consumidores usando vários filtros.
  • Otimiza seu ambiente Kafka com base nas principais informações de desempenho reunidas de vários corretores e tópicos.
  • Obtém uma linhagem de dados completa em vários saltos, produtores e consumidores Kafka, com a excelente visualização de fluxo de dados com integração do Apache Atlas.
Veja a ficha de dados

Benefícios

Simplificar a solução de problemas de ambientes Kafka

As equipes de Operações da Plataforma Kafka têm dificuldade para solucionar problemas/monitorar ambientes Kafka devido à falta de ferramentas disponíveis. Com o SMM, elas recebem uma filtragem inteligente para que o usuário selecione um produtor, corretor, tópico ou consumidor. A inteligência do SMM mostra apenas os produtores que enviam dados para os tópicos selecionados e apenas os grupos de consumidores consumindo esses tópicos. A filtragem funciona na seleção de qualquer uma das quatro entidades. Com isso, os usuários aprimoram rapidamente a causa-raiz na solução e depuração de problemas do Kafka.

Blog: Apresentando o Hortonworks Streams Messaging Manager (SMM)
Simplificar a solução de problemas de ambientes Kafka
Ver fluxos de streams Kafka de ponta a ponta

Um dos excelentes recursos do SMM é a visualização de todos os fluxos de dados em todos os clusters Kafka. É possível selecionar qualquer entidade, como produtores, consumidores, corretores ou tópicos, e ver como os dados fluem com relação à entidade selecionada.

As equipes de DevOps Kafka ganham esses benefícios

  • Entende o fluxo de ponta a ponta dos streams de mensagens, desde produtores até tópicos e consumidores
  • Analisa a dinâmica de stream entre produtores e consumidores usando vários filtros
Blog: Resolva as necessidades de DevOps/desenvolvedores com o Streams Messaging Manager
Ver fluxos de streams Kafka de ponta a ponta
Acompanhe a linhagem de dados e a governança de ponta a ponta

O SMM foi totalmente integrado ao Apache Atlas para governança e linhagem de dados; ao Apache Ranger, para gerenciamento de segurança e controle de acesso; ao Apache Ambari, para monitoramento a nível de infraestrutura e ações de ciclo de vida para o cluster; e ao Grafana, para fazer o gráfico de indicadores Kafka ao longo do tempo. Clique no ícone do Atlas na interface do SMM para ver a linhagem de dados completa em vários saltos do Kafka usando a eficiente visualização de fluxo de dados do SMM. Consulte o fluxo real do Apache NiFi a nesse visual se o NiFi for o consumidor da mensagem Kafka.

Relatório oficial: Gerenciamento e monitoramento do Apache Kafka com o Hortonworks Streams Messaging Manager (SMM)
Acompanhe a linhagem de dados e a governança de ponta a ponta
Estender recursos de monitoramento/gerenciamento com o REST

O SMM oferece pontos de extremidade REST para todos os seus recursos. As APIs do REST de monitoramento/gerenciamento são entregues por meio do servidor REST do SMM. Com isso, os desenvolvedores integram o SMM com suas outras ferramentas corporativas, como sistemas APM ou de tickets/casos. Normalmente, os desenvolvedores do Kafka têm problemas para detalhar o nível de mensagem de um determinado tópico. Mas, com o SMM, os desenvolvedores usam a interface visual ou a API do REST para filtrar e selecionar um tópico e, dentro dele, abrir todas as mensagens.

Documentação: API do REST do Streams Messaging Manager
Estender recursos de monitoramento/gerenciamento com o REST
Adotar implementações de nuvem híbrida para o Kafka

O SMM é entregue como um aplicativo da Plataforma DataPlane. Assim, o cliente tem uma única instância do SMM gerenciando vários clusters Kafka na organização. É possível ter uma única instância do SMM gerenciando vários clusters Kafka na Hortonworks Data Platform (HDP) ou na Hortonworks DataFlow (HDF). Além disso, o fato de o SMM ser um aplicativo da Plataforma DataPlane ajuda nas implantações de nuvem híbrida.


Documentação: Instalação do Streams Messaging Manager