newsletter

Ricevi gli ultimi aggiornamenti da Hortonworks tramite e-mail

Una volta al mese, ricevi gli approfondimenti, le tendenze, le informazioni analitiche e la conoscenza approfondita dei big data.

AVAILABLE NEWSLETTERS:

Sign up for the Developers Newsletter

Una volta al mese, ricevi gli approfondimenti, le tendenze, le informazioni analitiche e la conoscenza approfondita dei big data.

invito all'azione

Per iniziare

cloud

Sei pronto per cominciare?

Scarica Sandbox

Come possiamo aiutarti?

* Ho compreso che posso disdire in qualsiasi momento. Sono inoltre a conoscenza delle informazioni aggiuntive presenti nella informativa sulla privacy di Hortonworks.
chiudiPulsante di chiusura
invito all'azione

Streams Messaging Manager

Visibilità end-to-end in ambienti Apache Kafka®

Gestire e monitorare Apache Kafka con SMM

Altre informazioni

informazioni generali

Hortonworks Streams Messaging Manager (SMM) è uno strumento di monitoraggio/gestione delle operazioni che fornisce visibilità end-to-end in un ambiente aziendale Apache® Kafka®. SMM offre:

  • Approfondimenti chiari sui cluster Kafka.
  • Comprensione del flusso end-to-end dello stream di messaggi dai produttori agli argomenti ai consumatori.
  • Risoluzione dei problemi dell'ambiente di Kafka per identificare i colli di bottiglia, volumi di produzione, modelli consumer, flussi di traffico ecc.
  • Analizzare la dinamica di flusso tra produttori e consumatori utilizzando vari filtri.
  • Ottimizzare l'ambiente Kafka in base ad informazioni dettagliate raccolte dai vari broker e da vari argomenti.
  • Derivazione completa dei dati attraverso più hop Kafka e una potente visualizzazione del flusso dati per produttori e consumer grazie alla stretta integrazione di Apache Atlas.
Vedi la scheda tecnica

Vantaggi

Risoluzione semplificata dei problemi in ambienti Kafka

I team Kafka Platform Operations hanno difficoltà in risoluzione dei problemi/monitoraggio degli ambienti Kafka a causa della mancanza di strumenti. Con SMM, hanno un filtro intelligente che consente all'utente di selezionare un produttore, broker, argomento o consumer. SMM è sufficientemente intelligente per mostrare solo i produttori che inviano i dati sugli argomenti selezionati e visualizza solo i gruppi di consumer che stanno utilizzando quegli argomenti. Il filtro funziona sulla selezione di una qualsiasi di questi quattro parametri. Ciò consente agli utenti di trovare velocemente la radice del problema durante la risoluzione dei problemi e il debug di Kafka.

Blog: Introduzione a Hortonworks Streams Messaging Manager (SMM)
Risoluzione semplificata dei problemi in ambienti Kafka
Visualizzare dei flussi stream end-to-end di Kafka

Una delle potenti caratteristiche di SMM è la possibilità di visualizzare tutti i flussi/stream di dati attraverso tutti i cluster Kafka. È possibile selezionare qualsiasi entità come i produttori, consumatori, broker o argomenti e visualizzare il flusso dei dati per riguardanti l'entità selezionata.

I team Kafka DevOps possono ottenere questi vantaggi

  • Comprensione del flusso end-to-end dello stream di messaggi dai produttori agli argomenti ai consumatori
  • Analizzare la dinamica di flusso tra produttori e consumatori utilizzando vari filtri
Blog: Risolvere le esigenze di DevOps / Sviluppatori con Streams Messaging Manager
Visualizzare dei flussi stream end-to-end di Kafka
Monitoraggio della derivazione dati e governance dal perimetro all'azienda

SMM è completamente integrato con: Apache Atlas per la governance e la derivazione dei dati; Apacher Ranger per la gestione dei controlli di accesso e sicurezza; Apache Ambari per il monitoraggio dei livelli di infrastruttura e le azioni del ciclo vita per il cluster; infine Grafana per creare grafici sulle metriche Kafka nel tempo. Per visualizzare l'intera derivazione dei dati attraverso multipli hops Kafka utilizzando la potente visualizzazione dei flussi dati di SMM, fare clic sull'icona Atlas nell'interfaccia SMM. Entrate nel flusso Apache NiFi se NiFi è il consumer del messaggio Kafka.

White Paper: Gestione e monitoraggio di Apache Kafka con Hortonworks Streams Messaging Manager (SMM)
Monitoraggio della derivazione dati e governance dal perimetro all'azienda
Estendere le capacità di monitoraggio/gestione grazie a REST

SMM offre gli endpoint REST per tutte le sue funzionalità. Monitoraggio / Gestione API REST vengono recapitati tramite il server SMM REST. Ciò consente agli sviluppatori di integrare SMM con i propri strumenti aziendali come APM o sistemi di creazione casi/ticket. In genere, gli sviluppatori Kafka hanno problemi a raggiungere il livello di messaggio per un determinato argomento. Ma, grazie a SMM, gli sviluppatori possono utilizzare l'interfaccia visiva o l'API REST per filtrare e selezionare un argomento e aprire tutti i messaggi all'interno di quell'argomento.

Documentazione: Streams Messaging Manager API REST
Estendere le capacità di monitoraggio/gestione grazie a REST
Adottare implementazioni di cloud ibrido per Kafka

SMM è offerto come applicazione della piattaforma DataPlane. Ciò consente ai clienti di disporre di una singola istanza SMM per gestire più cluster Kafka all'interno dell'organizzazione. Si può avere una singola istanza SMM per gestire più cluster Kafka attraverso Hortonworks Data Platform (HDP) o Hortonworks DataFlow (HDF). Inoltre, poiché SMM è un applicazione della piattaforma DataPlane, può aiutare a supportare la distribuzione in cloud ibridi.


Documentazione: Installare Streams Messaging Manager