kowl

Kowl - Une interface utilisateur Web pour Apache Kafka

---

Ce fork est basé sur certains commits juste avant le changement de licence d'Apache 2.0 vers Redpanda Business Source License 1.1 / Redpanda Community License

Je n'ajouterai probablement aucune fonctionnalité, je veux juste préserver mon Kowl bien-aimé.

---

Kowl (anciennement connu sous le nom de Kafka Owl) est une application Web qui vous aide à explorer les messages dans votre cluster Apache Kafka et à obtenir de meilleures informations sur ce qui se passe réellement dans votre cluster Kafka de la manière la plus confortable :

Caractéristiques

• Visionneuse de messages : explorez les messages de vos sujets dans notre visionneuse de messages via des requêtes ad hoc et des filtres dynamiques. Recherchez n'importe quel message de votre choix à l'aide des fonctions JavaScript pour filtrer les messages. Les encodages pris en charge sont : JSON, Avro, Protobuf, XML, MessagePack, Text et Binary (vue hexadécimale). L'encodage utilisé (sauf Protobuf) est reconnu automatiquement.
• Groupes de consommateurs : répertoriez tous vos groupes de consommateurs actifs ainsi que leurs décalages de groupe actifs, modifiez les décalages de groupe (par groupe, sujet ou partition) ou supprimez un groupe de consommateurs.
• Présentation du sujet : parcourez la liste de vos sujets Kafka, vérifiez leur configuration, leur utilisation de l'espace, répertoriez tous les consommateurs qui consomment un seul sujet ou surveillez les détails de la partition (tels que les seuils bas et élevés, le nombre de messages, ...), intégrer le sujet. documentation à partir d'un référentiel git et plus encore.
• Présentation du cluster : répertoriez les ACL, les courtiers disponibles, leur utilisation de l'espace, l'identifiant du rack et d'autres informations pour obtenir une vue d'ensemble de haut niveau de vos courtiers dans votre cluster.
• Registre de schémas : répertoriez tous les schémas Avro, Protobuf ou JSON dans votre registre de schémas.
• Kafka Connect : gérez les connecteurs de plusieurs clusters de connexion, corrigez les configurations, affichez leur état actuel ou redémarrez les tâches.

Commencer

Conditions préalables

• Connectivité du cluster Kafka (v1.0.0+)
• Au moins une application OAuth pour SSO (entreprise Kowl uniquement)
• Connectivité Internet pour valider la licence (Kowl business uniquement)

Installation

Nous proposons des images Docker pré-construites pour Kowl (Business), un graphique Helm et un module Terraform pour rendre l'installation aussi confortable que possible pour vous. Veuillez consulter notre documentation d'installation dédiée.

Démarrage rapide

Voulez-vous simplement tester Kowl sur l'un de vos clusters Kafka sans passer trop de temps sur la configuration du test ? Voici quelques commandes Docker qui vous permettent de l'exécuter localement sur un cluster Kafka existant :

Kafka s'exécute localement

Étant donné que Kowl s'exécute dans son propre conteneur (qui a sa propre étendue réseau), nous devons utiliser host.docker.internal comme serveur d'amorçage. Ce DNS est résolu en adresse IP du système hôte. Cependant, étant donné que les courtiers envoient une liste de tous les DNS des courtiers lorsqu'un client s'est connecté, vous devez vous assurer que votre écouteur annoncé est connecté en conséquence, par exemple : PLAINTEXT://host.docker.internal:9092

docker run -p 8080:8080 -e KAFKA_BROKERS=host.docker.internal:9092 quay.io/cloudhut/kowl:master

Docker prend en charge l'option --network=host uniquement sous Linux. Les utilisateurs de Linux utilisent donc localhost:9092 comme écouteur annoncé et utilisent plutôt l'espace de noms du réseau hôte. Kowl sera ensuite exécuté comme il le serait sur la machine hôte.

docker run --network=host -p 8080:8080 -e KAFKA_BROKERS=localhost:9092 quay.io/cloudhut/kowl:master

Kafka fonctionne à distance

Protégé via SASL_SSL et certificats de confiance (par exemple Confluent Cloud) :

docker run -p 8080:8080 -e KAFKA_BROKERS=pkc-4r000.europe-west1.gcp.confluent.cloud:9092 -e KAFKA_TLS_ENABLED=true -e KAFKA_SASL_ENABLED=true -e KAFKA_SASL_USERNAME=xxx -e KAFKA_SASL_PASSWORD=xxx quay.io/cloudhut/kowl:master

Je n'ai pas de cluster Kafka en cours d'exécution pour tester

Nous maintenons un fichier docker-compose qui lance zookeeper, kafka et kowl : /docs/local.

Commanditaires

Entreprises qui utilisent Kowl

• REWE numérique [https://www.rewe-digital.com/]
• Données Redpanda [https://redpanda.com/]
• OPT-NC (Office des Postes et Télécommunications de Nouvelle-Calédonie) [https://office.opt.nc/]

Licence

Kowl est distribué sous la licence Apache 2.0.