kowl

Kowl – uma interface web para Apache Kafka

---

Este fork é baseado em alguns commits logo antes da licença ser alterada do Apache 2.0 para Redpanda Business Source License 1.1 / Redpanda Community License

Provavelmente não adicionarei nenhum recurso, só quero preservar meu amado Kowl.

---

Kowl (anteriormente conhecido como Kafka Owl) é um aplicativo da web que ajuda você a explorar mensagens em seu cluster Apache Kafka e obter melhores insights sobre o que realmente está acontecendo em seu cluster Kafka da maneira mais confortável:

Características

• Visualizador de mensagens: explore as mensagens dos seus tópicos em nosso visualizador de mensagens por meio de consultas ad hoc e filtros dinâmicos. Encontre qualquer mensagem desejada usando funções JavaScript para filtrar mensagens. As codificações suportadas são: JSON, Avro, Protobuf, XML, MessagePack, Texto e Binário (visualização hexadecimal). A codificação utilizada (exceto Protobuf) é reconhecida automaticamente.
• Grupos de consumidores: liste todos os seus grupos de consumidores ativos junto com suas compensações de grupo ativas, edite as compensações de grupo (por grupo, tópico ou partição) ou exclua um grupo de consumidores.
• Visão geral do tópico: navegue pela lista de seus tópicos Kafka, verifique sua configuração, uso de espaço, liste todos os consumidores que consomem um único tópico ou observe os detalhes da partição (como marcas d'água baixas e altas, contagem de mensagens, ...), incorpore o tópico documentação de um repositório git e muito mais.
• Visão geral do cluster: liste ACLs, corretores disponíveis, uso de espaço, ID de rack e outras informações para obter uma visão geral de alto nível de seus corretores em seu cluster.
• Registro de esquema: liste todos os esquemas Avro, Protobuf ou JSON em seu registro de esquema.
• Conexão Kafka: gerencie conectores de vários clusters de conexão, corrija configurações, visualize seu estado atual ou reinicie tarefas.

Começando

Pré-requisitos

• Conectividade do cluster Kafka (v1.0.0+)
• Pelo menos um aplicativo OAuth para SSO (somente Kowl Business)
• Conectividade com a Internet para validar a licença (somente Kowl Business)

Instalando

Oferecemos imagens docker pré-construídas para Kowl (Business), um gráfico Helm e um módulo Terraform para tornar a instalação o mais confortável possível para você. Por favor, dê uma olhada em nossa documentação de instalação dedicada.

Início rápido

Você deseja apenas testar o Kowl em um de seus clusters Kafka sem gastar muito tempo na configuração do teste? Aqui estão alguns comandos do docker que permitem executá-lo localmente em um cluster Kafka existente:

Kafka está sendo executado localmente

Como o Kowl é executado em seu próprio contêiner (que possui seu próprio escopo de rede), temos que usar host.docker.internal como servidor de inicialização. Esse DNS resolve o endereço IP do sistema host. No entanto, como os corretores enviam uma lista de DNS de todos os corretores quando um cliente se conecta, você deve garantir que seu ouvinte anunciado esteja conectado adequadamente, por exemplo: PLAINTEXT://host.docker.internal:9092

docker run -p 8080:8080 -e KAFKA_BROKERS=host.docker.internal:9092 quay.io/cloudhut/kowl:master

Docker oferece suporte à opção --network=host apenas no Linux. Portanto, os usuários do Linux usam localhost:9092 como ouvinte anunciado e, em vez disso, usam o namespace da rede host. Kowl será então executado como seria executado na máquina host.

docker run --network=host -p 8080:8080 -e KAFKA_BROKERS=localhost:9092 quay.io/cloudhut/kowl:master

Kafka está rodando remotamente

Protegido via SASL_SSL e certificados confiáveis ​​(por exemplo, Confluent Cloud):

docker run -p 8080:8080 -e KAFKA_BROKERS=pkc-4r000.europe-west1.gcp.confluent.cloud:9092 -e KAFKA_TLS_ENABLED=true -e KAFKA_SASL_ENABLED=true -e KAFKA_SASL_USERNAME=xxx -e KAFKA_SASL_PASSWORD=xxx quay.io/cloudhut/kowl:master

Não tenho um cluster Kafka em execução para testar

Mantemos um arquivo docker-compose que inicia zookeeper, kafka e kowl: /docs/local.

Patrocinadores

Empresas que usam Kowl

• REWE Digital [https://www.rewe-digital.com/]
• Dados Redpanda [https://redpanda.com/]
• OPT-NC (Office des Postes et Télécommunications de Nouvelle-Calédonie) [https://office.opt.nc/]

Licença

Kowl é distribuído sob a licença Apache 2.0.