paasta

PaaSTA - Construir, implantar, conectar e monitorar serviços

PaaSTA é um sistema distribuído altamente disponível para construir, implantar e executar serviços usando contêineres e Kubernetes.

PaaSTA executa serviços de produção no Yelp desde 2016. Ele foi originalmente projetado para rodar em Apache Mesos, mas foi posteriormente atualizado para usar Kubernetes. Com o tempo, os recursos e funcionalidades que o PaaSTA oferece aumentaram, mas o design principal permanece o mesmo.

PaaSTA visa obter uma descrição declarativa dos serviços que as equipes precisam para executar e, em seguida, garantir que esses serviços sejam implantados de forma segura, eficiente e de uma maneira que seja fácil de manter pelas equipes. Em vez de gerenciar arquivos YAML do Kubernetes, o PaaSTA fornece um esquema simplificado para descrever seu serviço e, além de configurar o Kubernetes, também pode configurar outras ferramentas de infraestrutura para fornecer monitoramento, registro, gerenciamento de custos, etc.

Quer saber mais sobre as opiniões por trás do que torna o PaaSTA especial? Confira os Princípios PaaSTA.

Componentes

Nota : PaaSTA é uma plataforma opinativa que usa algumas ferramentas não opinativas. Requer que uma quantidade não trivial de infraestrutura esteja instalada antes de funcionar completamente:

• Docker para entrega e contenção de código
• Kubernetes para execução e agendamento de código (executa contêineres Docker)
• Tron para executar coisas em um cronômetro (lotes noturnos)
• SmartStack e Envoy para registro e descoberta de serviços
• Sensu para monitoramento/alertas
• Jenkins (opcional) para implantação contínua
• Prometheus e HPA para serviços de escalonamento automático

Uma vantagem de ter um PaaS composto por componentes como esses é que você pode reutilizá-los para outros fins. Por exemplo, no Yelp Sensu não é apenas para PaaSTA, ele pode ser usado para monitorar todo tipo de coisa. Também usamos Kubernetes para executar outras cargas de trabalho mais complexas, como Jolt e Cassandra. Nossa malha de serviço, que é uma versão altamente customizada do SmartStack e do Envoy, permite que muitos sistemas do Yelp se comuniquem com os serviços PaaSTA e entre si.

Por outro lado, exigir muitos componentes significa muita infraestrutura para configurar antes que o PaaSTA possa funcionar de maneira eficaz! Realistamente, executar o PaaSTA fora do Yelp não seria sensato, porque além das integrações mencionadas acima, também temos opiniões fortes codificadas em outras ferramentas que você precisaria replicar. No entanto, codificamos o PaaSTA abertamente porque achamos útil compartilhar nossa abordagem e esperamos que o código possa pelo menos ajudar outras pessoas a compreender ou resolver problemas semelhantes.

Integrações e recursos

Além das integrações diretas acima, o PaaSTA também conta com outros componentes para fornecer aos usuários do PaaSTA outros recursos e para gerenciar a capacidade computacional no Yelp.

• Usamos o Karpenter para dimensionar automaticamente pools de instâncias EC2 para executar o PaaSTA. Anteriormente usávamos nosso próprio autoescalador Clusterman
• Preparamos AMIs usando Packer
• Coletamos logs de serviços e os enviamos via Monk para Kafka
• Usamos StatefulSets para executar alguns serviços PaaSTA com estado
• Ajustamos automaticamente os recursos necessários para cada serviço monitorando o uso (semelhante ao VPA)

Metas de projeto

• Controle declarativo, em vez de imperativo
• Tolerância a falhas
• Isolamento de serviço
• Uso eficiente de recursos
• Não há pontos únicos de falha
• Interface agradável

Começando

Consulte a documentação de introdução para saber como implantar o PaaSTA. Esta referência tem como objetivo ajudar a entender como o PaaSTA funciona, mas não recomendamos que você use o PaaSTA em produção.

Depurando PaaSTA (no código VS)

Para depurar PaaSTA no VS Code, consulte a página wiki interna do PaaSTA "Debugging PaaSTA (in VS Code)".

Documentação

Leia a documentação em Leia os documentos.

Documentação/links internos do Yelp

• HPA
• Implantação de serviço

Vídeos / palestras sobre PaaSTA

• EvanKrall fala na QCon NYC 2015 (outubro de 2015)
• EvanKrall, solarkennedy e jnb fazem um tour pelos bastidores do PaaSTA no Yelp (outubro de 2015)
• Rob-Johnson fala sobre PaaSTA na MesosCon 2015 (novembro de 2015)
• solarkennedy se apresenta na Box para apresentar uma Teoria das PaaSes (janeiro de 2016)
• nhandler fala na OSCON sobre execução de aplicativos no Yelp (slides/vídeo) (maio de 2016)

Licença

PaaSTA é licenciado sob a Licença Apache, Versão 2.0: http://www.apache.org/licenses/LICENSE-2.0

Contribuindo

Todos são incentivados a contribuir com o PaaSTA bifurcando o repositório Github e fazendo uma solicitação pull ou abrindo um problema.