advanced java

Internet Java Engineer Conhecimento Avançado Alfabetização Completa

A maior parte do conteúdo deste projeto vem do chinês Hushan, e os direitos autorais pertencem ao autor. O conteúdo abrange conhecimento nas áreas de alta simultaneidade, distribuição, alta disponibilidade, microsserviços e processamento massivo de dados. Organizamos sistematicamente esta parte do conhecimento para facilitar o aprendizado e a referência dos leitores.

Também estamos trabalhando duro para atualizar o projeto do algoritmo! Se você está se preparando para algoritmos de entrevistas escritas ou deseja melhorar ainda mais suas habilidades de codificação, seja bem-vindo ao Star e siga doocs/leetcode

Antes de estudar este projeto, vamos dar uma olhada no que disseram os entrevistadores técnicos no fórum de discussões. Este projeto convida todos os amigos desenvolvedores para compartilhar algumas de suas ideias e experiências práticas no fórum de discussões. Você também pode seguir doocs/advanced-java com Star para acompanhar os desenvolvimentos mais recentes no projeto.

Arquitetura de alta simultaneidade

fila de mensagens

• Por que usar a fila de mensagens? Quais são as vantagens e desvantagens das filas de mensagens? Quais são as vantagens e desvantagens de Kafka, ActiveMQ, RabbitMQ e RocketMQ?
• Como garantir a alta disponibilidade da fila de mensagens?
• Como garantir que as mensagens não sejam consumidas repetidamente? (Como garantir a idempotência do consumo de mensagens)
• Como garantir a transmissão confiável de mensagens? (Como lidar com o problema de perda de mensagens)
• Como garantir a ordem das mensagens?
• Como resolver os problemas de atraso e expiração da fila de mensagens? O que fazer quando a fila de mensagens está cheia? Existem milhões de mensagens acumuladas há várias horas. Como podemos resolvê-las?
• Se lhe pedissem para escrever uma fila de mensagens, como você projetaria a arquitetura? Diga-me o que você pensa.

mecanismo de pesquisa

• Você pode explicar o princípio da arquitetura distribuída do ES (como o ES consegue a distribuição)?
• Como funciona a gravação de dados do ES? Como funcionam os dados de consulta ES? Você pode apresentar o Lucene subjacente? Você conhece o índice invertido?
• Como o ES pode melhorar a eficiência das consultas quando a quantidade de dados é grande (bilhões de níveis)?
• Qual é a arquitetura de implantação do cluster de produção ES? Aproximadamente quantos dados cada índice possui? Aproximadamente quantos fragmentos existem por índice?

esconderijo

• Como o cache é usado no projeto? Quais são as consequências do cache se usado incorretamente?
• Qual é a diferença entre Redis e Memcached? Qual é o modelo de threading do Redis? Por que o Redis de thread único é muito mais eficiente do que o Memcached multithread?
• Quais tipos de dados o Redis possui? Em quais cenários é mais adequado usar?
• Quais são as estratégias de expiração do Redis? Você pode escrever o código LRU manualmente?
• Como garantir alta simultaneidade e alta disponibilidade do Redis? Você pode apresentar o princípio de replicação mestre-escravo do Redis? Você pode apresentar o princípio sentinela do Redis?
• Qual é a arquitetura mestre-escravo do Redis?
• Como o Redis Sentinel Cluster alcança alta disponibilidade?
• Quais são os métodos de persistência do Redis? Quais são as vantagens e desvantagens dos diferentes mecanismos de persistência? Como o mecanismo de persistência subjacente é implementado?
• Você pode explicar como funciona o modo cluster Redis? No modo cluster, como a chave Redis é endereçada? Quais são os algoritmos para endereçamento distribuído? Você entende o algoritmo de hash consistente? Como adicionar e excluir dinamicamente um nó?
• Entenda o que é avalanche, penetração e colapso do Redis? O que acontece depois que o Redis trava? Como o sistema deve lidar com esta situação? Como lidar com a penetração do Redis?
• Como garantir consistência de gravação dupla entre cache e banco de dados?
• Qual é o problema de contenção de simultaneidade no Redis? Como resolver este problema? Você conhece a solução CAS para transações Redis?
• Como o Redis é implantado no ambiente de produção?
• Você já entendeu o processo de repetição do Redis?

Subbanco de dados e subtabela

• Por que devemos dividir bancos de dados e tabelas (ao projetar um sistema de alta simultaneidade, como deve ser projetado o nível do banco de dados)? Qual middleware de sharding de banco de dados e tabelas você usou? Quais são as vantagens e desvantagens de diferentes middlewares de subbancos de dados e subtabelas? Como você divide o banco de dados verticalmente ou horizontalmente?
• Atualmente, existe um sistema que não está dividido em bancos de dados e tabelas. No futuro, será dividido em bancos de dados e tabelas. Como projetá-lo para que o sistema possa alternar dinamicamente de bancos de dados e tabelas indivisos para bancos de dados e tabelas divididos.
• Como projetar um subbanco de dados e um esquema de tabela que possa expandir e diminuir dinamicamente?
• Depois que o banco de dados é dividido em tabelas, como lidar com a chave primária do id?

Separação de leitura e gravação

• Como realizar a separação entre leitura e escrita no MySQL? Qual é o princípio da replicação mestre-escravo do MySQL? Como resolver o problema de atraso da sincronização mestre-escravo do MySQL?

Sistema de alta simultaneidade

• Como projetar um sistema de alta simultaneidade?

sistema distribuído

Bombardeio em série de entrevistas

Divisão do sistema

• Por que a divisão do sistema? Como realizar a divisão do sistema? Posso não usar Dubbo após a divisão?

Estrutura de serviço distribuído

• Diga-me como funciona o Dubbo? A comunicação poderá continuar se o centro de registro estiver inoperante?
• Quais protocolos de serialização o Dubbo suporta? Conte-me sobre a estrutura de dados do Hessian? O PB sabe? Por que o PB é o mais eficiente?
• Quais são as estratégias de balanceamento de carga e estratégias de tolerância a falhas de cluster do Dubbo? E quanto às estratégias de proxy dinâmicas?
• Qual é a ideia de espionagem de Dubbo?
• Como realizar governança de serviço, degradação de serviço, nova tentativa de falha e nova tentativa de tempo limite com base no Dubbo?
• Como projetar a idempotência de interfaces de serviços distribuídas (por exemplo, sem deduções repetidas)?
• Como garantir a ordem das solicitações de interface de serviço distribuídas?
• Como projetar você mesmo uma estrutura RPC semelhante ao Dubbo?
• O que é P do teorema CAP?

Bloqueio distribuído

• Quais são os cenários de aplicação do Zookeeper?
• Como projetar bloqueios distribuídos usando Redis? É possível usar o Zookeeper para projetar bloqueios distribuídos? Qual dos dois métodos de implementação de bloqueio distribuído acima é mais eficiente?

Transações distribuídas

• Você entende de transações distribuídas? Como você resolve o problema de transação distribuída? TCC O que devo fazer se a rede não conseguir se conectar? Como garantir a consistência do XA?

sessão distribuída

• Como implementar uma sessão distribuída durante a implantação do cluster?

Arquitetura altamente disponível

• Introdução ao Hystrix
• Arquitetura do sistema da página de detalhes do site de comércio eletrônico
• A tecnologia de pool de threads Hystrix implementa isolamento de recursos
• O mecanismo de semáforo Hystrix implementa isolamento de recursos
• Controle refinado das políticas de isolamento Hystrix
• Aprofunde-se nos aspectos internos da execução do Hystrix
• Otimize a interface de consulta de dados de produtos em lote com base na tecnologia de cache de solicitação de solicitação
• Mecanismo de degradação de fallback baseado em cache local
• Uma análise aprofundada dos princípios operacionais dos disjuntores Hystrix
• Aprofunde-se no isolamento do pool de threads Hystrix e na limitação de corrente da interface
• Fornece proteção de segurança para tempo limite de chamada da interface de serviço com base no mecanismo de tempo limite

Sistema altamente disponível

• Como projetar um sistema altamente disponível?

Limitação atual

• Como limitar o fluxo? Como você faz isso no trabalho? Conte-me sobre a implementação específica?

fusível

• Como realizar o disjuntor?
• Quais são as estruturas de fusíveis? Você conhece o princípio de implementação específico?
• Como fazer a seleção técnica da estrutura do fusível? Sentinela ou Hystrix?

Downgrade

• Como fazer o downgrade?

Arquitetura de microsserviços

• Todo o capítulo sobre arquitetura de microsserviços é uma adição adicional e será atualizado posteriormente. Os leitores também são bem-vindos para participar de melhorias complementares.
• Descrição da arquitetura de microsserviços
• Migre da arquitetura monolítica para a arquitetura de microsserviços
• Gerenciamento de dados orientado a eventos para microsserviços
• Escolha uma estratégia de implantação de microsserviços
• Vantagens e desvantagens da arquitetura de microsserviços

Arquitetura de microsserviços Spring Cloud

• O que são microsserviços? Como os microsserviços se comunicam de forma independente?
• Quais são as diferenças entre Spring Cloud e Dubbo?
• Spring Boot e Spring Cloud, fale sobre o seu entendimento sobre eles?
• O que é um disjuntor de serviço? O que é downgrade de serviço?
• Quais são as vantagens e desvantagens dos microsserviços? Conte-nos sobre as armadilhas que você encontrou durante o desenvolvimento do projeto.
• Quais pilhas de tecnologia de microsserviços você conhece?
• Estratégia de governança de microsserviços
• Tanto Eureka quanto Zookeeper podem fornecer funções de registro e descoberta de serviços. Qual é a diferença entre eles?
• Vamos falar sobre o principal processo de chamada do componente de descoberta de serviço Eureka?
• ...

Processamento massivo de dados

• Como encontrar o mesmo URL em um grande número de URLs?
• Como encontrar palavras de alta frequência em grandes quantidades de dados?
• Como descobrir o IP que mais visita o site do Baidu em um determinado dia?
• Como encontrar números inteiros únicos em uma grande quantidade de dados?
• Como determinar se existe um número em uma grande quantidade de dados?
• Como consultar as strings de consulta mais populares?
• Como contar o número de números de telefone diferentes?
• Como encontrar a mediana de 500 milhões de números?
• Como classificar por frequência de consulta?
• Como encontrar os 500 principais números?
• Conte-me sobre as rotinas comuns para problemas TopK em big data.

Tendências de estrelas

Nota: Este gráfico de tendências é atualizado automaticamente regularmente por actions-starcharts, autor @MaoLongLong

---

Projetos de qualidade da comunidade Doocs

A comunidade tecnológica Doocs está comprometida em criar um ecossistema de aprendizagem completo e em constante crescimento para desenvolvedores da Internet! A seguir estão alguns projetos excelentes do Doocs. Amigos desenvolvedores podem continuar prestando atenção.

#	projeto	descrever	aquecer
1	java avançado	Os engenheiros Java da Internet são totalmente alfabetizados em conhecimento avançado: abrangendo conhecimento em áreas como alta simultaneidade, distribuição, alta disponibilidade, microsserviços e processamento massivo de dados.
2	código leet	Uma variedade de linguagens de programação implementam soluções de problemas LeetCode, "Sword Pointer Offer (2nd Edition)", "Programmer Interview Code (6th Edition)".
3	caçador de código-fonte	Análise de código-fonte de estruturas de componentes comuns da Internet.
4	jvm	Resumo do conhecimento sobre os princípios subjacentes da máquina virtual Java.
5	entrevista de codificação	Uma coleção de perguntas de entrevistas sobre codificação, incluindo "The Sword Points to Offer", "The Beauty of Programming", etc.
6	médico	Um editor WeChat Markdown altamente conciso.
7	livros técnicos	Uma lista de livros técnicos que vale a pena ler.

Contribuinte

Obrigado a todos os amigos a seguir por suas contribuições à comunidade técnica Doocs. Clique aqui para participar da manutenção do projeto.

Conta oficial

A única conta pública " Doocs " na comunidade de tecnologia Doocs​, bem-vindo ao escanear o código QR a seguir, com foco no compartilhamento de conhecimento relevante na área técnica e nas informações mais recentes do setor . Claro, você também pode adicionar minha conta pessoal do WeChat (nota: GitHub) para entrar no grupo de intercâmbio técnico.

Siga a conta pública " Doocs " e responda ao PDF para obter o documento PDF offline deste projeto (283 páginas de essência), tornando o aprendizado mais conveniente!