Micro serviços Spring Boot processam arquivos
•Download as PPTX, PDF•
1 like•2,727 views
Como criar uma arquitetura escalável para processamento de arquivos utilizando conceitos de micro serviços e implementações Spring Boot. Apresentação na trilha de micro serviços no The Developers Conference 2017 - Florianópolis
Recommended
Recommended
More Related Content
What's hot
What's hot (20)
Viewers also liked
Viewers also liked (9)
Similar to Micro serviços Spring Boot processam arquivos
Similar to Micro serviços Spring Boot processam arquivos (20)
More from Emmanuel Neri
More from Emmanuel Neri (13)
Micro serviços Spring Boot processam arquivos
- 1. Globalcode – Open4education Criando uma arquitetura escalável para processamento de arquivos com micro serviços e Spring Boot Emmanuel Neri @emmanuelnerii
- 2. Globalcode – Open4education Emmanuel Neri Mestre em Desenvolvimento de Tecnologia Desenvolvedor desde 2010 Atualmente dev na Navita
- 3. Globalcode – Open4education Agenda Cenário de processamento de arquivos Decomposição do cenário em micro serviços Aplicando os micro serviços com Spring Boot
- 4. Globalcode – Open4education Cenário Processamento de notas fiscais
- 5. Globalcode – Open4education O problema
- 6. Globalcode – Open4education Algumas possíveis soluções Limitar o pool de threads? Aumentar o hardware ou replicar a instância? Controlar o agendamento? Separar em estruturas!
- 7. Globalcode – Open4education Decomposição Leitura Processamento Disponibilização Leitura do XML Backup Parsear o XML Validações Armazenamento Dispor os dados
- 8. Globalcode – Open4education Leitura do arquivo busca os xmls a cada x minutos Insere xml na fila Insere xml na base NoSQL MongoDB Pasta de arquivos ActiveMQ Leitor
- 9. Globalcode – Open4education Processamento do arquivo Processador ActiveMQ Insere dados processados no banco relacional Postgres Fila envia xml para processamento
- 10. Globalcode – Open4education Disponibilização dos dados Disponibilizador MongoDB Consulta arquivos Postgres Consulta Notas Interface dos arquivos Interface das notas fiscais
- 11. Globalcode – Open4education Solução de micro serviços busca os xmls a cada x minutos Insere xml na fila Insere xml na base NoSQL Fila envia xml para processamento Insere dados processados no banco relacional Consulta dadosConsulta arquivos
- 13. Globalcode – Open4education Tecnologias Auto configuração Servidores HTTP Embedded Gerenciamento de dependências
- 17. Globalcode – Open4education http://github.com/emmanuelneri/solucao-processamento-arquivo • emmanuelnerisouza@gmail.com • @emmanuelnerii • http://emmanuelnerisouza.wordpress.com • github.com/emmanuelneri Obrigado!!
Editor's Notes
- -Esse tema é resultado de um estudo - otimizar os processamento de arquivos em uma visão mais de estrutural da solução de software e não apenas de infraestrutura
- - estudo comparativo de softwares monolíticos e software de micro serviços
- short talk é divida em 3 partes Apresentação de um cenário, mas pode ser aplicado para qualquer de processamento de arquivo Uma das formas de decompor o cenário em pedaços menores A implementação dos MS que utilizei Spring boot, mas pode ser outras tecnologias de preferência com características simulares de modularização
- Problemática: processamento sem impacto no sistema
- Decompor + impactante Benefício Tratar os gargalos de forma isolada Flexibilidade
- N existe maneira correta, adequado para seu cenário decomposição por responsabilidades em nível macro visando flexibilidade para escalar e deploys se baseando no princípio de responsabilidade única, flexibilidade na escalabilidade e atualizações e reduzindo impacto total na solução
- Como refletir essa solução na aplicação 2 responsabilidades ao pé da letra do SRP Depende do cenário pode estar junto se torna muito granular
- Bom exemplo de MS Assíncrono Desacoplado () Autores dizem MS devem ser assíncronos Isolamento, bases únicas, flexibilidade para alterações 3ª onda de de bigdata “data in motion” – ReactiveMS Arquiteture
- Deveria ser uma única aplicação? Um dos desafio no acesso aos dados Replicação do modelo Acesso ao mesmo banco de dados
- Arquitetura final: 3 estruturas independentes Talvez o disponibilizador não tivesse acesso ao banco de dados Via Rest Tradeoff Maior complexidade x Maior flexibilidade
- Escalabilidade essência MS Flexibilidade excelente para escalabilidade Também é um fator decisivo no momento da decomposição dos MS
- @EnableJpaRepositories / EnableJMS Tomcat Conjuntos de dependências Compatibilidade das versões Artefatos menores
- Scheduling está no core do spring @EnableScheduling Activemq auto config e libs de JMS config URL no application.properties jmsMessagingTemplate.convertAndSend (Sender) Mongodb libs do Spring data e client Mongo inserir dados sem estrutura flexivel
- Activemq @JmsListener (Consumer) Spring data/JPA já traz libs jpa/hibernate @Entity Application URLs/driver Validation carregar libs de beanvalidation
- Spring web = MVC JDBC consultas sem JPA para não replicar modelo e + performance nas consultas JDBC template Mongo driver para não mapear no Spring Data e + performance nas consultas