Pular para o conteúdo principal

Dando o primeiro passo para se tornar um jEDI

Muitos anos atrás um grande mestre nos disse que para se tornar um mestre JEDI era necessário conhecer como funciona o Garbage Collector e como escrever o seu próprio ClassLoader. Como um Padawan dedicado que não media esforços para se tornar um mestre e sem medo de misturar Star Trek com Star Wars, comecei a estudar como fazer tuning em aplicações Java controlando a alocação de memória realizada pela JVM.

Recentemente participei de duas consultorias onde foi necessário resolver problemas de performance fazendo uma análise da distribuição de memória entre as áreas geracionais dentro de uma JVM da Sun em execução e avaliar como a atuação do Garbage Collector influenciava a aplicação.

Como parte dos estudos e dos trabalhos de consultoria realizados, consegui dar um pequeno passo em direção à força! Agora compartilho um pouquinho do que aprendi.

Para ter uma ideia de como uma configuração errada da alocação de memória dedicada à JVM (normalmente via parâmetros de linhas de comando -Xms e -Xmx) ou a configuração default pode prejudicar a performance de uma aplicação, basta observar o figura a seguir.

GC time graphic
Este gráfico ilustra os momentos e o tempo de execução do Garbage Collector na área Old da memória alocada pela JVM. Alguns tempos são da ordem de 50 a 70 segundos. São tempos que uma aplicação fica congelada enquanto o Garbage Collector realiza a limpeza da memória para liberar espaço. Representa um tempo que certamente incomodará o usuário final durante o uso da aplicação.

Como obter estes dados e otimizar a performance?

No JDK, além das ferramentas tradicionais de linha de comando como javac e java, estão presentes as ferramentas jps, jstat e jstatd. A primeira é equivalente ao comando ps do Unix e permite saber quais processos Java (JVM) estão em execução e o respectivo PID. O segundo permite gerar estatísticas de Garbage Collection e tamanhos da memória ocupada pelas áreas geracionais do Java em execução. A terceira ferramenta faz o mesmo que a segunda ferramenta, mas disponibiliza os dados para acesso remoto via RMI. Muito útil para coletar dados de uma JVM executando remotamente num servidor e acompanhar a partir do desktop do desenvolvedor. O screenshot a seguir ilustra a execução dessa ferramenta via terminal para o demo SwingSet2 presente em qualquer instalação de JDK.

Executando jstat via terminal
Os detalhes sobre estas ferramentas e o significado de cada informação coletada podem ser obtidos em: Java Virtual Machine Statistics Monitoring Tool (jstat) e Java Virtual Machine Process Status Tool (jps).

Contudo, uma ferramenta muito interessante do pacote jvmstat que não foi incorporada ao JDK é o chamado visualgc (Visual Garbage Collection Monitoring Tool). Esta ferramenta permite visualizar graficamente os mesmos dados disponibilizados pela ferramenta jstat. Assim, torna-se possível perceber a dinâmica do Garbage Collector ao liberar memória dentro das áreas geracionais, além de indicar o tempo de execução de cada garbage collection, os tamanhos de cada área geracional e o espaço alocado a cada momento.

Como o visualgc não está presente no JDK, torna-se necessário fazer o download e instalar localmente (muito simples de instalar!). Para executar via linha de comando, basta digitar: visualgc vmid [interval], onde vmid é o PID da JVM desejada obtido via jps e interval é o tempo em milisegundos ou segundos que a ferramenta coleta as informações da JVM e atualiza na tela. Um exemplo de execução desta ferramenta é ilustrada na figura a seguir para o demo SwingSet2 em execução.

Execução do visualgc sobre o SwingSet2
Colocar a ferramenta para rodar ou coletar os dados via linha de comando é a parte fácil. Agora vem a parte difícil! Como analisar estas informações e transformar em resultado útil ao melhorar a performance de um aplicação Java? Este é um segredo que os mestres JEDI raramente ensinam! Mas um antigo pergaminho escrito por uma extinta empresa que era a meca dos JEDI revela todos os segredos. Este valioso documento é datado da época do JDK 1.3 e veio sofrendo atualizações ao longo dos anos para as versões atuais de JDK. O texto citado ainda pode ser encontrado na seguinte página (não sabemos até quando!): Tuning Garbage Collection with the 5.0 Java™ Virtual Machine.

Uma leitura cuidadosa do texto antigo, esquecido ou ignorado por muitos e citado acima, permitirá o Padawan e aprendiz de mestre JEDI conhecer detalhes de como usar a força a seu favor e melhorar significativamente a performance de uma aplicação Java. Contudo, nem sempre o caminho da força e conhecimento é fácil! Este caminho exige muito estudo, esforço e dedicação. Mas, cuidado para não cair na tentação do caminho mais fácil da ilusão criada pelos lordes "Microsith".

Quem sabe algum dia eu conto alguns segredos sobre como criar ClassLoaders customizados! Até lá boa leitura e bons códigos!

By Spock
http://blog.spock.com.br/
http://twitter.spock.com.br/
http://www.springbrasil.com.br/

Comentários

Unknown disse…
Show o artigo Dr. Spock!

A arquitetura de class loading, os modelos e áreas de memória onde atua (ou não) o GC e as capacidades atuais de instrumentar uma JVM define o que é maturidade.

Não imagino a quanto anda isso nas outras linguagens da moda, mas sei que se ela roda em cima da uma JVM, vai levar tudo isso pronto, como um sistema operacional da linguagem.

Agora se a linguagem for solo, alguém vai ter que fazer tudo isso para ela...

Parabéns mais uma vez, vc é o cara!
Unknown disse…
Legal Spock.

Duas ferramentas que me ajudaram a monitorar o GC, em alguns tunings que realizei, foram:

- Introscope, ferramenta da CA: http://www.ca.com/br/products/product.aspx?id=5779
- YourKit, dica do Ricardo Jun na época: http://www.yourkit.com/

Ambas são pagas.

[]s
Eder
Roberto disse…
bom artigo!

e uma dica sobre boas referencias de garbage collector e classloaders são os pdfs em portugues do livro Arquitetura Java... dá pra baixar esses capitulos de graca aqui http://www.arquiteturajava.com.br
Wagner Santos disse…
Muito bom Yoda,, quer dizer Dr. Spock :)
Henrique Lima disse…
Boa Spock.

Legal lembrar também que é possível fazer análise de desempenho do GC através do próprio log obtido através de parâmetros da JVM (JVM da sun, -verbose:gc -Xloggc:gc.log). Com esse log e o gcviewer (http://www.tagtraum.com/gcviewer.html) é possível obter o gráfico do GC desde o start da JVM.

Fica a dica.

Parabéns!
Anônimo disse…
Excelente artigo valew Dr. Spock!!!! =D

Postagens mais visitadas deste blog

PrimeFaces com JSF2 no ScrumToys

O JSF traz um grupo de componentes visuais prontos, a partir da versão 2.0 com suporte a Ajax nativo! Melhor que isso é a possibilidade de customizar ou utilizar uma suíte de componentes prontos para "turbinar" o projeto com o minimo de esforço. PrimeFaces é uma suite de componentes JSF customizados, a maioria com suporte a ajax, conta com um Kit para desenvolvimento mobile, é open source, a documentação é razoável, facíl de instalar e usar. Nesse exemplo utilizo o PrimeFaces 2.0.0, versão com suporte a JSF 2, no ScrumToys. Conheçe o ScrumToys ? ScrumToys é um Projeto Exemplo para JavaServer Faces 2.0 dentro do NetBeans 6.8, criado e mantido pelo time da Globalcode. É interessante que você tenha o NetBeans 6.8 para fazer esse exemplo, senão tiver baixe aqui . Baixe também, aqui , o PrimeFaces e o configure no NetBeans como biblioteca para o ScrumToys. Inicialmente o PrimeFaces requer a runtime JSF, mas isso pode variar dependendo de quais componentes você utilize, mai

Seja um Palestrante do TDC Connections 2022

A Equipe TDC está muito feliz e orgulhosa em começar mais uma jornada de eventos em 2022 e criar muitas oportunidades! Agora, chegou o momento para você que sempre quis ser palestrante mas não teve oportunidade, e também de quem já é palestrante experiente, e está ansioso para compartilhar aquela nova prática ou caso de sucesso fresquinho, submeter sua palestra para o TDC Connections e co-criar conosco o maior evento de desenvolvedores do Brasil.  Link de inscrição: https://cfp-conn.thedevconf.com.br/?_ga=2.103579840.1386204218.1643036190-1988609034.1631800014 Confira aqui o calendário do TDC 2022. Nesta edição teremos muitas novidades e você poderá palestrar de forma Online ou Presencial! Entenda como vai funcionar o TDC CONNECTIONS: Nesta edição, além de todo o conteúdo dividido em Trilhas transmitidas ao vivo (13 trilhas simultâneas) também teremos dois eventos híbridos em Recife e Belo Horizonte, que terão uma trilha por dia, ao vivo, para um público limitado, seguindo protocolo

Entendendo como funciona a programação de computadores: linguagens de programação, lógica, banco de dados

Nesse post, diferente dos últimos que foram mais enfáticos nas experiências com tecnologias, vou focar um pouco mais nos profissionais que estão começando, ou pretendem ingressar na área de desenvolvimento de software, falando sobre conceitos fundamentais relacionados a programação em geral . Mercado de trabalho para programação Conforme já sabemos, o mercado de desenvolvimento de software, especialmente no Brasil, continua em franca expansão, sendo que cada vez mais as empresas buscam desenvolver seus próprios sistemas usando as mais diferentes e novas tecnologias. Algumas matérias interessantes: As seis profissões mais valorizadas em 2010 no IDG Now! Muitas vagas e sensação de reaquecimento da economia Por isso, a área de desenvolvimento de software tem despertado interesse em muitos profissionais de outras áreas que desejam mudar de profissão, já que as oportunidades de trabalho tendem a ser maiores. Esse é um perfil presente em muitos dos clientes da Globalcode que acabou m

JSON fácil em Java com GSon !

Ola pessoal ! O formato JSON ( J ava S cript O bject N otation) vem se consagrando cada vez mais na comunicação de dados, principalmente nos dispositivos móveis devido a esse formato ser mais leve que o XML e também mais legível. Uma prova disso são as inúmeras bibliotecas que existem para manipular esse formato, e no caso do Android, o suporte ao JSON é nativo. Mas apesar de ter esse suporte nativo, algumas operações devem ser feitas manualmente e o código acaba ficando um pouco verboso e repetitivo, já que para cada objeto que se deseja transmitir é necessário fazer um método que lê as propriedades do JSON e faz as devidas atribuições no seu objeto Java. Vamos supor o seguinte objeto sendo transmitido em JSON: {   user: {     id: 123456,     name: "Neto Marin",     username: "netomarin",     email: "netomarin@globalcode.com.br"   } } Se você fosse tratar um Webservice que envia esse JSON para o seu aplicativo Android, além de criar a o

Top 4 desafios do gestor de TI e como superá-los

  O setor de TI se apresenta como uma área essencial ao desenvolvimento e expansão da empresa, em especial, aquelas que têm a criação de soluções tecnológicas como core business. O mercado dinâmico da atualidade, com mudanças constantes e concorrência elevada, exige aperfeiçoamento do gestor de TI para se destacar em suas atividades. Pensando em te ajudar nesse processo, separamos 4 desafios do gestor de TI e como superá-los. Acompanhe! Transformação digital na atualidade A transformação digital é constante e define os caminhos futuros da nossa sociedade. Por isso, o setor de TI vem se tornando mais estratégico em empresas de todos os segmentos. O home office é um bom exemplo de como a revolução digital está se processando. Vamos falar sobre ele e outros pontos nos tópicos a seguir. Confira! Desafios do gestor de TI Para se manter atualizado sobre o tema e permanecer competitivo no mercado, é  necessário acompanhar as tendências de TI . Confira, abaixo, alguns dos principais desafios d

Segurança da informação no alvo: o que esperar do futuro?

A segurança da informação não se trata apenas de proteger os dados contra acesso não autorizado. Na prática, refere-se aos recursos que impedem: uso; registro; inspeção; divulgação; interrupção; modificação; destruição de dados. O uso de dados pode abranger desde um perfil nas redes sociais a detalhes financeiros, biometrias ou novos projetos. Por isso, a preocupação com a proteção dos dados é crescente, tanto para empresas quanto clientes. Para muitas pessoas, a coleta de dados é considerada invasão de privacidade, criando desconfiança do titular dos dados, pois o uso dos dados pode ser facilmente corrompido, utilizado para fins não declarados. Apesar de o uso dos dados terem impulsionado os avanços tecnológicos na última década, as organizações lidam com o desafio de distinguir dados de informações pessoais de modo a proteger a privacidade e as preferências dos clientes. Neste artigo, abordaremos o impacto da segurança da informação e o que esperar do futuro. Confira casos conhecido