BBenchmark
Medido, não prometido.
Quatro aplicações com exatamente os mesmos endpoints — o Crescent 2.0, o Crescent 1.x, Node.js com Fastify e Python com FastAPI — medidas uma de cada vez, na mesma máquina, contra o mesmo MySQL e com a mesma carga.
Código, scripts e dados brutos: github.com/daniel-m-tfs/crescent-benchmark — rode na sua máquina.
01Resultados
Cenário por cenário.
Cada painel é um tipo de requisição, com sua própria escala. Passe o mouse (ou o foco) numa barra para ver latências, erros e memória.
Memória do processo (RSS)
Soma de todos os processos da aplicação: ociosa, logo após subir, e o pico observado durante a rodada. Menor é melhor.
Ver todos os números em tabela
02Metodologia
Regras iguais para todos.
Comparação justa vale mais que número bonito. Estas são as regras — e, logo abaixo, os limites do que estes números dizem.
Tudo é reproduzível: o repositório do benchmark tem as quatro aplicações, o script que mede e os resultados desta rodada.
- Uma por vez
- Só uma aplicação ligada durante a medição. O banco é recriado com as mesmas 1000 linhas antes de cada uma.
- Mesma carga
wrk -t2 -c64, aquecimento descartado e janela medida igual para todos os cenários.- Repetições
- Os números publicados vêm de uma rodada única. Entre execuções, o mesmo app variou até
~25% nesta máquina, então diferenças pequenas são empate. O script já faz repetições
(
--rounds 3, com a ordem das aplicações alternada e a mediana); esta página será atualizada com essa rodada. - Só o núcleo
- Sem log de acesso, CORS, rate limit ou headers de segurança em nenhuma das quatro.
- Produção
- Crescent 2 com cache de código e app montada no boot; Node com
NODE_ENV=production; uvicorn com uvloop e httptools. - Workers
- “1 worker” é a comparação direta. Em “4 workers”:
worker_processes 4,node:clustercom 4 processos euvicorn --workers 4. O 1.x (Luvit) roda num processo só e fica de fora. - Banco
- 64 conexões no total para todos. SQL parametrizado direto no driver de cada stack; o
cenário “ORM” mostra o custo extra do
Modeldo Crescent. - Contrato
- Antes de medir, cada aplicação passa por uma checagem: as respostas precisam ser iguais. Se falhar, ela não é medida.
Limites — leia antes de citar
- Carga, banco e aplicação rodam na mesma máquina e disputam CPU — com 4 workers isso pesa mais. Os números comparam as aplicações entre si; não são capacidade de produção.
- O MySQL é local e as consultas são triviais. Numa aplicação real o banco costuma ser o gargalo, e as diferenças entre frameworks encolhem.
- O
mysql2(Node) usa prepared statements do servidor; os outros usam o protocolo de texto com valores escapados — o jeito idiomático de cada driver. - O Crescent 1.x usa
luasql, um driver bloqueante: durante uma consulta o processo inteiro espera. - Sem TLS e sem proxy na frente.