DailyBench ou bench diário? Porque o Jacob tem estado a trabalhar muito nisso 🏋️ Veja o que ele construiu:
Jacob Phillips
Jacob Phillips29/07/2025
Entusiasmado por lançar o DailyBench! O DailyBench é um benchmark automatizado que avalia APIs de modelos de fronteira 4 vezes ao dia, baseado em um fork do HELMLite. Eu criei o DailyBench para ver se conseguíamos detectar provedores de modelos quantizando pesos, comprimindo o kv-cache ou trocando modelos durante cargas máximas.
811