O servidor com 1.649 ferramentas
A maior superfície de ferramentas que medimos tem 1.649 ferramentas numa só lista. Não é uma qualidade. É isto que custa ao agente que tenta usá-la.
Algures no catálogo há um servidor que oferece 1.649 ferramentas numa única lista. É a maior superfície que registámos. É também, para a maioria dos agentes, inutilizável.
Porque é que o tamanho magoa
Um agente que escolhe uma ferramenta não lê a tua lista como um programador lê documentação. Recebe nomes e descrições na janela de contexto e tem de escolher de uma vez. Cada ferramenta a mais é outro «quase certo» a confundi-lo.
- Listas longas comem o orçamento de contexto antes de a tarefa começar.
- Nomes parecidos colidem: create_item, add_item, new_item, item_create.
- Escolher mal é silencioso — o agente recebe uma resposta plausível da ferramenta errada.
A forma que resulta
Os servidores com boa pontuação de legibilidade não são os que têm mais ferramentas. São aqueles em que o nome diz o que faz, a descrição diz quando usar e os parâmetros dizem o que é obrigatório. Poucas ferramentas afiadas ganham a um catálogo.
Um teste rápido
Lê a tua própria lista como um modelo a veria: só nomes e uma linha de descrição, sem código. Se não escolhes a ferramenta certa em poucos segundos, o agente também não.
Consultar a pontuação do teu servidor