Comparar os modelos disponíveis

Pré-release

Esta página descreve um recurso de uma versão de pré-release do AI Cockpit Reasoning. Ele pode ainda não estar disponível na versão instalada.

O painel Model Comparison (Comparação de Modelos) mostra índices de inteligência, benchmarks de programação e preços dos modelos que a sua organização pode usar. Use-o para escolher um modelo para uma tarefa ou para definir padrões de modelo principal, de subagente e pequeno que equilibrem qualidade e custo.

Abrir a comparação

• No seletor de modelos, abra os detalhes de um modelo e selecione Compare available models (Comparar modelos disponíveis).
• Ou execute AI Cockpit Reasoning: Compare Available Models pela Command Palette.

O painel lista apenas os modelos disponíveis para você. Os dados de benchmark vêm da Artificial Analysis e ficam em cache por seis horas; selecione Refresh (Atualizar) para buscá-los de novo. Os preços vêm do catálogo de modelos do Reasoning.

Escolha os modelos a comparar, o benchmark e a proporção de tokens de entrada e saída.

Ler a comparação

1. Filtre a lista por nome, provedor ou Model creator (Criador do modelo) e escolha quais modelos comparar.
2. Escolha o Programming benchmark (Benchmark de programação) a exibir, como Coding Index ou uma versão do Terminal-Bench.
3. Alterne entre Charts (Gráficos) e Table (Tabela).

Os gráficos mostram o Intelligence Index, o benchmark de programação e os Internal Token Prices (Preços Internos de Tokens) de entrada e saída. O gráfico Cost vs. Intelligence (Custo vs. Inteligência) pondera o preço pela proporção de tokens de entrada e saída que você definir; a linha destacada marca as opções que nenhum outro modelo supera pelo mesmo custo ou por um custo menor.

Os índices descrevem a variante avaliada pela Artificial Analysis, indicada no nome de cada modelo. Ela pode ser diferente do esforço de raciocínio que você seleciona no Chat. Modelos sem correspondência exata no benchmark continuam disponíveis no Reasoning, mas ficam fora dos gráficos.

Índices maiores são melhores; preços de token menores são mais baratos.

Aplicar uma combinação de modelos

Model combinations (Combinações de modelos) sugere modelos principal, de subagente e pequeno para três perfis: Economy (Econômico), Balanced (Equilibrado) e Quality (Qualidade). As sugestões são heurísticas, não garantias.

1. Ajuste o uso relativo de cada papel se o seu trabalho depender muito de subagentes ou de tarefas rápidas.
2. Escolha um perfil e revise os modelos sugeridos e o custo estimado.
3. Em Apply to (Aplicar a), escolha Global defaults (Padrões globais) ou This project (Este projeto).
4. Selecione Apply (Aplicar).

A combinação passa a ser o padrão das novas sessões. Se você abriu o painel a partir de um chat, o modelo principal dele também muda a partir da próxima mensagem; uma resposta em andamento não é interrompida. Os outros chats abertos mantêm os seus modelos.

Cada perfil mostra os modelos sugeridos, a fatia do custo e o total estimado.

Revise o resultado em Settings → Models (Configurações → Modelos).