Estudo metodológico · FA-MET-02

API ou interface, eis a questão

Por que a mesma pergunta traz marcas diferentes conforme o ambiente de acesso.

Rodrigo Beckmann · First Answer Versão 1.0 · 1.000 chamadas via API + 1.000 via interface do ChatGPT Estudo completo (PDF) ↓ Como citar

Em resumo

Medir pela API não é medir o que o consumidor vê. Com a mesma pergunta e a mesma ferramenta de busca, API e interface do ChatGPT só concordam no núcleo: das 15 marcas mais relevantes, 12 mudam de forma significativa entre ambientes.

12 de 15 marcas principais com diferença significativa entre API e interface
82 pp maior diferença de presença de uma mesma marca entre ambientes
64% das 56 marcas observadas aparecem em só um dos ambientes
77,5% × 99,5% das chamadas usaram busca na web: API e interface

Mesma pergunta, 1.000 chamadas em cada ambiente

Do quarto lugar em diante, as marcas trocam de posição

API Interface do ChatGPT
Marca A
100,0% → 77,5%
Marca B
100,0% → 99,9%
Marca C
100,0% → 100,0%
Marca D
11,1% → 92,6%
Marca E
7,8% → 90,2%
Marca F
66,5% → 6,4%
Marca G
44,5% → 0,2%
Marca H
37,7% → 6,1%
Marca I
20,3% → 0,4%
Marca J
0,0% → 17,1%
Marca K
15,7% → 0,1%
Marca L
14,3% → 2,3%
Marca M
9,2% → 8,7%
Marca N
8,8% → 2,7%
Marca O
0,0% → 5,4%
Marcas anonimizadas. Valores: API → interface. Fonte: FA-MET-02, Tabela 1.

O que encontramos

1.000 chamadas em cada ambiente, em paralelo, no mesmo dia, com a mesma pergunta e busca na web habilitada.

  1. 01

    Só o núcleo resiste à troca de ambiente

    Duas marcas ficam perto de 100% nos dois. Abaixo delas, há inversões: uma marca vai de 11,1% na API a 92,6% na interface; outra, de 66,5% a 6,4%.

  2. 02

    O universo de marcas mal se sobrepõe

    A API citou 39 marcas e a interface 37, mas só 20 aparecem nos dois. Nenhum ambiente contém o outro.

  3. 03

    A busca na web explica parte da diferença

    A interface buscou em 99,5% das chamadas; a API, em 77,5%. Na própria API, algumas marcas só aparecem com busca e outras só sem.

  4. 04

    Forçar a busca na API não resolveria

    Comparando só as chamadas com busca nos dois ambientes, a divergência continua: uma marca fica em 93,1% na interface e 0,3% na API.

  5. 05

    Quando os dois buscam, buscam de jeitos diferentes

    A API lê em média 22,6 URLs e faz 1,55 consultas por resposta; a interface, 16,9 URLs em uma consulta.

56 marcas, pouca interseção

Marcas distintas citadas em 1.000 chamadas por ambiente.

O que isso muda

A API é porta de integração para desenvolvedores, não o lugar onde o consumidor encontra a IA.

Quem mede presença de marca via API e apresenta o resultado como o que o usuário vê está medindo outro sistema. Todo monitoramento precisa declarar o ambiente medido, e a troca de um pelo outro não se resolve com ajuste de configuração.

Método, em resumo

Coleta desenhada para o mesmo modelo nos dois ambientes; sem login, a interface não permite fixar nem registrar o modelo. Busca habilitada, temperatura padrão e sem instrução customizada. 2.000 chamadas em paralelo, numa janela de poucas horas, cada uma numa conversa nova. Diferenças avaliadas com intervalos de 95% (Wilson e Newcombe).

Limites

Uma categoria, um modelo e uma data. O mecanismo deve se repetir em outros contextos; quais marcas sobem ou descem, não. Sem login, não dá para descartar que parte da divergência venha do roteamento de modelos da interface. O estudo não testa por que a busca difere entre ambientes, só que difere.

Leia o estudo completo

Os cinco achados em detalhe, com figuras, tabelas, ficha técnica e referências.

Baixar PDF ↓

Como citar

Beckmann, R. (2026). API ou interface, eis a questão: por que a mesma pergunta traz marcas diferentes conforme o ambiente de acesso (FA-MET-02, versão 1.0). First Answer. https://rodrigobeckmann.com/pesquisa/api-ou-interface