Seis níveis, um próximo movimento cada
Um nível não é senioridade nem cargo. É “até que ponto você entende a camada de mecanismo entre você e a IA”. Cada nível abaixo declara quatro coisas: como é a sensação, o que você deve saber, onde as pessoas geralmente erram e o único próximo passo.
L1 Ouça 0–15
Você sabe que "IA é impressionante", mas não consegue dizer em qual aspecto ela é impressionante; você usou uma caixa de bate-papo, nunca deixou que ela completasse uma tarefa inteira para você.
- O esboço geral do que é um grande modelo e o que ele pode fazer
- O que a palavra “prompt” realmente significa
- Tratar a IA como um motor de busca mais inteligente
- Assumindo que modelos maiores são mais confiáveis
Próximo movimento único: escolha uma tarefa repetitiva que você faz toda semana, entregue-a de ponta a ponta uma vez, e escreva “o que conta como bem feito”.
L2 Vadear 16–34
Você consegue obter respostas decentes e começou a testar ferramentas; mas a qualidade dos resultados parece uma loteria — você não consegue dizer por que esta execução foi boa e aquela foi ruim.
- O que contexto, alucinação e corte de conhecimento realmente significam
- Em uma boa saída, qual parte veio do prompt
- Assumindo que “escrito em detalhes” significa “dito claramente”
- Trocar de modelo sempre que algo dá errado
Próximo movimento único: pegue uma tarefa, reescreva a instrução com “critérios contra-exemplos”, e compare os dois resultados.
L3 Lidar 35–52
Você pode conectar ferramentas de forma que uma pequena coisa realmente funcione sozinha; você sabe que vai falhar, e aproximadamente onde na cadeia.
- Como a recuperação, as chamadas de ferramentas e as janelas de contexto se encaixam
- Por que custo e latência decidem o design
- Apenas “funciona”, nunca “pode ser reproduzido”
- Tratando um sucesso como capacidade estável
Próximo movimento único:Adicione três coisas à sua automação: critérios, registros, tentativa de falha.
L4 Fazer 53–70
Você constrói ferramentas para seu próprio trabalho em vez de usar as prontas; você está fazendo trade-offs — qual modelo, qual etapa permanece humana, quanto gastar.
- Como construir um conjunto de avaliação e definir uma linha de base
- Em uma tarefa de múltiplas etapas, qual etapa deve permanecer humana
- Assumir que “Eu sei disso” é igual a “meu time pode executar”
- Convencendo-se com um caso, nunca fazendo regressão
Próximo movimento único: escreva seu próprio modo de trabalhar em uma lista de critérios que outra pessoa possa seguir, e entregue a um colega para executar uma vez.
L5 Orquestrar 71–86
Você está projetando "quem faz o quê, como é verificado, quem é dono do erro"; o que você gerencia não são prompts, mas tarefas, permissões, definições e revisões.
- A relação entre o número de agentes e o registro de tarefas
- Como permissões, auditoria e reversão entram no processo
- Resolvendo problemas de coordenação adicionando “mais um Agente”
- Entregar o direito de aceitação ao executor
Próximo movimento único: para a linha que você gerencia, crie um registro de tarefas de três meses: quem executa, quem verifica, o que conta como encerrado.
L6 Configurar a placa 87–100
Você está mexendo nas próprias regras: de onde vêm os dados, quem define o padrão, quem arca com o custo; você consegue ver onde o próximo gargalo vai aparecer.
- As restrições mútuas entre computação, dados, avaliações e organização
- Quão aberto/fechado, regulação e padrões mudam o que é possível
- Tratar “Eu posso fazer isso” como “isso deve ser feito”
- Ignorando responsabilidade e externalidades
Próximo movimento único: escolha um sistema que você está operando, escreva qual camada é mais provável de bloqueá-lo em seis meses, e mova essa camada primeiro.
Como usar as três camadas
Camada 1 (as perguntas) apenas amostra, não julga; camada 2 (esta tabela) traduz a pontuação em “a camada de mecanismo que você deve adicionar”; camada 3 (o panorama) coloca esse mecanismo de volta no mundo — mostrando qual trecho de rio, ponte, rua, cidade, natureza ele ocupa. Após todas as três, seu julgamento sobre seu próprio entendimento será muito mais preciso do que uma pontuação.
Uma maneira contra-intuitiva de usá-lo: leia o panorama primeiro, depois volte e testeMuitas pessoas só descobrem após o teste que o que achavam que “sabiam” era apenas um nome que tinham ouvido — porque o panorama coloca o substantivo de volta entre o que vem antes e depois dele, e você instantaneamente vê de qual lado está faltando algo.