앞 / 수준 노트

여섯 단계, 각각 다음 한 번의 이동

레벨은 직급이나 직책이 아닙니다. 그것은 ‘당신과 AI 사이의 메커니즘 층을 얼마나 이해하고 있는가’입니다. 각 하위 레벨에는 네 가지가 명시됩니다: 느낌, 알아야 할 지식, 사람들이 흔히 실수하는 부분, 그리고 다음 한 단계.

L1 듣기 0–15

당신은 'AI가 인상적이다'라는 것을 알지만, 어느 부분에서 인상적인지 말할 수 없습니다; 당신은 채팅 상자를 사용해봤지만, 그것이 당신을 위해 하나의 완전한 작업을 끝내도록 해본 적이 없습니다.

알아야 할 사항
  • 대규모 모델이 무엇이고 무엇을 할 수 있는지에 대한 대략적인 개요
  • 단어 'prompt'의 실제 의미
사람들이 보통 실수하는 부분
  • AI를 더 똑똑한 검색 엔진처럼 취급하기
  • 더 큰 모델이 더 신뢰할 수 있다고 가정하기

다음 한 단계 이동: 매주 반복하는 작업 하나를 선택하여 처음부터 끝까지 실행하고, '잘 완료된 것으로 간주되는 기준'을 적으세요.

L2 웨이드 16–34

당신은 괜찮은 답을 얻을 수 있고 도구를 사용하려고 시도하기 시작했지만; 출력 품질은 복권처럼 느껴집니다 — 이번 실행이 좋은 이유와 저번 실행이 나쁜 이유를 말할 수 없습니다.

알아야 할 사항
  • 맥락, 환각, 지식 컷오프가 실제로 의미하는 것
  • 하나의 좋은 출력물에서, 어떤 부분이 프롬프트에서 나온 것인가
사람들이 보통 실수하는 부분
  • “자세히 쓰여진 것”이 “명확하게 말한 것”과 같다고 가정할 경우
  • 문제가 생길 때마다 모델을 전환합니다

다음 한 단계 이동: 하나의 작업을 선택하고, 지시 사항을 '기준 및 반례'와 함께 다시 작성한 다음, 두 출력물을 비교하세요.

L3 처리 35–52

작은 것이 스스로 실행되도록 도구를 연결할 수 있습니다; 실패할 것임을 알고, 체인 내 대략적인 위치도 압니다.

알아야 할 사항
  • 검색, 도구 호출 및 컨텍스트 창이 어떻게 함께 맞물리는지
  • 비용과 지연 시간이 설계를 결정하는 이유
사람들이 보통 실수하는 부분
  • 항상 “작동하나요”만, 절대 “재현할 수 있나요”는 아님
  • 한 번의 성공을 안정적인 능력으로 간주하기

다음 한 단계 이동:자동화에 세 가지를 추가하라: 기준, 로그, 실패 시 재시도.

L4 만들기 53–70

당신은 기존 도구를 쓰는 대신 자신의 작업을 위한 도구를 만듭니다; 당신은 선택의 균형을 만들고 있습니다 — 어떤 모델, 어떤 단계가 사람 손을 거치고, 얼마나 비용을 들일지.

알아야 할 사항
  • 평가 세트를 만드는 방법과 기준선을 설정하는 방법
  • 다단계 작업에서, 어떤 단계는 반드시 사람이 해야 하는가
사람들이 보통 실수하는 부분
  • ‘내가 안다’를 ‘내 팀이 실행할 수 있다’로 가정하기
  • 한 사례로 자신을 설득하고, 회귀분석은 절대 하지 않기

다음 한 단계 이동: 자신만의 작업 방식을 누군가 따를 수 있는 기준 체크리스트로 작성하고, 동료에게 한 번 실행하도록 전달하세요.

L5 오케스트레이트 71–86

당신은 '누가 무엇을 하고, 그것이 어떻게 검증되며, 누가 실수를 소유하는가'를 설계하고 있습니다; 당신이 관리하는 것은 프롬프트가 아니라 작업, 권한, 정의, 그리고 검토입니다.

알아야 할 사항
  • 에이전트 인원수와 작업 장부 간의 관계
  • 권한, 감사 및 롤백이 과정 안에 어떻게 적용되는지
사람들이 보통 실수하는 부분
  • “한 명의 에이전트를 추가하여” 협동 문제 해결하기
  • 승인 권한을 실행자에게 넘기기

다음 한 단계 이동: 당신이 관리하는 라인에 대해, 3개월간의 작업 원장을 세우세요: 누가 실행하는지, 누가 검증하는지, 무엇이 완료로 간주되는지.

L6 보드 설정 87–100

당신은 규칙 자체를 움직이고 있습니다: 데이터가 어디서 오는지, 누가 기준을 설정하는지, 누가 비용을 부담하는지; 다음 병목이 어디서 발생할지 볼 수 있습니다.

알아야 할 사항
  • 컴퓨트, 데이터, 평가 및 조직 간의 상호 제약
  • 오픈/클로즈드 소스, 규제 및 표준이 가능성을 어떻게 바꾸는지
사람들이 보통 실수하는 부분
  • ‘나는 할 수 있다’를 ‘이건 반드시 해야 한다’로 취급하기
  • 책임과 외부 효과를 무시하기

다음 한 단계 이동: 운영 중인 시스템 하나를 선택하여, 6개월 후 가장 막힐 가능성이 높은 레이어를 적고, 그 레이어를 먼저 이동시키세요.

세 계층 사용 방법

1층(질문)은 단순히 샘플링할 뿐, 판단하지 않습니다; 2층(이 표)은 점수를 '당신이 추가해야 할 메커니즘의 층'으로 번역합니다; 3층(파노라마)은 그 메커니즘을 다시 세계 속에 놓습니다 — 어느 강, 다리, 거리, 도시, 야생에 속하는지를 보여줍니다. 이 세 단계를 거친 후, 자신의 이해에 대한 판단은 점수보다 훨씬 더 정확할 것입니다.

직관에 반하는 방식으로 사용하는 방법: 먼저 전체 상황을 읽고, 돌아와서 테스트하기많은 사람들이 테스트 후에야 자신이 ‘알고 있다’고 생각했던 것이 단지 이름만 들어본 것임을 깨닫습니다 — 왜냐하면 파노라마가 명사를 그 상위와 하위 관계 속에 다시 위치시키고, 당신은 즉시 어느 부분이 부족한지 알 수 있기 때문입니다.

테스트 보기 →  파노라마를 직접 열기

루푸 사이트 그룹 · 세 개의 역
① 에이전트 시대 | ② AI 규모 | ③ 10,000 사이트
季夏为萤路普AI | 滇ICP备2023002020号-2