AI평가 아이템으로 카지노 게임 재오픈

Opus 5.5

byHJH

재는 한자고, 오픈은 영어라. 좀 그러네요. 믓튼, 다시 열어 봅니다. 앞으로 쓰는 형태는 소제목에 사용한 AI 버전평가 대상, 프롬프트 공개, AI 결괏값 공개입니다. effort 도 공개하는 게 맞는 것 같기도 하지만, 다음 버전에 각 AI 모델별 비교표까지 해서 글 올리기 정바카라 업데이트 해 보겠습니다.


이 글을 쓰는 시점까지 다른 사람의 하네스 엔지니어링을 보거나 참고한 적이 없습니다. 어차피 좋은 내용이면 그다음 버전의 AI에 포함될 거라 생각했기 때문입니다. AI 직원을 안정화하는 단계에서 인터넷에서 뭔가 잘했다고 공개 홍보하는 사람들의 내용은 빨리 흡수해서 다음 모델이 나오기 전에 종합된 프롬프트의 상태로 AI 직원을 만들고 또 평가해야 하기 때문에 카지노 게임을 재오픈했습니다. 아무리 좋은 내용이 나와도 확률모델이니 LLM 단독으로는 100% 맞지 않겠으나, 재미로 봐주시면 좋겠습니다. 저 역시 재미 + 일 + 혹시나 멋진 인간의 인사이트가 있을까 탐구하는 단계니 까요.



https://5 throck.github.io/multi-agent-harness-handbook 분석


프롬프트 : (https://5 throck.github.io/multi-agent-harness-handbook/) 내용 분석해서 수준 평가 보고서와 인간의 통찰을 찾아줘.


「멀티 에이전트팀 하네스 엔지니어링 핸드북」 수준 평가

결론: 이틀짜리 연수 교재이자 저자가 만든 프레임워크(ai-workspace-standards)의 사용 설명서로서는 잘 만들었습니다. 하지만 질문하신 "더 나은 인간의 통찰"은 개념 챕터에 거의 없습니다. 대부분 Anthropic 등 공개 자료를 비유로 풀어쓴 재서술입니다. 사람이 실제로 운영해 본 흔적은 운영 부록 일부에 있습니다. 그런데 그 핵심 장치(GateGuard)도 외부 오픈소스에서 가져온 것이고, 그 장치의 알려진 결함은 빠져 있습니다.


1. 무엇인가

1일 차는 개념과 기존 variant 실습, 2일 차는 아키텍처 심화와 신규 variant 설계·캡스톤으로 구성된 워크숍 교재입니다. Claude Code, Antigravity, Codex를 나란히 다룹니다. 본질은 저자의 ai-workspace-standards 저장소 매뉴얼입니다. 저장소 규모는 커밋 352개, 스타 4개, 포크 2개입니다.

PR 기록을 보면 상위 저장소와 동기화 감사를 돌려 누락을 찾고, 네 개 언어판에 한꺼번에 섹션을 추가하는 식으로 관리됩니다. 이 핸드북 자체가 자기가 설명하는 에이전트 하네스로 만들어지고 유지되는 문서일 가능성이 높다는 뜻입니다. 실제로 돌아가는 시스템이라는 점에서 장점이지만, 아래에서 볼 한계들의 원인이기도 합니다.


2. 평가표


항목 점수(/10) 근거


커리큘럼 설계


8


비개발자/IT 전문가 일정 분리, 강사 가이드·설치 스크립트 완비




실물 연결성


7


개념이 실제 저장소의 스크립트·훅과 1:1로 대응




개념 정확성


지금 바로 작가의 멤버십 구독자가 되어
멤버십 특별 연재 콘텐츠를 모두 만나 보세요.

brunch membership
HJH작가님의 멤버십을 시작해 보세요!

前 SAMSUNG KNOX 메인개발자, 前 ETRI ARM firmware 강사 6年, 前(주)쏘닥 CTO, 前(주)이엑스 CTO. 스타트업 CTO... 기술을 쉽게...

431 구독자

오직 멤버십 구독자만 볼 수 있는,
이 작가의 특별 연재 콘텐츠

  • 최근 30일간 22개의 멤버십 콘텐츠 발행
  • 총 452개의 혜택 콘텐츠
최신 발행글 더보기