엔진 비공개 베타가 시작되면 모든 진화 라운드의 보고서를 비식별 처리해 이곳에 공개하겠습니다. 이유는 간단합니다. OURO가 파는 것은 “검증 가능한 향상”인데, 우리 자신의 진화 과정이 공개되지 않으면 그 말에는 무게가 없습니다.
매 글에 네 가지를 고정으로 씁니다. 첫째, 이번 라운드에서 진화한 에이전트의 유형과 사용한 평가 세트(유형과 규모만, 고객명과 내용은 쓰지 않음). 둘째, 평가 전후 점수, 신뢰구간, 홀드아웃 결과. 셋째, 엔진이 무엇을 바꿨는지: 어느 계층인지, 변경 요약, 탈락한 후보의 실패 원인 중 가장 흥미로운 한두 가지. 넷째, 컴퓨팅과 비용이 얼마나 들었는지, 어떤 노드에서 돌았는지, 그리고 PoE 온체인 기록 링크.
실패도 씁니다. 향상이 없는 라운드나 홀드아웃을 통과하지 못한 라운드도 그대로 공개합니다. DGM 논문의 “환각 감지 로그를 삭제한” 사례를 우리는 늘 기억합니다. 진화 시스템에서 가장 나기 쉬운 문제는 발전하지 않는 것이 아니라 잘못된 방식으로 발전하는 것입니다. 실패한 라운드를 공개하는 것은 커뮤니티가 평가 자체를 함께 감시하도록 하기 위해서입니다.
비식별 규칙. 고객 신원, 평가 샘플 원문, 프롬프트 전문은 공개하지 않습니다. 변경은 요약과 diff 통계로 보여줍니다. 온체인 기록 자체에는 어떤 개인정보도 없습니다. 기업 고객은 로그에 전혀 나타나지 않도록 선택할 수 있습니다.
첫 번째 진짜 로그는 2027년 1분기 비공개 베타가 시작된 뒤 공개됩니다. 그 전까지는 방법 설명을 먼저 올립니다. 좋은 평가 세트를 쓰는 법, 스캐폴딩 계층 진화와 파인튜닝의 차이, 우리가 Bittensor의 인센티브 교훈을 어떻게 보는지.