Tag: GPT

All the articles with the tag "GPT".

• Honcho의 조용히 죽어있던 재조정 로직을 찾았다

  13 Sep, 2026

  Honcho의 LLM/임베딩 스택을 Gemini에서 GPT-5.6 Luna로 전부 옮기다가, 툴콜과 reasoning_effort 조합이 거부되는 문제를 만났다. 그리고 그 과정에서, 벡터 재조정 로직이 documents 테이블을 한 번도 처리한 적이 없었다는 걸 발견했다.

• 재현율을 다시 쟀더니 5배가 나왔다 — 그런데 그 이유를 설명하다가, 설명부터 틀렸다

  5 Sep, 2026

  한글 제목이 가끔 깨진 UTF-8 바이트로 나오는 버그를 GPT-5.6 Luna로 표본 20개씩 다시 재봤다. 재현율이 원래 추정의 몇 배로 나왔는데, 왜 실제로는 못 느꼈는지 설명하다가 그 설명 자체가 절반은 틀렸다는 걸 코드에서 다시 확인했다.

• 디폴트값으로 돌리고 있었다 — GPT-5.6 Luna 추론 옵션을 medium과 high로 나눠서 비교해본 결과

  5 Sep, 2026

  GPT-5.6 Luna의 reasoning_effort 기본값을 발견하고 medium/high를 프롬프트 보강과 엮어 벤치마크를 돌렸다. 결과표는 그럴듯했다. 그런데 그 표를 만든 도구를 다시 열어보니, 표에 있는 숫자 중 상당수는 애초에 그 코드가 잴 수 없는 값이었다 — 그리고 그걸 고친 정정 문서에도, 또 다른 정정이 필요했다.

• 퍼센트로 아무리 맞춰도 답이 없었는데, 업그레이드 한 번으로 끝났다

  10 Aug, 2026

  Hermes의 기본 모델을 GPT-5.6 Luna로 바꾸자마자 rate limit에 걸렸다. 원인을 파고들수록 임시방편만 늘었는데, 계정 티어를 올리고 나니 정작 도구 자체가 며칠 전 이 문제를 위한 정식 기능을 내놓은 걸 알게 됐다.