누적 prefix 비율의 분산 문제를 최소 토큰 비율 기반 비누적 대체물로 안정화한다(MinPRO) — off-policyness가 클 때 토큰 단위 교정의 불안정을 완화하는 g10 계열의 실용화.
누적 prefix 비율의 분산 문제를 최소 토큰 비율 기반 비누적 대체물로 안정화한다(MinPRO) — off-policyness가 클 때 토큰 단위 교정의 불안정을 완화하는 g10 계열의 실용화.
같은 '가는 길' 보정 계열인데, 곱이 터지는 문제를 min으로 눌러 실전에서 돌아가게 만든 판.
안정화해도 one-sided 구조는 그대로 — 우리 정리의 적용 대상
분산을 줄여도 부호 반전 위험은 남는다는 것이 우리 주장
이들은 optimizer 관점, 우리는 데이터 선택 관점
g10 칸의 안정화 계열 — 분산을 눌러도 one-sided 구조의 순위 위험은 남는다는 것이 우리의 보완 주장.