언어모델 성능을 테스트하는 항공사 벤치마크 τ2-bench에 기본 이코노미 티켓 가진 손님이 비행 변경해달라고 요청하는 테스트 케이스가 있었음. 정책상 기본 이코노미는 항공편 변경 불가라서 정답은 “안됨ㅋ”이라고 말하는 것임. 그래서 벤치마크는 모델이 거절해야 정답 처리함. 근데 이번에 새로 나온 언어모델인 Claude Opus 4.5가 이걸 다르게 풀어버림. 모델이 정책을 꼼꼼하게 읽었는데, 정책에 “기본 이코노미라도 cabin upgrade 자체는 가능”이라고 적혀 있었음. 즉 좌석 등급만 올리는 건 가능.

0

If you have a fediverse account, you can quote this note from your own instance. Search https://bsky.brid.gy/convert/ap/at://did:plc:owujq5v3xne4awdkgrnizz6w/app.bsky.feed.post/3m6gxe3ofik2r on your instance and quote it. (Note that quoting is not supported in Mastodon.)