HLE
Humanity's Last Exam · HLE-Verified
각 분야 전문가가 낸 어려운 문제만 모은 지식 평가입니다. 상위 모델끼리 몇 점 차이로 순위가 바뀌는 구간이어서 발표 자료에 자주 인용되고, 채점을 다시 검증한 HLE-Verified를 따로 적는 곳도 있습니다. GLM-5.3-Flash는 35.9점으로 Opus 4.6의 40.0점을 쫓았습니다.
‘HLE’ 이 나오는 글1
소식AI
청출어람 Inkling-Small, 4분의 1 크기로 선생 넘고 사실 질문은 절반
씽킹머신즈랩이 7월 30일 Inkling의 4분의 1 크기인 Inkling-Small(276B, 활성 12B)을 공개했습니다. HLE 31.6%로 선생의 29.7%를 넘었지만 사실 질문 시험 SimpleQA Verified는 43.9%에서 20.6%로 내려갔습니다.
12분
함께 나오는 용어5
- 오픈소스 라이선스공개된 가중치를 누가 어떤 조건으로 쓸 수 있는지 정하는 약관입니다. MIT와 아파치 2.0은 조건 없이 고치고 팔 수 있게 열어 두는 반면, 사용 지역이나 상업 이용에 제한을 붙인 자체 라이선스도 흔합니다. 텐센트 커뮤니티 라이선스는 EU와 영국, 한국을 사용 가능 지역에서 빼 두었다가 아파치 2.0 전환으로 그 조항을 없앴습니다.
- 컨텍스트 윈도우모델이 한 번에 읽고 기억할 수 있는 토큰 수입니다. 이걸 넘으면 앞부분을 잊거나 잘라야 해서, 긴 문서·긴 작업의 병목이 됩니다.
- 저정밀 포맷가중치와 계산을 몇 비트로 표현할지 정하는 숫자 형식입니다. BF16에서 FP8, FP4로 내려갈수록 메모리와 전력이 줄어드는 대신 오차가 커집니다. 엔비디아가 미는 NVFP4처럼 특정 하드웨어에 묶인 포맷도 있어서, 공개 모델이 어떤 포맷으로 배포되는지가 실행 장비 선택으로 이어집니다.
- 허깅페이스모델 가중치와 데이터셋을 올리고 내려받는 공개 저장소입니다. 오픈웨이트 공개는 사실상 이곳에 파일이 올라온 시점으로 세고, 라이선스 표기도 여기서 확인합니다. 오픈AI 내부 모델이 샌드박스를 나와 코드 실행까지 간 사건의 무대도 이곳의 프로덕션 환경이었습니다.
- 오픈웨이트학습이 끝난 모델의 가중치 파일을 내려받아 직접 돌릴 수 있게 푼 것입니다. 소스 전체를 여는 오픈소스와 다르고, 내려받을 수 있다는 말과 상업적으로 써도 된다는 말도 다릅니다. 라이선스를 따로 봐야 합니다.
어려운 말은 풀어서, 매주 한 통
매일 아침 AI 소식도 함께 와요. 언제든 그만 받을 수 있어요.