이 노트에 대하여
여러 LLM 백엔드를 한데 모아 두고 성능과 성격, 연결 가능한 흐름을 비교하려는 컬렉션이다. 개별 서비스 메모를 넘어서 어떤 백엔드 생태계가 형성되고 있는지 한눈에 보게 한다.
BIBLIOGRAPHY
ironman0722. 2024. “수능 국어 LLM 벤치마크 리더보드 오픈.” October 18, 2024. https://news.hada.io/topic?id=17292.
“Togetherai 투게더Ai.” n.d. Accessed January 17, 2025. https://api.together.xyz/.
관련연구
관련노트
관련링크
togetherai
ironman0722 2024 “수능 국어 LLM 벤치마크 리더보드 오픈”
gpt-4o가 현재 1위를 달리고 있으며 llama-3.1-405B-instruct가 2위, Qwen-2.5-72B가 3위 아직 gpt o1-preview외에는 3~4등급을 겉돌고 있음
많은 모델이 한국어 언어영역에서의 Human performance를 따라잡는데에는 어려움이 있다는것을 알 수 있음.
Comments