콘텐츠로 바로 이동해요.
Model Wayfinder
방법론

추천 기능이 어떻게 작동하는지요

추천 내용은 정해진 규칙에 따라 생성됩니다. 어떤 AI도 결정을 내리지 않으며, 유료 광고도 존재하지 않습니다.

01 · 제외 항목

먼저 요구 사항을 충족하지 못하는 모델들이 제거됩니다. 이는 선택한 텍스트 길이에 비해 컨텍스트 윈도우가 너무 작은 경우(8,000 / 32,000 / 200,000 토큰), 이미지 분석을 위한 이미지 입력 기능이 없는 경우, 요청한 지역에서 처리가 불가능한 경우, 혹은 로컬 사용을 위한 오픈 웨이트가 제공되지 않는 경우입니다.

로컬에서 사용할 경우 해당 모델이 사용자의 하드웨어 메모리에 맞는지도 확인해 드립니다. 압축된 버전(Q4)의 경우 10억 개의 파라미터당 0.6 GB가 필요하며 여기에 1.5 GB의 여유 공간이 추가로 필요합니다.

업무나 팀 사용을 위해 라이선스상 상업적 사용이 금지된 모델은 제외됩니다.

02 · 점수 산정

각 평가된 모델은 작업별로 1부터 3까지의 품질 등급을 가집니다. 이 등급들은 공개된 순위에서 결정되는데, 순위의 상위 3분의 1은 3등급, 중간 3분의 1은 2등급, 하위 3분의 1은 1등급입니다. 각 작업에는 사용 가능한 가장 세분화된 순위가 적용됩니다.

작업 순위 (대체값)
텍스트 작성 LMArena Creative Writing (Text)
문서 요약 LMArena Document (Longer Query, Text)
챗봇 LMArena Text
프로그래밍 LMArena Coding (WebDev)
번역 LMArena Non-English (Text)
수학 LMArena Math
이미지 분석 LMArena Vision
비디오 분석 LMArena Vision – 비디오 이해에 대한 공개 순위가 아직 없어 이미지 이해 순위를 대체로 사용합니다
이미지 생성/편집 LMArena Text-to-Image / Image Edit
비디오 생성/사진 → 비디오 LMArena Text-to-Video / Image-to-Video
오디오 전사 Hugging Face Open ASR Leaderboard (영어 및 다국어 순위의 평균값)

LMArena 순위는 실제 사용자들이 수백만 건에 달하는 무작위 비교를 통해 산출됩니다. Open ASR 순위표는 고정된 테스트 녹음 파일의 단어 오류율을 측정하며, 수치가 낮을수록 성능이 더 좋은 것을 의미해요. 법률, 의학, 비즈니스, 과학과 같은 전문 분야를 선택할 경우 해당 분야의 LMArena 순위도 평균 점수에 추가로 반영됩니다. 이러한 순위에 포함되지 않는 모델들은 평가가 이루어지지 않아요. 보다 정확한 정보가 있는 경우에는 개별 순위를 직접 조정하여 모델 페이지에 명시해 드립니다. 일반적인 요청 비용은 가격 차이가 천 배나 나기 때문에 로그 스케일로 표시됩니다. 두 가지 지표 모두 사용자가 설정한 우선순위에 따라 가중치가 적용됩니다.

우선순위 품질 가격
저렴함 30 % 70 %
균형 잡힘 50 % 50 %
최고 품질 80 % 20 %

매월 10,000건의 요청이 발생하면 가격 차이가 점차 누적되기 때문에 가중치가 가격 쪽으로 10퍼센트포인트씩 이동해요. 가격이 같을 경우에는 더 낮은 가격이 우선시되며, 그 다음으로는 더 큰 컨텍스트 윈도우가 우선시됩니다.

03 · 여러 작업 동시 처리

여러 작업을 동시에 선택할 수 있어요. 텍스트 및 분석 작업은 하나의 모델이 담당하며 해당 작업들전부를 처리해야 하고, 그 모델의 성능은 이 작업들에 대한 등급의 평균값으로 산정되어요. 이미지, 비디오, 음성 전사는 거의 모든 모델이 모든 작업을 처리할 수 없기 때문에 각각 별도로 평가됩니다. 이미지는 장당, 비디오는 10초 단위 클립당, 음성 전사는 음성 분량 1분당 요금이 부과되어요. 이 요금들은 공개된 LiteLLM 가격표를 기반으로 하며, 여러 공급업체나 등급이 명시된 경우 가장 저렴한 것이 아닌 중간(일반적인) 가격을 적용해요. 클라우드 서비스가 없는 오픈형 음성 인식 모델은 로컬에서만 사용하는 것이 권장됩니다.

04 · 벤치마크

벤치마크 점수는 백분율, 엘로 포인트, 오차율과 같은 서로 다른 척도를 사용하므로 단순히 평균을 내는 것이 불가능해요. 저희는 동일한 벤치마크를 수행한 여기에 명시된 모든 모델들 사이에서 각 점수를 0부터 100까지의 순위로 변환합니다(100은 가장 우수함을 의미하며, 오차율의 경우 가장 낮은 값이 우수함을 의미해요). 3개 이상의 모델을 비교할 수 있을 때만 순위가 표시되며, 벤치마크 평균은 이러한 순위들의 평균값이에요. 평균 순위가 75 이상인 분야는 “강점”으로, 30 이하인 분야는 “약점”으로 분류됩니다. 벤치마크 결과는 추천 시스템에 반영되지 않으며, 추천은 저희가 설정한 품질 등급을 기반으로 이루어집니다.

05 · 데이터 출처

모델과 가격 정보는 OpenRouter에서 확인할 수 있어요. 오픈 웨이트와 호스팅 제공업체(지역별)는 models.dev에 있어요. 오픈 모델의 라이선스와 크기는 Hugging Face에서 확인할 수 있어요. 순위 정보는 LMArena와 Open ASR Leaderboard에서 확인할 수 있어요. 이미지당, 비디오 1초당, 오디오 1분당 비용은 LiteLLM에서 확인할 수 있어요. 환율 정보는 유럽 중앙은행에서 제공해요. 모든 정보는 매일 자동으로 업데이트되며, 정보 출처가 다운된 경우 마지막으로 확인된 값이 그대로 유지돼요.

06 · 광고

광고가 게재될 경우 명확하게 표시되며 별도의 영역에만 나타나고 순위나 추천에는 절대 영향을 미치지 않습니다.

07 · 제한 사항

품질 등급은 단순화된 표시일 뿐입니다. 가격은 OpenRouter에서 제공한 것이며, 서비스 제공업체로부터 직접 구매하거나 다른 지역에서 구매할 경우 차이가 있을 수 있습니다. 메모리 용량은 추정치입니다. 당사의 평가가 없는 모델은 비교 목록에는 나타나지만 추천 목록에는 포함되지 않습니다.

음악 생성, 3D 모델 및 CAD, 텍스트-to-음성 변환과 같은 일부 AI 유형은 아직 지원되지 않습니다. 이 분야들에 대해서는 현재 사용할 수 있는 공개 데이터 기반의 공식 순위가 존재하지 않습니다. 출처 없이 추천하기보다는 이러한 항목들은 제외하는 것이 적절하다고 판단했습니다.

개인정보 관련 안내는 법적 조언이 아닙니다. 서비스 제공업체와의 계약(예: 데이터 처리 계약)은 직접 확인해 주시기 바랍니다.