|
|
|
 |
 |
| |
 |
제 목 :
[애피어] 실행 전 확신도 평가하는 에이전트 기술 공개 |
 |
작성자 :
|
등록일 : 2026-03-25 오후 2:02:56 |
|
|
 |
 |
 |
AI 네이티브 AaaS(Agentic AI as a Service) 기업 애피어(Appier)가 최신 연구 논문 “거대언어모델의 캘리브레이션 연구: 응답에서 역량으로(On Calibration of Large Language Models: From Response to Capability)”를 발표하며, 고도화된 AI 혁신을 위한 지속적인 투자 성과를 공개했다. 이번 연구는 거대언어모델(이하 LLM)의 과도한 확신과 환각 현상을 해결하기 위해, AI 시스템이 주어진 과업을 해결할 수 있는지 스스로 능력을 평가하는 ’역량 캘리브레이션(Capability Calibration)’ 프레임워크를 제시한다.
이번 연구는 AI 에이전트에 중요한 역량을 부여한다. 답변을 생성하기 전에 해당 문제를 해결할 수 있는 가능성을 먼저 추정하는 능력이다. 정량화된 자기평가 메커니즘을 도입함으로써, AI 시스템은 보다 신뢰도 높은 의사결정을 내리고 연산 자원을 더욱 효율적으로 배분할 수 있다. 이를 통해 기업용 AI 도입 시 신뢰성, 비용 효율성, 확장성을 동시에 개선할 수 있다.
기존의 LLM 캘리브레이션은 개별 응답의 정확도, 즉 단일 답변이 맞는지에 초점을 맞춰왔다. 그러나 LLM의 출력은 확률적 특성을 가지기 때문에 동일한 질문에도 여러 번 시도할 경우 서로 다른 답변이 생성될 수 있다. 이 때문에 단일 응답만으로는 모델의 실제 역량을 충분히 파악하기 어렵다.
실제 기업 환경에서는 AI가 한 번 우연히 맞히는 것보다 해당 모델이 특정 과업을 일관되게 해결할 수 있는지 여부가 더 중요하다. 애피어의 역량 캘리브레이션 프레임워크는 평가 초점을 단일 응답의 확신도에서 ‘주어진 질문에 대해 모델이 성공적으로 문제를 해결할 확률(기대 성공률)’로 전환했다. 이를 통해 평가 대상은 개별 응답이 아닌 모델의 전반적인 문제 해결 역량으로 확장되며, 실제 비즈니스 환경에 보다 부합하는 성능 지표를 제공한다.
|
|
|
|
| 덧글쓰기 |
 |
|
|
|
|
|
|
총 137211의
게시물이 있습니다. |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1|
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
|
|
|
|
최신게임뉴스
