BizBench는 금융 및 비즈니스 분야에서 모델의 금융 이해력을 평가합니다. 이를 위해 프로그램 합성, 수량 추출 및 도메인 지식과 관련된 여러 작업을 포함하고 있습니다. 이 중에서도 중요한 능력은 다음과 같습니다:
프로그램 합성 능력: 모델이 자연어 질문을 이해하고 적절한 코드를 생성하여 정확한 답변을 계산할 수 있는 능력이 중요합니다.
수량 추출 능력: 모델이 텍스트와 테이블에서 숫자를 식별하고 추출할 수 있는 능력이 필요합니다.
금융 도메인 지식: 모델이 금융 용어, 개념 및 공식을 이해하고 적용할 수 있는 능력이 중요합니다.
이러한 능력들이 결합되어 모델이 실제 금융 문제를 해결하고 투명하고 정확한 추론을 제공할 수 있도록 도와줍니다.