LocalLLaMAtyped-decisions

Name: LocalLLaMA/typed-decisions
Creator: LocalLLaMA

니스파크 기록 시작 10-14 12:03

찜하기 Hugging Face에서 보기 →

-11 기록 시작(10-14 12:03) 이후 · 지금 9위

니스파크 해설Hugging Face 데이터셋 카드 기준

10-14 오후 9위로 처음 잡혔고, 지금은 9위입니다.기록 시작 이후 트렌딩 점수 -11 · 니스파크 수집 기록 45회 기준 (자동 문장)

Typed Decisions는 타입이 지정된 확률적 의사결정을 평가하는 벤치마크입니다. 모델은 비정형 상태 하나를 입력받아 타입이 지정된 다섯 질문에 동시에 답하며, 각 답은 단일 레이블이 아닌 확률 분포입니다. 스키마는 System One의 기본 요소인 noul, choice, score를 따릅니다.

01비정형 상태 하나에 관한 다섯 질문에 동시에 답합니다.
02모든 답변은 단일 레이블이 아닌 확률 분포입니다.
03같은 형태의 API에서 데이터 행을 재실행할 수 있습니다.

쓰기 전 확인원문 기준

일반 모델의 zero-shot 표와 train으로 학습한 모델의 표는 서로 비교할 수 없습니다.
TypeSafe와 제휴하지 않았으며 Jev 모델을 재현하지 않습니다.

해설은 Hugging Face 데이터셋 카드(10-26 읽음)에 적힌 내용만 AI가 한국어로 정리했습니다. 원문에 없는 기능·수치는 넣지 않습니다. 원문 보기 →

수집 기록45회

10-26 19:22	9위	29
10-26 13:22	8위	30
10-26 07:22	8위	30
10-25 19:22	9위	35
10-25 13:22	8위	35
10-25 07:22	8위	35
10-24 19:22	9위	35
10-24 13:22	8위	35
10-24 07:22	9위	33
10-23 19:24	6위	36
10-23 13:23	7위	34
10-23 07:22	9위	32
10-22 19:23	10위	32
10-22 13:23	10위	31
10-22 07:22	10위	30
10-21 19:22	10위	31
10-21 13:22	9위	31
10-21 07:22	10위	28
10-20 19:22	9위	36
10-20 13:23	9위	37
10-20 07:22	9위	38
10-19 19:23	8위	39
10-19 13:22	7위	38
10-19 07:22	7위	39
10-18 19:22	8위	34
10-18 13:22	9위	36
10-18 07:22	9위	36
10-17 19:23	9위	35
10-17 13:22	9위	37
10-17 07:22	9위	38
10-16 19:22	9위	36
10-16 13:22	9위	36
10-16 09:07	9위	36
10-16 07:22	9위	36
10-15 19:22	10위	40
10-15 13:23	8위	45
10-15 07:22	6위	46
10-14 19:23	8위	41
10-14 13:22	8위	40
10-14 12:52	8위	40
10-14 12:29	8위	40
10-14 12:27	8위	40
10-14 12:15	9위	40
10-14 12:05	9위	40
10-14 12:03	9위	40