llm-jp/open-japanese-llm-leaderboard

Update README.md

Update

Update

Update

Update

Apply ruff

Use ruff

Change leaderboard to explicitly indicate 0 shots

モデルに関する注意書きをaboutからsubmitタブに変更

Change to prohibit resubmission of failed models

fix bug

submit可能なモデルの説明を追加, モデル列にshot数を追加

英文修正

a ⭐ -> ⭐

説明の修正

autoに関する説明追加

multimodal, base merges

Precisionの選択に関する説明を追加: autoオプションの対応フォーマットと選択基準を明記

モデルタイプの追加・変更: マルチモーダルとベースマージを追加し、RL-tunedの名称を更新

AVGに関する説明を追加

Hide label in the size vs. score graph by default

Add torch

Remove unused code

Add torch

Remove 'auto' from Enum and add handling for submissions with 'auto'.

Update

Update

Update

Update

fix jaqket

aio追加

Change output file name

Remove unused code

erase Auto

fix TypeError: Attenmpted to reuse key: 'float32'

feat: add auto and float32 precision options, set auto as default

Add auto/fp32 option and set auto as the default for submission

Remove unnecessary code

Change num_few_shots enum to handle int type

fewshot number str->int

Remove ?

Remove 'Unknown' and '?' from enum values

Avoid error when the contents repo is empty

Rename

Update submission functionality

Update EvalQueueColumn

Rename

Rename

Clean up

Clean up