本文へ移動
10/7(水) 13:08
あとで読む
評価のソース

Short-Story · 短編小説

Lech Mazur · 決まった人物、筋、文体の要求を、1 本の完結した短編小説に自然に書き込みます。

公式の評価
Karu News での扱い観察中
証拠の予算点数に使いません
元データの時刻不明
直近の同期まだ集めていません

何を、どう測るか

600〜800 語の短編で、10 項目の創作要求があります。同じプロンプトを 3 社の審判が双方向に比較します。主スコアには Thurstone を使い、BT は診断だけにして二重に票を数えません。複数の段階がある場合は、決まった規則で選びます。

この証拠の使い方

観察中:正式なデータの再利用の範囲を整え、README と機械可読な成績のずれが解消してから接続します。

評価の限界と、データの帰属

モデル審判には文学的な好みが残ります。一部の型番は、すべての物語を完了していません。短編の力は、長編小説や日本語の文章力と同じではありません。

データのライセンス:ランキングデータの再利用を明示したライセンスは見つかっていません。GitHub で公開されていることは、利用の許諾を意味しません。

成績は Lech Mazur が公表したものです。元のスコアと Karu News の総合スコアは尺度が異なるため、足し合わせられません。