geniacllm/

amenokaku-code-instruct-askllm-v1

データセット kunishou/amenokaku-code-instruct に対して、 Ask-LLM 手法でスコア付けしたデータセットです。 元データセットのカラムに加え askllm_score というカラムが追加されており、ここに Ask-LLM のスコアが格納されています。 Ask-LLM でスコア付けに使用した LLM は Rakuten/RakutenAI-7B-instruct で、プロンプトは以下の通りです。

{data}

Does the previous paragraph demarcated within ### and ### contain informative signal for pre-training a large-language model? An informative datapoint should be well-formatted, contain some usable knowledge of the world… See the full description on the dataset page: https://huggingface.co/datasets/geniacllm/amenokaku-code-instruct-askllm-v1.