nejumi/

swe-bench-verified-50-ja

このデータセットは、princeton-nlp/SWE-bench_VerifiedをQwen/Qwen3-235B-A22Bで日本語訳したnejumi/swe-bench-verified-jaデータセットから層化サンプリングによって作成されたサブセットが含まれています。 翻訳対象はproblem_statementとhint_textの非コード部分です。

	作成されたデータセット




	
	swe-bench-verified-100-ja

サイズ: 100インスタンス Resolved比率: 34.0% (元: 34.6%) Difficulty分布: <15 min fix: 38.0% (元: 38.8%) 15 min - 1 hour: 53.0% (元: 52.2%) 1-4 hours: 8.0% (元: 8.4%)