└── test_results ├── bloomz_3b_test_results_0515 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ ├── 儿科学213题 │ └── 外科学219题 ├── MOSS16B_test_results_0515 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ └── 儿科学213题 ├── bloomz_560m_test_results_0514 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ ├── 儿科学213题 │ └── 外科学219题 ├── chatglm6b_test_results_0514 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ └── 儿科学213题 ├── gpt3.5turbo_test_results_0512 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ ├── 儿科学213题 │ └── 外科学219题 ├── bloomz_7b1_mt_test_results_0515 └── zero_shot │ ├── 医学影像学20题 │ ├── 解剖学22题 │ ├── 教育_化学 │ ├── 皮肤性病学51题 │ ├── 药物分析学72题 │ ├── 临床医学101题 │ ├── 寄生虫学100题 │ ├── 组织胚胎学154题 │ ├── 免疫学163题 │ ├── 教育_物理 │ ├── 病理学176题 │ ├── 药理学200题 │ ├── 儿科学213题 │ └── 外科学219题 └── bloomz_1b1_test_results_0515 └── zero_shot ├── 医学影像学20题 ├── 解剖学22题 ├── 教育_化学 ├── 皮肤性病学51题 ├── 药物分析学72题 ├── 临床医学101题 ├── 寄生虫学100题 ├── 组织胚胎学154题 ├── 免疫学163题 ├── 教育_物理 ├── 病理学176题 ├── 药理学200题 └── 儿科学213题 /test_results/bloomz_3b_test_results_0515/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | D|||D|||True 3 | D|||D|||True 4 | B|||A|||False 5 | B|||C|||False 6 | D|||C|||False 7 | D|||D|||True 8 | B|||C|||False 9 | D|||D|||True 10 | B|||C|||False 11 | D|||D|||True 12 | C|||A|||False 13 | A|||D|||False 14 | B|||B|||True 15 | A|||A|||True 16 | D|||D|||True 17 | D|||D|||True 18 | A|||A|||True 19 | D|||A|||False 20 | D|||D|||True 21 | Average accuracy 0.600 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | A|||C|||False 2 | A|||D|||False 3 | A|||D|||False 4 | B|||A|||False 5 | B|||C|||False 6 | A|||C|||False 7 | A|||D|||False 8 | A|||C|||False 9 | B|||D|||False 10 | B|||C|||False 11 | A|||D|||False 12 | D|||A|||False 13 | D|||D|||True 14 | A|||B|||False 15 | A|||A|||True 16 | D|||D|||True 17 | A|||D|||False 18 | A|||A|||True 19 | A|||A|||True 20 | B|||D|||False 21 | Average accuracy 0.250 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||D|||True 3 | D|||D|||True 4 | D|||A|||False 5 | D|||C|||False 6 | D|||C|||False 7 | D|||D|||True 8 | D|||C|||False 9 | D|||D|||True 10 | D|||C|||False 11 | D|||D|||True 12 | D|||A|||False 13 | D|||D|||True 14 | D|||B|||False 15 | D|||A|||False 16 | D|||D|||True 17 | D|||D|||True 18 | D|||A|||False 19 | D|||A|||False 20 | D|||D|||True 21 | Average accuracy 0.450 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | B|||D|||False 3 | D|||D|||True 4 | B|||A|||False 5 | B|||C|||False 6 | B|||C|||False 7 | C|||D|||False 8 | C|||C|||True 9 | D|||D|||True 10 | D|||C|||False 11 | C|||D|||False 12 | D|||A|||False 13 | A|||D|||False 14 | A|||B|||False 15 | A|||A|||True 16 | D|||D|||True 17 | D|||D|||True 18 | B|||A|||False 19 | A|||A|||True 20 | C|||D|||False 21 | Average accuracy 0.350 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||D|||True 3 | D|||D|||True 4 | C|||A|||False 5 | C|||C|||True 6 | B|||C|||False 7 | B|||D|||False 8 | C|||C|||True 9 | D|||D|||True 10 | C|||C|||True 11 | C|||D|||False 12 | D|||A|||False 13 | D|||D|||True 14 | D|||B|||False 15 | A|||A|||True 16 | D|||D|||True 17 | D|||D|||True 18 | C|||A|||False 19 | A|||A|||True 20 | A|||D|||False 21 | Average accuracy 0.550 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | D|||D|||True 3 | D|||D|||True 4 | C|||A|||False 5 | B|||C|||False 6 | B|||C|||False 7 | C|||D|||False 8 | B|||C|||False 9 | D|||D|||True 10 | D|||C|||False 11 | A|||D|||False 12 | D|||A|||False 13 | A|||D|||False 14 | A|||B|||False 15 | A|||A|||True 16 | C|||D|||False 17 | D|||D|||True 18 | A|||A|||True 19 | A|||A|||True 20 | D|||D|||True 21 | Average accuracy 0.450 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/医学影像学20题: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | B|||D|||False 3 | B|||D|||False 4 | B|||A|||False 5 | B|||C|||False 6 | B|||C|||False 7 | B|||D|||False 8 | B|||C|||False 9 | B|||D|||False 10 | B|||C|||False 11 | B|||D|||False 12 | B|||A|||False 13 | B|||D|||False 14 | B|||B|||True 15 | B|||A|||False 16 | B|||D|||False 17 | B|||D|||False 18 | B|||A|||False 19 | B|||A|||False 20 | B|||D|||False 21 | Average accuracy 0.050 - 医学影像学20题 22 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | A|||C|||False 2 | D|||C|||False 3 | A|||C|||False 4 | B|||A|||False 5 | A|||B|||False 6 | D|||D|||True 7 | B|||C|||False 8 | A|||C|||False 9 | A|||B|||False 10 | B|||D|||False 11 | B|||C|||False 12 | A|||D|||False 13 | B|||C|||False 14 | A|||B|||False 15 | B|||A|||False 16 | B|||C|||False 17 | A|||A|||True 18 | B|||A|||False 19 | B|||C|||False 20 | A|||A|||True 21 | D|||B|||False 22 | B|||A|||False 23 | Average accuracy 0.136 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | D|||C|||False 3 | D|||C|||False 4 | C|||A|||False 5 | D|||B|||False 6 | D|||D|||True 7 | D|||C|||False 8 | A|||C|||False 9 | A|||B|||False 10 | D|||D|||True 11 | A|||C|||False 12 | B|||D|||False 13 | D|||C|||False 14 | B|||B|||True 15 | A|||A|||True 16 | A|||C|||False 17 | A|||A|||True 18 | D|||A|||False 19 | D|||C|||False 20 | D|||A|||False 21 | D|||B|||False 22 | D|||A|||False 23 | Average accuracy 0.227 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | A|||C|||False 3 | B|||C|||False 4 | C|||A|||False 5 | D|||B|||False 6 | D|||D|||True 7 | B|||C|||False 8 | A|||C|||False 9 | B|||B|||True 10 | B|||D|||False 11 | C|||C|||True 12 | D|||D|||True 13 | A|||C|||False 14 | B|||B|||True 15 | D|||A|||False 16 | A|||C|||False 17 | D|||A|||False 18 | B|||A|||False 19 | B|||C|||False 20 | D|||A|||False 21 | C|||B|||False 22 | B|||A|||False 23 | Average accuracy 0.273 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | B|||C|||False 3 | C|||C|||True 4 | C|||A|||False 5 | D|||B|||False 6 | B|||D|||False 7 | D|||C|||False 8 | A|||C|||False 9 | D|||B|||False 10 | D|||D|||True 11 | C|||C|||True 12 | D|||D|||True 13 | A|||C|||False 14 | B|||B|||True 15 | B|||A|||False 16 | C|||C|||True 17 | A|||A|||True 18 | B|||A|||False 19 | C|||C|||True 20 | A|||A|||True 21 | B|||B|||True 22 | C|||A|||False 23 | Average accuracy 0.500 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | B|||C|||False 3 | B|||C|||False 4 | D|||A|||False 5 | B|||B|||True 6 | B|||D|||False 7 | B|||C|||False 8 | B|||C|||False 9 | B|||B|||True 10 | B|||D|||False 11 | B|||C|||False 12 | B|||D|||False 13 | B|||C|||False 14 | B|||B|||True 15 | B|||A|||False 16 | B|||C|||False 17 | B|||A|||False 18 | D|||A|||False 19 | D|||C|||False 20 | B|||A|||False 21 | D|||B|||False 22 | D|||A|||False 23 | Average accuracy 0.136 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | C|||C|||True 3 | D|||C|||False 4 | D|||A|||False 5 | D|||B|||False 6 | D|||D|||True 7 | D|||C|||False 8 | D|||C|||False 9 | D|||B|||False 10 | D|||D|||True 11 | D|||C|||False 12 | D|||D|||True 13 | D|||C|||False 14 | D|||B|||False 15 | D|||A|||False 16 | D|||C|||False 17 | C|||A|||False 18 | D|||A|||False 19 | D|||C|||False 20 | D|||A|||False 21 | D|||B|||False 22 | D|||A|||False 23 | Average accuracy 0.182 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/解剖学22题: -------------------------------------------------------------------------------- 1 | A|||C|||False 2 | A|||C|||False 3 | A|||C|||False 4 | A|||A|||True 5 | D|||B|||False 6 | A|||D|||False 7 | C|||C|||True 8 | A|||C|||False 9 | A|||B|||False 10 | B|||D|||False 11 | A|||C|||False 12 | A|||D|||False 13 | A|||C|||False 14 | A|||B|||False 15 | A|||A|||True 16 | A|||C|||False 17 | A|||A|||True 18 | A|||A|||True 19 | A|||C|||False 20 | B|||A|||False 21 | C|||B|||False 22 | B|||A|||False 23 | Average accuracy 0.227 - 解剖学22题 24 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | B|||B|||True 3 | D|||A|||False 4 | A|||C|||False 5 | B|||D|||False 6 | B|||B|||True 7 | B|||D|||False 8 | D|||A|||False 9 | A|||B|||False 10 | A|||A|||True 11 | A|||B|||False 12 | C|||C|||True 13 | B|||D|||False 14 | B|||B|||True 15 | C|||C|||True 16 | B|||B|||True 17 | A|||D|||False 18 | B|||C|||False 19 | B|||B|||True 20 | B|||B|||True 21 | D|||D|||True 22 | B|||CD|||False 23 | B|||BC|||False 24 | B|||A|||False 25 | C|||C|||True 26 | B|||C|||False 27 | D|||D|||True 28 | C|||B|||False 29 | A|||D|||False 30 | B|||D|||False 31 | B|||D|||False 32 | B|||B|||True 33 | B|||B|||True 34 | C|||C|||True 35 | D|||C|||False 36 | B|||A|||False 37 | B|||B|||True 38 | A|||A|||True 39 | C|||D|||False 40 | A|||D|||False 41 | B|||B|||True 42 | B|||A|||False 43 | D|||C|||False 44 | B|||A|||False 45 | D|||D|||True 46 | C|||B|||False 47 | B|||C|||False 48 | D|||D|||True 49 | D|||A|||False 50 | C|||C|||True 51 | Average accuracy 0.440 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | B|||B|||True 3 | B|||A|||False 4 | A|||C|||False 5 | D|||D|||True 6 | A|||B|||False 7 | A|||D|||False 8 | B|||A|||False 9 | D|||B|||False 10 | A|||A|||True 11 | A|||B|||False 12 | B|||C|||False 13 | A|||D|||False 14 | A|||B|||False 15 | D|||C|||False 16 | B|||B|||True 17 | B|||D|||False 18 | A|||C|||False 19 | A|||B|||False 20 | B|||B|||True 21 | C|||D|||False 22 | A|||CD|||False 23 | B|||BC|||False 24 | A|||A|||True 25 | B|||C|||False 26 | B|||C|||False 27 | A|||D|||False 28 | A|||B|||False 29 | A|||D|||False 30 | D|||D|||True 31 | B|||D|||False 32 | B|||B|||True 33 | B|||B|||True 34 | D|||C|||False 35 | B|||C|||False 36 | B|||A|||False 37 | A|||B|||False 38 | A|||A|||True 39 | A|||D|||False 40 | B|||D|||False 41 | A|||B|||False 42 | B|||A|||False 43 | A|||C|||False 44 | A|||A|||True 45 | D|||D|||True 46 | A|||B|||False 47 | B|||C|||False 48 | A|||D|||False 49 | A|||A|||True 50 | B|||C|||False 51 | Average accuracy 0.280 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | B|||B|||True 3 | D|||A|||False 4 | B|||C|||False 5 | D|||D|||True 6 | B|||B|||True 7 | D|||D|||True 8 | B|||A|||False 9 | B|||B|||True 10 | D|||A|||False 11 | B|||B|||True 12 | B|||C|||False 13 | B|||D|||False 14 | B|||B|||True 15 | B|||C|||False 16 | B|||B|||True 17 | B|||D|||False 18 | B|||C|||False 19 | B|||B|||True 20 | B|||B|||True 21 | B|||D|||False 22 | B|||CD|||False 23 | B|||BC|||False 24 | B|||A|||False 25 | B|||C|||False 26 | B|||C|||False 27 | B|||D|||False 28 | B|||B|||True 29 | B|||D|||False 30 | B|||D|||False 31 | D|||D|||True 32 | B|||B|||True 33 | B|||B|||True 34 | D|||C|||False 35 | B|||C|||False 36 | B|||A|||False 37 | D|||B|||False 38 | D|||A|||False 39 | D|||D|||True 40 | B|||D|||False 41 | B|||B|||True 42 | B|||A|||False 43 | B|||C|||False 44 | D|||A|||False 45 | B|||D|||False 46 | B|||B|||True 47 | D|||C|||False 48 | B|||D|||False 49 | D|||A|||False 50 | D|||C|||False 51 | Average accuracy 0.340 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||B|||False 3 | D|||A|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||B|||False 7 | C|||D|||False 8 | A|||A|||True 9 | A|||B|||False 10 | A|||A|||True 11 | A|||B|||False 12 | D|||C|||False 13 | D|||D|||True 14 | D|||B|||False 15 | D|||C|||False 16 | D|||B|||False 17 | B|||D|||False 18 | D|||C|||False 19 | B|||B|||True 20 | D|||B|||False 21 | D|||D|||True 22 | D|||CD|||False 23 | D|||BC|||False 24 | D|||A|||False 25 | D|||C|||False 26 | D|||C|||False 27 | D|||D|||True 28 | A|||B|||False 29 | A|||D|||False 30 | D|||D|||True 31 | D|||D|||True 32 | D|||B|||False 33 | D|||B|||False 34 | D|||C|||False 35 | D|||C|||False 36 | C|||A|||False 37 | D|||B|||False 38 | B|||A|||False 39 | D|||D|||True 40 | D|||D|||True 41 | A|||B|||False 42 | D|||A|||False 43 | D|||C|||False 44 | A|||A|||True 45 | C|||D|||False 46 | D|||B|||False 47 | D|||C|||False 48 | D|||D|||True 49 | C|||A|||False 50 | D|||C|||False 51 | Average accuracy 0.280 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||B|||False 3 | D|||A|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||B|||False 7 | D|||D|||True 8 | D|||A|||False 9 | D|||B|||False 10 | D|||A|||False 11 | C|||B|||False 12 | D|||C|||False 13 | D|||D|||True 14 | C|||B|||False 15 | D|||C|||False 16 | D|||B|||False 17 | D|||D|||True 18 | D|||C|||False 19 | D|||B|||False 20 | D|||B|||False 21 | C|||D|||False 22 | D|||CD|||False 23 | C|||BC|||False 24 | B|||A|||False 25 | D|||C|||False 26 | D|||C|||False 27 | D|||D|||True 28 | D|||B|||False 29 | D|||D|||True 30 | D|||D|||True 31 | D|||D|||True 32 | C|||B|||False 33 | D|||B|||False 34 | C|||C|||True 35 | D|||C|||False 36 | C|||A|||False 37 | D|||B|||False 38 | D|||A|||False 39 | D|||D|||True 40 | D|||D|||True 41 | D|||B|||False 42 | D|||A|||False 43 | D|||C|||False 44 | D|||A|||False 45 | D|||D|||True 46 | D|||B|||False 47 | D|||C|||False 48 | D|||D|||True 49 | D|||A|||False 50 | D|||C|||False 51 | Average accuracy 0.280 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | B|||B|||True 3 | D|||A|||False 4 | 未成功回答|||C|||False 5 | D|||D|||True 6 | D|||B|||False 7 | A|||D|||False 8 | A|||A|||True 9 | B|||B|||True 10 | C|||A|||False 11 | A|||B|||False 12 | D|||C|||False 13 | A|||D|||False 14 | B|||B|||True 15 | C|||C|||True 16 | C|||B|||False 17 | A|||D|||False 18 | A|||C|||False 19 | B|||B|||True 20 | B|||B|||True 21 | A|||D|||False 22 | D|||CD|||False 23 | A|||BC|||False 24 | A|||A|||True 25 | D|||C|||False 26 | D|||C|||False 27 | D|||D|||True 28 | ACD|||B|||False 29 | D|||D|||True 30 | B|||D|||False 31 | B|||D|||False 32 | C|||B|||False 33 | C|||B|||False 34 | D|||C|||False 35 | D|||C|||False 36 | D|||A|||False 37 | D|||B|||False 38 | B|||A|||False 39 | D|||D|||True 40 | D|||D|||True 41 | C|||B|||False 42 | D|||A|||False 43 | C|||C|||True 44 | B|||A|||False 45 | C|||D|||False 46 | D|||B|||False 47 | B|||C|||False 48 | C|||D|||False 49 | A|||A|||True 50 | A|||C|||False 51 | Average accuracy 0.300 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | A|||A|||True 2 | B|||B|||True 3 | C|||C|||True 4 | C|||C|||True 5 | D|||D|||True 6 | A|||A|||True 7 | B|||B|||True 8 | C|||A|||False 9 | C|||D|||False 10 | B|||B|||True 11 | D|||A|||False 12 | A|||A|||True 13 | B|||C|||False 14 | D|||D|||True 15 | A|||A|||True 16 | C|||C|||True 17 | C|||B|||False 18 | D|||D|||True 19 | A|||A|||True 20 | C|||C|||True 21 | D|||D|||True 22 | B|||B|||True 23 | D|||D|||True 24 | C|||A|||False 25 | A|||C|||False 26 | D|||D|||True 27 | B|||C|||False 28 | C|||C|||True 29 | B|||D|||False 30 | B|||C|||False 31 | B|||B|||True 32 | C|||C|||True 33 | D|||D|||True 34 | B|||D|||False 35 | B|||B|||True 36 | D|||C|||False 37 | A|||A|||True 38 | B|||B|||True 39 | B|||A|||False 40 | B|||A|||False 41 | C|||C|||True 42 | A|||A|||True 43 | A|||A|||True 44 | B|||D|||False 45 | C|||C|||True 46 | C|||D|||False 47 | B|||C|||False 48 | D|||B|||False 49 | C|||C|||True 50 | C|||B|||False 51 | B|||B|||True 52 | Average accuracy 0.627 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/教育_化学: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | C|||B|||False 3 | A|||A|||True 4 | D|||C|||False 5 | C|||D|||False 6 | A|||B|||False 7 | C|||D|||False 8 | A|||A|||True 9 | A|||B|||False 10 | A|||A|||True 11 | A|||B|||False 12 | A|||C|||False 13 | A|||D|||False 14 | A|||B|||False 15 | B|||C|||False 16 | A|||B|||False 17 | B|||D|||False 18 | B|||C|||False 19 | A|||B|||False 20 | D|||B|||False 21 | A|||D|||False 22 | D|||CD|||False 23 | A|||BC|||False 24 | B|||A|||False 25 | D|||C|||False 26 | A|||C|||False 27 | A|||D|||False 28 | A|||B|||False 29 | D|||D|||True 30 | C|||D|||False 31 | A|||D|||False 32 | B|||B|||True 33 | A|||B|||False 34 | C|||C|||True 35 | A|||C|||False 36 | C|||A|||False 37 | A|||B|||False 38 | C|||A|||False 39 | C|||D|||False 40 | A|||D|||False 41 | A|||B|||False 42 | A|||A|||True 43 | B|||C|||False 44 | B|||A|||False 45 | C|||D|||False 46 | D|||B|||False 47 | D|||C|||False 48 | A|||D|||False 49 | C|||A|||False 50 | A|||C|||False 51 | Average accuracy 0.140 - 教育_化学 52 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | D|||B|||False 3 | D|||C|||False 4 | A|||C|||False 5 | A|||D|||False 6 | D|||A|||False 7 | B|||B|||True 8 | C|||A|||False 9 | B|||D|||False 10 | B|||B|||True 11 | C|||A|||False 12 | A|||A|||True 13 | D|||C|||False 14 | B|||D|||False 15 | A|||A|||True 16 | D|||C|||False 17 | C|||B|||False 18 | D|||D|||True 19 | A|||A|||True 20 | D|||C|||False 21 | D|||D|||True 22 | B|||B|||True 23 | D|||D|||True 24 | B|||A|||False 25 | A|||C|||False 26 | D|||D|||True 27 | B|||C|||False 28 | D|||C|||False 29 | D|||D|||True 30 | D|||C|||False 31 | D|||B|||False 32 | C|||C|||True 33 | D|||D|||True 34 | D|||D|||True 35 | A|||B|||False 36 | D|||C|||False 37 | A|||A|||True 38 | D|||B|||False 39 | A|||A|||True 40 | D|||A|||False 41 | D|||C|||False 42 | A|||A|||True 43 | A|||A|||True 44 | B|||D|||False 45 | B|||C|||False 46 | A|||D|||False 47 | C|||C|||True 48 | D|||B|||False 49 | D|||C|||False 50 | A|||B|||False 51 | B|||B|||True 52 | Average accuracy 0.392 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | C|||B|||False 3 | C|||C|||True 4 | C|||C|||True 5 | B|||D|||False 6 | A|||A|||True 7 | B|||B|||True 8 | C|||A|||False 9 | C|||D|||False 10 | B|||B|||True 11 | C|||A|||False 12 | A|||A|||True 13 | A|||C|||False 14 | B|||D|||False 15 | B|||A|||False 16 | C|||C|||True 17 | B|||B|||True 18 | D|||D|||True 19 | A|||A|||True 20 | C|||C|||True 21 | D|||D|||True 22 | A|||B|||False 23 | D|||D|||True 24 | A|||A|||True 25 | A|||C|||False 26 | D|||D|||True 27 | B|||C|||False 28 | C|||C|||True 29 | B|||D|||False 30 | D|||C|||False 31 | C|||B|||False 32 | B|||C|||False 33 | C|||D|||False 34 | B|||D|||False 35 | B|||B|||True 36 | C|||C|||True 37 | A|||A|||True 38 | A|||B|||False 39 | A|||A|||True 40 | A|||A|||True 41 | D|||C|||False 42 | A|||A|||True 43 | A|||A|||True 44 | B|||D|||False 45 | B|||C|||False 46 | C|||D|||False 47 | C|||C|||True 48 | D|||B|||False 49 | C|||C|||True 50 | D|||B|||False 51 | B|||B|||True 52 | Average accuracy 0.510 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | D|||A|||False 2 | C|||B|||False 3 | D|||C|||False 4 | C|||C|||True 5 | C|||D|||False 6 | D|||A|||False 7 | D|||B|||False 8 | C|||A|||False 9 | B|||D|||False 10 | B|||B|||True 11 | C|||A|||False 12 | C|||A|||False 13 | D|||C|||False 14 | 未成功回答|||D|||False 15 | B|||A|||False 16 | A|||C|||False 17 | B|||B|||True 18 | D|||D|||True 19 | A|||A|||True 20 | C|||C|||True 21 | D|||D|||True 22 | B|||B|||True 23 | D|||D|||True 24 | B|||A|||False 25 | C|||C|||True 26 | D|||D|||True 27 | C|||C|||True 28 | D|||C|||False 29 | D|||D|||True 30 | C|||C|||True 31 | B|||B|||True 32 | D|||C|||False 33 | D|||D|||True 34 | B|||D|||False 35 | B|||B|||True 36 | B|||C|||False 37 | A|||A|||True 38 | D|||B|||False 39 | A|||A|||True 40 | D|||A|||False 41 | C|||C|||True 42 | D|||A|||False 43 | A|||A|||True 44 | D|||D|||True 45 | B|||C|||False 46 | D|||D|||True 47 | C|||C|||True 48 | D|||B|||False 49 | B|||C|||False 50 | C|||B|||False 51 | D|||B|||False 52 | Average accuracy 0.471 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | A|||A|||True 2 | A|||B|||False 3 | A|||C|||False 4 | A|||C|||False 5 | D|||D|||True 6 | A|||A|||True 7 | A|||B|||False 8 | B|||A|||False 9 | B|||D|||False 10 | B|||B|||True 11 | B|||A|||False 12 | A|||A|||True 13 | A|||C|||False 14 | A|||D|||False 15 | A|||A|||True 16 | A|||C|||False 17 | B|||B|||True 18 | A|||D|||False 19 | A|||A|||True 20 | B|||C|||False 21 | C|||D|||False 22 | A|||B|||False 23 | B|||D|||False 24 | A|||A|||True 25 | B|||C|||False 26 | B|||D|||False 27 | C|||C|||True 28 | B|||C|||False 29 | B|||D|||False 30 | B|||C|||False 31 | B|||B|||True 32 | A|||C|||False 33 | A|||D|||False 34 | A|||D|||False 35 | A|||B|||False 36 | A|||C|||False 37 | B|||A|||False 38 | B|||B|||True 39 | A|||A|||True 40 | B|||A|||False 41 | B|||C|||False 42 | B|||A|||False 43 | A|||A|||True 44 | A|||D|||False 45 | B|||C|||False 46 | A|||D|||False 47 | B|||C|||False 48 | A|||B|||False 49 | B|||C|||False 50 | A|||B|||False 51 | D|||B|||False 52 | Average accuracy 0.275 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | B|||B|||True 3 | B|||C|||False 4 | B|||C|||False 5 | D|||D|||True 6 | D|||A|||False 7 | B|||B|||True 8 | B|||A|||False 9 | B|||D|||False 10 | D|||B|||False 11 | B|||A|||False 12 | B|||A|||False 13 | B|||C|||False 14 | B|||D|||False 15 | D|||A|||False 16 | B|||C|||False 17 | B|||B|||True 18 | B|||D|||False 19 | B|||A|||False 20 | B|||C|||False 21 | D|||D|||True 22 | B|||B|||True 23 | B|||D|||False 24 | B|||A|||False 25 | B|||C|||False 26 | B|||D|||False 27 | D|||C|||False 28 | B|||C|||False 29 | B|||D|||False 30 | B|||C|||False 31 | B|||B|||True 32 | B|||C|||False 33 | B|||D|||False 34 | B|||D|||False 35 | B|||B|||True 36 | B|||C|||False 37 | B|||A|||False 38 | B|||B|||True 39 | B|||A|||False 40 | B|||A|||False 41 | B|||C|||False 42 | B|||A|||False 43 | B|||A|||False 44 | D|||D|||True 45 | B|||C|||False 46 | D|||D|||True 47 | B|||C|||False 48 | B|||B|||True 49 | B|||C|||False 50 | B|||B|||True 51 | D|||B|||False 52 | Average accuracy 0.255 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/皮肤性病学51题: -------------------------------------------------------------------------------- 1 | D|||A|||False 2 | D|||B|||False 3 | C|||C|||True 4 | C|||C|||True 5 | D|||D|||True 6 | D|||A|||False 7 | D|||B|||False 8 | D|||A|||False 9 | D|||D|||True 10 | C|||B|||False 11 | C|||A|||False 12 | C|||A|||False 13 | C|||C|||True 14 | C|||D|||False 15 | D|||A|||False 16 | D|||C|||False 17 | D|||B|||False 18 | D|||D|||True 19 | D|||A|||False 20 | D|||C|||False 21 | C|||D|||False 22 | D|||B|||False 23 | D|||D|||True 24 | D|||A|||False 25 | D|||C|||False 26 | D|||D|||True 27 | D|||C|||False 28 | D|||C|||False 29 | D|||D|||True 30 | D|||C|||False 31 | D|||B|||False 32 | D|||C|||False 33 | D|||D|||True 34 | D|||D|||True 35 | D|||B|||False 36 | D|||C|||False 37 | D|||A|||False 38 | D|||B|||False 39 | D|||A|||False 40 | D|||A|||False 41 | D|||C|||False 42 | D|||A|||False 43 | D|||A|||False 44 | D|||D|||True 45 | D|||C|||False 46 | D|||D|||True 47 | D|||C|||False 48 | D|||B|||False 49 | D|||C|||False 50 | D|||B|||False 51 | D|||B|||False 52 | Average accuracy 0.255 - 皮肤性病学51题 53 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | D|||B|||False 2 | D|||B|||False 3 | A|||C|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||D|||True 7 | C|||C|||True 8 | D|||D|||True 9 | D|||A|||False 10 | D|||D|||True 11 | D|||D|||True 12 | D|||D|||True 13 | C|||D|||False 14 | A|||C|||False 15 | A|||A|||True 16 | C|||B|||False 17 | B|||A|||False 18 | D|||A|||False 19 | D|||D|||True 20 | D|||C|||False 21 | C|||B|||False 22 | D|||BD|||False 23 | D|||ABD|||False 24 | A|||A|||True 25 | D|||D|||True 26 | D|||A|||False 27 | A|||D|||False 28 | B|||D|||False 29 | D|||B|||False 30 | D|||B|||False 31 | A|||C|||False 32 | D|||A|||False 33 | A|||D|||False 34 | B|||B|||True 35 | A|||A|||True 36 | D|||B|||False 37 | D|||D|||True 38 | D|||B|||False 39 | D|||C|||False 40 | B|||D|||False 41 | C|||C|||True 42 | D|||C|||False 43 | D|||A|||False 44 | D|||D|||True 45 | A|||D|||False 46 | A|||A|||True 47 | D|||B|||False 48 | C|||C|||True 49 | C|||D|||False 50 | D|||C|||False 51 | D|||D|||True 52 | D|||D|||True 53 | D|||B|||False 54 | A|||A|||True 55 | D|||D|||True 56 | D|||C|||False 57 | D|||D|||True 58 | D|||D|||True 59 | D|||C|||False 60 | D|||A|||False 61 | D|||BCD|||False 62 | D|||AC|||False 63 | D|||ABC|||False 64 | C|||AD|||False 65 | B|||AC|||False 66 | A|||ABCD|||False 67 | A|||BC|||False 68 | D|||ABD|||False 69 | D|||ABC|||False 70 | C|||BCD|||False 71 | D|||BD|||False 72 | D|||ABC|||False 73 | Average accuracy 0.333 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | C|||B|||False 2 | A|||B|||False 3 | A|||C|||False 4 | D|||C|||False 5 | B|||D|||False 6 | B|||D|||False 7 | A|||C|||False 8 | A|||D|||False 9 | A|||A|||True 10 | A|||D|||False 11 | A|||D|||False 12 | A|||D|||False 13 | B|||D|||False 14 | B|||C|||False 15 | A|||A|||True 16 | A|||B|||False 17 | B|||A|||False 18 | B|||A|||False 19 | A|||D|||False 20 | A|||C|||False 21 | D|||B|||False 22 | D|||BD|||False 23 | A|||ABD|||False 24 | D|||A|||False 25 | D|||D|||True 26 | A|||A|||True 27 | A|||D|||False 28 | A|||D|||False 29 | B|||B|||True 30 | B|||B|||True 31 | B|||C|||False 32 | A|||A|||True 33 | A|||D|||False 34 | A|||B|||False 35 | A|||A|||True 36 | D|||B|||False 37 | D|||D|||True 38 | B|||B|||True 39 | A|||C|||False 40 | D|||D|||True 41 | A|||C|||False 42 | A|||C|||False 43 | A|||A|||True 44 | D|||D|||True 45 | A|||D|||False 46 | D|||A|||False 47 | A|||B|||False 48 | A|||C|||False 49 | A|||D|||False 50 | A|||C|||False 51 | B|||D|||False 52 | B|||D|||False 53 | A|||B|||False 54 | A|||A|||True 55 | A|||D|||False 56 | A|||C|||False 57 | A|||D|||False 58 | A|||D|||False 59 | A|||C|||False 60 | A|||A|||True 61 | B|||BCD|||False 62 | B|||AC|||False 63 | A|||ABC|||False 64 | A|||AD|||False 65 | B|||AC|||False 66 | A|||ABCD|||False 67 | B|||BC|||False 68 | A|||ABD|||False 69 | A|||ABC|||False 70 | D|||BCD|||False 71 | B|||BD|||False 72 | D|||ABC|||False 73 | Average accuracy 0.208 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | D|||B|||False 2 | C|||B|||False 3 | D|||C|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||D|||True 7 | D|||C|||False 8 | D|||D|||True 9 | D|||A|||False 10 | D|||D|||True 11 | D|||D|||True 12 | D|||D|||True 13 | D|||D|||True 14 | D|||C|||False 15 | D|||A|||False 16 | D|||B|||False 17 | D|||A|||False 18 | D|||A|||False 19 | D|||D|||True 20 | D|||C|||False 21 | D|||B|||False 22 | D|||BD|||False 23 | D|||ABD|||False 24 | D|||A|||False 25 | D|||D|||True 26 | D|||A|||False 27 | D|||D|||True 28 | D|||D|||True 29 | D|||B|||False 30 | D|||B|||False 31 | D|||C|||False 32 | C|||A|||False 33 | D|||D|||True 34 | C|||B|||False 35 | D|||A|||False 36 | D|||B|||False 37 | C|||D|||False 38 | D|||B|||False 39 | D|||C|||False 40 | D|||D|||True 41 | D|||C|||False 42 | D|||C|||False 43 | D|||A|||False 44 | D|||D|||True 45 | D|||D|||True 46 | D|||A|||False 47 | D|||B|||False 48 | D|||C|||False 49 | D|||D|||True 50 | D|||C|||False 51 | D|||D|||True 52 | D|||D|||True 53 | D|||B|||False 54 | D|||A|||False 55 | D|||D|||True 56 | D|||C|||False 57 | D|||D|||True 58 | D|||D|||True 59 | D|||C|||False 60 | D|||A|||False 61 | D|||BCD|||False 62 | D|||AC|||False 63 | D|||ABC|||False 64 | D|||AD|||False 65 | D|||AC|||False 66 | C|||ABCD|||False 67 | D|||BC|||False 68 | D|||ABD|||False 69 | D|||ABC|||False 70 | D|||BCD|||False 71 | D|||BD|||False 72 | D|||ABC|||False 73 | Average accuracy 0.292 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | D|||B|||False 3 | B|||C|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||D|||True 7 | B|||C|||False 8 | D|||D|||True 9 | D|||A|||False 10 | B|||D|||False 11 | B|||D|||False 12 | B|||D|||False 13 | D|||D|||True 14 | D|||C|||False 15 | B|||A|||False 16 | D|||B|||False 17 | D|||A|||False 18 | B|||A|||False 19 | D|||D|||True 20 | D|||C|||False 21 | D|||B|||False 22 | B|||BD|||False 23 | B|||ABD|||False 24 | B|||A|||False 25 | D|||D|||True 26 | D|||A|||False 27 | B|||D|||False 28 | B|||D|||False 29 | B|||B|||True 30 | B|||B|||True 31 | B|||C|||False 32 | B|||A|||False 33 | B|||D|||False 34 | B|||B|||True 35 | D|||A|||False 36 | D|||B|||False 37 | D|||D|||True 38 | B|||B|||True 39 | D|||C|||False 40 | B|||D|||False 41 | D|||C|||False 42 | D|||C|||False 43 | B|||A|||False 44 | D|||D|||True 45 | B|||D|||False 46 | B|||A|||False 47 | D|||B|||False 48 | A|||C|||False 49 | B|||D|||False 50 | D|||C|||False 51 | D|||D|||True 52 | D|||D|||True 53 | D|||B|||False 54 | B|||A|||False 55 | B|||D|||False 56 | B|||C|||False 57 | D|||D|||True 58 | D|||D|||True 59 | B|||C|||False 60 | D|||A|||False 61 | B|||BCD|||False 62 | B|||AC|||False 63 | B|||ABC|||False 64 | D|||AD|||False 65 | B|||AC|||False 66 | B|||ABCD|||False 67 | B|||BC|||False 68 | D|||ABD|||False 69 | B|||ABC|||False 70 | D|||BCD|||False 71 | D|||BD|||False 72 | D|||ABC|||False 73 | Average accuracy 0.236 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | A|||B|||False 2 | A|||B|||False 3 | A|||C|||False 4 | A|||C|||False 5 | B|||D|||False 6 | B|||D|||False 7 | C|||C|||True 8 | C|||D|||False 9 | A|||A|||True 10 | D|||D|||True 11 | A|||D|||False 12 | B|||D|||False 13 | C|||D|||False 14 | D|||C|||False 15 | A|||A|||True 16 | D|||B|||False 17 | A|||A|||True 18 | B|||A|||False 19 | A|||D|||False 20 | A|||C|||False 21 | C|||B|||False 22 | D|||BD|||False 23 | C|||ABD|||False 24 | A|||A|||True 25 | A|||D|||False 26 | A|||A|||True 27 | B|||D|||False 28 | B|||D|||False 29 | D|||B|||False 30 | B|||B|||True 31 | A|||C|||False 32 | D|||A|||False 33 | A|||D|||False 34 | B|||B|||True 35 | B|||A|||False 36 | C|||B|||False 37 | D|||D|||True 38 | A|||B|||False 39 | C|||C|||True 40 | A|||D|||False 41 | C|||C|||True 42 | D|||C|||False 43 | D|||A|||False 44 | D|||D|||True 45 | B|||D|||False 46 | A|||A|||True 47 | B|||B|||True 48 | A|||C|||False 49 | A|||D|||False 50 | A|||C|||False 51 | B|||D|||False 52 | B|||D|||False 53 | D|||B|||False 54 | A|||A|||True 55 | C|||D|||False 56 | A|||C|||False 57 | C|||D|||False 58 | A|||D|||False 59 | A|||C|||False 60 | A|||A|||True 61 | B|||BCD|||False 62 | A|||AC|||False 63 | B|||ABC|||False 64 | C|||AD|||False 65 | A|||AC|||False 66 | B|||ABCD|||False 67 | A|||BC|||False 68 | D|||ABD|||False 69 | A|||ABC|||False 70 | C|||BCD|||False 71 | B|||BD|||False 72 | A|||ABC|||False 73 | Average accuracy 0.236 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | C|||B|||False 2 | A|||B|||False 3 | A|||C|||False 4 | D|||C|||False 5 | D|||D|||True 6 | C|||D|||False 7 | D|||C|||False 8 | C|||D|||False 9 | C|||A|||False 10 | D|||D|||True 11 | D|||D|||True 12 | D|||D|||True 13 | C|||D|||False 14 | D|||C|||False 15 | D|||A|||False 16 | C|||B|||False 17 | C|||A|||False 18 | D|||A|||False 19 | D|||D|||True 20 | C|||C|||True 21 | B|||B|||True 22 | C|||BD|||False 23 | B|||ABD|||False 24 | D|||A|||False 25 | B|||D|||False 26 | D|||A|||False 27 | B|||D|||False 28 | B|||D|||False 29 | D|||B|||False 30 | B|||B|||True 31 | A|||C|||False 32 | D|||A|||False 33 | D|||D|||True 34 | B|||B|||True 35 | C|||A|||False 36 | 未成功回答|||B|||False 37 | D|||D|||True 38 | C|||B|||False 39 | D|||C|||False 40 | B|||D|||False 41 | C|||C|||True 42 | D|||C|||False 43 | D|||A|||False 44 | D|||D|||True 45 | B|||D|||False 46 | D|||A|||False 47 | D|||B|||False 48 | B|||C|||False 49 | D|||D|||True 50 | D|||C|||False 51 | C|||D|||False 52 | C|||D|||False 53 | D|||B|||False 54 | A|||A|||True 55 | D|||D|||True 56 | A|||C|||False 57 | C|||D|||False 58 | D|||D|||True 59 | D|||C|||False 60 | D|||A|||False 61 | D|||BCD|||False 62 | B|||AC|||False 63 | D|||ABC|||False 64 | D|||AD|||False 65 | B|||AC|||False 66 | D|||ABCD|||False 67 | B|||BC|||False 68 | C|||ABD|||False 69 | B|||ABC|||False 70 | B|||BCD|||False 71 | D|||BD|||False 72 | D|||ABC|||False 73 | Average accuracy 0.236 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/药物分析学72题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | B|||B|||True 3 | B|||C|||False 4 | B|||C|||False 5 | B|||D|||False 6 | A|||D|||False 7 | C|||C|||True 8 | D|||D|||True 9 | C|||A|||False 10 | B|||D|||False 11 | D|||D|||True 12 | C|||D|||False 13 | B|||D|||False 14 | D|||C|||False 15 | B|||A|||False 16 | B|||B|||True 17 | B|||A|||False 18 | B|||A|||False 19 | B|||D|||False 20 | A|||C|||False 21 | C|||B|||False 22 | D|||BD|||False 23 | B|||ABD|||False 24 | B|||A|||False 25 | D|||D|||True 26 | C|||A|||False 27 | A|||D|||False 28 | B|||D|||False 29 | C|||B|||False 30 | A|||B|||False 31 | B|||C|||False 32 | B|||A|||False 33 | C|||D|||False 34 | B|||B|||True 35 | B|||A|||False 36 | D|||B|||False 37 | B|||D|||False 38 | C|||B|||False 39 | D|||C|||False 40 | D|||D|||True 41 | C|||C|||True 42 | B|||C|||False 43 | C|||A|||False 44 | B|||D|||False 45 | A|||D|||False 46 | A|||A|||True 47 | B|||B|||True 48 | C|||C|||True 49 | D|||D|||True 50 | A|||C|||False 51 | C|||D|||False 52 | C|||D|||False 53 | C|||B|||False 54 | A|||A|||True 55 | D|||D|||True 56 | C|||C|||True 57 | B|||D|||False 58 | B|||D|||False 59 | C|||C|||True 60 | B|||A|||False 61 | D|||BCD|||False 62 | A|||AC|||False 63 | B|||ABC|||False 64 | C|||AD|||False 65 | C|||AC|||False 66 | B|||ABCD|||False 67 | B|||BC|||False 68 | B|||ABD|||False 69 | B|||ABC|||False 70 | D|||BCD|||False 71 | D|||BD|||False 72 | C|||ABC|||False 73 | Average accuracy 0.250 - 药物分析学72题 74 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | B|||D|||False 3 | B|||B|||True 4 | C|||C|||True 5 | D|||D|||True 6 | A|||C|||False 7 | A|||A|||True 8 | C|||C|||True 9 | B|||D|||False 10 | D|||D|||True 11 | C|||A|||False 12 | B|||B|||True 13 | D|||D|||True 14 | C|||C|||True 15 | C|||D|||False 16 | C|||C|||True 17 | D|||D|||True 18 | C|||C|||True 19 | D|||D|||True 20 | B|||B|||True 21 | D|||D|||True 22 | C|||C|||True 23 | D|||C|||False 24 | D|||C|||False 25 | C|||C|||True 26 | A|||A|||True 27 | B|||C|||False 28 | B|||C|||False 29 | A|||C|||False 30 | B|||C|||False 31 | A|||B|||False 32 | D|||D|||True 33 | D|||D|||True 34 | B|||B|||True 35 | D|||D|||True 36 | B|||B|||True 37 | D|||D|||True 38 | B|||B|||True 39 | D|||D|||True 40 | B|||B|||True 41 | D|||A|||False 42 | A|||A|||True 43 | A|||A|||True 44 | C|||A|||False 45 | D|||B|||False 46 | C|||D|||False 47 | C|||C|||True 48 | C|||D|||False 49 | A|||D|||False 50 | B|||A|||False 51 | D|||D|||True 52 | D|||D|||True 53 | B|||A|||False 54 | C|||D|||False 55 | D|||D|||True 56 | D|||D|||True 57 | A|||A|||True 58 | C|||B|||False 59 | D|||D|||True 60 | A|||B|||False 61 | A|||A|||True 62 | B|||D|||False 63 | A|||A|||True 64 | A|||B|||False 65 | D|||D|||True 66 | C|||C|||True 67 | D|||D|||True 68 | C|||C|||True 69 | D|||D|||True 70 | A|||A|||True 71 | C|||C|||True 72 | D|||D|||True 73 | D|||D|||True 74 | A|||A|||True 75 | B|||B|||True 76 | B|||B|||True 77 | D|||D|||True 78 | C|||C|||True 79 | C|||B|||False 80 | A|||A|||True 81 | B|||A|||False 82 | A|||A|||True 83 | D|||D|||True 84 | C|||B|||False 85 | B|||B|||True 86 | C|||D|||False 87 | C|||C|||True 88 | A|||A|||True 89 | B|||B|||True 90 | C|||C|||True 91 | C|||C|||True 92 | C|||C|||True 93 | B|||B|||True 94 | D|||A|||False 95 | A|||A|||True 96 | D|||D|||True 97 | C|||C|||True 98 | D|||D|||True 99 | B|||B|||True 100 | D|||D|||True 101 | D|||D|||True 102 | Average accuracy 0.693 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | B|||D|||False 3 | C|||B|||False 4 | C|||C|||True 5 | A|||D|||False 6 | A|||C|||False 7 | A|||A|||True 8 | C|||C|||True 9 | D|||D|||True 10 | A|||D|||False 11 | A|||A|||True 12 | B|||B|||True 13 | D|||D|||True 14 | A|||C|||False 15 | B|||D|||False 16 | C|||C|||True 17 | D|||D|||True 18 | A|||C|||False 19 | D|||D|||True 20 | B|||B|||True 21 | C|||D|||False 22 | C|||C|||True 23 | D|||C|||False 24 | A|||C|||False 25 | C|||C|||True 26 | D|||A|||False 27 | C|||C|||True 28 | C|||C|||True 29 | A|||C|||False 30 | A|||C|||False 31 | A|||B|||False 32 | D|||D|||True 33 | B|||D|||False 34 | A|||B|||False 35 | D|||D|||True 36 | B|||B|||True 37 | C|||D|||False 38 | A|||B|||False 39 | D|||D|||True 40 | A|||B|||False 41 | A|||A|||True 42 | A|||A|||True 43 | A|||A|||True 44 | A|||A|||True 45 | D|||B|||False 46 | C|||D|||False 47 | C|||C|||True 48 | A|||D|||False 49 | C|||D|||False 50 | A|||A|||True 51 | C|||D|||False 52 | D|||D|||True 53 | A|||A|||True 54 | D|||D|||True 55 | D|||D|||True 56 | D|||D|||True 57 | C|||A|||False 58 | B|||B|||True 59 | B|||D|||False 60 | A|||B|||False 61 | A|||A|||True 62 | D|||D|||True 63 | A|||A|||True 64 | B|||B|||True 65 | D|||D|||True 66 | A|||C|||False 67 | D|||D|||True 68 | B|||C|||False 69 | D|||D|||True 70 | A|||A|||True 71 | A|||C|||False 72 | A|||D|||False 73 | A|||D|||False 74 | A|||A|||True 75 | B|||B|||True 76 | B|||B|||True 77 | D|||D|||True 78 | C|||C|||True 79 | B|||B|||True 80 | D|||A|||False 81 | A|||A|||True 82 | A|||A|||True 83 | A|||D|||False 84 | D|||B|||False 85 | A|||B|||False 86 | C|||D|||False 87 | C|||C|||True 88 | A|||A|||True 89 | A|||B|||False 90 | D|||C|||False 91 | A|||C|||False 92 | C|||C|||True 93 | A|||B|||False 94 | A|||A|||True 95 | A|||A|||True 96 | D|||D|||True 97 | C|||C|||True 98 | B|||D|||False 99 | A|||B|||False 100 | D|||D|||True 101 | D|||D|||True 102 | Average accuracy 0.554 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | C|||A|||False 2 | D|||D|||True 3 | B|||B|||True 4 | C|||C|||True 5 | A|||D|||False 6 | C|||C|||True 7 | A|||A|||True 8 | C|||C|||True 9 | D|||D|||True 10 | C|||D|||False 11 | D|||A|||False 12 | D|||B|||False 13 | D|||D|||True 14 | C|||C|||True 15 | A|||D|||False 16 | C|||C|||True 17 | D|||D|||True 18 | C|||C|||True 19 | D|||D|||True 20 | B|||B|||True 21 | D|||D|||True 22 | C|||C|||True 23 | D|||C|||False 24 | C|||C|||True 25 | A|||C|||False 26 | D|||A|||False 27 | D|||C|||False 28 | C|||C|||True 29 | A|||C|||False 30 | D|||C|||False 31 | D|||B|||False 32 | D|||D|||True 33 | D|||D|||True 34 | A|||B|||False 35 | D|||D|||True 36 | C|||B|||False 37 | D|||D|||True 38 | A|||B|||False 39 | D|||D|||True 40 | C|||B|||False 41 | D|||A|||False 42 | A|||A|||True 43 | B|||A|||False 44 | D|||A|||False 45 | D|||B|||False 46 | C|||D|||False 47 | C|||C|||True 48 | D|||D|||True 49 | A|||D|||False 50 | D|||A|||False 51 | C|||D|||False 52 | D|||D|||True 53 | D|||A|||False 54 | C|||D|||False 55 | A|||D|||False 56 | D|||D|||True 57 | C|||A|||False 58 | C|||B|||False 59 | B|||D|||False 60 | D|||B|||False 61 | D|||A|||False 62 | D|||D|||True 63 | B|||A|||False 64 | A|||B|||False 65 | D|||D|||True 66 | B|||C|||False 67 | D|||D|||True 68 | D|||C|||False 69 | D|||D|||True 70 | A|||A|||True 71 | D|||C|||False 72 | A|||D|||False 73 | D|||D|||True 74 | A|||A|||True 75 | A|||B|||False 76 | D|||B|||False 77 | C|||D|||False 78 | C|||C|||True 79 | A|||B|||False 80 | D|||A|||False 81 | C|||A|||False 82 | D|||A|||False 83 | D|||D|||True 84 | C|||B|||False 85 | B|||B|||True 86 | C|||D|||False 87 | D|||C|||False 88 | D|||A|||False 89 | A|||B|||False 90 | D|||C|||False 91 | C|||C|||True 92 | C|||C|||True 93 | D|||B|||False 94 | A|||A|||True 95 | B|||A|||False 96 | B|||D|||False 97 | D|||C|||False 98 | B|||D|||False 99 | A|||B|||False 100 | D|||D|||True 101 | D|||D|||True 102 | Average accuracy 0.426 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | D|||D|||True 3 | C|||B|||False 4 | D|||C|||False 5 | D|||D|||True 6 | B|||C|||False 7 | D|||A|||False 8 | C|||C|||True 9 | B|||D|||False 10 | D|||D|||True 11 | D|||A|||False 12 | D|||B|||False 13 | C|||D|||False 14 | C|||C|||True 15 | A|||D|||False 16 | C|||C|||True 17 | D|||D|||True 18 | C|||C|||True 19 | D|||D|||True 20 | B|||B|||True 21 | D|||D|||True 22 | C|||C|||True 23 | D|||C|||False 24 | A|||C|||False 25 | B|||C|||False 26 | D|||A|||False 27 | D|||C|||False 28 | B|||C|||False 29 | D|||C|||False 30 | D|||C|||False 31 | A|||B|||False 32 | D|||D|||True 33 | D|||D|||True 34 | B|||B|||True 35 | D|||D|||True 36 | C|||B|||False 37 | C|||D|||False 38 | A|||B|||False 39 | B|||D|||False 40 | D|||B|||False 41 | D|||A|||False 42 | C|||A|||False 43 | B|||A|||False 44 | A|||A|||True 45 | D|||B|||False 46 | C|||D|||False 47 | C|||C|||True 48 | D|||D|||True 49 | D|||D|||True 50 | D|||A|||False 51 | D|||D|||True 52 | D|||D|||True 53 | D|||A|||False 54 | C|||D|||False 55 | D|||D|||True 56 | D|||D|||True 57 | B|||A|||False 58 | D|||B|||False 59 | A|||D|||False 60 | D|||B|||False 61 | D|||A|||False 62 | D|||D|||True 63 | A|||A|||True 64 | B|||B|||True 65 | B|||D|||False 66 | C|||C|||True 67 | D|||D|||True 68 | D|||C|||False 69 | B|||D|||False 70 | D|||A|||False 71 | C|||C|||True 72 | D|||D|||True 73 | B|||D|||False 74 | C|||A|||False 75 | B|||B|||True 76 | D|||B|||False 77 | D|||D|||True 78 | C|||C|||True 79 | D|||B|||False 80 | C|||A|||False 81 | B|||A|||False 82 | B|||A|||False 83 | D|||D|||True 84 | C|||B|||False 85 | C|||B|||False 86 | C|||D|||False 87 | C|||C|||True 88 | A|||A|||True 89 | B|||B|||True 90 | D|||C|||False 91 | C|||C|||True 92 | C|||C|||True 93 | B|||B|||True 94 | B|||A|||False 95 | D|||A|||False 96 | D|||D|||True 97 | B|||C|||False 98 | D|||D|||True 99 | B|||B|||True 100 | D|||D|||True 101 | D|||D|||True 102 | Average accuracy 0.455 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | A|||D|||False 3 | B|||B|||True 4 | A|||C|||False 5 | A|||D|||False 6 | B|||C|||False 7 | A|||A|||True 8 | A|||C|||False 9 | A|||D|||False 10 | B|||D|||False 11 | B|||A|||False 12 | B|||B|||True 13 | A|||D|||False 14 | A|||C|||False 15 | A|||D|||False 16 | C|||C|||True 17 | D|||D|||True 18 | A|||C|||False 19 | D|||D|||True 20 | A|||B|||False 21 | A|||D|||False 22 | B|||C|||False 23 | D|||C|||False 24 | A|||C|||False 25 | B|||C|||False 26 | A|||A|||True 27 | A|||C|||False 28 | B|||C|||False 29 | D|||C|||False 30 | A|||C|||False 31 | B|||B|||True 32 | A|||D|||False 33 | A|||D|||False 34 | B|||B|||True 35 | A|||D|||False 36 | A|||B|||False 37 | A|||D|||False 38 | A|||B|||False 39 | C|||D|||False 40 | B|||B|||True 41 | A|||A|||True 42 | D|||A|||False 43 | B|||A|||False 44 | A|||A|||True 45 | A|||B|||False 46 | A|||D|||False 47 | B|||C|||False 48 | D|||D|||True 49 | D|||D|||True 50 | A|||A|||True 51 | D|||D|||True 52 | D|||D|||True 53 | A|||A|||True 54 | B|||D|||False 55 | B|||D|||False 56 | D|||D|||True 57 | B|||A|||False 58 | B|||B|||True 59 | A|||D|||False 60 | A|||B|||False 61 | A|||A|||True 62 | A|||D|||False 63 | A|||A|||True 64 | A|||B|||False 65 | D|||D|||True 66 | A|||C|||False 67 | A|||D|||False 68 | B|||C|||False 69 | D|||D|||True 70 | D|||A|||False 71 | A|||C|||False 72 | D|||D|||True 73 | B|||D|||False 74 | B|||A|||False 75 | A|||B|||False 76 | B|||B|||True 77 | B|||D|||False 78 | A|||C|||False 79 | D|||B|||False 80 | D|||A|||False 81 | B|||A|||False 82 | A|||A|||True 83 | D|||D|||True 84 | D|||B|||False 85 | A|||B|||False 86 | A|||D|||False 87 | A|||C|||False 88 | A|||A|||True 89 | B|||B|||True 90 | D|||C|||False 91 | A|||C|||False 92 | B|||C|||False 93 | B|||B|||True 94 | B|||A|||False 95 | B|||A|||False 96 | A|||D|||False 97 | B|||C|||False 98 | B|||D|||False 99 | A|||B|||False 100 | D|||D|||True 101 | B|||D|||False 102 | Average accuracy 0.317 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | D|||A|||False 2 | D|||D|||True 3 | D|||B|||False 4 | D|||C|||False 5 | D|||D|||True 6 | D|||C|||False 7 | D|||A|||False 8 | D|||C|||False 9 | C|||D|||False 10 | D|||D|||True 11 | D|||A|||False 12 | D|||B|||False 13 | D|||D|||True 14 | D|||C|||False 15 | C|||D|||False 16 | D|||C|||False 17 | D|||D|||True 18 | D|||C|||False 19 | D|||D|||True 20 | C|||B|||False 21 | D|||D|||True 22 | D|||C|||False 23 | C|||C|||True 24 | D|||C|||False 25 | D|||C|||False 26 | C|||A|||False 27 | D|||C|||False 28 | C|||C|||True 29 | D|||C|||False 30 | D|||C|||False 31 | D|||B|||False 32 | D|||D|||True 33 | D|||D|||True 34 | D|||B|||False 35 | D|||D|||True 36 | C|||B|||False 37 | D|||D|||True 38 | D|||B|||False 39 | D|||D|||True 40 | D|||B|||False 41 | D|||A|||False 42 | C|||A|||False 43 | D|||A|||False 44 | D|||A|||False 45 | D|||B|||False 46 | D|||D|||True 47 | D|||C|||False 48 | C|||D|||False 49 | D|||D|||True 50 | D|||A|||False 51 | C|||D|||False 52 | D|||D|||True 53 | D|||A|||False 54 | D|||D|||True 55 | D|||D|||True 56 | D|||D|||True 57 | C|||A|||False 58 | D|||B|||False 59 | D|||D|||True 60 | C|||B|||False 61 | D|||A|||False 62 | D|||D|||True 63 | D|||A|||False 64 | D|||B|||False 65 | D|||D|||True 66 | D|||C|||False 67 | D|||D|||True 68 | D|||C|||False 69 | C|||D|||False 70 | D|||A|||False 71 | D|||C|||False 72 | D|||D|||True 73 | D|||D|||True 74 | D|||A|||False 75 | D|||B|||False 76 | C|||B|||False 77 | D|||D|||True 78 | D|||C|||False 79 | D|||B|||False 80 | D|||A|||False 81 | D|||A|||False 82 | D|||A|||False 83 | D|||D|||True 84 | D|||B|||False 85 | D|||B|||False 86 | D|||D|||True 87 | C|||C|||True 88 | D|||A|||False 89 | D|||B|||False 90 | C|||C|||True 91 | D|||C|||False 92 | D|||C|||False 93 | D|||B|||False 94 | D|||A|||False 95 | D|||A|||False 96 | D|||D|||True 97 | D|||C|||False 98 | D|||D|||True 99 | D|||B|||False 100 | D|||D|||True 101 | D|||D|||True 102 | Average accuracy 0.347 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | B|||B|||True 3 | D|||D|||True 4 | D|||D|||True 5 | D|||D|||True 6 | D|||D|||True 7 | D|||D|||True 8 | D|||C|||False 9 | C|||C|||True 10 | D|||C|||False 11 | B|||B|||True 12 | C|||D|||False 13 | A|||C|||False 14 | C|||C|||True 15 | D|||D|||True 16 | C|||B|||False 17 | C|||A|||False 18 | D|||D|||True 19 | D|||B|||False 20 | C|||B|||False 21 | D|||B|||False 22 | B|||A|||False 23 | D|||C|||False 24 | D|||C|||False 25 | D|||D|||True 26 | C|||B|||False 27 | C|||B|||False 28 | D|||D|||True 29 | D|||D|||True 30 | D|||D|||True 31 | A|||BCD|||False 32 | C|||BCD|||False 33 | D|||BCD|||False 34 | D|||ABCD|||False 35 | C|||AD|||False 36 | D|||CD|||False 37 | D|||ACD|||False 38 | D|||BCD|||False 39 | D|||AD|||False 40 | C|||C|||True 41 | D|||D|||True 42 | A|||D|||False 43 | C|||D|||False 44 | C|||C|||True 45 | C|||C|||True 46 | C|||D|||False 47 | B|||B|||True 48 | C|||C|||True 49 | C|||A|||False 50 | C|||C|||True 51 | D|||A|||False 52 | D|||D|||True 53 | C|||D|||False 54 | C|||C|||True 55 | C|||B|||False 56 | D|||C|||False 57 | B|||A|||False 58 | D|||D|||True 59 | C|||D|||False 60 | C|||C|||True 61 | D|||D|||True 62 | D|||D|||True 63 | C|||C|||True 64 | C|||B|||False 65 | D|||C|||False 66 | C|||B|||False 67 | C|||D|||False 68 | D|||D|||True 69 | A|||D|||False 70 | B|||B|||True 71 | A|||B|||False 72 | A|||A|||True 73 | D|||B|||False 74 | D|||D|||True 75 | D|||C|||False 76 | A|||D|||False 77 | A|||C|||False 78 | D|||D|||True 79 | C|||A|||False 80 | A|||C|||False 81 | A|||D|||False 82 | D|||D|||True 83 | A|||A|||True 84 | D|||C|||False 85 | C|||A|||False 86 | B|||C|||False 87 | C|||B|||False 88 | A|||B|||False 89 | B|||C|||False 90 | D|||D|||True 91 | B|||A|||False 92 | D|||D|||True 93 | A|||D|||False 94 | C|||ABC|||False 95 | A|||ABCD|||False 96 | D|||ABCD|||False 97 | D|||ACBD|||False 98 | D|||ABC|||False 99 | D|||AC|||False 100 | A|||ABCD|||False 101 | Average accuracy 0.390 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/临床医学101题: -------------------------------------------------------------------------------- 1 | B|||A|||False 2 | B|||D|||False 3 | B|||B|||True 4 | B|||C|||False 5 | B|||D|||False 6 | B|||C|||False 7 | B|||A|||False 8 | B|||C|||False 9 | B|||D|||False 10 | B|||D|||False 11 | D|||A|||False 12 | B|||B|||True 13 | B|||D|||False 14 | B|||C|||False 15 | D|||D|||True 16 | B|||C|||False 17 | D|||D|||True 18 | B|||C|||False 19 | B|||D|||False 20 | B|||B|||True 21 | B|||D|||False 22 | B|||C|||False 23 | B|||C|||False 24 | B|||C|||False 25 | B|||C|||False 26 | B|||A|||False 27 | B|||C|||False 28 | B|||C|||False 29 | B|||C|||False 30 | B|||C|||False 31 | B|||B|||True 32 | B|||D|||False 33 | B|||D|||False 34 | B|||B|||True 35 | B|||D|||False 36 | D|||B|||False 37 | B|||D|||False 38 | B|||B|||True 39 | B|||D|||False 40 | B|||B|||True 41 | B|||A|||False 42 | D|||A|||False 43 | B|||A|||False 44 | B|||A|||False 45 | B|||B|||True 46 | B|||D|||False 47 | B|||C|||False 48 | B|||D|||False 49 | B|||D|||False 50 | B|||A|||False 51 | D|||D|||True 52 | B|||D|||False 53 | B|||A|||False 54 | B|||D|||False 55 | B|||D|||False 56 | B|||D|||False 57 | B|||A|||False 58 | B|||B|||True 59 | B|||D|||False 60 | D|||B|||False 61 | B|||A|||False 62 | B|||D|||False 63 | B|||A|||False 64 | B|||B|||True 65 | B|||D|||False 66 | B|||C|||False 67 | B|||D|||False 68 | B|||C|||False 69 | B|||D|||False 70 | B|||A|||False 71 | B|||C|||False 72 | B|||D|||False 73 | B|||D|||False 74 | B|||A|||False 75 | B|||B|||True 76 | B|||B|||True 77 | B|||D|||False 78 | B|||C|||False 79 | B|||B|||True 80 | B|||A|||False 81 | B|||A|||False 82 | D|||A|||False 83 | B|||D|||False 84 | B|||B|||True 85 | D|||B|||False 86 | B|||D|||False 87 | B|||C|||False 88 | B|||A|||False 89 | B|||B|||True 90 | B|||C|||False 91 | B|||C|||False 92 | B|||C|||False 93 | B|||B|||True 94 | B|||A|||False 95 | B|||A|||False 96 | B|||D|||False 97 | B|||C|||False 98 | B|||D|||False 99 | B|||B|||True 100 | B|||D|||False 101 | B|||D|||False 102 | Average accuracy 0.198 - 临床医学101题 103 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||B|||False 3 | D|||D|||True 4 | D|||D|||True 5 | D|||D|||True 6 | D|||D|||True 7 | D|||D|||True 8 | D|||C|||False 9 | D|||C|||False 10 | D|||C|||False 11 | D|||B|||False 12 | D|||D|||True 13 | D|||C|||False 14 | D|||C|||False 15 | D|||D|||True 16 | D|||B|||False 17 | D|||A|||False 18 | D|||D|||True 19 | D|||B|||False 20 | D|||B|||False 21 | D|||B|||False 22 | D|||A|||False 23 | C|||C|||True 24 | D|||C|||False 25 | D|||D|||True 26 | D|||B|||False 27 | D|||B|||False 28 | D|||D|||True 29 | D|||D|||True 30 | D|||D|||True 31 | D|||BCD|||False 32 | D|||BCD|||False 33 | D|||BCD|||False 34 | D|||ABCD|||False 35 | D|||AD|||False 36 | D|||CD|||False 37 | D|||ACD|||False 38 | D|||BCD|||False 39 | D|||AD|||False 40 | D|||C|||False 41 | D|||D|||True 42 | D|||D|||True 43 | D|||D|||True 44 | D|||C|||False 45 | D|||C|||False 46 | D|||D|||True 47 | D|||B|||False 48 | D|||C|||False 49 | D|||A|||False 50 | D|||C|||False 51 | D|||A|||False 52 | D|||D|||True 53 | D|||D|||True 54 | D|||C|||False 55 | D|||B|||False 56 | D|||C|||False 57 | D|||A|||False 58 | D|||D|||True 59 | D|||D|||True 60 | D|||C|||False 61 | D|||D|||True 62 | D|||D|||True 63 | D|||C|||False 64 | D|||B|||False 65 | D|||C|||False 66 | D|||B|||False 67 | D|||D|||True 68 | D|||D|||True 69 | D|||D|||True 70 | D|||B|||False 71 | C|||B|||False 72 | D|||A|||False 73 | D|||B|||False 74 | D|||D|||True 75 | D|||C|||False 76 | D|||D|||True 77 | D|||C|||False 78 | D|||D|||True 79 | D|||A|||False 80 | D|||C|||False 81 | D|||D|||True 82 | D|||D|||True 83 | D|||A|||False 84 | D|||C|||False 85 | D|||A|||False 86 | D|||C|||False 87 | D|||B|||False 88 | D|||B|||False 89 | D|||C|||False 90 | D|||D|||True 91 | D|||A|||False 92 | D|||D|||True 93 | C|||D|||False 94 | D|||ABC|||False 95 | D|||ABCD|||False 96 | D|||ABCD|||False 97 | D|||ACBD|||False 98 | D|||ABC|||False 99 | D|||AC|||False 100 | D|||ABCD|||False 101 | Average accuracy 0.330 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | B|||B|||True 3 | C|||D|||False 4 | D|||D|||True 5 | D|||D|||True 6 | D|||D|||True 7 | A|||D|||False 8 | D|||C|||False 9 | D|||C|||False 10 | A|||C|||False 11 | B|||B|||True 12 | B|||D|||False 13 | D|||C|||False 14 | D|||C|||False 15 | B|||D|||False 16 | C|||B|||False 17 | A|||A|||True 18 | D|||D|||True 19 | A|||B|||False 20 | C|||B|||False 21 | D|||B|||False 22 | B|||A|||False 23 | A|||C|||False 24 | C|||C|||True 25 | D|||D|||True 26 | B|||B|||True 27 | C|||B|||False 28 | D|||D|||True 29 | D|||D|||True 30 | B|||D|||False 31 | A|||BCD|||False 32 | A|||BCD|||False 33 | C|||BCD|||False 34 | B|||ABCD|||False 35 | D|||AD|||False 36 | C|||CD|||False 37 | D|||ACD|||False 38 | D|||BCD|||False 39 | B|||AD|||False 40 | C|||C|||True 41 | D|||D|||True 42 | B|||D|||False 43 | A|||D|||False 44 | A|||C|||False 45 | A|||C|||False 46 | C|||D|||False 47 | B|||B|||True 48 | B|||C|||False 49 | A|||A|||True 50 | D|||C|||False 51 | B|||A|||False 52 | D|||D|||True 53 | B|||D|||False 54 | B|||C|||False 55 | A|||B|||False 56 | C|||C|||True 57 | B|||A|||False 58 | D|||D|||True 59 | B|||D|||False 60 | C|||C|||True 61 | C|||D|||False 62 | D|||D|||True 63 | B|||C|||False 64 | C|||B|||False 65 | D|||C|||False 66 | D|||B|||False 67 | D|||D|||True 68 | D|||D|||True 69 | D|||D|||True 70 | B|||B|||True 71 | C|||B|||False 72 | A|||A|||True 73 | B|||B|||True 74 | D|||D|||True 75 | D|||C|||False 76 | B|||D|||False 77 | D|||C|||False 78 | D|||D|||True 79 | B|||A|||False 80 | C|||C|||True 81 | C|||D|||False 82 | A|||D|||False 83 | B|||A|||False 84 | A|||C|||False 85 | A|||A|||True 86 | B|||C|||False 87 | B|||B|||True 88 | C|||B|||False 89 | B|||C|||False 90 | B|||D|||False 91 | D|||A|||False 92 | B|||D|||False 93 | D|||D|||True 94 | B|||ABC|||False 95 | D|||ABCD|||False 96 | D|||ABCD|||False 97 | A|||ACBD|||False 98 | D|||ABC|||False 99 | B|||AC|||False 100 | D|||ABCD|||False 101 | Average accuracy 0.330 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | B|||B|||True 3 | B|||D|||False 4 | B|||D|||False 5 | C|||D|||False 6 | C|||D|||False 7 | D|||D|||True 8 | D|||C|||False 9 | B|||C|||False 10 | C|||C|||True 11 | B|||B|||True 12 | B|||D|||False 13 | C|||C|||True 14 | A|||C|||False 15 | A|||D|||False 16 | B|||B|||True 17 | A|||A|||True 18 | C|||D|||False 19 | 未成功回答|||B|||False 20 | B|||B|||True 21 | D|||B|||False 22 | B|||A|||False 23 | C|||C|||True 24 | C|||C|||True 25 | B|||D|||False 26 | C|||B|||False 27 | B|||B|||True 28 | A|||D|||False 29 | D|||D|||True 30 | B|||D|||False 31 | C|||BCD|||False 32 | A|||BCD|||False 33 | BD|||BCD|||False 34 | A|||ABCD|||False 35 | A|||AD|||False 36 | BCD|||CD|||False 37 | D|||ACD|||False 38 | D|||BCD|||False 39 | D|||AD|||False 40 | C|||C|||True 41 | D|||D|||True 42 | B|||D|||False 43 | B|||D|||False 44 | A|||C|||False 45 | C|||C|||True 46 | C|||D|||False 47 | B|||B|||True 48 | B|||C|||False 49 | A|||A|||True 50 | C|||C|||True 51 | B|||A|||False 52 | B|||D|||False 53 | C|||D|||False 54 | B|||C|||False 55 | B|||B|||True 56 | C|||C|||True 57 | B|||A|||False 58 | D|||D|||True 59 | C|||D|||False 60 | A|||C|||False 61 | C|||D|||False 62 | D|||D|||True 63 | C|||C|||True 64 | C|||B|||False 65 | B|||C|||False 66 | B|||B|||True 67 | D|||D|||True 68 | D|||D|||True 69 | D|||D|||True 70 | B|||B|||True 71 | A|||B|||False 72 | A|||A|||True 73 | B|||B|||True 74 | C|||D|||False 75 | C|||C|||True 76 | B|||D|||False 77 | A|||C|||False 78 | A|||D|||False 79 | C|||A|||False 80 | C|||C|||True 81 | C|||D|||False 82 | D|||D|||True 83 | A|||A|||True 84 | A|||C|||False 85 | A|||A|||True 86 | B|||C|||False 87 | B|||B|||True 88 | B|||B|||True 89 | C|||C|||True 90 | D|||D|||True 91 | A|||A|||True 92 | D|||D|||True 93 | D|||D|||True 94 | A|||ABC|||False 95 | B|||ABCD|||False 96 | D|||ABCD|||False 97 | B|||ACBD|||False 98 | A|||ABC|||False 99 | D|||AC|||False 100 | B|||ABCD|||False 101 | Average accuracy 0.430 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | B|||B|||True 3 | B|||D|||False 4 | B|||D|||False 5 | B|||D|||False 6 | B|||D|||False 7 | B|||D|||False 8 | B|||C|||False 9 | B|||C|||False 10 | B|||C|||False 11 | B|||B|||True 12 | B|||D|||False 13 | B|||C|||False 14 | B|||C|||False 15 | B|||D|||False 16 | B|||B|||True 17 | B|||A|||False 18 | B|||D|||False 19 | B|||B|||True 20 | B|||B|||True 21 | B|||B|||True 22 | B|||A|||False 23 | B|||C|||False 24 | B|||C|||False 25 | B|||D|||False 26 | B|||B|||True 27 | B|||B|||True 28 | B|||D|||False 29 | B|||D|||False 30 | D|||D|||True 31 | B|||BCD|||False 32 | B|||BCD|||False 33 | B|||BCD|||False 34 | B|||ABCD|||False 35 | B|||AD|||False 36 | B|||CD|||False 37 | D|||ACD|||False 38 | B|||BCD|||False 39 | D|||AD|||False 40 | B|||C|||False 41 | B|||D|||False 42 | B|||D|||False 43 | B|||D|||False 44 | B|||C|||False 45 | D|||C|||False 46 | D|||D|||True 47 | B|||B|||True 48 | B|||C|||False 49 | B|||A|||False 50 | B|||C|||False 51 | B|||A|||False 52 | B|||D|||False 53 | B|||D|||False 54 | B|||C|||False 55 | B|||B|||True 56 | B|||C|||False 57 | B|||A|||False 58 | D|||D|||True 59 | B|||D|||False 60 | D|||C|||False 61 | B|||D|||False 62 | B|||D|||False 63 | B|||C|||False 64 | B|||B|||True 65 | B|||C|||False 66 | B|||B|||True 67 | D|||D|||True 68 | B|||D|||False 69 | B|||D|||False 70 | D|||B|||False 71 | B|||B|||True 72 | B|||A|||False 73 | B|||B|||True 74 | D|||D|||True 75 | D|||C|||False 76 | D|||D|||True 77 | B|||C|||False 78 | B|||D|||False 79 | B|||A|||False 80 | D|||C|||False 81 | D|||D|||True 82 | B|||D|||False 83 | B|||A|||False 84 | B|||C|||False 85 | B|||A|||False 86 | B|||C|||False 87 | B|||B|||True 88 | D|||B|||False 89 | B|||C|||False 90 | D|||D|||True 91 | B|||A|||False 92 | B|||D|||False 93 | D|||D|||True 94 | B|||ABC|||False 95 | D|||ABCD|||False 96 | B|||ABCD|||False 97 | B|||ACBD|||False 98 | B|||ABC|||False 99 | B|||AC|||False 100 | D|||ABCD|||False 101 | Average accuracy 0.240 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | B|||B|||True 3 | B|||D|||False 4 | A|||D|||False 5 | B|||D|||False 6 | A|||D|||False 7 | D|||D|||True 8 | D|||C|||False 9 | A|||C|||False 10 | A|||C|||False 11 | B|||B|||True 12 | B|||D|||False 13 | A|||C|||False 14 | A|||C|||False 15 | A|||D|||False 16 | A|||B|||False 17 | A|||A|||True 18 | A|||D|||False 19 | A|||B|||False 20 | A|||B|||False 21 | C|||B|||False 22 | A|||A|||True 23 | A|||C|||False 24 | A|||C|||False 25 | B|||D|||False 26 | A|||B|||False 27 | C|||B|||False 28 | A|||D|||False 29 | D|||D|||True 30 | B|||D|||False 31 | A|||BCD|||False 32 | B|||BCD|||False 33 | B|||BCD|||False 34 | A|||ABCD|||False 35 | A|||AD|||False 36 | A|||CD|||False 37 | A|||ACD|||False 38 | D|||BCD|||False 39 | A|||AD|||False 40 | C|||C|||True 41 | D|||D|||True 42 | A|||D|||False 43 | A|||D|||False 44 | A|||C|||False 45 | A|||C|||False 46 | B|||D|||False 47 | B|||B|||True 48 | A|||C|||False 49 | A|||A|||True 50 | A|||C|||False 51 | B|||A|||False 52 | A|||D|||False 53 | A|||D|||False 54 | B|||C|||False 55 | A|||B|||False 56 | A|||C|||False 57 | B|||A|||False 58 | D|||D|||True 59 | A|||D|||False 60 | A|||C|||False 61 | A|||D|||False 62 | D|||D|||True 63 | C|||C|||True 64 | A|||B|||False 65 | A|||C|||False 66 | A|||B|||False 67 | C|||D|||False 68 | D|||D|||True 69 | A|||D|||False 70 | B|||B|||True 71 | A|||B|||False 72 | A|||A|||True 73 | A|||B|||False 74 | C|||D|||False 75 | D|||C|||False 76 | A|||D|||False 77 | A|||C|||False 78 | A|||D|||False 79 | A|||A|||True 80 | A|||C|||False 81 | A|||D|||False 82 | A|||D|||False 83 | A|||A|||True 84 | A|||C|||False 85 | A|||A|||True 86 | B|||C|||False 87 | B|||B|||True 88 | B|||B|||True 89 | C|||C|||True 90 | C|||D|||False 91 | A|||A|||True 92 | A|||D|||False 93 | D|||D|||True 94 | A|||ABC|||False 95 | A|||ABCD|||False 96 | A|||ABCD|||False 97 | C|||ACBD|||False 98 | A|||ABC|||False 99 | A|||AC|||False 100 | B|||ABCD|||False 101 | Average accuracy 0.250 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/寄生虫学100题: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | B|||B|||True 3 | A|||D|||False 4 | B|||D|||False 5 | B|||D|||False 6 | A|||D|||False 7 | B|||D|||False 8 | D|||C|||False 9 | A|||C|||False 10 | D|||C|||False 11 | B|||B|||True 12 | B|||D|||False 13 | A|||C|||False 14 | B|||C|||False 15 | A|||D|||False 16 | A|||B|||False 17 | B|||A|||False 18 | B|||D|||False 19 | A|||B|||False 20 | A|||B|||False 21 | A|||B|||False 22 | A|||A|||True 23 | A|||C|||False 24 | B|||C|||False 25 | B|||D|||False 26 | B|||B|||True 27 | B|||B|||True 28 | D|||D|||True 29 | A|||D|||False 30 | B|||D|||False 31 | A|||BCD|||False 32 | A|||BCD|||False 33 | B|||BCD|||False 34 | B|||ABCD|||False 35 | A|||AD|||False 36 | B|||CD|||False 37 | B|||ACD|||False 38 | B|||BCD|||False 39 | D|||AD|||False 40 | B|||C|||False 41 | D|||D|||True 42 | B|||D|||False 43 | D|||D|||True 44 | B|||C|||False 45 | A|||C|||False 46 | A|||D|||False 47 | B|||B|||True 48 | A|||C|||False 49 | D|||A|||False 50 | A|||C|||False 51 | A|||A|||True 52 | B|||D|||False 53 | A|||D|||False 54 | B|||C|||False 55 | D|||B|||False 56 | A|||C|||False 57 | B|||A|||False 58 | B|||D|||False 59 | D|||D|||True 60 | A|||C|||False 61 | B|||D|||False 62 | A|||D|||False 63 | B|||C|||False 64 | B|||B|||True 65 | A|||C|||False 66 | A|||B|||False 67 | A|||D|||False 68 | D|||D|||True 69 | B|||D|||False 70 | C|||B|||False 71 | C|||B|||False 72 | A|||A|||True 73 | D|||B|||False 74 | B|||D|||False 75 | B|||C|||False 76 | A|||D|||False 77 | A|||C|||False 78 | B|||D|||False 79 | A|||A|||True 80 | B|||C|||False 81 | B|||D|||False 82 | B|||D|||False 83 | A|||A|||True 84 | C|||C|||True 85 | A|||A|||True 86 | D|||C|||False 87 | A|||B|||False 88 | A|||B|||False 89 | B|||C|||False 90 | A|||D|||False 91 | B|||A|||False 92 | A|||D|||False 93 | B|||D|||False 94 | A|||ABC|||False 95 | A|||ABCD|||False 96 | A|||ABCD|||False 97 | A|||ACBD|||False 98 | D|||ABC|||False 99 | A|||AC|||False 100 | A|||ABCD|||False 101 | Average accuracy 0.180 - 寄生虫学100题 102 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | B|||B|||True 3 | B|||B|||True 4 | B|||ABC|||False 5 | D|||ABCD|||False 6 | D|||ACD|||False 7 | C|||B|||False 8 | C|||A|||False 9 | C|||D|||False 10 | D|||A|||False 11 | B|||D|||False 12 | D|||ABD|||False 13 | A|||BC|||False 14 | D|||ABCD|||False 15 | D|||ABC|||False 16 | D|||ABC|||False 17 | B|||B|||True 18 | C|||C|||True 19 | C|||B|||False 20 | A|||A|||True 21 | C|||B|||False 22 | C|||ABC|||False 23 | B|||ACD|||False 24 | D|||ABD|||False 25 | A|||ABCD|||False 26 | D|||ACD|||False 27 | D|||C|||False 28 | C|||C|||True 29 | C|||C|||True 30 | D|||C|||False 31 | C|||B|||False 32 | B|||AD|||False 33 | B|||AB|||False 34 | B|||ABCD|||False 35 | D|||ACD|||False 36 | D|||ABCD|||False 37 | C|||C|||True 38 | A|||A|||True 39 | D|||B|||False 40 | C|||C|||True 41 | C|||C|||True 42 | D|||ABC|||False 43 | D|||ABD|||False 44 | D|||ABCD|||False 45 | D|||ABCD|||False 46 | A|||ABC|||False 47 | B|||C|||False 48 | D|||B|||False 49 | D|||C|||False 50 | A|||B|||False 51 | A|||A|||True 52 | D|||B|||False 53 | D|||BCD|||False 54 | B|||BD|||False 55 | B|||BCD|||False 56 | D|||ACD|||False 57 | B|||BCD|||False 58 | B|||B|||True 59 | C|||B|||False 60 | D|||C|||False 61 | D|||C|||False 62 | A|||B|||False 63 | C|||AD|||False 64 | D|||AC|||False 65 | D|||BC|||False 66 | D|||ABCD|||False 67 | D|||ACD|||False 68 | D|||C|||False 69 | D|||C|||False 70 | D|||A|||False 71 | C|||ABCD|||False 72 | B|||ABCD|||False 73 | C|||B|||False 74 | D|||B|||False 75 | D|||B|||False 76 | A|||AC|||False 77 | D|||ABCD|||False 78 | A|||ABC|||False 79 | D|||D|||True 80 | D|||D|||True 81 | D|||D|||True 82 | B|||B|||True 83 | D|||D|||True 84 | D|||C|||False 85 | D|||ABC|||False 86 | A|||ABCD|||False 87 | A|||ABC|||False 88 | B|||ACD|||False 89 | D|||AD|||False 90 | C|||C|||True 91 | A|||B|||False 92 | B|||B|||True 93 | C|||C|||True 94 | D|||B|||False 95 | C|||ABC|||False 96 | C|||ABD|||False 97 | B|||ABCD|||False 98 | A|||ABCD|||False 99 | C|||BCD|||False 100 | D|||B|||False 101 | D|||B|||False 102 | C|||B|||False 103 | D|||B|||False 104 | B|||C|||False 105 | A|||CD|||False 106 | B|||BD|||False 107 | A|||ABD|||False 108 | B|||ABCD|||False 109 | A|||BD|||False 110 | D|||B|||False 111 | B|||C|||False 112 | D|||D|||True 113 | A|||D|||False 114 | D|||C|||False 115 | C|||ABD|||False 116 | A|||ABCD|||False 117 | B|||AC|||False 118 | A|||ABCD|||False 119 | C|||ACD|||False 120 | C|||A|||False 121 | D|||C|||False 122 | D|||D|||True 123 | D|||AC|||False 124 | D|||AD|||False 125 | A|||ABCD|||False 126 | A|||B|||False 127 | D|||A|||False 128 | B|||B|||True 129 | D|||B|||False 130 | D|||B|||False 131 | C|||ABCD|||False 132 | D|||ACD|||False 133 | B|||ABCD|||False 134 | A|||BCD|||False 135 | D|||AD|||False 136 | C|||B|||False 137 | C|||C|||True 138 | D|||D|||True 139 | D|||A|||False 140 | C|||C|||True 141 | D|||D|||True 142 | C|||ABC|||False 143 | C|||ABD|||False 144 | C|||AC|||False 145 | D|||B|||False 146 | A|||A|||True 147 | C|||C|||True 148 | D|||A|||False 149 | B|||D|||False 150 | B|||D|||False 151 | D|||C|||False 152 | B|||B|||True 153 | B|||ABCD|||False 154 | D|||ACD|||False 155 | Average accuracy 0.208 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | A|||B|||False 2 | B|||B|||True 3 | B|||B|||True 4 | A|||ABC|||False 5 | B|||ABCD|||False 6 | A|||ACD|||False 7 | B|||B|||True 8 | D|||A|||False 9 | A|||D|||False 10 | A|||A|||True 11 | A|||D|||False 12 | A|||ABD|||False 13 | D|||BC|||False 14 | A|||ABCD|||False 15 | B|||ABC|||False 16 | D|||ABC|||False 17 | A|||B|||False 18 | B|||C|||False 19 | A|||B|||False 20 | B|||A|||False 21 | C|||B|||False 22 | C|||ABC|||False 23 | A|||ACD|||False 24 | A|||ABD|||False 25 | B|||ABCD|||False 26 | B|||ACD|||False 27 | B|||C|||False 28 | A|||C|||False 29 | B|||C|||False 30 | C|||C|||True 31 | A|||B|||False 32 | B|||AD|||False 33 | D|||AB|||False 34 | B|||ABCD|||False 35 | A|||ACD|||False 36 | D|||ABCD|||False 37 | D|||C|||False 38 | A|||A|||True 39 | A|||B|||False 40 | D|||C|||False 41 | B|||C|||False 42 | B|||ABC|||False 43 | A|||ABD|||False 44 | B|||ABCD|||False 45 | B|||ABCD|||False 46 | A|||ABC|||False 47 | B|||C|||False 48 | B|||B|||True 49 | C|||C|||True 50 | A|||B|||False 51 | A|||A|||True 52 | B|||B|||True 53 | B|||BCD|||False 54 | A|||BD|||False 55 | A|||BCD|||False 56 | A|||ACD|||False 57 | D|||BCD|||False 58 | D|||B|||False 59 | C|||B|||False 60 | C|||C|||True 61 | B|||C|||False 62 | A|||B|||False 63 | B|||AD|||False 64 | B|||AC|||False 65 | D|||BC|||False 66 | A|||ABCD|||False 67 | B|||ACD|||False 68 | D|||C|||False 69 | D|||C|||False 70 | A|||A|||True 71 | B|||ABCD|||False 72 | B|||ABCD|||False 73 | B|||B|||True 74 | A|||B|||False 75 | A|||B|||False 76 | A|||AC|||False 77 | B|||ABCD|||False 78 | A|||ABC|||False 79 | B|||D|||False 80 | D|||D|||True 81 | A|||D|||False 82 | A|||B|||False 83 | D|||D|||True 84 | A|||C|||False 85 | A|||ABC|||False 86 | A|||ABCD|||False 87 | D|||ABC|||False 88 | D|||ACD|||False 89 | D|||AD|||False 90 | A|||C|||False 91 | A|||B|||False 92 | D|||B|||False 93 | B|||C|||False 94 | A|||B|||False 95 | B|||ABC|||False 96 | C|||ABD|||False 97 | B|||ABCD|||False 98 | A|||ABCD|||False 99 | B|||BCD|||False 100 | A|||B|||False 101 | D|||B|||False 102 | D|||B|||False 103 | A|||B|||False 104 | B|||C|||False 105 | A|||CD|||False 106 | B|||BD|||False 107 | B|||ABD|||False 108 | B|||ABCD|||False 109 | B|||BD|||False 110 | D|||B|||False 111 | B|||C|||False 112 | A|||D|||False 113 | D|||D|||True 114 | A|||C|||False 115 | B|||ABD|||False 116 | A|||ABCD|||False 117 | B|||AC|||False 118 | A|||ABCD|||False 119 | B|||ACD|||False 120 | B|||A|||False 121 | D|||C|||False 122 | A|||D|||False 123 | A|||AC|||False 124 | A|||AD|||False 125 | B|||ABCD|||False 126 | A|||B|||False 127 | A|||A|||True 128 | A|||B|||False 129 | B|||B|||True 130 | D|||B|||False 131 | B|||ABCD|||False 132 | A|||ACD|||False 133 | A|||ABCD|||False 134 | B|||BCD|||False 135 | D|||AD|||False 136 | A|||B|||False 137 | B|||C|||False 138 | D|||D|||True 139 | A|||A|||True 140 | A|||C|||False 141 | B|||D|||False 142 | D|||ABC|||False 143 | B|||ABD|||False 144 | A|||AC|||False 145 | A|||B|||False 146 | D|||A|||False 147 | A|||C|||False 148 | B|||A|||False 149 | D|||D|||True 150 | A|||D|||False 151 | D|||C|||False 152 | B|||B|||True 153 | A|||ABCD|||False 154 | B|||ACD|||False 155 | Average accuracy 0.143 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | C|||B|||False 3 | B|||B|||True 4 | C|||ABC|||False 5 | C|||ABCD|||False 6 | A|||ACD|||False 7 | B|||B|||True 8 | A|||A|||True 9 | A|||D|||False 10 | A|||A|||True 11 | C|||D|||False 12 | A|||ABD|||False 13 | A|||BC|||False 14 | A|||ABCD|||False 15 | A|||ABC|||False 16 | D|||ABC|||False 17 | B|||B|||True 18 | B|||C|||False 19 | A|||B|||False 20 | A|||A|||True 21 | B|||B|||True 22 | B|||ABC|||False 23 | B|||ACD|||False 24 | C|||ABD|||False 25 | B|||ABCD|||False 26 | A|||ACD|||False 27 | A|||C|||False 28 | C|||C|||True 29 | A|||C|||False 30 | C|||C|||True 31 | B|||B|||True 32 | B|||AD|||False 33 | D|||AB|||False 34 | B|||ABCD|||False 35 | D|||ACD|||False 36 | A|||ABCD|||False 37 | C|||C|||True 38 | A|||A|||True 39 | B|||B|||True 40 | C|||C|||True 41 | C|||C|||True 42 | D|||ABC|||False 43 | A|||ABD|||False 44 | B|||ABCD|||False 45 | A|||ABCD|||False 46 | A|||ABC|||False 47 | A|||C|||False 48 | C|||B|||False 49 | B|||C|||False 50 | A|||B|||False 51 | A|||A|||True 52 | D|||B|||False 53 | B|||BCD|||False 54 | A|||BD|||False 55 | B|||BCD|||False 56 | C|||ACD|||False 57 | C|||BCD|||False 58 | A|||B|||False 59 | A|||B|||False 60 | B|||C|||False 61 | B|||C|||False 62 | B|||B|||True 63 | D|||AD|||False 64 | B|||AC|||False 65 | A|||BC|||False 66 | C|||ABCD|||False 67 | A|||ACD|||False 68 | A|||C|||False 69 | C|||C|||True 70 | A|||A|||True 71 | A|||ABCD|||False 72 | A|||ABCD|||False 73 | A|||B|||False 74 | A|||B|||False 75 | B|||B|||True 76 | A|||AC|||False 77 | C|||ABCD|||False 78 | A|||ABC|||False 79 | B|||D|||False 80 | A|||D|||False 81 | B|||D|||False 82 | B|||B|||True 83 | A|||D|||False 84 | A|||C|||False 85 | A|||ABC|||False 86 | A|||ABCD|||False 87 | A|||ABC|||False 88 | B|||ACD|||False 89 | C|||AD|||False 90 | A|||C|||False 91 | A|||B|||False 92 | A|||B|||False 93 | A|||C|||False 94 | A|||B|||False 95 | A|||ABC|||False 96 | C|||ABD|||False 97 | B|||ABCD|||False 98 | A|||ABCD|||False 99 | C|||BCD|||False 100 | D|||B|||False 101 | C|||B|||False 102 | D|||B|||False 103 | B|||B|||True 104 | A|||C|||False 105 | A|||CD|||False 106 | A|||BD|||False 107 | A|||ABD|||False 108 | A|||ABCD|||False 109 | A|||BD|||False 110 | D|||B|||False 111 | A|||C|||False 112 | A|||D|||False 113 | A|||D|||False 114 | A|||C|||False 115 | B|||ABD|||False 116 | B|||ABCD|||False 117 | B|||AC|||False 118 | B|||ABCD|||False 119 | A|||ACD|||False 120 | B|||A|||False 121 | C|||C|||True 122 | C|||D|||False 123 | B|||AC|||False 124 | A|||AD|||False 125 | A|||ABCD|||False 126 | A|||B|||False 127 | A|||A|||True 128 | C|||B|||False 129 | A|||B|||False 130 | A|||B|||False 131 | A|||ABCD|||False 132 | B|||ACD|||False 133 | B|||ABCD|||False 134 | A|||BCD|||False 135 | A|||AD|||False 136 | B|||B|||True 137 | C|||C|||True 138 | B|||D|||False 139 | B|||A|||False 140 | A|||C|||False 141 | A|||D|||False 142 | C|||ABC|||False 143 | A|||ABD|||False 144 | A|||AC|||False 145 | D|||B|||False 146 | A|||A|||True 147 | B|||C|||False 148 | B|||A|||False 149 | B|||D|||False 150 | B|||D|||False 151 | C|||C|||True 152 | A|||B|||False 153 | B|||ABCD|||False 154 | A|||ACD|||False 155 | Average accuracy 0.188 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | D|||B|||False 2 | B|||B|||True 3 | D|||B|||False 4 | B|||ABC|||False 5 | B|||ABCD|||False 6 | B|||ACD|||False 7 | D|||B|||False 8 | B|||A|||False 9 | B|||D|||False 10 | B|||A|||False 11 | D|||D|||True 12 | B|||ABD|||False 13 | B|||BC|||False 14 | B|||ABCD|||False 15 | D|||ABC|||False 16 | D|||ABC|||False 17 | B|||B|||True 18 | B|||C|||False 19 | D|||B|||False 20 | B|||A|||False 21 | B|||B|||True 22 | B|||ABC|||False 23 | B|||ACD|||False 24 | B|||ABD|||False 25 | B|||ABCD|||False 26 | B|||ACD|||False 27 | B|||C|||False 28 | D|||C|||False 29 | B|||C|||False 30 | B|||C|||False 31 | B|||B|||True 32 | B|||AD|||False 33 | B|||AB|||False 34 | B|||ABCD|||False 35 | B|||ACD|||False 36 | B|||ABCD|||False 37 | B|||C|||False 38 | D|||A|||False 39 | D|||B|||False 40 | B|||C|||False 41 | B|||C|||False 42 | B|||ABC|||False 43 | B|||ABD|||False 44 | B|||ABCD|||False 45 | B|||ABCD|||False 46 | B|||ABC|||False 47 | D|||C|||False 48 | D|||B|||False 49 | D|||C|||False 50 | D|||B|||False 51 | D|||A|||False 52 | D|||B|||False 53 | D|||BCD|||False 54 | D|||BD|||False 55 | B|||BCD|||False 56 | D|||ACD|||False 57 | D|||BCD|||False 58 | B|||B|||True 59 | D|||B|||False 60 | D|||C|||False 61 | D|||C|||False 62 | B|||B|||True 63 | D|||AD|||False 64 | B|||AC|||False 65 | B|||BC|||False 66 | B|||ABCD|||False 67 | B|||ACD|||False 68 | D|||C|||False 69 | B|||C|||False 70 | B|||A|||False 71 | D|||ABCD|||False 72 | B|||ABCD|||False 73 | D|||B|||False 74 | D|||B|||False 75 | D|||B|||False 76 | B|||AC|||False 77 | B|||ABCD|||False 78 | B|||ABC|||False 79 | B|||D|||False 80 | B|||D|||False 81 | B|||D|||False 82 | B|||B|||True 83 | D|||D|||True 84 | B|||C|||False 85 | B|||ABC|||False 86 | B|||ABCD|||False 87 | B|||ABC|||False 88 | B|||ACD|||False 89 | B|||AD|||False 90 | D|||C|||False 91 | B|||B|||True 92 | D|||B|||False 93 | D|||C|||False 94 | D|||B|||False 95 | B|||ABC|||False 96 | B|||ABD|||False 97 | B|||ABCD|||False 98 | B|||ABCD|||False 99 | D|||BCD|||False 100 | B|||B|||True 101 | D|||B|||False 102 | B|||B|||True 103 | B|||B|||True 104 | D|||C|||False 105 | B|||CD|||False 106 | B|||BD|||False 107 | B|||ABD|||False 108 | D|||ABCD|||False 109 | B|||BD|||False 110 | D|||B|||False 111 | B|||C|||False 112 | B|||D|||False 113 | B|||D|||False 114 | D|||C|||False 115 | B|||ABD|||False 116 | B|||ABCD|||False 117 | B|||AC|||False 118 | B|||ABCD|||False 119 | B|||ACD|||False 120 | B|||A|||False 121 | B|||C|||False 122 | B|||D|||False 123 | D|||AC|||False 124 | D|||AD|||False 125 | B|||ABCD|||False 126 | B|||B|||True 127 | B|||A|||False 128 | B|||B|||True 129 | B|||B|||True 130 | B|||B|||True 131 | D|||ABCD|||False 132 | D|||ACD|||False 133 | B|||ABCD|||False 134 | B|||BCD|||False 135 | B|||AD|||False 136 | B|||B|||True 137 | B|||C|||False 138 | B|||D|||False 139 | B|||A|||False 140 | B|||C|||False 141 | B|||D|||False 142 | D|||ABC|||False 143 | B|||ABD|||False 144 | B|||AC|||False 145 | B|||B|||True 146 | D|||A|||False 147 | B|||C|||False 148 | D|||A|||False 149 | B|||D|||False 150 | B|||D|||False 151 | B|||C|||False 152 | B|||B|||True 153 | B|||ABCD|||False 154 | B|||ACD|||False 155 | Average accuracy 0.130 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | D|||B|||False 2 | C|||B|||False 3 | D|||B|||False 4 | D|||ABC|||False 5 | D|||ABCD|||False 6 | C|||ACD|||False 7 | D|||B|||False 8 | C|||A|||False 9 | D|||D|||True 10 | D|||A|||False 11 | D|||D|||True 12 | D|||ABD|||False 13 | D|||BC|||False 14 | D|||ABCD|||False 15 | C|||ABC|||False 16 | D|||ABC|||False 17 | D|||B|||False 18 | D|||C|||False 19 | D|||B|||False 20 | D|||A|||False 21 | D|||B|||False 22 | C|||ABC|||False 23 | C|||ACD|||False 24 | D|||ABD|||False 25 | D|||ABCD|||False 26 | D|||ACD|||False 27 | D|||C|||False 28 | D|||C|||False 29 | D|||C|||False 30 | C|||C|||True 31 | C|||B|||False 32 | C|||AD|||False 33 | C|||AB|||False 34 | D|||ABCD|||False 35 | D|||ACD|||False 36 | D|||ABCD|||False 37 | C|||C|||True 38 | D|||A|||False 39 | D|||B|||False 40 | D|||C|||False 41 | D|||C|||False 42 | C|||ABC|||False 43 | C|||ABD|||False 44 | C|||ABCD|||False 45 | C|||ABCD|||False 46 | C|||ABC|||False 47 | D|||C|||False 48 | C|||B|||False 49 | D|||C|||False 50 | D|||B|||False 51 | D|||A|||False 52 | D|||B|||False 53 | D|||BCD|||False 54 | D|||BD|||False 55 | D|||BCD|||False 56 | D|||ACD|||False 57 | D|||BCD|||False 58 | D|||B|||False 59 | D|||B|||False 60 | D|||C|||False 61 | D|||C|||False 62 | D|||B|||False 63 | D|||AD|||False 64 | C|||AC|||False 65 | D|||BC|||False 66 | D|||ABCD|||False 67 | D|||ACD|||False 68 | D|||C|||False 69 | D|||C|||False 70 | D|||A|||False 71 | D|||ABCD|||False 72 | D|||ABCD|||False 73 | D|||B|||False 74 | D|||B|||False 75 | C|||B|||False 76 | D|||AC|||False 77 | D|||ABCD|||False 78 | D|||ABC|||False 79 | D|||D|||True 80 | C|||D|||False 81 | C|||D|||False 82 | D|||B|||False 83 | D|||D|||True 84 | D|||C|||False 85 | D|||ABC|||False 86 | D|||ABCD|||False 87 | D|||ABC|||False 88 | D|||ACD|||False 89 | D|||AD|||False 90 | D|||C|||False 91 | D|||B|||False 92 | D|||B|||False 93 | D|||C|||False 94 | D|||B|||False 95 | C|||ABC|||False 96 | C|||ABD|||False 97 | D|||ABCD|||False 98 | D|||ABCD|||False 99 | D|||BCD|||False 100 | D|||B|||False 101 | C|||B|||False 102 | C|||B|||False 103 | D|||B|||False 104 | D|||C|||False 105 | D|||CD|||False 106 | D|||BD|||False 107 | C|||ABD|||False 108 | D|||ABCD|||False 109 | D|||BD|||False 110 | D|||B|||False 111 | D|||C|||False 112 | D|||D|||True 113 | D|||D|||True 114 | D|||C|||False 115 | C|||ABD|||False 116 | D|||ABCD|||False 117 | D|||AC|||False 118 | D|||ABCD|||False 119 | D|||ACD|||False 120 | D|||A|||False 121 | D|||C|||False 122 | D|||D|||True 123 | D|||AC|||False 124 | D|||AD|||False 125 | C|||ABCD|||False 126 | D|||B|||False 127 | D|||A|||False 128 | D|||B|||False 129 | D|||B|||False 130 | D|||B|||False 131 | D|||ABCD|||False 132 | D|||ACD|||False 133 | D|||ABCD|||False 134 | D|||BCD|||False 135 | D|||AD|||False 136 | D|||B|||False 137 | D|||C|||False 138 | C|||D|||False 139 | C|||A|||False 140 | D|||C|||False 141 | C|||D|||False 142 | D|||ABC|||False 143 | D|||ABD|||False 144 | C|||AC|||False 145 | D|||B|||False 146 | C|||A|||False 147 | D|||C|||False 148 | D|||A|||False 149 | C|||D|||False 150 | C|||D|||False 151 | D|||C|||False 152 | D|||B|||False 153 | D|||ABCD|||False 154 | D|||ACD|||False 155 | Average accuracy 0.058 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | C|||B|||False 3 | D|||B|||False 4 | B|||ABC|||False 5 | D|||ABCD|||False 6 | D|||ACD|||False 7 | 未成功回答|||B|||False 8 | D|||A|||False 9 | D|||D|||True 10 | A|||A|||True 11 | D|||D|||True 12 | D|||ABD|||False 13 | D|||BC|||False 14 | A|||ABCD|||False 15 | D|||ABC|||False 16 | A|||ABC|||False 17 | D|||B|||False 18 | D|||C|||False 19 | D|||B|||False 20 | B|||A|||False 21 | C|||B|||False 22 | C|||ABC|||False 23 | B|||ACD|||False 24 | D|||ABD|||False 25 | C|||ABCD|||False 26 | A|||ACD|||False 27 | D|||C|||False 28 | A|||C|||False 29 | C|||C|||True 30 | C|||C|||True 31 | C|||B|||False 32 | B|||AD|||False 33 | A|||AB|||False 34 | B|||ABCD|||False 35 | D|||ACD|||False 36 | B|||ABCD|||False 37 | A|||C|||False 38 | A|||A|||True 39 | D|||B|||False 40 | B|||C|||False 41 | C|||C|||True 42 | B|||ABC|||False 43 | ABCD|||ABD|||False 44 | D|||ABCD|||False 45 | B|||ABCD|||False 46 | A|||ABC|||False 47 | B|||C|||False 48 | C|||B|||False 49 | C|||C|||True 50 | D|||B|||False 51 | A|||A|||True 52 | D|||B|||False 53 | B|||BCD|||False 54 | C|||BD|||False 55 | B|||BCD|||False 56 | B|||ACD|||False 57 | B|||BCD|||False 58 | B|||B|||True 59 | B|||B|||True 60 | A|||C|||False 61 | B|||C|||False 62 | D|||B|||False 63 | D|||AD|||False 64 | A|||AC|||False 65 | D|||BC|||False 66 | A|||ABCD|||False 67 | A|||ACD|||False 68 | B|||C|||False 69 | D|||C|||False 70 | A|||A|||True 71 | C|||ABCD|||False 72 | A|||ABCD|||False 73 | A|||B|||False 74 | B|||B|||True 75 | A|||B|||False 76 | ABC|||AC|||False 77 | C|||ABCD|||False 78 | A|||ABC|||False 79 | A|||D|||False 80 | B|||D|||False 81 | A|||D|||False 82 | A|||B|||False 83 | B|||D|||False 84 | B|||C|||False 85 | A|||ABC|||False 86 | A|||ABCD|||False 87 | A|||ABC|||False 88 | B|||ACD|||False 89 | A|||AD|||False 90 | C|||C|||True 91 | D|||B|||False 92 | D|||B|||False 93 | C|||C|||True 94 | C|||B|||False 95 | A|||ABC|||False 96 | C|||ABD|||False 97 | B|||ABCD|||False 98 | D|||ABCD|||False 99 | C|||BCD|||False 100 | A|||B|||False 101 | A|||B|||False 102 | C|||B|||False 103 | C|||B|||False 104 | B|||C|||False 105 | A|||CD|||False 106 | B|||BD|||False 107 | A|||ABD|||False 108 | D|||ABCD|||False 109 | D|||BD|||False 110 | D|||B|||False 111 | D|||C|||False 112 | B|||D|||False 113 | 未成功回答|||D|||False 114 | B|||C|||False 115 | D|||ABD|||False 116 | B|||ABCD|||False 117 | D|||AC|||False 118 | A|||ABCD|||False 119 | B|||ACD|||False 120 | C|||A|||False 121 | B|||C|||False 122 | C|||D|||False 123 | D|||AC|||False 124 | AC|||AD|||False 125 | C|||ABCD|||False 126 | B|||B|||True 127 | A|||A|||True 128 | D|||B|||False 129 | A|||B|||False 130 | D|||B|||False 131 | C|||ABCD|||False 132 | A|||ACD|||False 133 | B|||ABCD|||False 134 | B|||BCD|||False 135 | C|||AD|||False 136 | D|||B|||False 137 | C|||C|||True 138 | D|||D|||True 139 | C|||A|||False 140 | C|||C|||True 141 | D|||D|||True 142 | B|||ABC|||False 143 | D|||ABD|||False 144 | A|||AC|||False 145 | D|||B|||False 146 | D|||A|||False 147 | C|||C|||True 148 | B|||A|||False 149 | C|||D|||False 150 | A|||D|||False 151 | D|||C|||False 152 | D|||B|||False 153 | ABD|||ABCD|||False 154 | A|||ACD|||False 155 | Average accuracy 0.149 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/组织胚胎学154题: -------------------------------------------------------------------------------- 1 | B|||B|||True 2 | B|||B|||True 3 | B|||B|||True 4 | ABCD|||ABC|||False 5 | D|||ABCD|||False 6 | C|||ACD|||False 7 | B|||B|||True 8 | A|||A|||True 9 | D|||D|||True 10 | A|||A|||True 11 | C|||D|||False 12 | ABD|||ABD|||True 13 | A|||BC|||False 14 | ABC|||ABCD|||False 15 | B|||ABC|||False 16 | A|||ABC|||False 17 | B|||B|||True 18 | C|||C|||True 19 | C|||B|||False 20 | A|||A|||True 21 | B|||B|||True 22 | ABCD|||ABC|||False 23 | B|||ACD|||False 24 | B|||ABD|||False 25 | C|||ABCD|||False 26 | B|||ACD|||False 27 | D|||C|||False 28 | C|||C|||True 29 | C|||C|||True 30 | B|||C|||False 31 | A|||B|||False 32 | ABD|||AD|||False 33 | B|||AB|||False 34 | B|||ABCD|||False 35 | D|||ACD|||False 36 | BCD|||ABCD|||False 37 | D|||C|||False 38 | A|||A|||True 39 | B|||B|||True 40 | B|||C|||False 41 | C|||C|||True 42 | ABC|||ABC|||True 43 | ABCD|||ABD|||False 44 | ABCD|||ABCD|||True 45 | ABC|||ABCD|||False 46 | ABC|||ABC|||True 47 | C|||C|||True 48 | B|||B|||True 49 | C|||C|||True 50 | D|||B|||False 51 | A|||A|||True 52 | D|||B|||False 53 | B|||BCD|||False 54 | B|||BD|||False 55 | C|||BCD|||False 56 | C|||ACD|||False 57 | C|||BCD|||False 58 | B|||B|||True 59 | D|||B|||False 60 | C|||C|||True 61 | B|||C|||False 62 | B|||B|||True 63 | D|||AD|||False 64 | BD|||AC|||False 65 | D|||BC|||False 66 | ABCD|||ABCD|||True 67 | AD|||ACD|||False 68 | D|||C|||False 69 | B|||C|||False 70 | A|||A|||True 71 | B|||ABCD|||False 72 | A|||ABCD|||False 73 | B|||B|||True 74 | B|||B|||True 75 | B|||B|||True 76 | AC|||AC|||True 77 | A|||ABCD|||False 78 | ABCD|||ABC|||False 79 | B|||D|||False 80 | D|||D|||True 81 | B|||D|||False 82 | B|||B|||True 83 | B|||D|||False 84 | C|||C|||True 85 | D|||ABC|||False 86 | ABCD|||ABCD|||True 87 | AC|||ABC|||False 88 | B|||ACD|||False 89 | B|||AD|||False 90 | C|||C|||True 91 | A|||B|||False 92 | B|||B|||True 93 | B|||C|||False 94 | A|||B|||False 95 | C|||ABC|||False 96 | B|||ABD|||False 97 | A|||ABCD|||False 98 | B|||ABCD|||False 99 | B|||BCD|||False 100 | A|||B|||False 101 | B|||B|||True 102 | D|||B|||False 103 | B|||B|||True 104 | D|||C|||False 105 | A|||CD|||False 106 | B|||BD|||False 107 | D|||ABD|||False 108 | B|||ABCD|||False 109 | B|||BD|||False 110 | C|||B|||False 111 | B|||C|||False 112 | C|||D|||False 113 | A|||D|||False 114 | A|||C|||False 115 | D|||ABD|||False 116 | A|||ABCD|||False 117 | C|||AC|||False 118 | B|||ABCD|||False 119 | C|||ACD|||False 120 | C|||A|||False 121 | B|||C|||False 122 | D|||D|||True 123 | B|||AC|||False 124 | ABCD|||AD|||False 125 | C|||ABCD|||False 126 | B|||B|||True 127 | A|||A|||True 128 | B|||B|||True 129 | A|||B|||False 130 | D|||B|||False 131 | C|||ABCD|||False 132 | ACD|||ACD|||True 133 | ABCD|||ABCD|||True 134 | B|||BCD|||False 135 | A|||AD|||False 136 | B|||B|||True 137 | C|||C|||True 138 | D|||D|||True 139 | C|||A|||False 140 | D|||C|||False 141 | D|||D|||True 142 | C|||ABC|||False 143 | B|||ABD|||False 144 | ABCD|||AC|||False 145 | B|||B|||True 146 | A|||A|||True 147 | B|||C|||False 148 | B|||A|||False 149 | D|||D|||True 150 | B|||D|||False 151 | D|||C|||False 152 | B|||B|||True 153 | ABCD|||ABCD|||True 154 | C|||ACD|||False 155 | Average accuracy 0.364 - 组织胚胎学154题 156 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | A|||A|||True 3 | A|||D|||False 4 | A|||ABCD|||False 5 | D|||D|||True 6 | B|||B|||True 7 | B|||D|||False 8 | A|||A|||True 9 | C|||D|||False 10 | D|||D|||True 11 | B|||A|||False 12 | A|||B|||False 13 | A|||A|||True 14 | D|||B|||False 15 | D|||D|||True 16 | B|||B|||True 17 | D|||ABCD|||False 18 | B|||ABCD|||False 19 | C|||CD|||False 20 | D|||D|||True 21 | B|||B|||True 22 | D|||D|||True 23 | D|||A|||False 24 | B|||B|||True 25 | C|||A|||False 26 | C|||C|||True 27 | C|||C|||True 28 | C|||C|||True 29 | C|||C|||True 30 | C|||C|||True 31 | C|||C|||True 32 | C|||C|||True 33 | D|||D|||True 34 | A|||ABCD|||False 35 | A|||AD|||False 36 | C|||ABCD|||False 37 | D|||D|||True 38 | C|||D|||False 39 | A|||A|||True 40 | B|||D|||False 41 | D|||D|||True 42 | B|||B|||True 43 | C|||C|||True 44 | C|||C|||True 45 | B|||B|||True 46 | B|||B|||True 47 | A|||B|||False 48 | B|||C|||False 49 | C|||C|||True 50 | B|||B|||True 51 | D|||D|||True 52 | ABCD|||ABCD|||True 53 | A|||AD|||False 54 | C|||BCD|||False 55 | D|||D|||True 56 | A|||A|||True 57 | D|||C|||False 58 | D|||D|||True 59 | C|||C|||True 60 | B|||B|||True 61 | B|||A|||False 62 | A|||A|||True 63 | B|||B|||True 64 | D|||D|||True 65 | D|||C|||False 66 | B|||B|||True 67 | B|||D|||False 68 | D|||D|||True 69 | C|||C|||True 70 | C|||C|||True 71 | C|||A|||False 72 | A|||D|||False 73 | C|||C|||True 74 | D|||D|||True 75 | A|||A|||True 76 | D|||D|||True 77 | D|||D|||True 78 | C|||AC|||False 79 | A|||ABD|||False 80 | A|||AC|||False 81 | B|||BCD|||False 82 | C|||AC|||False 83 | B|||ABC|||False 84 | BCD|||ABCD|||False 85 | B|||ACD|||False 86 | B|||D|||False 87 | D|||D|||True 88 | A|||D|||False 89 | B|||C|||False 90 | B|||A|||False 91 | A|||ABCD|||False 92 | D|||AD|||False 93 | A|||ABCD|||False 94 | A|||ABCD|||False 95 | C|||CD|||False 96 | B|||BD|||False 97 | A|||ABCD|||False 98 | C|||C|||True 99 | A|||A|||True 100 | B|||B|||True 101 | D|||D|||True 102 | A|||D|||False 103 | B|||A|||False 104 | C|||C|||True 105 | B|||D|||False 106 | B|||C|||False 107 | D|||D|||True 108 | D|||D|||True 109 | B|||D|||False 110 | B|||D|||False 111 | D|||ABCD|||False 112 | C|||ABCD|||False 113 | A|||B|||False 114 | D|||D|||True 115 | A|||A|||True 116 | C|||C|||True 117 | C|||C|||True 118 | C|||B|||False 119 | B|||B|||True 120 | D|||D|||True 121 | D|||D|||True 122 | B|||A|||False 123 | A|||A|||True 124 | D|||D|||True 125 | D|||A|||False 126 | D|||D|||True 127 | D|||D|||True 128 | B|||D|||False 129 | D|||D|||True 130 | A|||A|||True 131 | D|||C|||False 132 | D|||C|||False 133 | B|||D|||False 134 | C|||A|||False 135 | C|||C|||True 136 | A|||ABCD|||False 137 | B|||BD|||False 138 | D|||ABC|||False 139 | C|||ABCD|||False 140 | B|||AC|||False 141 | A|||A|||True 142 | B|||B|||True 143 | C|||D|||False 144 | C|||B|||False 145 | C|||C|||True 146 | A|||D|||False 147 | C|||C|||True 148 | A|||ABC|||False 149 | A|||ABD|||False 150 | B|||ABC|||False 151 | ABCD|||BCD|||False 152 | C|||C|||True 153 | B|||B|||True 154 | B|||B|||True 155 | C|||A|||False 156 | A|||A|||True 157 | A|||A|||True 158 | B|||A|||False 159 | D|||D|||True 160 | D|||A|||False 161 | C|||B|||False 162 | B|||B|||True 163 | A|||A|||True 164 | Average accuracy 0.515 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | A|||A|||True 3 | C|||D|||False 4 | A|||ABCD|||False 5 | D|||D|||True 6 | B|||B|||True 7 | D|||D|||True 8 | A|||A|||True 9 | D|||D|||True 10 | B|||D|||False 11 | D|||A|||False 12 | A|||B|||False 13 | A|||A|||True 14 | A|||B|||False 15 | D|||D|||True 16 | A|||B|||False 17 | D|||ABCD|||False 18 | B|||ABCD|||False 19 | A|||CD|||False 20 | D|||D|||True 21 | D|||B|||False 22 | D|||D|||True 23 | C|||A|||False 24 | C|||B|||False 25 | C|||A|||False 26 | C|||C|||True 27 | A|||C|||False 28 | C|||C|||True 29 | C|||C|||True 30 | C|||C|||True 31 | D|||C|||False 32 | C|||C|||True 33 | D|||D|||True 34 | A|||ABCD|||False 35 | A|||AD|||False 36 | D|||ABCD|||False 37 | C|||D|||False 38 | C|||D|||False 39 | C|||A|||False 40 | D|||D|||True 41 | D|||D|||True 42 | C|||B|||False 43 | D|||C|||False 44 | A|||C|||False 45 | A|||B|||False 46 | D|||B|||False 47 | C|||B|||False 48 | C|||C|||True 49 | C|||C|||True 50 | D|||B|||False 51 | D|||D|||True 52 | C|||ABCD|||False 53 | B|||AD|||False 54 | C|||BCD|||False 55 | D|||D|||True 56 | D|||A|||False 57 | D|||C|||False 58 | C|||D|||False 59 | C|||C|||True 60 | A|||B|||False 61 | D|||A|||False 62 | A|||A|||True 63 | D|||B|||False 64 | D|||D|||True 65 | D|||C|||False 66 | B|||B|||True 67 | D|||D|||True 68 | D|||D|||True 69 | D|||C|||False 70 | C|||C|||True 71 | C|||A|||False 72 | C|||D|||False 73 | C|||C|||True 74 | D|||D|||True 75 | C|||A|||False 76 | D|||D|||True 77 | A|||D|||False 78 | D|||AC|||False 79 | D|||ABD|||False 80 | D|||AC|||False 81 | D|||BCD|||False 82 | C|||AC|||False 83 | A|||ABC|||False 84 | C|||ABCD|||False 85 | D|||ACD|||False 86 | B|||D|||False 87 | A|||D|||False 88 | A|||D|||False 89 | C|||C|||True 90 | A|||A|||True 91 | A|||ABCD|||False 92 | D|||AD|||False 93 | C|||ABCD|||False 94 | D|||ABCD|||False 95 | C|||CD|||False 96 | C|||BD|||False 97 | D|||ABCD|||False 98 | C|||C|||True 99 | D|||A|||False 100 | D|||B|||False 101 | D|||D|||True 102 | D|||D|||True 103 | D|||A|||False 104 | D|||C|||False 105 | D|||D|||True 106 | D|||C|||False 107 | A|||D|||False 108 | C|||D|||False 109 | B|||D|||False 110 | A|||D|||False 111 | D|||ABCD|||False 112 | D|||ABCD|||False 113 | D|||B|||False 114 | D|||D|||True 115 | A|||A|||True 116 | A|||C|||False 117 | A|||C|||False 118 | C|||B|||False 119 | D|||B|||False 120 | D|||D|||True 121 | C|||D|||False 122 | B|||A|||False 123 | A|||A|||True 124 | D|||D|||True 125 | D|||A|||False 126 | D|||D|||True 127 | B|||D|||False 128 | D|||D|||True 129 | A|||D|||False 130 | B|||A|||False 131 | D|||C|||False 132 | D|||C|||False 133 | C|||D|||False 134 | C|||A|||False 135 | A|||C|||False 136 | D|||ABCD|||False 137 | D|||BD|||False 138 | B|||ABC|||False 139 | C|||ABCD|||False 140 | B|||AC|||False 141 | D|||A|||False 142 | A|||B|||False 143 | D|||D|||True 144 | A|||B|||False 145 | C|||C|||True 146 | B|||D|||False 147 | C|||C|||True 148 | C|||ABC|||False 149 | A|||ABD|||False 150 | A|||ABC|||False 151 | D|||BCD|||False 152 | A|||C|||False 153 | A|||B|||False 154 | D|||B|||False 155 | B|||A|||False 156 | A|||A|||True 157 | A|||A|||True 158 | D|||A|||False 159 | D|||D|||True 160 | D|||A|||False 161 | D|||B|||False 162 | B|||B|||True 163 | A|||A|||True 164 | Average accuracy 0.331 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | D|||A|||False 3 | C|||D|||False 4 | A|||ABCD|||False 5 | D|||D|||True 6 | B|||B|||True 7 | D|||D|||True 8 | A|||A|||True 9 | D|||D|||True 10 | D|||D|||True 11 | A|||A|||True 12 | A|||B|||False 13 | A|||A|||True 14 | A|||B|||False 15 | D|||D|||True 16 | B|||B|||True 17 | D|||ABCD|||False 18 | C|||ABCD|||False 19 | A|||CD|||False 20 | D|||D|||True 21 | D|||B|||False 22 | D|||D|||True 23 | C|||A|||False 24 | C|||B|||False 25 | C|||A|||False 26 | C|||C|||True 27 | A|||C|||False 28 | C|||C|||True 29 | C|||C|||True 30 | C|||C|||True 31 | D|||C|||False 32 | C|||C|||True 33 | D|||D|||True 34 | D|||ABCD|||False 35 | A|||AD|||False 36 | D|||ABCD|||False 37 | C|||D|||False 38 | C|||D|||False 39 | A|||A|||True 40 | B|||D|||False 41 | D|||D|||True 42 | A|||B|||False 43 | A|||C|||False 44 | A|||C|||False 45 | B|||B|||True 46 | B|||B|||True 47 | B|||B|||True 48 | C|||C|||True 49 | C|||C|||True 50 | B|||B|||True 51 | D|||D|||True 52 | C|||ABCD|||False 53 | A|||AD|||False 54 | C|||BCD|||False 55 | C|||D|||False 56 | C|||A|||False 57 | B|||C|||False 58 | C|||D|||False 59 | C|||C|||True 60 | B|||B|||True 61 | C|||A|||False 62 | C|||A|||False 63 | A|||B|||False 64 | D|||D|||True 65 | D|||C|||False 66 | A|||B|||False 67 | A|||D|||False 68 | A|||D|||False 69 | A|||C|||False 70 | C|||C|||True 71 | C|||A|||False 72 | A|||D|||False 73 | C|||C|||True 74 | A|||D|||False 75 | D|||A|||False 76 | B|||D|||False 77 | D|||D|||True 78 | B|||AC|||False 79 | B|||ABD|||False 80 | A|||AC|||False 81 | D|||BCD|||False 82 | C|||AC|||False 83 | A|||ABC|||False 84 | C|||ABCD|||False 85 | B|||ACD|||False 86 | B|||D|||False 87 | A|||D|||False 88 | C|||D|||False 89 | C|||C|||True 90 | C|||A|||False 91 | A|||ABCD|||False 92 | A|||AD|||False 93 | A|||ABCD|||False 94 | A|||ABCD|||False 95 | C|||CD|||False 96 | B|||BD|||False 97 | A|||ABCD|||False 98 | A|||C|||False 99 | A|||A|||True 100 | A|||B|||False 101 | A|||D|||False 102 | A|||D|||False 103 | B|||A|||False 104 | A|||C|||False 105 | B|||D|||False 106 | A|||C|||False 107 | A|||D|||False 108 | C|||D|||False 109 | C|||D|||False 110 | A|||D|||False 111 | B|||ABCD|||False 112 | A|||ABCD|||False 113 | B|||B|||True 114 | D|||D|||True 115 | A|||A|||True 116 | B|||C|||False 117 | C|||C|||True 118 | C|||B|||False 119 | C|||B|||False 120 | D|||D|||True 121 | D|||D|||True 122 | B|||A|||False 123 | A|||A|||True 124 | D|||D|||True 125 | D|||A|||False 126 | D|||D|||True 127 | B|||D|||False 128 | A|||D|||False 129 | D|||D|||True 130 | A|||A|||True 131 | A|||C|||False 132 | D|||C|||False 133 | A|||D|||False 134 | C|||A|||False 135 | A|||C|||False 136 | A|||ABCD|||False 137 | B|||BD|||False 138 | A|||ABC|||False 139 | C|||ABCD|||False 140 | A|||AC|||False 141 | C|||A|||False 142 | A|||B|||False 143 | C|||D|||False 144 | A|||B|||False 145 | B|||C|||False 146 | A|||D|||False 147 | C|||C|||True 148 | A|||ABC|||False 149 | A|||ABD|||False 150 | A|||ABC|||False 151 | A|||BCD|||False 152 | A|||C|||False 153 | B|||B|||True 154 | B|||B|||True 155 | A|||A|||True 156 | A|||A|||True 157 | A|||A|||True 158 | B|||A|||False 159 | D|||D|||True 160 | D|||A|||False 161 | B|||B|||True 162 | B|||B|||True 163 | A|||A|||True 164 | Average accuracy 0.344 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||A|||False 3 | D|||D|||True 4 | C|||ABCD|||False 5 | D|||D|||True 6 | B|||B|||True 7 | B|||D|||False 8 | A|||A|||True 9 | D|||D|||True 10 | D|||D|||True 11 | D|||A|||False 12 | A|||B|||False 13 | A|||A|||True 14 | A|||B|||False 15 | D|||D|||True 16 | B|||B|||True 17 | C|||ABCD|||False 18 | A|||ABCD|||False 19 | D|||CD|||False 20 | D|||D|||True 21 | D|||B|||False 22 | C|||D|||False 23 | A|||A|||True 24 | C|||B|||False 25 | C|||A|||False 26 | A|||C|||False 27 | A|||C|||False 28 | D|||C|||False 29 | D|||C|||False 30 | C|||C|||True 31 | A|||C|||False 32 | A|||C|||False 33 | C|||D|||False 34 | B|||ABCD|||False 35 | C|||AD|||False 36 | A|||ABCD|||False 37 | D|||D|||True 38 | C|||D|||False 39 | D|||A|||False 40 | D|||D|||True 41 | C|||D|||False 42 | C|||B|||False 43 | C|||C|||True 44 | C|||C|||True 45 | B|||B|||True 46 | B|||B|||True 47 | B|||B|||True 48 | B|||C|||False 49 | C|||C|||True 50 | A|||B|||False 51 | D|||D|||True 52 | C|||ABCD|||False 53 | A|||AD|||False 54 | C|||BCD|||False 55 | D|||D|||True 56 | D|||A|||False 57 | C|||C|||True 58 | C|||D|||False 59 | C|||C|||True 60 | B|||B|||True 61 | C|||A|||False 62 | B|||A|||False 63 | C|||B|||False 64 | A|||D|||False 65 | D|||C|||False 66 | B|||B|||True 67 | D|||D|||True 68 | B|||D|||False 69 | A|||C|||False 70 | D|||C|||False 71 | C|||A|||False 72 | C|||D|||False 73 | A|||C|||False 74 | C|||D|||False 75 | D|||A|||False 76 | D|||D|||True 77 | D|||D|||True 78 | D|||AC|||False 79 | A|||ABD|||False 80 | C|||AC|||False 81 | B|||BCD|||False 82 | C|||AC|||False 83 | A|||ABC|||False 84 | D|||ABCD|||False 85 | D|||ACD|||False 86 | C|||D|||False 87 | D|||D|||True 88 | D|||D|||True 89 | C|||C|||True 90 | C|||A|||False 91 | C|||ABCD|||False 92 | D|||AD|||False 93 | C|||ABCD|||False 94 | D|||ABCD|||False 95 | D|||CD|||False 96 | C|||BD|||False 97 | A|||ABCD|||False 98 | C|||C|||True 99 | B|||A|||False 100 | C|||B|||False 101 | D|||D|||True 102 | D|||D|||True 103 | B|||A|||False 104 | B|||C|||False 105 | D|||D|||True 106 | B|||C|||False 107 | D|||D|||True 108 | B|||D|||False 109 | D|||D|||True 110 | D|||D|||True 111 | D|||ABCD|||False 112 | C|||ABCD|||False 113 | B|||B|||True 114 | B|||D|||False 115 | B|||A|||False 116 | B|||C|||False 117 | D|||C|||False 118 | A|||B|||False 119 | B|||B|||True 120 | A|||D|||False 121 | D|||D|||True 122 | D|||A|||False 123 | C|||A|||False 124 | D|||D|||True 125 | D|||A|||False 126 | D|||D|||True 127 | B|||D|||False 128 | D|||D|||True 129 | C|||D|||False 130 | C|||A|||False 131 | D|||C|||False 132 | D|||C|||False 133 | C|||D|||False 134 | C|||A|||False 135 | C|||C|||True 136 | D|||ABCD|||False 137 | D|||BD|||False 138 | A|||ABC|||False 139 | B|||ABCD|||False 140 | B|||AC|||False 141 | D|||A|||False 142 | D|||B|||False 143 | C|||D|||False 144 | B|||B|||True 145 | A|||C|||False 146 | B|||D|||False 147 | B|||C|||False 148 | A|||ABC|||False 149 | D|||ABD|||False 150 | B|||ABC|||False 151 | D|||BCD|||False 152 | D|||C|||False 153 | B|||B|||True 154 | A|||B|||False 155 | C|||A|||False 156 | A|||A|||True 157 | D|||A|||False 158 | D|||A|||False 159 | D|||D|||True 160 | C|||A|||False 161 | D|||B|||False 162 | C|||B|||False 163 | A|||A|||True 164 | Average accuracy 0.319 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||A|||False 3 | C|||D|||False 4 | D|||ABCD|||False 5 | D|||D|||True 6 | D|||B|||False 7 | D|||D|||True 8 | D|||A|||False 9 | D|||D|||True 10 | D|||D|||True 11 | D|||A|||False 12 | C|||B|||False 13 | D|||A|||False 14 | C|||B|||False 15 | D|||D|||True 16 | D|||B|||False 17 | C|||ABCD|||False 18 | D|||ABCD|||False 19 | C|||CD|||False 20 | D|||D|||True 21 | C|||B|||False 22 | D|||D|||True 23 | D|||A|||False 24 | D|||B|||False 25 | D|||A|||False 26 | D|||C|||False 27 | D|||C|||False 28 | D|||C|||False 29 | D|||C|||False 30 | D|||C|||False 31 | C|||C|||True 32 | D|||C|||False 33 | D|||D|||True 34 | D|||ABCD|||False 35 | D|||AD|||False 36 | D|||ABCD|||False 37 | C|||D|||False 38 | D|||D|||True 39 | D|||A|||False 40 | D|||D|||True 41 | D|||D|||True 42 | D|||B|||False 43 | D|||C|||False 44 | D|||C|||False 45 | D|||B|||False 46 | D|||B|||False 47 | D|||B|||False 48 | D|||C|||False 49 | C|||C|||True 50 | D|||B|||False 51 | D|||D|||True 52 | D|||ABCD|||False 53 | D|||AD|||False 54 | D|||BCD|||False 55 | D|||D|||True 56 | D|||A|||False 57 | C|||C|||True 58 | D|||D|||True 59 | D|||C|||False 60 | D|||B|||False 61 | D|||A|||False 62 | D|||A|||False 63 | D|||B|||False 64 | D|||D|||True 65 | D|||C|||False 66 | D|||B|||False 67 | D|||D|||True 68 | D|||D|||True 69 | D|||C|||False 70 | D|||C|||False 71 | D|||A|||False 72 | C|||D|||False 73 | D|||C|||False 74 | D|||D|||True 75 | D|||A|||False 76 | C|||D|||False 77 | D|||D|||True 78 | D|||AC|||False 79 | C|||ABD|||False 80 | D|||AC|||False 81 | D|||BCD|||False 82 | D|||AC|||False 83 | D|||ABC|||False 84 | D|||ABCD|||False 85 | D|||ACD|||False 86 | D|||D|||True 87 | C|||D|||False 88 | D|||D|||True 89 | C|||C|||True 90 | C|||A|||False 91 | D|||ABCD|||False 92 | D|||AD|||False 93 | D|||ABCD|||False 94 | D|||ABCD|||False 95 | D|||CD|||False 96 | D|||BD|||False 97 | D|||ABCD|||False 98 | D|||C|||False 99 | D|||A|||False 100 | D|||B|||False 101 | D|||D|||True 102 | D|||D|||True 103 | D|||A|||False 104 | D|||C|||False 105 | D|||D|||True 106 | D|||C|||False 107 | D|||D|||True 108 | D|||D|||True 109 | C|||D|||False 110 | D|||D|||True 111 | D|||ABCD|||False 112 | D|||ABCD|||False 113 | D|||B|||False 114 | D|||D|||True 115 | D|||A|||False 116 | C|||C|||True 117 | D|||C|||False 118 | D|||B|||False 119 | D|||B|||False 120 | D|||D|||True 121 | D|||D|||True 122 | D|||A|||False 123 | C|||A|||False 124 | D|||D|||True 125 | C|||A|||False 126 | D|||D|||True 127 | D|||D|||True 128 | D|||D|||True 129 | C|||D|||False 130 | D|||A|||False 131 | C|||C|||True 132 | D|||C|||False 133 | D|||D|||True 134 | D|||A|||False 135 | D|||C|||False 136 | D|||ABCD|||False 137 | D|||BD|||False 138 | D|||ABC|||False 139 | D|||ABCD|||False 140 | D|||AC|||False 141 | D|||A|||False 142 | D|||B|||False 143 | D|||D|||True 144 | D|||B|||False 145 | C|||C|||True 146 | D|||D|||True 147 | D|||C|||False 148 | D|||ABC|||False 149 | D|||ABD|||False 150 | D|||ABC|||False 151 | D|||BCD|||False 152 | D|||C|||False 153 | D|||B|||False 154 | D|||B|||False 155 | C|||A|||False 156 | D|||A|||False 157 | D|||A|||False 158 | D|||A|||False 159 | D|||D|||True 160 | D|||A|||False 161 | D|||B|||False 162 | D|||B|||False 163 | D|||A|||False 164 | Average accuracy 0.282 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | D|||A|||False 3 | A|||D|||False 4 | A|||ABCD|||False 5 | A|||D|||False 6 | B|||B|||True 7 | B|||D|||False 8 | A|||A|||True 9 | D|||D|||True 10 | B|||D|||False 11 | B|||A|||False 12 | B|||B|||True 13 | B|||A|||False 14 | A|||B|||False 15 | B|||D|||False 16 | B|||B|||True 17 | A|||ABCD|||False 18 | A|||ABCD|||False 19 | A|||CD|||False 20 | A|||D|||False 21 | A|||B|||False 22 | A|||D|||False 23 | B|||A|||False 24 | A|||B|||False 25 | B|||A|||False 26 | A|||C|||False 27 | B|||C|||False 28 | B|||C|||False 29 | A|||C|||False 30 | A|||C|||False 31 | D|||C|||False 32 | A|||C|||False 33 | B|||D|||False 34 | B|||ABCD|||False 35 | A|||AD|||False 36 | A|||ABCD|||False 37 | D|||D|||True 38 | A|||D|||False 39 | D|||A|||False 40 | A|||D|||False 41 | A|||D|||False 42 | A|||B|||False 43 | B|||C|||False 44 | B|||C|||False 45 | B|||B|||True 46 | B|||B|||True 47 | B|||B|||True 48 | B|||C|||False 49 | A|||C|||False 50 | D|||B|||False 51 | D|||D|||True 52 | B|||ABCD|||False 53 | B|||AD|||False 54 | A|||BCD|||False 55 | A|||D|||False 56 | A|||A|||True 57 | A|||C|||False 58 | D|||D|||True 59 | A|||C|||False 60 | A|||B|||False 61 | B|||A|||False 62 | B|||A|||False 63 | A|||B|||False 64 | B|||D|||False 65 | D|||C|||False 66 | A|||B|||False 67 | B|||D|||False 68 | B|||D|||False 69 | D|||C|||False 70 | B|||C|||False 71 | A|||A|||True 72 | A|||D|||False 73 | A|||C|||False 74 | B|||D|||False 75 | A|||A|||True 76 | D|||D|||True 77 | D|||D|||True 78 | B|||AC|||False 79 | A|||ABD|||False 80 | A|||AC|||False 81 | B|||BCD|||False 82 | A|||AC|||False 83 | A|||ABC|||False 84 | A|||ABCD|||False 85 | 未成功回答|||ACD|||False 86 | A|||D|||False 87 | A|||D|||False 88 | A|||D|||False 89 | D|||C|||False 90 | B|||A|||False 91 | B|||ABCD|||False 92 | D|||AD|||False 93 | A|||ABCD|||False 94 | D|||ABCD|||False 95 | B|||CD|||False 96 | D|||BD|||False 97 | D|||ABCD|||False 98 | A|||C|||False 99 | A|||A|||True 100 | A|||B|||False 101 | A|||D|||False 102 | B|||D|||False 103 | B|||A|||False 104 | B|||C|||False 105 | D|||D|||True 106 | A|||C|||False 107 | B|||D|||False 108 | A|||D|||False 109 | A|||D|||False 110 | A|||D|||False 111 | A|||ABCD|||False 112 | A|||ABCD|||False 113 | D|||B|||False 114 | D|||D|||True 115 | D|||A|||False 116 | A|||C|||False 117 | A|||C|||False 118 | A|||B|||False 119 | A|||B|||False 120 | A|||D|||False 121 | D|||D|||True 122 | D|||A|||False 123 | B|||A|||False 124 | D|||D|||True 125 | D|||A|||False 126 | A|||D|||False 127 | D|||D|||True 128 | A|||D|||False 129 | A|||D|||False 130 | B|||A|||False 131 | A|||C|||False 132 | D|||C|||False 133 | B|||D|||False 134 | A|||A|||True 135 | A|||C|||False 136 | A|||ABCD|||False 137 | 未成功回答|||BD|||False 138 | A|||ABC|||False 139 | D|||ABCD|||False 140 | B|||AC|||False 141 | A|||A|||True 142 | B|||B|||True 143 | B|||D|||False 144 | D|||B|||False 145 | A|||C|||False 146 | B|||D|||False 147 | B|||C|||False 148 | A|||ABC|||False 149 | A|||ABD|||False 150 | A|||ABC|||False 151 | A|||BCD|||False 152 | A|||C|||False 153 | A|||B|||False 154 | A|||B|||False 155 | A|||A|||True 156 | B|||A|||False 157 | D|||A|||False 158 | A|||A|||True 159 | B|||D|||False 160 | A|||A|||True 161 | B|||B|||True 162 | D|||B|||False 163 | B|||A|||False 164 | Average accuracy 0.178 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/免疫学163题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | B|||A|||False 3 | B|||D|||False 4 | B|||ABCD|||False 5 | B|||D|||False 6 | B|||B|||True 7 | B|||D|||False 8 | B|||A|||False 9 | B|||D|||False 10 | B|||D|||False 11 | D|||A|||False 12 | B|||B|||True 13 | B|||A|||False 14 | B|||B|||True 15 | B|||D|||False 16 | D|||B|||False 17 | B|||ABCD|||False 18 | B|||ABCD|||False 19 | B|||CD|||False 20 | B|||D|||False 21 | B|||B|||True 22 | B|||D|||False 23 | B|||A|||False 24 | B|||B|||True 25 | B|||A|||False 26 | B|||C|||False 27 | B|||C|||False 28 | B|||C|||False 29 | B|||C|||False 30 | B|||C|||False 31 | B|||C|||False 32 | D|||C|||False 33 | B|||D|||False 34 | B|||ABCD|||False 35 | B|||AD|||False 36 | B|||ABCD|||False 37 | B|||D|||False 38 | B|||D|||False 39 | B|||A|||False 40 | B|||D|||False 41 | B|||D|||False 42 | D|||B|||False 43 | D|||C|||False 44 | D|||C|||False 45 | B|||B|||True 46 | B|||B|||True 47 | B|||B|||True 48 | B|||C|||False 49 | B|||C|||False 50 | B|||B|||True 51 | B|||D|||False 52 | B|||ABCD|||False 53 | B|||AD|||False 54 | B|||BCD|||False 55 | B|||D|||False 56 | B|||A|||False 57 | B|||C|||False 58 | B|||D|||False 59 | B|||C|||False 60 | B|||B|||True 61 | B|||A|||False 62 | B|||A|||False 63 | B|||B|||True 64 | B|||D|||False 65 | B|||C|||False 66 | B|||B|||True 67 | B|||D|||False 68 | B|||D|||False 69 | B|||C|||False 70 | B|||C|||False 71 | B|||A|||False 72 | B|||D|||False 73 | B|||C|||False 74 | B|||D|||False 75 | B|||A|||False 76 | B|||D|||False 77 | D|||D|||True 78 | B|||AC|||False 79 | B|||ABD|||False 80 | B|||AC|||False 81 | B|||BCD|||False 82 | B|||AC|||False 83 | D|||ABC|||False 84 | B|||ABCD|||False 85 | B|||ACD|||False 86 | D|||D|||True 87 | D|||D|||True 88 | D|||D|||True 89 | B|||C|||False 90 | B|||A|||False 91 | B|||ABCD|||False 92 | B|||AD|||False 93 | B|||ABCD|||False 94 | D|||ABCD|||False 95 | D|||CD|||False 96 | B|||BD|||False 97 | B|||ABCD|||False 98 | D|||C|||False 99 | D|||A|||False 100 | B|||B|||True 101 | B|||D|||False 102 | B|||D|||False 103 | B|||A|||False 104 | B|||C|||False 105 | B|||D|||False 106 | B|||C|||False 107 | D|||D|||True 108 | B|||D|||False 109 | B|||D|||False 110 | B|||D|||False 111 | B|||ABCD|||False 112 | B|||ABCD|||False 113 | B|||B|||True 114 | B|||D|||False 115 | B|||A|||False 116 | B|||C|||False 117 | B|||C|||False 118 | B|||B|||True 119 | D|||B|||False 120 | B|||D|||False 121 | B|||D|||False 122 | B|||A|||False 123 | B|||A|||False 124 | B|||D|||False 125 | B|||A|||False 126 | B|||D|||False 127 | B|||D|||False 128 | B|||D|||False 129 | B|||D|||False 130 | B|||A|||False 131 | B|||C|||False 132 | B|||C|||False 133 | B|||D|||False 134 | B|||A|||False 135 | B|||C|||False 136 | B|||ABCD|||False 137 | B|||BD|||False 138 | B|||ABC|||False 139 | B|||ABCD|||False 140 | B|||AC|||False 141 | D|||A|||False 142 | D|||B|||False 143 | B|||D|||False 144 | B|||B|||True 145 | B|||C|||False 146 | B|||D|||False 147 | B|||C|||False 148 | B|||ABC|||False 149 | B|||ABD|||False 150 | B|||ABC|||False 151 | B|||BCD|||False 152 | B|||C|||False 153 | D|||B|||False 154 | B|||B|||True 155 | B|||A|||False 156 | B|||A|||False 157 | B|||A|||False 158 | B|||A|||False 159 | B|||D|||False 160 | D|||A|||False 161 | B|||B|||True 162 | B|||B|||True 163 | B|||A|||False 164 | Average accuracy 0.147 - 免疫学163题 165 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | C|||B|||False 3 | C|||D|||False 4 | C|||B|||False 5 | D|||D|||True 6 | B|||C|||False 7 | C|||B|||False 8 | D|||A|||False 9 | B|||B|||True 10 | A|||B|||False 11 | C|||C|||True 12 | A|||A|||True 13 | D|||BCD|||False 14 | B|||AD|||False 15 | B|||D|||False 16 | C|||BC|||False 17 | C|||CD|||False 18 | B|||AD|||False 19 | C|||D|||False 20 | B|||D|||False 21 | C|||ACD|||False 22 | B|||AD|||False 23 | C|||B|||False 24 | D|||D|||True 25 | D|||D|||True 26 | B|||AC|||False 27 | A|||AB|||False 28 | D|||A|||False 29 | C|||AD|||False 30 | B|||ABD|||False 31 | C|||C|||True 32 | A|||B|||False 33 | B|||D|||False 34 | C|||B|||False 35 | D|||D|||True 36 | C|||A|||False 37 | C|||BD|||False 38 | D|||D|||True 39 | B|||B|||True 40 | A|||A|||True 41 | B|||C|||False 42 | B|||A|||False 43 | B|||C|||False 44 | A|||A|||True 45 | C|||C|||True 46 | D|||B|||False 47 | B|||B|||True 48 | B|||A|||False 49 | C|||D|||False 50 | B|||C|||False 51 | D|||D|||True 52 | D|||D|||True 53 | B|||C|||False 54 | B|||C|||False 55 | C|||BC|||False 56 | C|||C|||True 57 | A|||ABD|||False 58 | A|||A|||True 59 | C|||C|||True 60 | D|||C|||False 61 | C|||C|||True 62 | B|||C|||False 63 | C|||B|||False 64 | B|||D|||False 65 | B|||C|||False 66 | A|||B|||False 67 | A|||AD|||False 68 | B|||B|||True 69 | B|||B|||True 70 | B|||C|||False 71 | B|||CD|||False 72 | A|||A|||True 73 | B|||A|||False 74 | B|||B|||True 75 | D|||B|||False 76 | C|||C|||True 77 | C|||C|||True 78 | B|||B|||True 79 | B|||C|||False 80 | A|||ABD|||False 81 | B|||B|||True 82 | C|||B|||False 83 | A|||ABC|||False 84 | A|||BD|||False 85 | D|||D|||True 86 | B|||AD|||False 87 | B|||AD|||False 88 | B|||B|||True 89 | B|||CD|||False 90 | B|||B|||True 91 | B|||B|||True 92 | D|||D|||True 93 | C|||D|||False 94 | B|||B|||True 95 | B|||B|||True 96 | D|||D|||True 97 | C|||B|||False 98 | B|||C|||False 99 | B|||B|||True 100 | B|||D|||False 101 | D|||A|||False 102 | D|||D|||True 103 | B|||D|||False 104 | B|||B|||True 105 | D|||D|||True 106 | B|||A|||False 107 | C|||A|||False 108 | C|||B|||False 109 | B|||C|||False 110 | C|||C|||True 111 | B|||C|||False 112 | B|||D|||False 113 | C|||BCD|||False 114 | A|||A|||True 115 | C|||C|||True 116 | A|||B|||False 117 | C|||AD|||False 118 | B|||D|||False 119 | B|||B|||True 120 | C|||C|||True 121 | B|||B|||True 122 | C|||C|||True 123 | B|||C|||False 124 | B|||B|||True 125 | C|||BC|||False 126 | B|||B|||True 127 | C|||B|||False 128 | D|||D|||True 129 | B|||A|||False 130 | C|||C|||True 131 | D|||C|||False 132 | C|||AB|||False 133 | A|||AC|||False 134 | A|||AD|||False 135 | B|||BC|||False 136 | D|||B|||False 137 | C|||B|||False 138 | B|||BC|||False 139 | C|||A|||False 140 | D|||ABD|||False 141 | C|||ABC|||False 142 | C|||B|||False 143 | D|||BD|||False 144 | D|||AC|||False 145 | B|||A|||False 146 | A|||AD|||False 147 | D|||A|||False 148 | B|||B|||True 149 | D|||AB|||False 150 | D|||D|||True 151 | B|||B|||True 152 | A|||ABD|||False 153 | A|||BD|||False 154 | C|||AC|||False 155 | C|||BC|||False 156 | C|||D|||False 157 | B|||BD|||False 158 | B|||C|||False 159 | C|||AD|||False 160 | D|||C|||False 161 | B|||A|||False 162 | B|||AD|||False 163 | A|||D|||False 164 | B|||B|||True 165 | B|||BC|||False 166 | D|||AC|||False 167 | B|||BC|||False 168 | C|||ACD|||False 169 | Average accuracy 0.327 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | D|||B|||False 3 | C|||D|||False 4 | B|||B|||True 5 | B|||D|||False 6 | D|||C|||False 7 | C|||B|||False 8 | B|||A|||False 9 | B|||B|||True 10 | D|||B|||False 11 | D|||C|||False 12 | C|||A|||False 13 | D|||BCD|||False 14 | B|||AD|||False 15 | A|||D|||False 16 | D|||BC|||False 17 | C|||CD|||False 18 | A|||AD|||False 19 | D|||D|||True 20 | C|||D|||False 21 | A|||ACD|||False 22 | A|||AD|||False 23 | B|||B|||True 24 | D|||D|||True 25 | D|||D|||True 26 | C|||AC|||False 27 | A|||AB|||False 28 | ACD|||A|||False 29 | B|||AD|||False 30 | D|||ABD|||False 31 | B|||C|||False 32 | D|||B|||False 33 | B|||D|||False 34 | D|||B|||False 35 | A|||D|||False 36 | C|||A|||False 37 | A|||BD|||False 38 | C|||D|||False 39 | D|||B|||False 40 | A|||A|||True 41 | C|||C|||True 42 | C|||A|||False 43 | A|||C|||False 44 | A|||A|||True 45 | C|||C|||True 46 | C|||B|||False 47 | A|||B|||False 48 | B|||A|||False 49 | C|||D|||False 50 | C|||C|||True 51 | D|||D|||True 52 | D|||D|||True 53 | C|||C|||True 54 | C|||C|||True 55 | A|||BC|||False 56 | A|||C|||False 57 | A|||ABD|||False 58 | C|||A|||False 59 | B|||C|||False 60 | D|||C|||False 61 | D|||C|||False 62 | B|||C|||False 63 | C|||B|||False 64 | C|||D|||False 65 | B|||C|||False 66 | D|||B|||False 67 | A|||AD|||False 68 | B|||B|||True 69 | C|||B|||False 70 | B|||C|||False 71 | D|||CD|||False 72 | B|||A|||False 73 | A|||A|||True 74 | C|||B|||False 75 | A|||B|||False 76 | A|||C|||False 77 | C|||C|||True 78 | B|||B|||True 79 | B|||C|||False 80 | A|||ABD|||False 81 | B|||B|||True 82 | C|||B|||False 83 | D|||ABC|||False 84 | B|||BD|||False 85 | D|||D|||True 86 | D|||AD|||False 87 | C|||AD|||False 88 | C|||B|||False 89 | C|||CD|||False 90 | D|||B|||False 91 | C|||B|||False 92 | D|||D|||True 93 | D|||D|||True 94 | D|||B|||False 95 | B|||B|||True 96 | A|||D|||False 97 | A|||B|||False 98 | A|||C|||False 99 | D|||B|||False 100 | D|||D|||True 101 | C|||A|||False 102 | D|||D|||True 103 | A|||D|||False 104 | B|||B|||True 105 | C|||D|||False 106 | B|||A|||False 107 | C|||A|||False 108 | C|||B|||False 109 | B|||C|||False 110 | C|||C|||True 111 | B|||C|||False 112 | B|||D|||False 113 | A|||BCD|||False 114 | A|||A|||True 115 | C|||C|||True 116 | B|||B|||True 117 | C|||AD|||False 118 | D|||D|||True 119 | C|||B|||False 120 | D|||C|||False 121 | C|||B|||False 122 | C|||C|||True 123 | B|||C|||False 124 | C|||B|||False 125 | C|||BC|||False 126 | B|||B|||True 127 | B|||B|||True 128 | D|||D|||True 129 | C|||A|||False 130 | C|||C|||True 131 | C|||C|||True 132 | C|||AB|||False 133 | A|||AC|||False 134 | D|||AD|||False 135 | A|||BC|||False 136 | B|||B|||True 137 | D|||B|||False 138 | D|||BC|||False 139 | B|||A|||False 140 | B|||ABD|||False 141 | B|||ABC|||False 142 | A|||B|||False 143 | D|||BD|||False 144 | D|||AC|||False 145 | C|||A|||False 146 | A|||AD|||False 147 | C|||A|||False 148 | A|||B|||False 149 | C|||AB|||False 150 | B|||D|||False 151 | B|||B|||True 152 | D|||ABD|||False 153 | D|||BD|||False 154 | C|||AC|||False 155 | D|||BC|||False 156 | D|||D|||True 157 | B|||BD|||False 158 | C|||C|||True 159 | B|||AD|||False 160 | D|||C|||False 161 | D|||A|||False 162 | A|||AD|||False 163 | D|||D|||True 164 | A|||B|||False 165 | D|||BC|||False 166 | C|||AC|||False 167 | C|||BC|||False 168 | D|||ACD|||False 169 | Average accuracy 0.256 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | B|||B|||True 3 | A|||D|||False 4 | A|||B|||False 5 | D|||D|||True 6 | A|||C|||False 7 | B|||B|||True 8 | A|||A|||True 9 | D|||B|||False 10 | A|||B|||False 11 | B|||C|||False 12 | A|||A|||True 13 | B|||BCD|||False 14 | A|||AD|||False 15 | A|||D|||False 16 | A|||BC|||False 17 | B|||CD|||False 18 | A|||AD|||False 19 | D|||D|||True 20 | A|||D|||False 21 | A|||ACD|||False 22 | D|||AD|||False 23 | A|||B|||False 24 | A|||D|||False 25 | B|||D|||False 26 | B|||AC|||False 27 | D|||AB|||False 28 | A|||A|||True 29 | A|||AD|||False 30 | D|||ABD|||False 31 | A|||C|||False 32 | B|||B|||True 33 | A|||D|||False 34 | B|||B|||True 35 | A|||D|||False 36 | A|||A|||True 37 | A|||BD|||False 38 | B|||D|||False 39 | A|||B|||False 40 | A|||A|||True 41 | A|||C|||False 42 | C|||A|||False 43 | B|||C|||False 44 | A|||A|||True 45 | B|||C|||False 46 | D|||B|||False 47 | A|||B|||False 48 | D|||A|||False 49 | B|||D|||False 50 | D|||C|||False 51 | D|||D|||True 52 | C|||D|||False 53 | B|||C|||False 54 | B|||C|||False 55 | A|||BC|||False 56 | A|||C|||False 57 | A|||ABD|||False 58 | B|||A|||False 59 | B|||C|||False 60 | D|||C|||False 61 | D|||C|||False 62 | A|||C|||False 63 | B|||B|||True 64 | D|||D|||True 65 | B|||C|||False 66 | A|||B|||False 67 | A|||AD|||False 68 | A|||B|||False 69 | D|||B|||False 70 | A|||C|||False 71 | A|||CD|||False 72 | B|||A|||False 73 | D|||A|||False 74 | D|||B|||False 75 | B|||B|||True 76 | A|||C|||False 77 | B|||C|||False 78 | B|||B|||True 79 | B|||C|||False 80 | D|||ABD|||False 81 | A|||B|||False 82 | B|||B|||True 83 | B|||ABC|||False 84 | A|||BD|||False 85 | A|||D|||False 86 | A|||AD|||False 87 | A|||AD|||False 88 | B|||B|||True 89 | C|||CD|||False 90 | C|||B|||False 91 | C|||B|||False 92 | D|||D|||True 93 | B|||D|||False 94 | B|||B|||True 95 | B|||B|||True 96 | A|||D|||False 97 | C|||B|||False 98 | B|||C|||False 99 | A|||B|||False 100 | A|||D|||False 101 | D|||A|||False 102 | A|||D|||False 103 | D|||D|||True 104 | A|||B|||False 105 | A|||D|||False 106 | A|||A|||True 107 | A|||A|||True 108 | B|||B|||True 109 | B|||C|||False 110 | B|||C|||False 111 | A|||C|||False 112 | B|||D|||False 113 | D|||BCD|||False 114 | D|||A|||False 115 | B|||C|||False 116 | B|||B|||True 117 | C|||AD|||False 118 | B|||D|||False 119 | A|||B|||False 120 | B|||C|||False 121 | D|||B|||False 122 | A|||C|||False 123 | B|||C|||False 124 | A|||B|||False 125 | D|||BC|||False 126 | B|||B|||True 127 | A|||B|||False 128 | D|||D|||True 129 | B|||A|||False 130 | B|||C|||False 131 | B|||C|||False 132 | C|||AB|||False 133 | B|||AC|||False 134 | D|||AD|||False 135 | A|||BC|||False 136 | C|||B|||False 137 | A|||B|||False 138 | D|||BC|||False 139 | A|||A|||True 140 | A|||ABD|||False 141 | C|||ABC|||False 142 | B|||B|||True 143 | A|||BD|||False 144 | D|||AC|||False 145 | A|||A|||True 146 | A|||AD|||False 147 | A|||A|||True 148 | B|||B|||True 149 | A|||AB|||False 150 | B|||D|||False 151 | D|||B|||False 152 | D|||ABD|||False 153 | C|||BD|||False 154 | C|||AC|||False 155 | A|||BC|||False 156 | A|||D|||False 157 | A|||BD|||False 158 | B|||C|||False 159 | B|||AD|||False 160 | D|||C|||False 161 | C|||A|||False 162 | A|||AD|||False 163 | C|||D|||False 164 | B|||B|||True 165 | D|||BC|||False 166 | D|||AC|||False 167 | C|||BC|||False 168 | A|||ACD|||False 169 | Average accuracy 0.208 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | B|||B|||True 3 | D|||D|||True 4 | B|||B|||True 5 | B|||D|||False 6 | B|||C|||False 7 | B|||B|||True 8 | B|||A|||False 9 | B|||B|||True 10 | B|||B|||True 11 | B|||C|||False 12 | D|||A|||False 13 | B|||BCD|||False 14 | B|||AD|||False 15 | B|||D|||False 16 | B|||BC|||False 17 | B|||CD|||False 18 | D|||AD|||False 19 | B|||D|||False 20 | B|||D|||False 21 | B|||ACD|||False 22 | B|||AD|||False 23 | D|||B|||False 24 | B|||D|||False 25 | B|||D|||False 26 | B|||AC|||False 27 | B|||AB|||False 28 | B|||A|||False 29 | B|||AD|||False 30 | B|||ABD|||False 31 | B|||C|||False 32 | B|||B|||True 33 | D|||D|||True 34 | B|||B|||True 35 | B|||D|||False 36 | D|||A|||False 37 | B|||BD|||False 38 | B|||D|||False 39 | B|||B|||True 40 | B|||A|||False 41 | B|||C|||False 42 | D|||A|||False 43 | B|||C|||False 44 | B|||A|||False 45 | B|||C|||False 46 | D|||B|||False 47 | B|||B|||True 48 | D|||A|||False 49 | B|||D|||False 50 | D|||C|||False 51 | B|||D|||False 52 | D|||D|||True 53 | B|||C|||False 54 | D|||C|||False 55 | B|||BC|||False 56 | B|||C|||False 57 | B|||ABD|||False 58 | B|||A|||False 59 | B|||C|||False 60 | B|||C|||False 61 | D|||C|||False 62 | D|||C|||False 63 | B|||B|||True 64 | D|||D|||True 65 | D|||C|||False 66 | D|||B|||False 67 | B|||AD|||False 68 | B|||B|||True 69 | D|||B|||False 70 | D|||C|||False 71 | B|||CD|||False 72 | D|||A|||False 73 | B|||A|||False 74 | D|||B|||False 75 | D|||B|||False 76 | B|||C|||False 77 | D|||C|||False 78 | D|||B|||False 79 | D|||C|||False 80 | B|||ABD|||False 81 | B|||B|||True 82 | D|||B|||False 83 | B|||ABC|||False 84 | B|||BD|||False 85 | B|||D|||False 86 | B|||AD|||False 87 | B|||AD|||False 88 | D|||B|||False 89 | B|||CD|||False 90 | B|||B|||True 91 | B|||B|||True 92 | B|||D|||False 93 | B|||D|||False 94 | D|||B|||False 95 | B|||B|||True 96 | B|||D|||False 97 | B|||B|||True 98 | D|||C|||False 99 | B|||B|||True 100 | B|||D|||False 101 | B|||A|||False 102 | B|||D|||False 103 | B|||D|||False 104 | B|||B|||True 105 | D|||D|||True 106 | B|||A|||False 107 | B|||A|||False 108 | D|||B|||False 109 | B|||C|||False 110 | D|||C|||False 111 | B|||C|||False 112 | B|||D|||False 113 | B|||BCD|||False 114 | D|||A|||False 115 | D|||C|||False 116 | B|||B|||True 117 | D|||AD|||False 118 | B|||D|||False 119 | B|||B|||True 120 | B|||C|||False 121 | B|||B|||True 122 | B|||C|||False 123 | B|||C|||False 124 | B|||B|||True 125 | D|||BC|||False 126 | B|||B|||True 127 | D|||B|||False 128 | D|||D|||True 129 | B|||A|||False 130 | D|||C|||False 131 | B|||C|||False 132 | B|||AB|||False 133 | B|||AC|||False 134 | B|||AD|||False 135 | B|||BC|||False 136 | D|||B|||False 137 | B|||B|||True 138 | D|||BC|||False 139 | D|||A|||False 140 | B|||ABD|||False 141 | B|||ABC|||False 142 | D|||B|||False 143 | B|||BD|||False 144 | B|||AC|||False 145 | B|||A|||False 146 | B|||AD|||False 147 | D|||A|||False 148 | B|||B|||True 149 | B|||AB|||False 150 | D|||D|||True 151 | B|||B|||True 152 | B|||ABD|||False 153 | B|||BD|||False 154 | B|||AC|||False 155 | B|||BC|||False 156 | D|||D|||True 157 | B|||BD|||False 158 | D|||C|||False 159 | B|||AD|||False 160 | B|||C|||False 161 | D|||A|||False 162 | B|||AD|||False 163 | B|||D|||False 164 | B|||B|||True 165 | B|||BC|||False 166 | B|||AC|||False 167 | B|||BC|||False 168 | B|||ACD|||False 169 | Average accuracy 0.208 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||B|||False 3 | A|||D|||False 4 | A|||B|||False 5 | B|||D|||False 6 | B|||C|||False 7 | D|||B|||False 8 | A|||A|||True 9 | D|||B|||False 10 | D|||B|||False 11 | D|||C|||False 12 | D|||A|||False 13 | D|||BCD|||False 14 | D|||AD|||False 15 | A|||D|||False 16 | D|||BC|||False 17 | C|||CD|||False 18 | D|||AD|||False 19 | D|||D|||True 20 | D|||D|||True 21 | C|||ACD|||False 22 | D|||AD|||False 23 | A|||B|||False 24 | D|||D|||True 25 | D|||D|||True 26 | D|||AC|||False 27 | B|||AB|||False 28 | D|||A|||False 29 | D|||AD|||False 30 | C|||ABD|||False 31 | A|||C|||False 32 | D|||B|||False 33 | B|||D|||False 34 | D|||B|||False 35 | D|||D|||True 36 | D|||A|||False 37 | B|||BD|||False 38 | D|||D|||True 39 | D|||B|||False 40 | D|||A|||False 41 | D|||C|||False 42 | B|||A|||False 43 | D|||C|||False 44 | A|||A|||True 45 | A|||C|||False 46 | D|||B|||False 47 | B|||B|||True 48 | A|||A|||True 49 | D|||D|||True 50 | C|||C|||True 51 | C|||D|||False 52 | D|||D|||True 53 | D|||C|||False 54 | D|||C|||False 55 | D|||BC|||False 56 | A|||C|||False 57 | C|||ABD|||False 58 | D|||A|||False 59 | D|||C|||False 60 | D|||C|||False 61 | D|||C|||False 62 | D|||C|||False 63 | D|||B|||False 64 | D|||D|||True 65 | D|||C|||False 66 | D|||B|||False 67 | A|||AD|||False 68 | B|||B|||True 69 | D|||B|||False 70 | D|||C|||False 71 | D|||CD|||False 72 | D|||A|||False 73 | A|||A|||True 74 | D|||B|||False 75 | B|||B|||True 76 | D|||C|||False 77 | D|||C|||False 78 | D|||B|||False 79 | A|||C|||False 80 | D|||ABD|||False 81 | B|||B|||True 82 | A|||B|||False 83 | C|||ABC|||False 84 | D|||BD|||False 85 | B|||D|||False 86 | D|||AD|||False 87 | D|||AD|||False 88 | D|||B|||False 89 | C|||CD|||False 90 | D|||B|||False 91 | D|||B|||False 92 | D|||D|||True 93 | D|||D|||True 94 | D|||B|||False 95 | D|||B|||False 96 | B|||D|||False 97 | C|||B|||False 98 | D|||C|||False 99 | D|||B|||False 100 | C|||D|||False 101 | D|||A|||False 102 | D|||D|||True 103 | D|||D|||True 104 | D|||B|||False 105 | B|||D|||False 106 | D|||A|||False 107 | D|||A|||False 108 | C|||B|||False 109 | D|||C|||False 110 | D|||C|||False 111 | D|||C|||False 112 | B|||D|||False 113 | D|||BCD|||False 114 | A|||A|||True 115 | D|||C|||False 116 | D|||B|||False 117 | C|||AD|||False 118 | D|||D|||True 119 | B|||B|||True 120 | D|||C|||False 121 | D|||B|||False 122 | C|||C|||True 123 | D|||C|||False 124 | C|||B|||False 125 | D|||BC|||False 126 | D|||B|||False 127 | A|||B|||False 128 | D|||D|||True 129 | D|||A|||False 130 | D|||C|||False 131 | A|||C|||False 132 | C|||AB|||False 133 | D|||AC|||False 134 | D|||AD|||False 135 | B|||BC|||False 136 | D|||B|||False 137 | C|||B|||False 138 | A|||BC|||False 139 | D|||A|||False 140 | D|||ABD|||False 141 | D|||ABC|||False 142 | D|||B|||False 143 | D|||BD|||False 144 | D|||AC|||False 145 | D|||A|||False 146 | D|||AD|||False 147 | D|||A|||False 148 | B|||B|||True 149 | A|||AB|||False 150 | D|||D|||True 151 | B|||B|||True 152 | B|||ABD|||False 153 | C|||BD|||False 154 | C|||AC|||False 155 | D|||BC|||False 156 | D|||D|||True 157 | C|||BD|||False 158 | D|||C|||False 159 | D|||AD|||False 160 | D|||C|||False 161 | D|||A|||False 162 | D|||AD|||False 163 | A|||D|||False 164 | C|||B|||False 165 | B|||BC|||False 166 | D|||AC|||False 167 | D|||BC|||False 168 | D|||ACD|||False 169 | Average accuracy 0.185 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||B|||False 3 | A|||D|||False 4 | A|||B|||False 5 | C|||D|||False 6 | A|||C|||False 7 | D|||B|||False 8 | C|||A|||False 9 | B|||B|||True 10 | A|||B|||False 11 | D|||C|||False 12 | A|||A|||True 13 | D|||BCD|||False 14 | B|||AD|||False 15 | A|||D|||False 16 | A|||BC|||False 17 | C|||CD|||False 18 | A|||AD|||False 19 | C|||D|||False 20 | A|||D|||False 21 | C|||ACD|||False 22 | B|||AD|||False 23 | D|||B|||False 24 | B|||D|||False 25 | D|||D|||True 26 | B|||AC|||False 27 | A|||AB|||False 28 | A|||A|||True 29 | A|||AD|||False 30 | D|||ABD|||False 31 | A|||C|||False 32 | A|||B|||False 33 | B|||D|||False 34 | D|||B|||False 35 | D|||D|||True 36 | A|||A|||True 37 | A|||BD|||False 38 | A|||D|||False 39 | B|||B|||True 40 | A|||A|||True 41 | B|||C|||False 42 | C|||A|||False 43 | D|||C|||False 44 | A|||A|||True 45 | A|||C|||False 46 | D|||B|||False 47 | C|||B|||False 48 | A|||A|||True 49 | C|||D|||False 50 | C|||C|||True 51 | C|||D|||False 52 | C|||D|||False 53 | A|||C|||False 54 | D|||C|||False 55 | A|||BC|||False 56 | A|||C|||False 57 | D|||ABD|||False 58 | C|||A|||False 59 | A|||C|||False 60 | D|||C|||False 61 | D|||C|||False 62 | A|||C|||False 63 | C|||B|||False 64 | C|||D|||False 65 | C|||C|||True 66 | A|||B|||False 67 | A|||AD|||False 68 | B|||B|||True 69 | C|||B|||False 70 | C|||C|||True 71 | B|||CD|||False 72 | A|||A|||True 73 | A|||A|||True 74 | B|||B|||True 75 | D|||B|||False 76 | C|||C|||True 77 | C|||C|||True 78 | A|||B|||False 79 | A|||C|||False 80 | A|||ABD|||False 81 | B|||B|||True 82 | A|||B|||False 83 | C|||ABC|||False 84 | A|||BD|||False 85 | B|||D|||False 86 | B|||AD|||False 87 | A|||AD|||False 88 | D|||B|||False 89 | A|||CD|||False 90 | D|||B|||False 91 | C|||B|||False 92 | C|||D|||False 93 | A|||D|||False 94 | A|||B|||False 95 | D|||B|||False 96 | A|||D|||False 97 | A|||B|||False 98 | A|||C|||False 99 | D|||B|||False 100 | B|||D|||False 101 | D|||A|||False 102 | B|||D|||False 103 | C|||D|||False 104 | D|||B|||False 105 | D|||D|||True 106 | A|||A|||True 107 | A|||A|||True 108 | C|||B|||False 109 | A|||C|||False 110 | A|||C|||False 111 | C|||C|||True 112 | D|||D|||True 113 | B|||BCD|||False 114 | C|||A|||False 115 | B|||C|||False 116 | A|||B|||False 117 | A|||AD|||False 118 | A|||D|||False 119 | B|||B|||True 120 | C|||C|||True 121 | A|||B|||False 122 | C|||C|||True 123 | C|||C|||True 124 | D|||B|||False 125 | C|||BC|||False 126 | A|||B|||False 127 | A|||B|||False 128 | A|||D|||False 129 | B|||A|||False 130 | C|||C|||True 131 | C|||C|||True 132 | C|||AB|||False 133 | A|||AC|||False 134 | A|||AD|||False 135 | B|||BC|||False 136 | A|||B|||False 137 | A|||B|||False 138 | A|||BC|||False 139 | D|||A|||False 140 | A|||ABD|||False 141 | C|||ABC|||False 142 | C|||B|||False 143 | D|||BD|||False 144 | D|||AC|||False 145 | C|||A|||False 146 | A|||AD|||False 147 | C|||A|||False 148 | B|||B|||True 149 | A|||AB|||False 150 | A|||D|||False 151 | C|||B|||False 152 | A|||ABD|||False 153 | B|||BD|||False 154 | C|||AC|||False 155 | A|||BC|||False 156 | A|||D|||False 157 | A|||BD|||False 158 | C|||C|||True 159 | A|||AD|||False 160 | C|||C|||True 161 | D|||A|||False 162 | A|||AD|||False 163 | A|||D|||False 164 | A|||B|||False 165 | B|||BC|||False 166 | D|||AC|||False 167 | C|||BC|||False 168 | D|||ACD|||False 169 | Average accuracy 0.202 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/教育_物理: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||B|||False 3 | C|||D|||False 4 | C|||B|||False 5 | C|||D|||False 6 | D|||C|||False 7 | D|||B|||False 8 | D|||A|||False 9 | D|||B|||False 10 | D|||B|||False 11 | C|||C|||True 12 | D|||A|||False 13 | D|||BCD|||False 14 | C|||AD|||False 15 | D|||D|||True 16 | C|||BC|||False 17 | C|||CD|||False 18 | D|||AD|||False 19 | C|||D|||False 20 | C|||D|||False 21 | C|||ACD|||False 22 | C|||AD|||False 23 | D|||B|||False 24 | C|||D|||False 25 | D|||D|||True 26 | D|||AC|||False 27 | D|||AB|||False 28 | D|||A|||False 29 | D|||AD|||False 30 | D|||ABD|||False 31 | D|||C|||False 32 | D|||B|||False 33 | C|||D|||False 34 | C|||B|||False 35 | D|||D|||True 36 | C|||A|||False 37 | D|||BD|||False 38 | D|||D|||True 39 | D|||B|||False 40 | D|||A|||False 41 | C|||C|||True 42 | C|||A|||False 43 | C|||C|||True 44 | D|||A|||False 45 | D|||C|||False 46 | D|||B|||False 47 | C|||B|||False 48 | D|||A|||False 49 | C|||D|||False 50 | D|||C|||False 51 | C|||D|||False 52 | D|||D|||True 53 | D|||C|||False 54 | C|||C|||True 55 | D|||BC|||False 56 | D|||C|||False 57 | D|||ABD|||False 58 | D|||A|||False 59 | D|||C|||False 60 | C|||C|||True 61 | C|||C|||True 62 | C|||C|||True 63 | C|||B|||False 64 | D|||D|||True 65 | D|||C|||False 66 | D|||B|||False 67 | C|||AD|||False 68 | C|||B|||False 69 | D|||B|||False 70 | C|||C|||True 71 | D|||CD|||False 72 | D|||A|||False 73 | C|||A|||False 74 | D|||B|||False 75 | C|||B|||False 76 | D|||C|||False 77 | C|||C|||True 78 | D|||B|||False 79 | C|||C|||True 80 | C|||ABD|||False 81 | D|||B|||False 82 | D|||B|||False 83 | C|||ABC|||False 84 | C|||BD|||False 85 | B|||D|||False 86 | C|||AD|||False 87 | D|||AD|||False 88 | D|||B|||False 89 | C|||CD|||False 90 | D|||B|||False 91 | D|||B|||False 92 | C|||D|||False 93 | D|||D|||True 94 | D|||B|||False 95 | C|||B|||False 96 | D|||D|||True 97 | D|||B|||False 98 | D|||C|||False 99 | D|||B|||False 100 | D|||D|||True 101 | C|||A|||False 102 | D|||D|||True 103 | D|||D|||True 104 | C|||B|||False 105 | D|||D|||True 106 | C|||A|||False 107 | D|||A|||False 108 | D|||B|||False 109 | D|||C|||False 110 | C|||C|||True 111 | D|||C|||False 112 | D|||D|||True 113 | D|||BCD|||False 114 | D|||A|||False 115 | D|||C|||False 116 | C|||B|||False 117 | D|||AD|||False 118 | C|||D|||False 119 | C|||B|||False 120 | D|||C|||False 121 | C|||B|||False 122 | D|||C|||False 123 | C|||C|||True 124 | D|||B|||False 125 | D|||BC|||False 126 | C|||B|||False 127 | C|||B|||False 128 | D|||D|||True 129 | C|||A|||False 130 | D|||C|||False 131 | D|||C|||False 132 | D|||AB|||False 133 | D|||AC|||False 134 | C|||AD|||False 135 | D|||BC|||False 136 | D|||B|||False 137 | C|||B|||False 138 | D|||BC|||False 139 | C|||A|||False 140 | D|||ABD|||False 141 | C|||ABC|||False 142 | D|||B|||False 143 | C|||BD|||False 144 | C|||AC|||False 145 | B|||A|||False 146 | C|||AD|||False 147 | C|||A|||False 148 | D|||B|||False 149 | D|||AB|||False 150 | D|||D|||True 151 | D|||B|||False 152 | D|||ABD|||False 153 | D|||BD|||False 154 | D|||AC|||False 155 | D|||BC|||False 156 | D|||D|||True 157 | C|||BD|||False 158 | D|||C|||False 159 | D|||AD|||False 160 | D|||C|||False 161 | C|||A|||False 162 | C|||AD|||False 163 | D|||D|||True 164 | C|||B|||False 165 | D|||BC|||False 166 | C|||AC|||False 167 | D|||BC|||False 168 | C|||ACD|||False 169 | Average accuracy 0.173 - 教育_物理 170 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||C|||False 3 | B|||A|||False 4 | C|||A|||False 5 | D|||D|||True 6 | A|||D|||False 7 | B|||B|||True 8 | C|||C|||True 9 | B|||B|||True 10 | A|||C|||False 11 | A|||B|||False 12 | C|||C|||True 13 | B|||B|||True 14 | B|||A|||False 15 | B|||A|||False 16 | A|||B|||False 17 | D|||D|||True 18 | B|||B|||True 19 | B|||B|||True 20 | B|||D|||False 21 | D|||D|||True 22 | C|||D|||False 23 | B|||D|||False 24 | D|||BD|||False 25 | B|||ABC|||False 26 | ABCD|||ABCD|||True 27 | D|||ABCD|||False 28 | D|||ABC|||False 29 | D|||D|||True 30 | B|||A|||False 31 | D|||C|||False 32 | D|||D|||True 33 | B|||B|||True 34 | A|||B|||False 35 | C|||C|||True 36 | A|||A|||True 37 | A|||A|||True 38 | A|||B|||False 39 | C|||C|||True 40 | C|||D|||False 41 | C|||C|||True 42 | D|||D|||True 43 | B|||B|||True 44 | C|||A|||False 45 | D|||D|||True 46 | D|||ABC|||False 47 | C|||ABCD|||False 48 | A|||ABC|||False 49 | B|||ABCD|||False 50 | B|||B|||True 51 | D|||D|||True 52 | B|||B|||True 53 | D|||D|||True 54 | B|||B|||True 55 | D|||D|||True 56 | B|||D|||False 57 | B|||A|||False 58 | D|||C|||False 59 | B|||D|||False 60 | D|||D|||True 61 | B|||C|||False 62 | C|||C|||True 63 | D|||C|||False 64 | C|||C|||True 65 | D|||B|||False 66 | A|||C|||False 67 | D|||D|||True 68 | D|||D|||True 69 | B|||C|||False 70 | C|||B|||False 71 | D|||D|||True 72 | C|||C|||True 73 | C|||C|||True 74 | D|||D|||True 75 | C|||B|||False 76 | C|||C|||True 77 | B|||C|||False 78 | B|||A|||False 79 | A|||D|||False 80 | C|||C|||True 81 | B|||C|||False 82 | A|||B|||False 83 | D|||D|||True 84 | D|||D|||True 85 | B|||B|||True 86 | C|||C|||True 87 | C|||D|||False 88 | B|||C|||False 89 | A|||A|||True 90 | D|||D|||True 91 | BCD|||C|||False 92 | C|||C|||True 93 | D|||B|||False 94 | C|||C|||True 95 | C|||D|||False 96 | D|||D|||True 97 | D|||D|||True 98 | A|||C|||False 99 | D|||C|||False 100 | D|||A|||False 101 | B|||A|||False 102 | B|||B|||True 103 | B|||D|||False 104 | D|||D|||True 105 | C|||B|||False 106 | C|||D|||False 107 | B|||B|||True 108 | D|||D|||True 109 | C|||C|||True 110 | A|||B|||False 111 | A|||D|||False 112 | A|||D|||False 113 | C|||C|||True 114 | B|||A|||False 115 | D|||D|||True 116 | D|||C|||False 117 | B|||B|||True 118 | A|||C|||False 119 | B|||C|||False 120 | A|||A|||True 121 | A|||B|||False 122 | B|||C|||False 123 | C|||C|||True 124 | A|||D|||False 125 | B|||B|||True 126 | B|||B|||True 127 | A|||D|||False 128 | C|||C|||True 129 | A|||A|||True 130 | C|||B|||False 131 | C|||D|||False 132 | B|||D|||False 133 | D|||C|||False 134 | A|||ABC|||False 135 | B|||BD|||False 136 | B|||ABD|||False 137 | C|||ABC|||False 138 | ACD|||AC|||False 139 | C|||C|||True 140 | D|||D|||True 141 | D|||D|||True 142 | D|||C|||False 143 | C|||C|||True 144 | D|||D|||True 145 | C|||C|||True 146 | D|||B|||False 147 | A|||A|||True 148 | B|||D|||False 149 | A|||B|||False 150 | B|||D|||False 151 | C|||D|||False 152 | A|||D|||False 153 | A|||D|||False 154 | C|||C|||True 155 | D|||D|||True 156 | A|||A|||True 157 | D|||D|||True 158 | C|||C|||True 159 | B|||B|||True 160 | D|||D|||True 161 | D|||B|||False 162 | C|||C|||True 163 | B|||D|||False 164 | B|||B|||True 165 | B|||B|||True 166 | D|||D|||True 167 | B|||D|||False 168 | C|||C|||True 169 | B|||B|||True 170 | B|||C|||False 171 | D|||D|||True 172 | D|||D|||True 173 | C|||C|||True 174 | A|||A|||True 175 | D|||D|||True 176 | B|||A|||False 177 | Average accuracy 0.506 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||C|||False 3 | D|||A|||False 4 | D|||A|||False 5 | B|||D|||False 6 | C|||D|||False 7 | D|||B|||False 8 | C|||C|||True 9 | B|||B|||True 10 | D|||C|||False 11 | D|||B|||False 12 | C|||C|||True 13 | C|||B|||False 14 | B|||A|||False 15 | B|||A|||False 16 | A|||B|||False 17 | D|||D|||True 18 | D|||B|||False 19 | A|||B|||False 20 | D|||D|||True 21 | B|||D|||False 22 | D|||D|||True 23 | D|||D|||True 24 | D|||BD|||False 25 | B|||ABC|||False 26 | A|||ABCD|||False 27 | D|||ABCD|||False 28 | D|||ABC|||False 29 | D|||D|||True 30 | D|||A|||False 31 | A|||C|||False 32 | D|||D|||True 33 | D|||B|||False 34 | D|||B|||False 35 | D|||C|||False 36 | D|||A|||False 37 | D|||A|||False 38 | D|||B|||False 39 | C|||C|||True 40 | D|||D|||True 41 | C|||C|||True 42 | D|||D|||True 43 | D|||B|||False 44 | D|||A|||False 45 | D|||D|||True 46 | C|||ABC|||False 47 | A|||ABCD|||False 48 | B|||ABC|||False 49 | D|||ABCD|||False 50 | B|||B|||True 51 | D|||D|||True 52 | A|||B|||False 53 | C|||D|||False 54 | B|||B|||True 55 | D|||D|||True 56 | D|||D|||True 57 | A|||A|||True 58 | D|||C|||False 59 | C|||D|||False 60 | D|||D|||True 61 | D|||C|||False 62 | C|||C|||True 63 | A|||C|||False 64 | C|||C|||True 65 | D|||B|||False 66 | C|||C|||True 67 | A|||D|||False 68 | D|||D|||True 69 | D|||C|||False 70 | D|||B|||False 71 | A|||D|||False 72 | C|||C|||True 73 | C|||C|||True 74 | D|||D|||True 75 | A|||B|||False 76 | D|||C|||False 77 | A|||C|||False 78 | D|||A|||False 79 | A|||D|||False 80 | C|||C|||True 81 | D|||C|||False 82 | A|||B|||False 83 | C|||D|||False 84 | D|||D|||True 85 | A|||B|||False 86 | C|||C|||True 87 | D|||D|||True 88 | D|||C|||False 89 | B|||A|||False 90 | D|||D|||True 91 | D|||C|||False 92 | B|||C|||False 93 | D|||B|||False 94 | D|||C|||False 95 | B|||D|||False 96 | C|||D|||False 97 | D|||D|||True 98 | D|||C|||False 99 | C|||C|||True 100 | A|||A|||True 101 | D|||A|||False 102 | A|||B|||False 103 | B|||D|||False 104 | A|||D|||False 105 | D|||B|||False 106 | C|||D|||False 107 | A|||B|||False 108 | D|||D|||True 109 | D|||C|||False 110 | A|||B|||False 111 | D|||D|||True 112 | D|||D|||True 113 | B|||C|||False 114 | C|||A|||False 115 | C|||D|||False 116 | D|||C|||False 117 | B|||B|||True 118 | D|||C|||False 119 | D|||C|||False 120 | C|||A|||False 121 | D|||B|||False 122 | D|||C|||False 123 | A|||C|||False 124 | D|||D|||True 125 | C|||B|||False 126 | B|||B|||True 127 | D|||D|||True 128 | C|||C|||True 129 | A|||A|||True 130 | C|||B|||False 131 | D|||D|||True 132 | D|||D|||True 133 | C|||C|||True 134 | D|||ABC|||False 135 | D|||BD|||False 136 | C|||ABD|||False 137 | C|||ABC|||False 138 | A|||AC|||False 139 | C|||C|||True 140 | D|||D|||True 141 | D|||D|||True 142 | D|||C|||False 143 | D|||C|||False 144 | A|||D|||False 145 | D|||C|||False 146 | D|||B|||False 147 | D|||A|||False 148 | A|||D|||False 149 | A|||B|||False 150 | C|||D|||False 151 | D|||D|||True 152 | D|||D|||True 153 | C|||D|||False 154 | C|||C|||True 155 | D|||D|||True 156 | A|||A|||True 157 | D|||D|||True 158 | C|||C|||True 159 | D|||B|||False 160 | D|||D|||True 161 | C|||B|||False 162 | D|||C|||False 163 | D|||D|||True 164 | D|||B|||False 165 | D|||B|||False 166 | D|||D|||True 167 | D|||D|||True 168 | C|||C|||True 169 | D|||B|||False 170 | D|||C|||False 171 | D|||D|||True 172 | D|||D|||True 173 | A|||C|||False 174 | A|||A|||True 175 | D|||D|||True 176 | A|||A|||True 177 | Average accuracy 0.392 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | A|||C|||False 3 | C|||A|||False 4 | D|||A|||False 5 | B|||D|||False 6 | A|||D|||False 7 | A|||B|||False 8 | C|||C|||True 9 | B|||B|||True 10 | A|||C|||False 11 | A|||B|||False 12 | A|||C|||False 13 | D|||B|||False 14 | B|||A|||False 15 | B|||A|||False 16 | A|||B|||False 17 | D|||D|||True 18 | C|||B|||False 19 | A|||B|||False 20 | B|||D|||False 21 | B|||D|||False 22 | A|||D|||False 23 | C|||D|||False 24 | D|||BD|||False 25 | B|||ABC|||False 26 | A|||ABCD|||False 27 | D|||ABCD|||False 28 | B|||ABC|||False 29 | D|||D|||True 30 | A|||A|||True 31 | A|||C|||False 32 | D|||D|||True 33 | A|||B|||False 34 | A|||B|||False 35 | A|||C|||False 36 | A|||A|||True 37 | A|||A|||True 38 | D|||B|||False 39 | C|||C|||True 40 | C|||D|||False 41 | C|||C|||True 42 | B|||D|||False 43 | B|||B|||True 44 | C|||A|||False 45 | D|||D|||True 46 | C|||ABC|||False 47 | A|||ABCD|||False 48 | A|||ABC|||False 49 | A|||ABCD|||False 50 | C|||B|||False 51 | A|||D|||False 52 | B|||B|||True 53 | D|||D|||True 54 | B|||B|||True 55 | D|||D|||True 56 | A|||D|||False 57 | A|||A|||True 58 | B|||C|||False 59 | C|||D|||False 60 | A|||D|||False 61 | B|||C|||False 62 | C|||C|||True 63 | B|||C|||False 64 | D|||C|||False 65 | B|||B|||True 66 | C|||C|||True 67 | A|||D|||False 68 | D|||D|||True 69 | B|||C|||False 70 | A|||B|||False 71 | A|||D|||False 72 | C|||C|||True 73 | C|||C|||True 74 | D|||D|||True 75 | A|||B|||False 76 | B|||C|||False 77 | A|||C|||False 78 | A|||A|||True 79 | A|||D|||False 80 | D|||C|||False 81 | C|||C|||True 82 | B|||B|||True 83 | A|||D|||False 84 | D|||D|||True 85 | D|||B|||False 86 | C|||C|||True 87 | B|||D|||False 88 | C|||C|||True 89 | B|||A|||False 90 | D|||D|||True 91 | B|||C|||False 92 | C|||C|||True 93 | A|||B|||False 94 | A|||C|||False 95 | C|||D|||False 96 | A|||D|||False 97 | D|||D|||True 98 | A|||C|||False 99 | C|||C|||True 100 | A|||A|||True 101 | B|||A|||False 102 | B|||B|||True 103 | B|||D|||False 104 | A|||D|||False 105 | C|||B|||False 106 | C|||D|||False 107 | A|||B|||False 108 | D|||D|||True 109 | D|||C|||False 110 | A|||B|||False 111 | D|||D|||True 112 | D|||D|||True 113 | B|||C|||False 114 | A|||A|||True 115 | B|||D|||False 116 | C|||C|||True 117 | B|||B|||True 118 | D|||C|||False 119 | C|||C|||True 120 | C|||A|||False 121 | A|||B|||False 122 | C|||C|||True 123 | C|||C|||True 124 | B|||D|||False 125 | C|||B|||False 126 | B|||B|||True 127 | A|||D|||False 128 | C|||C|||True 129 | A|||A|||True 130 | A|||B|||False 131 | C|||D|||False 132 | D|||D|||True 133 | C|||C|||True 134 | D|||ABC|||False 135 | B|||BD|||False 136 | C|||ABD|||False 137 | C|||ABC|||False 138 | A|||AC|||False 139 | C|||C|||True 140 | B|||D|||False 141 | A|||D|||False 142 | A|||C|||False 143 | D|||C|||False 144 | A|||D|||False 145 | A|||C|||False 146 | D|||B|||False 147 | A|||A|||True 148 | A|||D|||False 149 | C|||B|||False 150 | C|||D|||False 151 | C|||D|||False 152 | A|||D|||False 153 | A|||D|||False 154 | C|||C|||True 155 | D|||D|||True 156 | A|||A|||True 157 | A|||D|||False 158 | C|||C|||True 159 | D|||B|||False 160 | D|||D|||True 161 | A|||B|||False 162 | C|||C|||True 163 | B|||D|||False 164 | A|||B|||False 165 | A|||B|||False 166 | A|||D|||False 167 | B|||D|||False 168 | B|||C|||False 169 | A|||B|||False 170 | B|||C|||False 171 | D|||D|||True 172 | B|||D|||False 173 | A|||C|||False 174 | A|||A|||True 175 | A|||D|||False 176 | B|||A|||False 177 | Average accuracy 0.341 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | A|||C|||False 3 | A|||A|||True 4 | A|||A|||True 5 | B|||D|||False 6 | B|||D|||False 7 | B|||B|||True 8 | B|||C|||False 9 | A|||B|||False 10 | A|||C|||False 11 | A|||B|||False 12 | A|||C|||False 13 | B|||B|||True 14 | B|||A|||False 15 | A|||A|||True 16 | B|||B|||True 17 | D|||D|||True 18 | A|||B|||False 19 | B|||B|||True 20 | D|||D|||True 21 | B|||D|||False 22 | D|||D|||True 23 | B|||D|||False 24 | A|||BD|||False 25 | B|||ABC|||False 26 | A|||ABCD|||False 27 | A|||ABCD|||False 28 | B|||ABC|||False 29 | A|||D|||False 30 | D|||A|||False 31 | B|||C|||False 32 | B|||D|||False 33 | A|||B|||False 34 | A|||B|||False 35 | B|||C|||False 36 | A|||A|||True 37 | D|||A|||False 38 | B|||B|||True 39 | A|||C|||False 40 | A|||D|||False 41 | B|||C|||False 42 | D|||D|||True 43 | A|||B|||False 44 | A|||A|||True 45 | B|||D|||False 46 | A|||ABC|||False 47 | A|||ABCD|||False 48 | A|||ABC|||False 49 | B|||ABCD|||False 50 | B|||B|||True 51 | B|||D|||False 52 | B|||B|||True 53 | A|||D|||False 54 | B|||B|||True 55 | D|||D|||True 56 | B|||D|||False 57 | A|||A|||True 58 | A|||C|||False 59 | B|||D|||False 60 | D|||D|||True 61 | D|||C|||False 62 | A|||C|||False 63 | A|||C|||False 64 | D|||C|||False 65 | B|||B|||True 66 | D|||C|||False 67 | D|||D|||True 68 | B|||D|||False 69 | A|||C|||False 70 | B|||B|||True 71 | B|||D|||False 72 | D|||C|||False 73 | D|||C|||False 74 | B|||D|||False 75 | A|||B|||False 76 | A|||C|||False 77 | B|||C|||False 78 | A|||A|||True 79 | A|||D|||False 80 | A|||C|||False 81 | A|||C|||False 82 | D|||B|||False 83 | A|||D|||False 84 | A|||D|||False 85 | A|||B|||False 86 | D|||C|||False 87 | D|||D|||True 88 | A|||C|||False 89 | B|||A|||False 90 | A|||D|||False 91 | A|||C|||False 92 | A|||C|||False 93 | D|||B|||False 94 | A|||C|||False 95 | A|||D|||False 96 | B|||D|||False 97 | D|||D|||True 98 | A|||C|||False 99 | C|||C|||True 100 | A|||A|||True 101 | D|||A|||False 102 | B|||B|||True 103 | B|||D|||False 104 | B|||D|||False 105 | A|||B|||False 106 | A|||D|||False 107 | B|||B|||True 108 | A|||D|||False 109 | B|||C|||False 110 | B|||B|||True 111 | B|||D|||False 112 | B|||D|||False 113 | B|||C|||False 114 | A|||A|||True 115 | B|||D|||False 116 | B|||C|||False 117 | B|||B|||True 118 | B|||C|||False 119 | A|||C|||False 120 | D|||A|||False 121 | B|||B|||True 122 | D|||C|||False 123 | B|||C|||False 124 | B|||D|||False 125 | C|||B|||False 126 | B|||B|||True 127 | A|||D|||False 128 | D|||C|||False 129 | A|||A|||True 130 | B|||B|||True 131 | D|||D|||True 132 | D|||D|||True 133 | A|||C|||False 134 | D|||ABC|||False 135 | B|||BD|||False 136 | B|||ABD|||False 137 | A|||ABC|||False 138 | B|||AC|||False 139 | A|||C|||False 140 | A|||D|||False 141 | A|||D|||False 142 | A|||C|||False 143 | B|||C|||False 144 | D|||D|||True 145 | A|||C|||False 146 | A|||B|||False 147 | A|||A|||True 148 | A|||D|||False 149 | B|||B|||True 150 | D|||D|||True 151 | D|||D|||True 152 | B|||D|||False 153 | D|||D|||True 154 | A|||C|||False 155 | A|||D|||False 156 | A|||A|||True 157 | B|||D|||False 158 | D|||C|||False 159 | D|||B|||False 160 | A|||D|||False 161 | A|||B|||False 162 | D|||C|||False 163 | B|||D|||False 164 | D|||B|||False 165 | A|||B|||False 166 | A|||D|||False 167 | B|||D|||False 168 | A|||C|||False 169 | B|||B|||True 170 | B|||C|||False 171 | A|||D|||False 172 | D|||D|||True 173 | B|||C|||False 174 | B|||A|||False 175 | D|||D|||True 176 | D|||A|||False 177 | Average accuracy 0.278 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||C|||False 3 | D|||A|||False 4 | D|||A|||False 5 | D|||D|||True 6 | C|||D|||False 7 | D|||B|||False 8 | D|||C|||False 9 | D|||B|||False 10 | D|||C|||False 11 | D|||B|||False 12 | D|||C|||False 13 | D|||B|||False 14 | D|||A|||False 15 | D|||A|||False 16 | D|||B|||False 17 | D|||D|||True 18 | D|||B|||False 19 | D|||B|||False 20 | D|||D|||True 21 | D|||D|||True 22 | D|||D|||True 23 | D|||D|||True 24 | D|||BD|||False 25 | D|||ABC|||False 26 | D|||ABCD|||False 27 | D|||ABCD|||False 28 | D|||ABC|||False 29 | D|||D|||True 30 | D|||A|||False 31 | D|||C|||False 32 | D|||D|||True 33 | D|||B|||False 34 | D|||B|||False 35 | D|||C|||False 36 | D|||A|||False 37 | D|||A|||False 38 | D|||B|||False 39 | D|||C|||False 40 | D|||D|||True 41 | D|||C|||False 42 | D|||D|||True 43 | D|||B|||False 44 | D|||A|||False 45 | D|||D|||True 46 | D|||ABC|||False 47 | D|||ABCD|||False 48 | D|||ABC|||False 49 | C|||ABCD|||False 50 | D|||B|||False 51 | D|||D|||True 52 | D|||B|||False 53 | D|||D|||True 54 | D|||B|||False 55 | D|||D|||True 56 | D|||D|||True 57 | D|||A|||False 58 | D|||C|||False 59 | D|||D|||True 60 | D|||D|||True 61 | D|||C|||False 62 | D|||C|||False 63 | D|||C|||False 64 | D|||C|||False 65 | D|||B|||False 66 | D|||C|||False 67 | D|||D|||True 68 | D|||D|||True 69 | D|||C|||False 70 | D|||B|||False 71 | D|||D|||True 72 | D|||C|||False 73 | D|||C|||False 74 | D|||D|||True 75 | D|||B|||False 76 | D|||C|||False 77 | D|||C|||False 78 | D|||A|||False 79 | D|||D|||True 80 | D|||C|||False 81 | D|||C|||False 82 | D|||B|||False 83 | D|||D|||True 84 | D|||D|||True 85 | D|||B|||False 86 | D|||C|||False 87 | D|||D|||True 88 | D|||C|||False 89 | D|||A|||False 90 | D|||D|||True 91 | D|||C|||False 92 | D|||C|||False 93 | D|||B|||False 94 | D|||C|||False 95 | D|||D|||True 96 | D|||D|||True 97 | D|||D|||True 98 | D|||C|||False 99 | D|||C|||False 100 | D|||A|||False 101 | D|||A|||False 102 | D|||B|||False 103 | D|||D|||True 104 | D|||D|||True 105 | D|||B|||False 106 | C|||D|||False 107 | D|||B|||False 108 | C|||D|||False 109 | D|||C|||False 110 | D|||B|||False 111 | D|||D|||True 112 | D|||D|||True 113 | D|||C|||False 114 | C|||A|||False 115 | D|||D|||True 116 | D|||C|||False 117 | D|||B|||False 118 | D|||C|||False 119 | D|||C|||False 120 | D|||A|||False 121 | D|||B|||False 122 | D|||C|||False 123 | D|||C|||False 124 | D|||D|||True 125 | D|||B|||False 126 | D|||B|||False 127 | D|||D|||True 128 | D|||C|||False 129 | D|||A|||False 130 | D|||B|||False 131 | D|||D|||True 132 | D|||D|||True 133 | D|||C|||False 134 | D|||ABC|||False 135 | D|||BD|||False 136 | D|||ABD|||False 137 | D|||ABC|||False 138 | D|||AC|||False 139 | D|||C|||False 140 | D|||D|||True 141 | D|||D|||True 142 | D|||C|||False 143 | D|||C|||False 144 | D|||D|||True 145 | D|||C|||False 146 | D|||B|||False 147 | D|||A|||False 148 | D|||D|||True 149 | D|||B|||False 150 | D|||D|||True 151 | D|||D|||True 152 | D|||D|||True 153 | D|||D|||True 154 | D|||C|||False 155 | D|||D|||True 156 | D|||A|||False 157 | D|||D|||True 158 | D|||C|||False 159 | D|||B|||False 160 | D|||D|||True 161 | D|||B|||False 162 | D|||C|||False 163 | D|||D|||True 164 | D|||B|||False 165 | D|||B|||False 166 | D|||D|||True 167 | D|||D|||True 168 | D|||C|||False 169 | D|||B|||False 170 | D|||C|||False 171 | D|||D|||True 172 | D|||D|||True 173 | D|||C|||False 174 | D|||A|||False 175 | C|||D|||False 176 | D|||A|||False 177 | Average accuracy 0.312 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | B|||C|||False 3 | D|||A|||False 4 | B|||A|||False 5 | B|||D|||False 6 | D|||D|||True 7 | B|||B|||True 8 | D|||C|||False 9 | B|||B|||True 10 | B|||C|||False 11 | B|||B|||True 12 | B|||C|||False 13 | B|||B|||True 14 | B|||A|||False 15 | D|||A|||False 16 | B|||B|||True 17 | B|||D|||False 18 | B|||B|||True 19 | B|||B|||True 20 | B|||D|||False 21 | B|||D|||False 22 | B|||D|||False 23 | D|||D|||True 24 | B|||BD|||False 25 | B|||ABC|||False 26 | B|||ABCD|||False 27 | B|||ABCD|||False 28 | B|||ABC|||False 29 | D|||D|||True 30 | B|||A|||False 31 | B|||C|||False 32 | B|||D|||False 33 | B|||B|||True 34 | B|||B|||True 35 | B|||C|||False 36 | B|||A|||False 37 | B|||A|||False 38 | B|||B|||True 39 | B|||C|||False 40 | B|||D|||False 41 | D|||C|||False 42 | B|||D|||False 43 | B|||B|||True 44 | B|||A|||False 45 | D|||D|||True 46 | B|||ABC|||False 47 | D|||ABCD|||False 48 | B|||ABC|||False 49 | B|||ABCD|||False 50 | B|||B|||True 51 | B|||D|||False 52 | B|||B|||True 53 | B|||D|||False 54 | B|||B|||True 55 | B|||D|||False 56 | B|||D|||False 57 | B|||A|||False 58 | B|||C|||False 59 | B|||D|||False 60 | B|||D|||False 61 | B|||C|||False 62 | D|||C|||False 63 | B|||C|||False 64 | B|||C|||False 65 | B|||B|||True 66 | B|||C|||False 67 | D|||D|||True 68 | B|||D|||False 69 | B|||C|||False 70 | B|||B|||True 71 | B|||D|||False 72 | B|||C|||False 73 | B|||C|||False 74 | B|||D|||False 75 | B|||B|||True 76 | D|||C|||False 77 | B|||C|||False 78 | B|||A|||False 79 | B|||D|||False 80 | B|||C|||False 81 | D|||C|||False 82 | B|||B|||True 83 | B|||D|||False 84 | B|||D|||False 85 | B|||B|||True 86 | B|||C|||False 87 | B|||D|||False 88 | B|||C|||False 89 | B|||A|||False 90 | B|||D|||False 91 | B|||C|||False 92 | B|||C|||False 93 | B|||B|||True 94 | B|||C|||False 95 | D|||D|||True 96 | B|||D|||False 97 | D|||D|||True 98 | D|||C|||False 99 | B|||C|||False 100 | B|||A|||False 101 | B|||A|||False 102 | B|||B|||True 103 | B|||D|||False 104 | D|||D|||True 105 | B|||B|||True 106 | B|||D|||False 107 | B|||B|||True 108 | B|||D|||False 109 | D|||C|||False 110 | B|||B|||True 111 | D|||D|||True 112 | B|||D|||False 113 | B|||C|||False 114 | B|||A|||False 115 | B|||D|||False 116 | B|||C|||False 117 | B|||B|||True 118 | D|||C|||False 119 | B|||C|||False 120 | B|||A|||False 121 | B|||B|||True 122 | D|||C|||False 123 | B|||C|||False 124 | D|||D|||True 125 | B|||B|||True 126 | D|||B|||False 127 | B|||D|||False 128 | D|||C|||False 129 | B|||A|||False 130 | B|||B|||True 131 | B|||D|||False 132 | B|||D|||False 133 | B|||C|||False 134 | B|||ABC|||False 135 | D|||BD|||False 136 | D|||ABD|||False 137 | B|||ABC|||False 138 | B|||AC|||False 139 | D|||C|||False 140 | B|||D|||False 141 | D|||D|||True 142 | B|||C|||False 143 | B|||C|||False 144 | B|||D|||False 145 | B|||C|||False 146 | D|||B|||False 147 | B|||A|||False 148 | B|||D|||False 149 | B|||B|||True 150 | D|||D|||True 151 | B|||D|||False 152 | B|||D|||False 153 | B|||D|||False 154 | B|||C|||False 155 | B|||D|||False 156 | B|||A|||False 157 | B|||D|||False 158 | B|||C|||False 159 | B|||B|||True 160 | B|||D|||False 161 | B|||B|||True 162 | B|||C|||False 163 | B|||D|||False 164 | B|||B|||True 165 | B|||B|||True 166 | B|||D|||False 167 | D|||D|||True 168 | B|||C|||False 169 | B|||B|||True 170 | B|||C|||False 171 | B|||D|||False 172 | B|||D|||False 173 | B|||C|||False 174 | B|||A|||False 175 | B|||D|||False 176 | D|||A|||False 177 | Average accuracy 0.267 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/病理学176题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | A|||C|||False 3 | C|||A|||False 4 | D|||A|||False 5 | 未成功回答|||D|||False 6 | B|||D|||False 7 | B|||B|||True 8 | C|||C|||True 9 | B|||B|||True 10 | A|||C|||False 11 | A|||B|||False 12 | A|||C|||False 13 | A|||B|||False 14 | B|||A|||False 15 | B|||A|||False 16 | A|||B|||False 17 | D|||D|||True 18 | A|||B|||False 19 | A|||B|||False 20 | B|||D|||False 21 | D|||D|||True 22 | B|||D|||False 23 | A|||D|||False 24 | D|||BD|||False 25 | B|||ABC|||False 26 | D|||ABCD|||False 27 | 未成功回答|||ABCD|||False 28 | D|||ABC|||False 29 | D|||D|||True 30 | D|||A|||False 31 | A|||C|||False 32 | B|||D|||False 33 | B|||B|||True 34 | A|||B|||False 35 | B|||C|||False 36 | A|||A|||True 37 | A|||A|||True 38 | B|||B|||True 39 | C|||C|||True 40 | D|||D|||True 41 | B|||C|||False 42 | D|||D|||True 43 | D|||B|||False 44 | D|||A|||False 45 | D|||D|||True 46 | D|||ABC|||False 47 | D|||ABCD|||False 48 | A|||ABC|||False 49 | B|||ABCD|||False 50 | B|||B|||True 51 | D|||D|||True 52 | D|||B|||False 53 | D|||D|||True 54 | B|||B|||True 55 | D|||D|||True 56 | D|||D|||True 57 | A|||A|||True 58 | D|||C|||False 59 | D|||D|||True 60 | A|||D|||False 61 | D|||C|||False 62 | B|||C|||False 63 | D|||C|||False 64 | B|||C|||False 65 | D|||B|||False 66 | D|||C|||False 67 | D|||D|||True 68 | C|||D|||False 69 | B|||C|||False 70 | D|||B|||False 71 | D|||D|||True 72 | D|||C|||False 73 | C|||C|||True 74 | D|||D|||True 75 | D|||B|||False 76 | B|||C|||False 77 | A|||C|||False 78 | D|||A|||False 79 | A|||D|||False 80 | D|||C|||False 81 | C|||C|||True 82 | D|||B|||False 83 | C|||D|||False 84 | D|||D|||True 85 | D|||B|||False 86 | B|||C|||False 87 | D|||D|||True 88 | C|||C|||True 89 | B|||A|||False 90 | C|||D|||False 91 | D|||C|||False 92 | C|||C|||True 93 | C|||B|||False 94 | B|||C|||False 95 | D|||D|||True 96 | A|||D|||False 97 | D|||D|||True 98 | B|||C|||False 99 | B|||C|||False 100 | B|||A|||False 101 | A|||A|||True 102 | B|||B|||True 103 | B|||D|||False 104 | B|||D|||False 105 | C|||B|||False 106 | D|||D|||True 107 | C|||B|||False 108 | A|||D|||False 109 | A|||C|||False 110 | D|||B|||False 111 | A|||D|||False 112 | B|||D|||False 113 | C|||C|||True 114 | D|||A|||False 115 | B|||D|||False 116 | D|||C|||False 117 | D|||B|||False 118 | C|||C|||True 119 | C|||C|||True 120 | B|||A|||False 121 | B|||B|||True 122 | D|||C|||False 123 | C|||C|||True 124 | D|||D|||True 125 | C|||B|||False 126 | B|||B|||True 127 | B|||D|||False 128 | C|||C|||True 129 | A|||A|||True 130 | D|||B|||False 131 | D|||D|||True 132 | B|||D|||False 133 | A|||C|||False 134 | D|||ABC|||False 135 | D|||BD|||False 136 | A|||ABD|||False 137 | C|||ABC|||False 138 | D|||AC|||False 139 | C|||C|||True 140 | A|||D|||False 141 | D|||D|||True 142 | C|||C|||True 143 | C|||C|||True 144 | 未成功回答|||D|||False 145 | C|||C|||True 146 | C|||B|||False 147 | A|||A|||True 148 | A|||D|||False 149 | D|||B|||False 150 | D|||D|||True 151 | D|||D|||True 152 | D|||D|||True 153 | C|||D|||False 154 | C|||C|||True 155 | D|||D|||True 156 | D|||A|||False 157 | C|||D|||False 158 | C|||C|||True 159 | B|||B|||True 160 | D|||D|||True 161 | A|||B|||False 162 | A|||C|||False 163 | A|||D|||False 164 | A|||B|||False 165 | B|||B|||True 166 | D|||D|||True 167 | B|||D|||False 168 | 未成功回答|||C|||False 169 | D|||B|||False 170 | B|||C|||False 171 | B|||D|||False 172 | C|||D|||False 173 | A|||C|||False 174 | C|||A|||False 175 | D|||D|||True 176 | D|||A|||False 177 | Average accuracy 0.358 - 病理学176题 178 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | C|||C|||True 3 | C|||A|||False 4 | D|||A|||False 5 | B|||B|||True 6 | C|||C|||True 7 | C|||D|||False 8 | A|||A|||True 9 | C|||C|||True 10 | B|||A|||False 11 | A|||A|||True 12 | A|||D|||False 13 | D|||D|||True 14 | C|||C|||True 15 | A|||C|||False 16 | D|||D|||True 17 | D|||D|||True 18 | B|||C|||False 19 | D|||C|||False 20 | B|||B|||True 21 | B|||A|||False 22 | A|||A|||True 23 | B|||B|||True 24 | A|||A|||True 25 | A|||A|||True 26 | B|||B|||True 27 | D|||D|||True 28 | A|||B|||False 29 | A|||C|||False 30 | A|||D|||False 31 | D|||D|||True 32 | C|||C|||True 33 | D|||B|||False 34 | A|||A|||True 35 | A|||A|||True 36 | D|||A|||False 37 | C|||C|||True 38 | B|||B|||True 39 | A|||A|||True 40 | D|||D|||True 41 | B|||A|||False 42 | B|||C|||False 43 | B|||C|||False 44 | D|||D|||True 45 | D|||D|||True 46 | D|||A|||False 47 | C|||C|||True 48 | C|||A|||False 49 | A|||C|||False 50 | C|||A|||False 51 | B|||A|||False 52 | B|||C|||False 53 | C|||D|||False 54 | C|||A|||False 55 | B|||A|||False 56 | B|||B|||True 57 | B|||C|||False 58 | A|||A|||True 59 | B|||A|||False 60 | A|||C|||False 61 | C|||C|||True 62 | D|||D|||True 63 | B|||B|||True 64 | A|||A|||True 65 | D|||B|||False 66 | C|||C|||True 67 | D|||A|||False 68 | C|||A|||False 69 | D|||B|||False 70 | D|||D|||True 71 | B|||A|||False 72 | D|||B|||False 73 | B|||B|||True 74 | B|||B|||True 75 | D|||D|||True 76 | B|||B|||True 77 | B|||A|||False 78 | A|||C|||False 79 | B|||C|||False 80 | B|||D|||False 81 | B|||B|||True 82 | C|||D|||False 83 | B|||B|||True 84 | B|||D|||False 85 | B|||A|||False 86 | D|||B|||False 87 | C|||A|||False 88 | C|||C|||True 89 | B|||C|||False 90 | A|||D|||False 91 | A|||D|||False 92 | B|||A|||False 93 | C|||C|||True 94 | D|||D|||True 95 | D|||D|||True 96 | B|||A|||False 97 | B|||B|||True 98 | C|||C|||True 99 | D|||C|||False 100 | B|||B|||True 101 | B|||B|||True 102 | A|||D|||False 103 | B|||D|||False 104 | D|||D|||True 105 | C|||D|||False 106 | D|||D|||True 107 | B|||C|||False 108 | B|||B|||True 109 | B|||B|||True 110 | C|||D|||False 111 | D|||D|||True 112 | B|||B|||True 113 | D|||D|||True 114 | A|||A|||True 115 | A|||C|||False 116 | C|||C|||True 117 | A|||A|||True 118 | A|||A|||True 119 | A|||A|||True 120 | D|||D|||True 121 | B|||A|||False 122 | D|||D|||True 123 | C|||C|||True 124 | C|||C|||True 125 | B|||B|||True 126 | B|||A|||False 127 | D|||A|||False 128 | B|||A|||False 129 | B|||B|||True 130 | D|||A|||False 131 | B|||B|||True 132 | C|||C|||True 133 | D|||D|||True 134 | C|||A|||False 135 | D|||D|||True 136 | C|||A|||False 137 | D|||D|||True 138 | A|||A|||True 139 | A|||A|||True 140 | D|||A|||False 141 | D|||D|||True 142 | B|||C|||False 143 | A|||A|||True 144 | C|||C|||True 145 | C|||C|||True 146 | B|||B|||True 147 | C|||B|||False 148 | B|||B|||True 149 | B|||A|||False 150 | B|||C|||False 151 | B|||C|||False 152 | A|||A|||True 153 | A|||D|||False 154 | B|||C|||False 155 | C|||C|||True 156 | C|||D|||False 157 | A|||A|||True 158 | B|||B|||True 159 | C|||A|||False 160 | B|||D|||False 161 | A|||C|||False 162 | A|||D|||False 163 | A|||A|||True 164 | D|||A|||False 165 | B|||C|||False 166 | C|||D|||False 167 | D|||B|||False 168 | C|||A|||False 169 | C|||C|||True 170 | A|||A|||True 171 | A|||B|||False 172 | A|||A|||True 173 | D|||D|||True 174 | C|||B|||False 175 | A|||A|||True 176 | C|||A|||False 177 | C|||B|||False 178 | B|||D|||False 179 | B|||D|||False 180 | C|||D|||False 181 | A|||A|||True 182 | D|||D|||True 183 | A|||A|||True 184 | D|||D|||True 185 | C|||C|||True 186 | D|||A|||False 187 | D|||D|||True 188 | C|||C|||True 189 | B|||D|||False 190 | D|||A|||False 191 | C|||B|||False 192 | B|||A|||False 193 | A|||B|||False 194 | D|||D|||True 195 | D|||D|||True 196 | B|||D|||False 197 | A|||A|||True 198 | B|||B|||True 199 | B|||B|||True 200 | D|||A|||False 201 | Average accuracy 0.520 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | A|||C|||False 2 | D|||C|||False 3 | C|||A|||False 4 | D|||A|||False 5 | D|||B|||False 6 | D|||C|||False 7 | A|||D|||False 8 | A|||A|||True 9 | A|||C|||False 10 | C|||A|||False 11 | D|||A|||False 12 | B|||D|||False 13 | C|||D|||False 14 | C|||C|||True 15 | D|||C|||False 16 | D|||D|||True 17 | D|||D|||True 18 | B|||C|||False 19 | D|||C|||False 20 | B|||B|||True 21 | B|||A|||False 22 | D|||A|||False 23 | A|||B|||False 24 | B|||A|||False 25 | A|||A|||True 26 | D|||B|||False 27 | D|||D|||True 28 | A|||B|||False 29 | D|||C|||False 30 | D|||D|||True 31 | D|||D|||True 32 | C|||C|||True 33 | B|||B|||True 34 | D|||A|||False 35 | A|||A|||True 36 | D|||A|||False 37 | D|||C|||False 38 | A|||B|||False 39 | A|||A|||True 40 | D|||D|||True 41 | A|||A|||True 42 | D|||C|||False 43 | C|||C|||True 44 | D|||D|||True 45 | D|||D|||True 46 | D|||A|||False 47 | B|||C|||False 48 | D|||A|||False 49 | A|||C|||False 50 | D|||A|||False 51 | A|||A|||True 52 | A|||C|||False 53 | D|||D|||True 54 | D|||A|||False 55 | C|||A|||False 56 | A|||B|||False 57 | D|||C|||False 58 | A|||A|||True 59 | A|||A|||True 60 | D|||C|||False 61 | D|||C|||False 62 | D|||D|||True 63 | B|||B|||True 64 | A|||A|||True 65 | D|||B|||False 66 | D|||C|||False 67 | D|||A|||False 68 | D|||A|||False 69 | D|||B|||False 70 | D|||D|||True 71 | B|||A|||False 72 | D|||B|||False 73 | C|||B|||False 74 | B|||B|||True 75 | D|||D|||True 76 | A|||B|||False 77 | A|||A|||True 78 | D|||C|||False 79 | D|||C|||False 80 | D|||D|||True 81 | D|||B|||False 82 | A|||D|||False 83 | A|||B|||False 84 | D|||D|||True 85 | B|||A|||False 86 | D|||B|||False 87 | D|||A|||False 88 | D|||C|||False 89 | B|||C|||False 90 | D|||D|||True 91 | A|||D|||False 92 | B|||A|||False 93 | A|||C|||False 94 | D|||D|||True 95 | D|||D|||True 96 | D|||A|||False 97 | B|||B|||True 98 | C|||C|||True 99 | C|||C|||True 100 | C|||B|||False 101 | B|||B|||True 102 | A|||D|||False 103 | D|||D|||True 104 | C|||D|||False 105 | A|||D|||False 106 | D|||D|||True 107 | D|||C|||False 108 | B|||B|||True 109 | A|||B|||False 110 | D|||D|||True 111 | D|||D|||True 112 | D|||B|||False 113 | D|||D|||True 114 | D|||A|||False 115 | B|||C|||False 116 | C|||C|||True 117 | A|||A|||True 118 | D|||A|||False 119 | D|||A|||False 120 | D|||D|||True 121 | D|||A|||False 122 | D|||D|||True 123 | C|||C|||True 124 | D|||C|||False 125 | D|||B|||False 126 | D|||A|||False 127 | C|||A|||False 128 | D|||A|||False 129 | C|||B|||False 130 | A|||A|||True 131 | B|||B|||True 132 | D|||C|||False 133 | D|||D|||True 134 | C|||A|||False 135 | D|||D|||True 136 | D|||A|||False 137 | D|||D|||True 138 | A|||A|||True 139 | A|||A|||True 140 | C|||A|||False 141 | D|||D|||True 142 | B|||C|||False 143 | D|||A|||False 144 | D|||C|||False 145 | C|||C|||True 146 | A|||B|||False 147 | A|||B|||False 148 | B|||B|||True 149 | B|||A|||False 150 | C|||C|||True 151 | C|||C|||True 152 | D|||A|||False 153 | D|||D|||True 154 | A|||C|||False 155 | A|||C|||False 156 | C|||D|||False 157 | C|||A|||False 158 | C|||B|||False 159 | A|||A|||True 160 | C|||D|||False 161 | D|||C|||False 162 | D|||D|||True 163 | D|||A|||False 164 | D|||A|||False 165 | D|||C|||False 166 | B|||D|||False 167 | D|||B|||False 168 | A|||A|||True 169 | C|||C|||True 170 | D|||A|||False 171 | D|||B|||False 172 | D|||A|||False 173 | D|||D|||True 174 | C|||B|||False 175 | C|||A|||False 176 | D|||A|||False 177 | C|||B|||False 178 | D|||D|||True 179 | D|||D|||True 180 | C|||D|||False 181 | A|||A|||True 182 | C|||D|||False 183 | D|||A|||False 184 | A|||D|||False 185 | D|||C|||False 186 | A|||A|||True 187 | D|||D|||True 188 | A|||C|||False 189 | B|||D|||False 190 | D|||A|||False 191 | C|||B|||False 192 | A|||A|||True 193 | D|||B|||False 194 | D|||D|||True 195 | D|||D|||True 196 | B|||D|||False 197 | A|||A|||True 198 | C|||B|||False 199 | D|||B|||False 200 | D|||A|||False 201 | Average accuracy 0.380 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | C|||C|||True 2 | C|||C|||True 3 | A|||A|||True 4 | D|||A|||False 5 | A|||B|||False 6 | A|||C|||False 7 | C|||D|||False 8 | A|||A|||True 9 | A|||C|||False 10 | C|||A|||False 11 | D|||A|||False 12 | B|||D|||False 13 | C|||D|||False 14 | C|||C|||True 15 | A|||C|||False 16 | D|||D|||True 17 | D|||D|||True 18 | B|||C|||False 19 | D|||C|||False 20 | B|||B|||True 21 | A|||A|||True 22 | A|||A|||True 23 | A|||B|||False 24 | A|||A|||True 25 | A|||A|||True 26 | B|||B|||True 27 | C|||D|||False 28 | A|||B|||False 29 | C|||C|||True 30 | C|||D|||False 31 | A|||D|||False 32 | C|||C|||True 33 | C|||B|||False 34 | C|||A|||False 35 | A|||A|||True 36 | A|||A|||True 37 | C|||C|||True 38 | A|||B|||False 39 | A|||A|||True 40 | A|||D|||False 41 | B|||A|||False 42 | C|||C|||True 43 | C|||C|||True 44 | C|||D|||False 45 | C|||D|||False 46 | C|||A|||False 47 | A|||C|||False 48 | A|||A|||True 49 | A|||C|||False 50 | C|||A|||False 51 | A|||A|||True 52 | B|||C|||False 53 | C|||D|||False 54 | C|||A|||False 55 | C|||A|||False 56 | A|||B|||False 57 | B|||C|||False 58 | A|||A|||True 59 | B|||A|||False 60 | B|||C|||False 61 | A|||C|||False 62 | A|||D|||False 63 | A|||B|||False 64 | B|||A|||False 65 | A|||B|||False 66 | A|||C|||False 67 | A|||A|||True 68 | A|||A|||True 69 | C|||B|||False 70 | B|||D|||False 71 | C|||A|||False 72 | A|||B|||False 73 | C|||B|||False 74 | B|||B|||True 75 | C|||D|||False 76 | A|||B|||False 77 | C|||A|||False 78 | A|||C|||False 79 | B|||C|||False 80 | D|||D|||True 81 | A|||B|||False 82 | C|||D|||False 83 | A|||B|||False 84 | B|||D|||False 85 | A|||A|||True 86 | D|||B|||False 87 | A|||A|||True 88 | B|||C|||False 89 | B|||C|||False 90 | A|||D|||False 91 | A|||D|||False 92 | C|||A|||False 93 | A|||C|||False 94 | C|||D|||False 95 | C|||D|||False 96 | B|||A|||False 97 | B|||B|||True 98 | A|||C|||False 99 | D|||C|||False 100 | B|||B|||True 101 | B|||B|||True 102 | C|||D|||False 103 | A|||D|||False 104 | C|||D|||False 105 | A|||D|||False 106 | C|||D|||False 107 | A|||C|||False 108 | B|||B|||True 109 | A|||B|||False 110 | C|||D|||False 111 | C|||D|||False 112 | C|||B|||False 113 | A|||D|||False 114 | C|||A|||False 115 | A|||C|||False 116 | C|||C|||True 117 | A|||A|||True 118 | B|||A|||False 119 | B|||A|||False 120 | B|||D|||False 121 | A|||A|||True 122 | A|||D|||False 123 | C|||C|||True 124 | C|||C|||True 125 | A|||B|||False 126 | B|||A|||False 127 | A|||A|||True 128 | A|||A|||True 129 | C|||B|||False 130 | A|||A|||True 131 | B|||B|||True 132 | D|||C|||False 133 | A|||D|||False 134 | C|||A|||False 135 | D|||D|||True 136 | A|||A|||True 137 | D|||D|||True 138 | A|||A|||True 139 | A|||A|||True 140 | C|||A|||False 141 | A|||D|||False 142 | B|||C|||False 143 | A|||A|||True 144 | A|||C|||False 145 | A|||C|||False 146 | B|||B|||True 147 | A|||B|||False 148 | A|||B|||False 149 | B|||A|||False 150 | C|||C|||True 151 | B|||C|||False 152 | A|||A|||True 153 | B|||D|||False 154 | C|||C|||True 155 | C|||C|||True 156 | C|||D|||False 157 | C|||A|||False 158 | C|||B|||False 159 | A|||A|||True 160 | B|||D|||False 161 | A|||C|||False 162 | A|||D|||False 163 | A|||A|||True 164 | A|||A|||True 165 | A|||C|||False 166 | C|||D|||False 167 | B|||B|||True 168 | A|||A|||True 169 | C|||C|||True 170 | A|||A|||True 171 | A|||B|||False 172 | A|||A|||True 173 | A|||D|||False 174 | C|||B|||False 175 | A|||A|||True 176 | D|||A|||False 177 | C|||B|||False 178 | A|||D|||False 179 | D|||D|||True 180 | B|||D|||False 181 | A|||A|||True 182 | C|||D|||False 183 | A|||A|||True 184 | D|||D|||True 185 | A|||C|||False 186 | A|||A|||True 187 | C|||D|||False 188 | A|||C|||False 189 | B|||D|||False 190 | D|||A|||False 191 | C|||B|||False 192 | A|||A|||True 193 | A|||B|||False 194 | A|||D|||False 195 | D|||D|||True 196 | B|||D|||False 197 | A|||A|||True 198 | B|||B|||True 199 | C|||B|||False 200 | B|||A|||False 201 | Average accuracy 0.360 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | A|||C|||False 3 | A|||A|||True 4 | B|||A|||False 5 | A|||B|||False 6 | B|||C|||False 7 | A|||D|||False 8 | A|||A|||True 9 | B|||C|||False 10 | D|||A|||False 11 | A|||A|||True 12 | D|||D|||True 13 | A|||D|||False 14 | D|||C|||False 15 | D|||C|||False 16 | A|||D|||False 17 | A|||D|||False 18 | A|||C|||False 19 | D|||C|||False 20 | A|||B|||False 21 | B|||A|||False 22 | A|||A|||True 23 | B|||B|||True 24 | D|||A|||False 25 | A|||A|||True 26 | B|||B|||True 27 | B|||D|||False 28 | A|||B|||False 29 | A|||C|||False 30 | B|||D|||False 31 | D|||D|||True 32 | D|||C|||False 33 | B|||B|||True 34 | A|||A|||True 35 | C|||A|||False 36 | B|||A|||False 37 | D|||C|||False 38 | B|||B|||True 39 | D|||A|||False 40 | A|||D|||False 41 | B|||A|||False 42 | D|||C|||False 43 | B|||C|||False 44 | B|||D|||False 45 | A|||D|||False 46 | A|||A|||True 47 | B|||C|||False 48 | A|||A|||True 49 | D|||C|||False 50 | C|||A|||False 51 | A|||A|||True 52 | A|||C|||False 53 | B|||D|||False 54 | B|||A|||False 55 | B|||A|||False 56 | A|||B|||False 57 | B|||C|||False 58 | A|||A|||True 59 | B|||A|||False 60 | A|||C|||False 61 | 未成功回答|||C|||False 62 | A|||D|||False 63 | A|||B|||False 64 | B|||A|||False 65 | B|||B|||True 66 | A|||C|||False 67 | D|||A|||False 68 | A|||A|||True 69 | B|||B|||True 70 | B|||D|||False 71 | B|||A|||False 72 | D|||B|||False 73 | B|||B|||True 74 | A|||B|||False 75 | B|||D|||False 76 | D|||B|||False 77 | B|||A|||False 78 | B|||C|||False 79 | D|||C|||False 80 | B|||D|||False 81 | B|||B|||True 82 | D|||D|||True 83 | B|||B|||True 84 | B|||D|||False 85 | C|||A|||False 86 | A|||B|||False 87 | B|||A|||False 88 | D|||C|||False 89 | A|||C|||False 90 | B|||D|||False 91 | B|||D|||False 92 | B|||A|||False 93 | A|||C|||False 94 | B|||D|||False 95 | B|||D|||False 96 | B|||A|||False 97 | A|||B|||False 98 | B|||C|||False 99 | D|||C|||False 100 | A|||B|||False 101 | B|||B|||True 102 | A|||D|||False 103 | B|||D|||False 104 | A|||D|||False 105 | B|||D|||False 106 | B|||D|||False 107 | B|||C|||False 108 | B|||B|||True 109 | D|||B|||False 110 | A|||D|||False 111 | B|||D|||False 112 | D|||B|||False 113 | B|||D|||False 114 | A|||A|||True 115 | A|||C|||False 116 | B|||C|||False 117 | A|||A|||True 118 | A|||A|||True 119 | A|||A|||True 120 | D|||D|||True 121 | A|||A|||True 122 | B|||D|||False 123 | B|||C|||False 124 | A|||C|||False 125 | B|||B|||True 126 | B|||A|||False 127 | B|||A|||False 128 | A|||A|||True 129 | B|||B|||True 130 | A|||A|||True 131 | B|||B|||True 132 | A|||C|||False 133 | B|||D|||False 134 | D|||A|||False 135 | A|||D|||False 136 | A|||A|||True 137 | B|||D|||False 138 | A|||A|||True 139 | D|||A|||False 140 | A|||A|||True 141 | B|||D|||False 142 | A|||C|||False 143 | A|||A|||True 144 | A|||C|||False 145 | B|||C|||False 146 | D|||B|||False 147 | A|||B|||False 148 | B|||B|||True 149 | B|||A|||False 150 | B|||C|||False 151 | A|||C|||False 152 | A|||A|||True 153 | A|||D|||False 154 | A|||C|||False 155 | A|||C|||False 156 | B|||D|||False 157 | A|||A|||True 158 | A|||B|||False 159 | A|||A|||True 160 | A|||D|||False 161 | A|||C|||False 162 | D|||D|||True 163 | A|||A|||True 164 | A|||A|||True 165 | A|||C|||False 166 | A|||D|||False 167 | D|||B|||False 168 | A|||A|||True 169 | D|||C|||False 170 | A|||A|||True 171 | D|||B|||False 172 | A|||A|||True 173 | A|||D|||False 174 | D|||B|||False 175 | A|||A|||True 176 | B|||A|||False 177 | A|||B|||False 178 | B|||D|||False 179 | A|||D|||False 180 | A|||D|||False 181 | A|||A|||True 182 | A|||D|||False 183 | B|||A|||False 184 | A|||D|||False 185 | A|||C|||False 186 | D|||A|||False 187 | D|||D|||True 188 | B|||C|||False 189 | A|||D|||False 190 | A|||A|||True 191 | A|||B|||False 192 | A|||A|||True 193 | A|||B|||False 194 | D|||D|||True 195 | A|||D|||False 196 | B|||D|||False 197 | A|||A|||True 198 | A|||B|||False 199 | A|||B|||False 200 | B|||A|||False 201 | Average accuracy 0.285 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||C|||False 3 | D|||A|||False 4 | D|||A|||False 5 | D|||B|||False 6 | D|||C|||False 7 | D|||D|||True 8 | D|||A|||False 9 | D|||C|||False 10 | D|||A|||False 11 | D|||A|||False 12 | D|||D|||True 13 | D|||D|||True 14 | D|||C|||False 15 | D|||C|||False 16 | D|||D|||True 17 | D|||D|||True 18 | C|||C|||True 19 | D|||C|||False 20 | C|||B|||False 21 | D|||A|||False 22 | C|||A|||False 23 | D|||B|||False 24 | D|||A|||False 25 | D|||A|||False 26 | D|||B|||False 27 | D|||D|||True 28 | D|||B|||False 29 | D|||C|||False 30 | D|||D|||True 31 | D|||D|||True 32 | C|||C|||True 33 | C|||B|||False 34 | D|||A|||False 35 | D|||A|||False 36 | D|||A|||False 37 | D|||C|||False 38 | D|||B|||False 39 | D|||A|||False 40 | D|||D|||True 41 | D|||A|||False 42 | D|||C|||False 43 | D|||C|||False 44 | D|||D|||True 45 | D|||D|||True 46 | D|||A|||False 47 | D|||C|||False 48 | D|||A|||False 49 | C|||C|||True 50 | C|||A|||False 51 | D|||A|||False 52 | D|||C|||False 53 | D|||D|||True 54 | D|||A|||False 55 | D|||A|||False 56 | D|||B|||False 57 | D|||C|||False 58 | D|||A|||False 59 | D|||A|||False 60 | D|||C|||False 61 | D|||C|||False 62 | D|||D|||True 63 | C|||B|||False 64 | D|||A|||False 65 | D|||B|||False 66 | D|||C|||False 67 | D|||A|||False 68 | D|||A|||False 69 | D|||B|||False 70 | D|||D|||True 71 | C|||A|||False 72 | D|||B|||False 73 | D|||B|||False 74 | D|||B|||False 75 | D|||D|||True 76 | D|||B|||False 77 | C|||A|||False 78 | D|||C|||False 79 | D|||C|||False 80 | D|||D|||True 81 | D|||B|||False 82 | D|||D|||True 83 | D|||B|||False 84 | D|||D|||True 85 | D|||A|||False 86 | D|||B|||False 87 | D|||A|||False 88 | D|||C|||False 89 | D|||C|||False 90 | D|||D|||True 91 | D|||D|||True 92 | D|||A|||False 93 | D|||C|||False 94 | D|||D|||True 95 | D|||D|||True 96 | D|||A|||False 97 | D|||B|||False 98 | D|||C|||False 99 | D|||C|||False 100 | D|||B|||False 101 | D|||B|||False 102 | D|||D|||True 103 | D|||D|||True 104 | D|||D|||True 105 | D|||D|||True 106 | D|||D|||True 107 | D|||C|||False 108 | D|||B|||False 109 | D|||B|||False 110 | D|||D|||True 111 | D|||D|||True 112 | D|||B|||False 113 | D|||D|||True 114 | D|||A|||False 115 | D|||C|||False 116 | D|||C|||False 117 | D|||A|||False 118 | D|||A|||False 119 | D|||A|||False 120 | D|||D|||True 121 | D|||A|||False 122 | D|||D|||True 123 | D|||C|||False 124 | D|||C|||False 125 | D|||B|||False 126 | D|||A|||False 127 | D|||A|||False 128 | D|||A|||False 129 | C|||B|||False 130 | D|||A|||False 131 | D|||B|||False 132 | D|||C|||False 133 | D|||D|||True 134 | D|||A|||False 135 | C|||D|||False 136 | D|||A|||False 137 | D|||D|||True 138 | D|||A|||False 139 | D|||A|||False 140 | D|||A|||False 141 | D|||D|||True 142 | D|||C|||False 143 | D|||A|||False 144 | D|||C|||False 145 | D|||C|||False 146 | C|||B|||False 147 | D|||B|||False 148 | D|||B|||False 149 | D|||A|||False 150 | D|||C|||False 151 | D|||C|||False 152 | D|||A|||False 153 | D|||D|||True 154 | D|||C|||False 155 | D|||C|||False 156 | D|||D|||True 157 | D|||A|||False 158 | D|||B|||False 159 | D|||A|||False 160 | C|||D|||False 161 | D|||C|||False 162 | D|||D|||True 163 | D|||A|||False 164 | D|||A|||False 165 | D|||C|||False 166 | D|||D|||True 167 | D|||B|||False 168 | D|||A|||False 169 | D|||C|||False 170 | D|||A|||False 171 | D|||B|||False 172 | D|||A|||False 173 | D|||D|||True 174 | D|||B|||False 175 | D|||A|||False 176 | D|||A|||False 177 | D|||B|||False 178 | D|||D|||True 179 | D|||D|||True 180 | D|||D|||True 181 | D|||A|||False 182 | D|||D|||True 183 | C|||A|||False 184 | D|||D|||True 185 | D|||C|||False 186 | D|||A|||False 187 | D|||D|||True 188 | D|||C|||False 189 | D|||D|||True 190 | D|||A|||False 191 | D|||B|||False 192 | D|||A|||False 193 | D|||B|||False 194 | D|||D|||True 195 | D|||D|||True 196 | D|||D|||True 197 | D|||A|||False 198 | D|||B|||False 199 | D|||B|||False 200 | D|||A|||False 201 | Average accuracy 0.265 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | D|||C|||False 2 | D|||C|||False 3 | D|||A|||False 4 | D|||A|||False 5 | D|||B|||False 6 | B|||C|||False 7 | B|||D|||False 8 | A|||A|||True 9 | B|||C|||False 10 | D|||A|||False 11 | C|||A|||False 12 | D|||D|||True 13 | A|||D|||False 14 | C|||C|||True 15 | B|||C|||False 16 | D|||D|||True 17 | B|||D|||False 18 | D|||C|||False 19 | D|||C|||False 20 | D|||B|||False 21 | B|||A|||False 22 | C|||A|||False 23 | D|||B|||False 24 | D|||A|||False 25 | B|||A|||False 26 | B|||B|||True 27 | A|||D|||False 28 | A|||B|||False 29 | D|||C|||False 30 | D|||D|||True 31 | D|||D|||True 32 | C|||C|||True 33 | C|||B|||False 34 | D|||A|||False 35 | C|||A|||False 36 | B|||A|||False 37 | C|||C|||True 38 | D|||B|||False 39 | B|||A|||False 40 | D|||D|||True 41 | B|||A|||False 42 | A|||C|||False 43 | B|||C|||False 44 | A|||D|||False 45 | C|||D|||False 46 | B|||A|||False 47 | A|||C|||False 48 | D|||A|||False 49 | B|||C|||False 50 | C|||A|||False 51 | A|||A|||True 52 | C|||C|||True 53 | C|||D|||False 54 | D|||A|||False 55 | C|||A|||False 56 | D|||B|||False 57 | D|||C|||False 58 | A|||A|||True 59 | B|||A|||False 60 | D|||C|||False 61 | D|||C|||False 62 | D|||D|||True 63 | B|||B|||True 64 | B|||A|||False 65 | C|||B|||False 66 | D|||C|||False 67 | D|||A|||False 68 | C|||A|||False 69 | B|||B|||True 70 | D|||D|||True 71 | B|||A|||False 72 | D|||B|||False 73 | D|||B|||False 74 | B|||B|||True 75 | A|||D|||False 76 | B|||B|||True 77 | B|||A|||False 78 | D|||C|||False 79 | C|||C|||True 80 | D|||D|||True 81 | D|||B|||False 82 | C|||D|||False 83 | B|||B|||True 84 | D|||D|||True 85 | B|||A|||False 86 | D|||B|||False 87 | C|||A|||False 88 | A|||C|||False 89 | D|||C|||False 90 | B|||D|||False 91 | A|||D|||False 92 | D|||A|||False 93 | D|||C|||False 94 | B|||D|||False 95 | D|||D|||True 96 | D|||A|||False 97 | C|||B|||False 98 | C|||C|||True 99 | C|||C|||True 100 | C|||B|||False 101 | C|||B|||False 102 | D|||D|||True 103 | A|||D|||False 104 | A|||D|||False 105 | C|||D|||False 106 | A|||D|||False 107 | D|||C|||False 108 | B|||B|||True 109 | D|||B|||False 110 | D|||D|||True 111 | D|||D|||True 112 | C|||B|||False 113 | D|||D|||True 114 | C|||A|||False 115 | D|||C|||False 116 | C|||C|||True 117 | A|||A|||True 118 | D|||A|||False 119 | A|||A|||True 120 | D|||D|||True 121 | C|||A|||False 122 | C|||D|||False 123 | C|||C|||True 124 | B|||C|||False 125 | D|||B|||False 126 | D|||A|||False 127 | C|||A|||False 128 | B|||A|||False 129 | C|||B|||False 130 | D|||A|||False 131 | D|||B|||False 132 | D|||C|||False 133 | C|||D|||False 134 | D|||A|||False 135 | B|||D|||False 136 | C|||A|||False 137 | C|||D|||False 138 | D|||A|||False 139 | D|||A|||False 140 | D|||A|||False 141 | C|||D|||False 142 | D|||C|||False 143 | C|||A|||False 144 | D|||C|||False 145 | B|||C|||False 146 | A|||B|||False 147 | C|||B|||False 148 | B|||B|||True 149 | B|||A|||False 150 | C|||C|||True 151 | B|||C|||False 152 | C|||A|||False 153 | B|||D|||False 154 | B|||C|||False 155 | C|||C|||True 156 | D|||D|||True 157 | D|||A|||False 158 | C|||B|||False 159 | D|||A|||False 160 | D|||D|||True 161 | D|||C|||False 162 | A|||D|||False 163 | D|||A|||False 164 | C|||A|||False 165 | B|||C|||False 166 | D|||D|||True 167 | D|||B|||False 168 | D|||A|||False 169 | C|||C|||True 170 | D|||A|||False 171 | A|||B|||False 172 | A|||A|||True 173 | C|||D|||False 174 | A|||B|||False 175 | B|||A|||False 176 | B|||A|||False 177 | C|||B|||False 178 | C|||D|||False 179 | C|||D|||False 180 | C|||D|||False 181 | A|||A|||True 182 | D|||D|||True 183 | A|||A|||True 184 | D|||D|||True 185 | A|||C|||False 186 | D|||A|||False 187 | D|||D|||True 188 | D|||C|||False 189 | B|||D|||False 190 | D|||A|||False 191 | D|||B|||False 192 | B|||A|||False 193 | A|||B|||False 194 | D|||D|||True 195 | C|||D|||False 196 | B|||D|||False 197 | D|||A|||False 198 | B|||B|||True 199 | D|||B|||False 200 | D|||A|||False 201 | Average accuracy 0.255 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/药理学200题: -------------------------------------------------------------------------------- 1 | B|||C|||False 2 | B|||C|||False 3 | B|||A|||False 4 | B|||A|||False 5 | D|||B|||False 6 | B|||C|||False 7 | B|||D|||False 8 | B|||A|||False 9 | B|||C|||False 10 | B|||A|||False 11 | B|||A|||False 12 | D|||D|||True 13 | B|||D|||False 14 | B|||C|||False 15 | B|||C|||False 16 | D|||D|||True 17 | B|||D|||False 18 | B|||C|||False 19 | B|||C|||False 20 | B|||B|||True 21 | B|||A|||False 22 | B|||A|||False 23 | B|||B|||True 24 | B|||A|||False 25 | B|||A|||False 26 | B|||B|||True 27 | B|||D|||False 28 | B|||B|||True 29 | D|||C|||False 30 | B|||D|||False 31 | D|||D|||True 32 | B|||C|||False 33 | B|||B|||True 34 | B|||A|||False 35 | B|||A|||False 36 | B|||A|||False 37 | D|||C|||False 38 | D|||B|||False 39 | D|||A|||False 40 | D|||D|||True 41 | B|||A|||False 42 | B|||C|||False 43 | D|||C|||False 44 | B|||D|||False 45 | B|||D|||False 46 | B|||A|||False 47 | B|||C|||False 48 | B|||A|||False 49 | B|||C|||False 50 | B|||A|||False 51 | B|||A|||False 52 | B|||C|||False 53 | B|||D|||False 54 | B|||A|||False 55 | B|||A|||False 56 | D|||B|||False 57 | B|||C|||False 58 | B|||A|||False 59 | D|||A|||False 60 | D|||C|||False 61 | B|||C|||False 62 | B|||D|||False 63 | B|||B|||True 64 | B|||A|||False 65 | B|||B|||True 66 | B|||C|||False 67 | B|||A|||False 68 | B|||A|||False 69 | B|||B|||True 70 | B|||D|||False 71 | B|||A|||False 72 | B|||B|||True 73 | B|||B|||True 74 | D|||B|||False 75 | D|||D|||True 76 | B|||B|||True 77 | B|||A|||False 78 | B|||C|||False 79 | B|||C|||False 80 | B|||D|||False 81 | D|||B|||False 82 | B|||D|||False 83 | B|||B|||True 84 | B|||D|||False 85 | B|||A|||False 86 | B|||B|||True 87 | B|||A|||False 88 | B|||C|||False 89 | B|||C|||False 90 | B|||D|||False 91 | B|||D|||False 92 | B|||A|||False 93 | B|||C|||False 94 | B|||D|||False 95 | D|||D|||True 96 | B|||A|||False 97 | B|||B|||True 98 | B|||C|||False 99 | B|||C|||False 100 | B|||B|||True 101 | B|||B|||True 102 | B|||D|||False 103 | B|||D|||False 104 | B|||D|||False 105 | D|||D|||True 106 | B|||D|||False 107 | D|||C|||False 108 | B|||B|||True 109 | B|||B|||True 110 | B|||D|||False 111 | B|||D|||False 112 | B|||B|||True 113 | D|||D|||True 114 | B|||A|||False 115 | B|||C|||False 116 | D|||C|||False 117 | D|||A|||False 118 | D|||A|||False 119 | B|||A|||False 120 | D|||D|||True 121 | B|||A|||False 122 | D|||D|||True 123 | D|||C|||False 124 | B|||C|||False 125 | B|||B|||True 126 | B|||A|||False 127 | B|||A|||False 128 | D|||A|||False 129 | B|||B|||True 130 | B|||A|||False 131 | B|||B|||True 132 | D|||C|||False 133 | B|||D|||False 134 | B|||A|||False 135 | B|||D|||False 136 | D|||A|||False 137 | D|||D|||True 138 | D|||A|||False 139 | B|||A|||False 140 | B|||A|||False 141 | B|||D|||False 142 | B|||C|||False 143 | D|||A|||False 144 | D|||C|||False 145 | B|||C|||False 146 | D|||B|||False 147 | B|||B|||True 148 | B|||B|||True 149 | D|||A|||False 150 | B|||C|||False 151 | B|||C|||False 152 | B|||A|||False 153 | B|||D|||False 154 | B|||C|||False 155 | B|||C|||False 156 | B|||D|||False 157 | B|||A|||False 158 | D|||B|||False 159 | B|||A|||False 160 | D|||D|||True 161 | B|||C|||False 162 | B|||D|||False 163 | B|||A|||False 164 | B|||A|||False 165 | B|||C|||False 166 | B|||D|||False 167 | B|||B|||True 168 | B|||A|||False 169 | B|||C|||False 170 | B|||A|||False 171 | B|||B|||True 172 | D|||A|||False 173 | B|||D|||False 174 | B|||B|||True 175 | B|||A|||False 176 | B|||A|||False 177 | B|||B|||True 178 | D|||D|||True 179 | D|||D|||True 180 | B|||D|||False 181 | B|||A|||False 182 | B|||D|||False 183 | D|||A|||False 184 | B|||D|||False 185 | B|||C|||False 186 | B|||A|||False 187 | B|||D|||False 188 | B|||C|||False 189 | B|||D|||False 190 | D|||A|||False 191 | B|||B|||True 192 | B|||A|||False 193 | B|||B|||True 194 | D|||D|||True 195 | B|||D|||False 196 | B|||D|||False 197 | B|||A|||False 198 | B|||B|||True 199 | B|||B|||True 200 | B|||A|||False 201 | Average accuracy 0.235 - 药理学200题 202 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | C|||D|||False 2 | B|||D|||False 3 | C|||C|||True 4 | C|||C|||True 5 | C|||C|||True 6 | B|||C|||False 7 | B|||C|||False 8 | D|||D|||True 9 | B|||D|||False 10 | C|||C|||True 11 | D|||A|||False 12 | C|||C|||True 13 | B|||B|||True 14 | C|||C|||True 15 | D|||D|||True 16 | B|||B|||True 17 | C|||C|||True 18 | B|||B|||True 19 | B|||C|||False 20 | A|||A|||True 21 | B|||A|||False 22 | B|||D|||False 23 | C|||D|||False 24 | D|||D|||True 25 | B|||B|||True 26 | B|||B|||True 27 | A|||A|||True 28 | B|||D|||False 29 | C|||C|||True 30 | B|||B|||True 31 | D|||D|||True 32 | D|||D|||True 33 | C|||A|||False 34 | B|||B|||True 35 | D|||C|||False 36 | D|||C|||False 37 | C|||C|||True 38 | A|||A|||True 39 | B|||C|||False 40 | B|||D|||False 41 | D|||D|||True 42 | B|||B|||True 43 | C|||D|||False 44 | D|||D|||True 45 | A|||B|||False 46 | D|||D|||True 47 | B|||B|||True 48 | B|||A|||False 49 | C|||C|||True 50 | B|||D|||False 51 | B|||B|||True 52 | D|||C|||False 53 | B|||C|||False 54 | D|||D|||True 55 | C|||C|||True 56 | B|||C|||False 57 | D|||D|||True 58 | D|||B|||False 59 | A|||D|||False 60 | B|||D|||False 61 | A|||D|||False 62 | B|||D|||False 63 | B|||D|||False 64 | D|||C|||False 65 | A|||D|||False 66 | B|||D|||False 67 | B|||D|||False 68 | A|||A|||True 69 | D|||D|||True 70 | C|||C|||True 71 | B|||B|||True 72 | C|||D|||False 73 | C|||C|||True 74 | D|||C|||False 75 | B|||A|||False 76 | D|||D|||True 77 | C|||C|||True 78 | D|||D|||True 79 | C|||D|||False 80 | D|||D|||True 81 | B|||D|||False 82 | A|||A|||True 83 | D|||D|||True 84 | D|||D|||True 85 | D|||C|||False 86 | B|||B|||True 87 | D|||D|||True 88 | C|||D|||False 89 | A|||A|||True 90 | D|||D|||True 91 | C|||D|||False 92 | C|||A|||False 93 | D|||D|||True 94 | D|||D|||True 95 | A|||A|||True 96 | C|||C|||True 97 | B|||D|||False 98 | B|||B|||True 99 | C|||A|||False 100 | B|||B|||True 101 | B|||B|||True 102 | C|||D|||False 103 | C|||D|||False 104 | B|||B|||True 105 | B|||A|||False 106 | D|||D|||True 107 | D|||D|||True 108 | D|||D|||True 109 | D|||D|||True 110 | C|||B|||False 111 | D|||C|||False 112 | A|||D|||False 113 | D|||D|||True 114 | C|||C|||True 115 | B|||A|||False 116 | B|||A|||False 117 | B|||B|||True 118 | B|||A|||False 119 | B|||A|||False 120 | B|||D|||False 121 | D|||D|||True 122 | D|||D|||True 123 | B|||B|||True 124 | D|||B|||False 125 | A|||D|||False 126 | B|||C|||False 127 | D|||D|||True 128 | C|||D|||False 129 | D|||D|||True 130 | A|||D|||False 131 | D|||D|||True 132 | D|||A|||False 133 | D|||D|||True 134 | D|||A|||False 135 | B|||A|||False 136 | B|||B|||True 137 | A|||B|||False 138 | B|||A|||False 139 | D|||D|||True 140 | C|||A|||False 141 | A|||D|||False 142 | A|||A|||True 143 | C|||B|||False 144 | D|||C|||False 145 | B|||B|||True 146 | D|||C|||False 147 | C|||C|||True 148 | B|||B|||True 149 | D|||D|||True 150 | D|||D|||True 151 | C|||C|||True 152 | A|||A|||True 153 | D|||D|||True 154 | D|||B|||False 155 | A|||D|||False 156 | C|||C|||True 157 | B|||D|||False 158 | B|||B|||True 159 | B|||B|||True 160 | D|||B|||False 161 | A|||A|||True 162 | D|||A|||False 163 | B|||B|||True 164 | D|||A|||False 165 | A|||A|||True 166 | D|||A|||False 167 | D|||D|||True 168 | C|||C|||True 169 | C|||B|||False 170 | C|||C|||True 171 | C|||D|||False 172 | D|||D|||True 173 | B|||A|||False 174 | B|||B|||True 175 | D|||D|||True 176 | A|||A|||True 177 | C|||B|||False 178 | B|||D|||False 179 | B|||C|||False 180 | B|||C|||False 181 | C|||D|||False 182 | C|||A|||False 183 | C|||C|||True 184 | D|||D|||True 185 | B|||A|||False 186 | C|||C|||True 187 | D|||D|||True 188 | D|||D|||True 189 | D|||B|||False 190 | C|||C|||True 191 | C|||D|||False 192 | D|||C|||False 193 | A|||A|||True 194 | B|||D|||False 195 | B|||C|||False 196 | C|||C|||True 197 | C|||C|||True 198 | D|||D|||True 199 | A|||D|||False 200 | D|||D|||True 201 | B|||C|||False 202 | A|||A|||True 203 | C|||C|||True 204 | C|||C|||True 205 | A|||A|||True 206 | B|||D|||False 207 | B|||B|||True 208 | B|||C|||False 209 | C|||C|||True 210 | C|||D|||False 211 | D|||B|||False 212 | A|||A|||True 213 | D|||D|||True 214 | Average accuracy 0.540 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | C|||D|||False 2 | A|||D|||False 3 | D|||C|||False 4 | D|||C|||False 5 | A|||C|||False 6 | D|||C|||False 7 | C|||C|||True 8 | B|||D|||False 9 | D|||D|||True 10 | C|||C|||True 11 | C|||A|||False 12 | C|||C|||True 13 | D|||B|||False 14 | A|||C|||False 15 | D|||D|||True 16 | D|||B|||False 17 | D|||C|||False 18 | B|||B|||True 19 | C|||C|||True 20 | A|||A|||True 21 | A|||A|||True 22 | D|||D|||True 23 | A|||D|||False 24 | D|||D|||True 25 | D|||B|||False 26 | D|||B|||False 27 | C|||A|||False 28 | D|||D|||True 29 | D|||C|||False 30 | B|||B|||True 31 | D|||D|||True 32 | A|||D|||False 33 | D|||A|||False 34 | A|||B|||False 35 | A|||C|||False 36 | C|||C|||True 37 | C|||C|||True 38 | A|||A|||True 39 | D|||C|||False 40 | B|||D|||False 41 | A|||D|||False 42 | B|||B|||True 43 | D|||D|||True 44 | B|||D|||False 45 | B|||B|||True 46 | D|||D|||True 47 | B|||B|||True 48 | D|||A|||False 49 | C|||C|||True 50 | A|||D|||False 51 | A|||B|||False 52 | C|||C|||True 53 | D|||C|||False 54 | D|||D|||True 55 | A|||C|||False 56 | A|||C|||False 57 | C|||D|||False 58 | D|||B|||False 59 | D|||D|||True 60 | A|||D|||False 61 | D|||D|||True 62 | D|||D|||True 63 | D|||D|||True 64 | D|||C|||False 65 | D|||D|||True 66 | D|||D|||True 67 | D|||D|||True 68 | C|||A|||False 69 | D|||D|||True 70 | D|||C|||False 71 | D|||B|||False 72 | C|||D|||False 73 | D|||C|||False 74 | D|||C|||False 75 | D|||A|||False 76 | A|||D|||False 77 | C|||C|||True 78 | A|||D|||False 79 | C|||D|||False 80 | D|||D|||True 81 | A|||D|||False 82 | A|||A|||True 83 | D|||D|||True 84 | D|||D|||True 85 | D|||C|||False 86 | A|||B|||False 87 | D|||D|||True 88 | D|||D|||True 89 | C|||A|||False 90 | D|||D|||True 91 | D|||D|||True 92 | D|||A|||False 93 | C|||D|||False 94 | A|||D|||False 95 | D|||A|||False 96 | D|||C|||False 97 | B|||D|||False 98 | A|||B|||False 99 | A|||A|||True 100 | D|||B|||False 101 | C|||B|||False 102 | A|||D|||False 103 | D|||D|||True 104 | C|||B|||False 105 | B|||A|||False 106 | D|||D|||True 107 | D|||D|||True 108 | D|||D|||True 109 | A|||D|||False 110 | A|||B|||False 111 | D|||C|||False 112 | A|||D|||False 113 | A|||D|||False 114 | C|||C|||True 115 | D|||A|||False 116 | D|||A|||False 117 | B|||B|||True 118 | A|||A|||True 119 | A|||A|||True 120 | C|||D|||False 121 | A|||D|||False 122 | D|||D|||True 123 | D|||B|||False 124 | A|||B|||False 125 | A|||D|||False 126 | B|||C|||False 127 | D|||D|||True 128 | D|||D|||True 129 | D|||D|||True 130 | D|||D|||True 131 | D|||D|||True 132 | D|||A|||False 133 | D|||D|||True 134 | D|||A|||False 135 | D|||A|||False 136 | C|||B|||False 137 | A|||B|||False 138 | D|||A|||False 139 | D|||D|||True 140 | D|||A|||False 141 | A|||D|||False 142 | D|||A|||False 143 | A|||B|||False 144 | D|||C|||False 145 | D|||B|||False 146 | D|||C|||False 147 | D|||C|||False 148 | B|||B|||True 149 | D|||D|||True 150 | D|||D|||True 151 | D|||C|||False 152 | A|||A|||True 153 | D|||D|||True 154 | A|||B|||False 155 | A|||D|||False 156 | A|||C|||False 157 | D|||D|||True 158 | D|||B|||False 159 | A|||B|||False 160 | D|||B|||False 161 | B|||A|||False 162 | D|||A|||False 163 | D|||B|||False 164 | C|||A|||False 165 | D|||A|||False 166 | D|||A|||False 167 | C|||D|||False 168 | D|||C|||False 169 | A|||B|||False 170 | A|||C|||False 171 | C|||D|||False 172 | D|||D|||True 173 | D|||A|||False 174 | D|||B|||False 175 | D|||D|||True 176 | C|||A|||False 177 | C|||B|||False 178 | A|||D|||False 179 | B|||C|||False 180 | D|||C|||False 181 | D|||D|||True 182 | D|||A|||False 183 | C|||C|||True 184 | A|||D|||False 185 | B|||A|||False 186 | C|||C|||True 187 | C|||D|||False 188 | D|||D|||True 189 | A|||B|||False 190 | D|||C|||False 191 | D|||D|||True 192 | A|||C|||False 193 | C|||A|||False 194 | D|||D|||True 195 | D|||C|||False 196 | D|||C|||False 197 | D|||C|||False 198 | D|||D|||True 199 | A|||D|||False 200 | D|||D|||True 201 | D|||C|||False 202 | A|||A|||True 203 | C|||C|||True 204 | D|||C|||False 205 | A|||A|||True 206 | D|||D|||True 207 | D|||B|||False 208 | B|||C|||False 209 | C|||C|||True 210 | D|||D|||True 211 | A|||B|||False 212 | D|||A|||False 213 | D|||D|||True 214 | Average accuracy 0.385 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||D|||True 3 | C|||C|||True 4 | D|||C|||False 5 | D|||C|||False 6 | C|||C|||True 7 | D|||C|||False 8 | D|||D|||True 9 | D|||D|||True 10 | D|||C|||False 11 | D|||A|||False 12 | D|||C|||False 13 | D|||B|||False 14 | D|||C|||False 15 | D|||D|||True 16 | D|||B|||False 17 | D|||C|||False 18 | D|||B|||False 19 | D|||C|||False 20 | D|||A|||False 21 | D|||A|||False 22 | D|||D|||True 23 | D|||D|||True 24 | D|||D|||True 25 | D|||B|||False 26 | D|||B|||False 27 | D|||A|||False 28 | D|||D|||True 29 | D|||C|||False 30 | D|||B|||False 31 | D|||D|||True 32 | D|||D|||True 33 | D|||A|||False 34 | D|||B|||False 35 | D|||C|||False 36 | C|||C|||True 37 | D|||C|||False 38 | D|||A|||False 39 | D|||C|||False 40 | D|||D|||True 41 | D|||D|||True 42 | D|||B|||False 43 | D|||D|||True 44 | C|||D|||False 45 | D|||B|||False 46 | D|||D|||True 47 | D|||B|||False 48 | D|||A|||False 49 | D|||C|||False 50 | D|||D|||True 51 | D|||B|||False 52 | D|||C|||False 53 | D|||C|||False 54 | D|||D|||True 55 | D|||C|||False 56 | D|||C|||False 57 | D|||D|||True 58 | D|||B|||False 59 | C|||D|||False 60 | D|||D|||True 61 | C|||D|||False 62 | D|||D|||True 63 | D|||D|||True 64 | D|||C|||False 65 | D|||D|||True 66 | D|||D|||True 67 | D|||D|||True 68 | D|||A|||False 69 | D|||D|||True 70 | D|||C|||False 71 | D|||B|||False 72 | D|||D|||True 73 | D|||C|||False 74 | D|||C|||False 75 | D|||A|||False 76 | D|||D|||True 77 | C|||C|||True 78 | D|||D|||True 79 | D|||D|||True 80 | D|||D|||True 81 | D|||D|||True 82 | D|||A|||False 83 | D|||D|||True 84 | D|||D|||True 85 | D|||C|||False 86 | C|||B|||False 87 | D|||D|||True 88 | D|||D|||True 89 | D|||A|||False 90 | C|||D|||False 91 | D|||D|||True 92 | D|||A|||False 93 | D|||D|||True 94 | D|||D|||True 95 | D|||A|||False 96 | D|||C|||False 97 | D|||D|||True 98 | D|||B|||False 99 | D|||A|||False 100 | D|||B|||False 101 | D|||B|||False 102 | D|||D|||True 103 | D|||D|||True 104 | D|||B|||False 105 | D|||A|||False 106 | D|||D|||True 107 | D|||D|||True 108 | D|||D|||True 109 | D|||D|||True 110 | D|||B|||False 111 | D|||C|||False 112 | D|||D|||True 113 | D|||D|||True 114 | D|||C|||False 115 | D|||A|||False 116 | C|||A|||False 117 | D|||B|||False 118 | D|||A|||False 119 | D|||A|||False 120 | D|||D|||True 121 | D|||D|||True 122 | D|||D|||True 123 | D|||B|||False 124 | D|||B|||False 125 | A|||D|||False 126 | D|||C|||False 127 | D|||D|||True 128 | D|||D|||True 129 | D|||D|||True 130 | D|||D|||True 131 | D|||D|||True 132 | C|||A|||False 133 | D|||D|||True 134 | D|||A|||False 135 | C|||A|||False 136 | D|||B|||False 137 | D|||B|||False 138 | C|||A|||False 139 | D|||D|||True 140 | D|||A|||False 141 | D|||D|||True 142 | D|||A|||False 143 | D|||B|||False 144 | D|||C|||False 145 | D|||B|||False 146 | D|||C|||False 147 | D|||C|||False 148 | D|||B|||False 149 | D|||D|||True 150 | C|||D|||False 151 | D|||C|||False 152 | D|||A|||False 153 | D|||D|||True 154 | D|||B|||False 155 | D|||D|||True 156 | D|||C|||False 157 | D|||D|||True 158 | D|||B|||False 159 | D|||B|||False 160 | D|||B|||False 161 | D|||A|||False 162 | D|||A|||False 163 | C|||B|||False 164 | D|||A|||False 165 | D|||A|||False 166 | D|||A|||False 167 | D|||D|||True 168 | D|||C|||False 169 | D|||B|||False 170 | D|||C|||False 171 | D|||D|||True 172 | D|||D|||True 173 | D|||A|||False 174 | D|||B|||False 175 | D|||D|||True 176 | D|||A|||False 177 | D|||B|||False 178 | D|||D|||True 179 | D|||C|||False 180 | D|||C|||False 181 | D|||D|||True 182 | D|||A|||False 183 | D|||C|||False 184 | D|||D|||True 185 | D|||A|||False 186 | D|||C|||False 187 | D|||D|||True 188 | D|||D|||True 189 | D|||B|||False 190 | D|||C|||False 191 | D|||D|||True 192 | D|||C|||False 193 | D|||A|||False 194 | D|||D|||True 195 | D|||C|||False 196 | D|||C|||False 197 | D|||C|||False 198 | D|||D|||True 199 | D|||D|||True 200 | D|||D|||True 201 | D|||C|||False 202 | D|||A|||False 203 | D|||C|||False 204 | D|||C|||False 205 | D|||A|||False 206 | D|||D|||True 207 | C|||B|||False 208 | D|||C|||False 209 | D|||C|||False 210 | D|||D|||True 211 | D|||B|||False 212 | D|||A|||False 213 | D|||D|||True 214 | Average accuracy 0.390 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/chatglm6b_test_results_0514/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | C|||D|||False 2 | C|||D|||False 3 | A|||C|||False 4 | C|||C|||True 5 | C|||C|||True 6 | B|||C|||False 7 | D|||C|||False 8 | B|||D|||False 9 | A|||D|||False 10 | C|||C|||True 11 | D|||A|||False 12 | D|||C|||False 13 | D|||B|||False 14 | C|||C|||True 15 | D|||D|||True 16 | D|||B|||False 17 | C|||C|||True 18 | B|||B|||True 19 | A|||C|||False 20 | D|||A|||False 21 | C|||A|||False 22 | C|||D|||False 23 | C|||D|||False 24 | D|||D|||True 25 | C|||B|||False 26 | A|||B|||False 27 | D|||A|||False 28 | D|||D|||True 29 | D|||C|||False 30 | B|||B|||True 31 | C|||D|||False 32 | C|||D|||False 33 | D|||A|||False 34 | B|||B|||True 35 | C|||C|||True 36 | D|||C|||False 37 | C|||C|||True 38 | A|||A|||True 39 | C|||C|||True 40 | D|||D|||True 41 | D|||D|||True 42 | D|||B|||False 43 | D|||D|||True 44 | B|||D|||False 45 | A|||B|||False 46 | D|||D|||True 47 | B|||B|||True 48 | D|||A|||False 49 | C|||C|||True 50 | B|||D|||False 51 | D|||B|||False 52 | D|||C|||False 53 | D|||C|||False 54 | B|||D|||False 55 | B|||C|||False 56 | C|||C|||True 57 | D|||D|||True 58 | D|||B|||False 59 | D|||D|||True 60 | C|||D|||False 61 | D|||D|||True 62 | D|||D|||True 63 | C|||D|||False 64 | D|||C|||False 65 | C|||D|||False 66 | D|||D|||True 67 | D|||D|||True 68 | D|||A|||False 69 | D|||D|||True 70 | D|||C|||False 71 | B|||B|||True 72 | B|||D|||False 73 | D|||C|||False 74 | C|||C|||True 75 | D|||A|||False 76 | D|||D|||True 77 | C|||C|||True 78 | D|||D|||True 79 | D|||D|||True 80 | D|||D|||True 81 | B|||D|||False 82 | A|||A|||True 83 | C|||D|||False 84 | D|||D|||True 85 | A|||C|||False 86 | B|||B|||True 87 | D|||D|||True 88 | D|||D|||True 89 | D|||A|||False 90 | D|||D|||True 91 | D|||D|||True 92 | D|||A|||False 93 | B|||D|||False 94 | A|||D|||False 95 | D|||A|||False 96 | B|||C|||False 97 | B|||D|||False 98 | D|||B|||False 99 | C|||A|||False 100 | B|||B|||True 101 | B|||B|||True 102 | A|||D|||False 103 | B|||D|||False 104 | C|||B|||False 105 | C|||A|||False 106 | C|||D|||False 107 | D|||D|||True 108 | D|||D|||True 109 | D|||D|||True 110 | B|||B|||True 111 | D|||C|||False 112 | C|||D|||False 113 | D|||D|||True 114 | C|||C|||True 115 | B|||A|||False 116 | D|||A|||False 117 | C|||B|||False 118 | A|||A|||True 119 | D|||A|||False 120 | C|||D|||False 121 | D|||D|||True 122 | C|||D|||False 123 | D|||B|||False 124 | D|||B|||False 125 | A|||D|||False 126 | C|||C|||True 127 | D|||D|||True 128 | D|||D|||True 129 | D|||D|||True 130 | C|||D|||False 131 | D|||D|||True 132 | C|||A|||False 133 | D|||D|||True 134 | D|||A|||False 135 | B|||A|||False 136 | A|||B|||False 137 | D|||B|||False 138 | A|||A|||True 139 | A|||D|||False 140 | C|||A|||False 141 | B|||D|||False 142 | C|||A|||False 143 | A|||B|||False 144 | D|||C|||False 145 | B|||B|||True 146 | D|||C|||False 147 | D|||C|||False 148 | B|||B|||True 149 | D|||D|||True 150 | D|||D|||True 151 | D|||C|||False 152 | D|||A|||False 153 | C|||D|||False 154 | D|||B|||False 155 | D|||D|||True 156 | D|||C|||False 157 | D|||D|||True 158 | C|||B|||False 159 | A|||B|||False 160 | D|||B|||False 161 | B|||A|||False 162 | D|||A|||False 163 | C|||B|||False 164 | D|||A|||False 165 | D|||A|||False 166 | B|||A|||False 167 | C|||D|||False 168 | D|||C|||False 169 | A|||B|||False 170 | C|||C|||True 171 | C|||D|||False 172 | D|||D|||True 173 | C|||A|||False 174 | B|||B|||True 175 | C|||D|||False 176 | D|||A|||False 177 | B|||B|||True 178 | D|||D|||True 179 | C|||C|||True 180 | D|||C|||False 181 | D|||D|||True 182 | D|||A|||False 183 | C|||C|||True 184 | B|||D|||False 185 | B|||A|||False 186 | A|||C|||False 187 | B|||D|||False 188 | D|||D|||True 189 | B|||B|||True 190 | C|||C|||True 191 | D|||D|||True 192 | A|||C|||False 193 | C|||A|||False 194 | D|||D|||True 195 | B|||C|||False 196 | C|||C|||True 197 | D|||C|||False 198 | C|||D|||False 199 | C|||D|||False 200 | D|||D|||True 201 | D|||C|||False 202 | D|||A|||False 203 | C|||C|||True 204 | D|||C|||False 205 | D|||A|||False 206 | D|||D|||True 207 | D|||B|||False 208 | C|||C|||True 209 | B|||C|||False 210 | D|||D|||True 211 | D|||B|||False 212 | D|||A|||False 213 | C|||D|||False 214 | Average accuracy 0.399 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | C|||D|||False 2 | B|||D|||False 3 | D|||C|||False 4 | C|||C|||True 5 | A|||C|||False 6 | A|||C|||False 7 | B|||C|||False 8 | B|||D|||False 9 | B|||D|||False 10 | C|||C|||True 11 | C|||A|||False 12 | C|||C|||True 13 | B|||B|||True 14 | C|||C|||True 15 | D|||D|||True 16 | B|||B|||True 17 | D|||C|||False 18 | B|||B|||True 19 | A|||C|||False 20 | A|||A|||True 21 | A|||A|||True 22 | B|||D|||False 23 | A|||D|||False 24 | C|||D|||False 25 | A|||B|||False 26 | A|||B|||False 27 | C|||A|||False 28 | D|||D|||True 29 | B|||C|||False 30 | B|||B|||True 31 | D|||D|||True 32 | A|||D|||False 33 | C|||A|||False 34 | B|||B|||True 35 | D|||C|||False 36 | A|||C|||False 37 | A|||C|||False 38 | A|||A|||True 39 | C|||C|||True 40 | A|||D|||False 41 | D|||D|||True 42 | B|||B|||True 43 | C|||D|||False 44 | A|||D|||False 45 | B|||B|||True 46 | D|||D|||True 47 | B|||B|||True 48 | C|||A|||False 49 | C|||C|||True 50 | A|||D|||False 51 | B|||B|||True 52 | B|||C|||False 53 | A|||C|||False 54 | D|||D|||True 55 | A|||C|||False 56 | A|||C|||False 57 | B|||D|||False 58 | A|||B|||False 59 | C|||D|||False 60 | B|||D|||False 61 | D|||D|||True 62 | B|||D|||False 63 | B|||D|||False 64 | C|||C|||True 65 | C|||D|||False 66 | C|||D|||False 67 | B|||D|||False 68 | D|||A|||False 69 | D|||D|||True 70 | B|||C|||False 71 | A|||B|||False 72 | D|||D|||True 73 | A|||C|||False 74 | D|||C|||False 75 | D|||A|||False 76 | D|||D|||True 77 | C|||C|||True 78 | D|||D|||True 79 | A|||D|||False 80 | D|||D|||True 81 | B|||D|||False 82 | A|||A|||True 83 | C|||D|||False 84 | C|||D|||False 85 | D|||C|||False 86 | B|||B|||True 87 | A|||D|||False 88 | B|||D|||False 89 | C|||A|||False 90 | D|||D|||True 91 | C|||D|||False 92 | D|||A|||False 93 | C|||D|||False 94 | A|||D|||False 95 | D|||A|||False 96 | D|||C|||False 97 | B|||D|||False 98 | B|||B|||True 99 | D|||A|||False 100 | B|||B|||True 101 | C|||B|||False 102 | D|||D|||True 103 | D|||D|||True 104 | C|||B|||False 105 | C|||A|||False 106 | D|||D|||True 107 | A|||D|||False 108 | D|||D|||True 109 | C|||D|||False 110 | A|||B|||False 111 | B|||C|||False 112 | A|||D|||False 113 | A|||D|||False 114 | C|||C|||True 115 | D|||A|||False 116 | A|||A|||True 117 | A|||B|||False 118 | C|||A|||False 119 | A|||A|||True 120 | A|||D|||False 121 | A|||D|||False 122 | C|||D|||False 123 | B|||B|||True 124 | A|||B|||False 125 | A|||D|||False 126 | A|||C|||False 127 | D|||D|||True 128 | A|||D|||False 129 | A|||D|||False 130 | C|||D|||False 131 | A|||D|||False 132 | D|||A|||False 133 | D|||D|||True 134 | C|||A|||False 135 | B|||A|||False 136 | B|||B|||True 137 | C|||B|||False 138 | A|||A|||True 139 | D|||D|||True 140 | C|||A|||False 141 | A|||D|||False 142 | A|||A|||True 143 | A|||B|||False 144 | D|||C|||False 145 | B|||B|||True 146 | A|||C|||False 147 | D|||C|||False 148 | B|||B|||True 149 | C|||D|||False 150 | D|||D|||True 151 | C|||C|||True 152 | A|||A|||True 153 | D|||D|||True 154 | A|||B|||False 155 | A|||D|||False 156 | A|||C|||False 157 | B|||D|||False 158 | B|||B|||True 159 | B|||B|||True 160 | B|||B|||True 161 | A|||A|||True 162 | D|||A|||False 163 | C|||B|||False 164 | C|||A|||False 165 | A|||A|||True 166 | B|||A|||False 167 | C|||D|||False 168 | D|||C|||False 169 | A|||B|||False 170 | D|||C|||False 171 | C|||D|||False 172 | A|||D|||False 173 | A|||A|||True 174 | B|||B|||True 175 | C|||D|||False 176 | A|||A|||True 177 | B|||B|||True 178 | C|||D|||False 179 | A|||C|||False 180 | D|||C|||False 181 | D|||D|||True 182 | A|||A|||True 183 | C|||C|||True 184 | A|||D|||False 185 | B|||A|||False 186 | C|||C|||True 187 | B|||D|||False 188 | D|||D|||True 189 | B|||B|||True 190 | C|||C|||True 191 | B|||D|||False 192 | A|||C|||False 193 | C|||A|||False 194 | B|||D|||False 195 | D|||C|||False 196 | D|||C|||False 197 | D|||C|||False 198 | D|||D|||True 199 | A|||D|||False 200 | D|||D|||True 201 | B|||C|||False 202 | A|||A|||True 203 | C|||C|||True 204 | C|||C|||True 205 | A|||A|||True 206 | C|||D|||False 207 | A|||B|||False 208 | C|||C|||True 209 | C|||C|||True 210 | A|||D|||False 211 | C|||B|||False 212 | B|||A|||False 213 | C|||D|||False 214 | Average accuracy 0.380 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/bloomz_1b1_test_results_0515/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | D|||D|||True 3 | D|||C|||False 4 | D|||C|||False 5 | B|||C|||False 6 | D|||C|||False 7 | B|||C|||False 8 | B|||D|||False 9 | B|||D|||False 10 | B|||C|||False 11 | D|||A|||False 12 | B|||C|||False 13 | B|||B|||True 14 | D|||C|||False 15 | B|||D|||False 16 | B|||B|||True 17 | B|||C|||False 18 | B|||B|||True 19 | D|||C|||False 20 | D|||A|||False 21 | B|||A|||False 22 | B|||D|||False 23 | D|||D|||True 24 | D|||D|||True 25 | D|||B|||False 26 | D|||B|||False 27 | D|||A|||False 28 | B|||D|||False 29 | D|||C|||False 30 | B|||B|||True 31 | B|||D|||False 32 | B|||D|||False 33 | D|||A|||False 34 | B|||B|||True 35 | B|||C|||False 36 | B|||C|||False 37 | B|||C|||False 38 | B|||A|||False 39 | B|||C|||False 40 | B|||D|||False 41 | D|||D|||True 42 | B|||B|||True 43 | B|||D|||False 44 | B|||D|||False 45 | B|||B|||True 46 | D|||D|||True 47 | D|||B|||False 48 | B|||A|||False 49 | B|||C|||False 50 | D|||D|||True 51 | B|||B|||True 52 | D|||C|||False 53 | B|||C|||False 54 | D|||D|||True 55 | D|||C|||False 56 | B|||C|||False 57 | B|||D|||False 58 | D|||B|||False 59 | B|||D|||False 60 | D|||D|||True 61 | B|||D|||False 62 | B|||D|||False 63 | D|||D|||True 64 | B|||C|||False 65 | B|||D|||False 66 | B|||D|||False 67 | B|||D|||False 68 | D|||A|||False 69 | B|||D|||False 70 | D|||C|||False 71 | B|||B|||True 72 | B|||D|||False 73 | B|||C|||False 74 | D|||C|||False 75 | D|||A|||False 76 | D|||D|||True 77 | D|||C|||False 78 | B|||D|||False 79 | B|||D|||False 80 | D|||D|||True 81 | B|||D|||False 82 | D|||A|||False 83 | D|||D|||True 84 | B|||D|||False 85 | B|||C|||False 86 | B|||B|||True 87 | B|||D|||False 88 | D|||D|||True 89 | D|||A|||False 90 | B|||D|||False 91 | D|||D|||True 92 | B|||A|||False 93 | D|||D|||True 94 | B|||D|||False 95 | B|||A|||False 96 | B|||C|||False 97 | B|||D|||False 98 | B|||B|||True 99 | B|||A|||False 100 | B|||B|||True 101 | D|||B|||False 102 | B|||D|||False 103 | D|||D|||True 104 | B|||B|||True 105 | B|||A|||False 106 | B|||D|||False 107 | B|||D|||False 108 | B|||D|||False 109 | B|||D|||False 110 | D|||B|||False 111 | B|||C|||False 112 | B|||D|||False 113 | B|||D|||False 114 | D|||C|||False 115 | B|||A|||False 116 | B|||A|||False 117 | D|||B|||False 118 | B|||A|||False 119 | B|||A|||False 120 | D|||D|||True 121 | B|||D|||False 122 | B|||D|||False 123 | B|||B|||True 124 | B|||B|||True 125 | A|||D|||False 126 | B|||C|||False 127 | B|||D|||False 128 | B|||D|||False 129 | B|||D|||False 130 | B|||D|||False 131 | B|||D|||False 132 | B|||A|||False 133 | B|||D|||False 134 | B|||A|||False 135 | D|||A|||False 136 | B|||B|||True 137 | B|||B|||True 138 | B|||A|||False 139 | B|||D|||False 140 | B|||A|||False 141 | B|||D|||False 142 | B|||A|||False 143 | B|||B|||True 144 | B|||C|||False 145 | B|||B|||True 146 | B|||C|||False 147 | B|||C|||False 148 | D|||B|||False 149 | B|||D|||False 150 | B|||D|||False 151 | B|||C|||False 152 | B|||A|||False 153 | B|||D|||False 154 | B|||B|||True 155 | B|||D|||False 156 | B|||C|||False 157 | B|||D|||False 158 | B|||B|||True 159 | B|||B|||True 160 | B|||B|||True 161 | B|||A|||False 162 | B|||A|||False 163 | B|||B|||True 164 | B|||A|||False 165 | B|||A|||False 166 | B|||A|||False 167 | D|||D|||True 168 | B|||C|||False 169 | B|||B|||True 170 | B|||C|||False 171 | D|||D|||True 172 | B|||D|||False 173 | B|||A|||False 174 | B|||B|||True 175 | B|||D|||False 176 | B|||A|||False 177 | B|||B|||True 178 | D|||D|||True 179 | B|||C|||False 180 | B|||C|||False 181 | B|||D|||False 182 | B|||A|||False 183 | B|||C|||False 184 | D|||D|||True 185 | B|||A|||False 186 | B|||C|||False 187 | B|||D|||False 188 | B|||D|||False 189 | B|||B|||True 190 | B|||C|||False 191 | B|||D|||False 192 | D|||C|||False 193 | B|||A|||False 194 | B|||D|||False 195 | D|||C|||False 196 | D|||C|||False 197 | D|||C|||False 198 | D|||D|||True 199 | B|||D|||False 200 | D|||D|||True 201 | D|||C|||False 202 | D|||A|||False 203 | D|||C|||False 204 | B|||C|||False 205 | D|||A|||False 206 | D|||D|||True 207 | B|||B|||True 208 | B|||C|||False 209 | D|||C|||False 210 | B|||D|||False 211 | B|||B|||True 212 | D|||A|||False 213 | D|||D|||True 214 | Average accuracy 0.258 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/MOSS16B_test_results_0515/zero_shot/儿科学213题: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | B|||D|||False 3 | A|||C|||False 4 | A|||C|||False 5 | B|||C|||False 6 | B|||C|||False 7 | A|||C|||False 8 | D|||D|||True 9 | B|||D|||False 10 | B|||C|||False 11 | A|||A|||True 12 | B|||C|||False 13 | D|||B|||False 14 | A|||C|||False 15 | A|||D|||False 16 | A|||B|||False 17 | A|||C|||False 18 | D|||B|||False 19 | B|||C|||False 20 | A|||A|||True 21 | A|||A|||True 22 | A|||D|||False 23 | A|||D|||False 24 | B|||D|||False 25 | A|||B|||False 26 | A|||B|||False 27 | D|||A|||False 28 | A|||D|||False 29 | A|||C|||False 30 | A|||B|||False 31 | B|||D|||False 32 | B|||D|||False 33 | A|||A|||True 34 | B|||B|||True 35 | A|||C|||False 36 | A|||C|||False 37 | B|||C|||False 38 | A|||A|||True 39 | A|||C|||False 40 | A|||D|||False 41 | D|||D|||True 42 | 未成功回答|||B|||False 43 | A|||D|||False 44 | A|||D|||False 45 | B|||B|||True 46 | B|||D|||False 47 | B|||B|||True 48 | D|||A|||False 49 | B|||C|||False 50 | A|||D|||False 51 | D|||B|||False 52 | A|||C|||False 53 | A|||C|||False 54 | B|||D|||False 55 | A|||C|||False 56 | 未成功回答|||C|||False 57 | B|||D|||False 58 | D|||B|||False 59 | B|||D|||False 60 | B|||D|||False 61 | A|||D|||False 62 | B|||D|||False 63 | D|||D|||True 64 | D|||C|||False 65 | A|||D|||False 66 | B|||D|||False 67 | A|||D|||False 68 | C|||A|||False 69 | D|||D|||True 70 | A|||C|||False 71 | A|||B|||False 72 | A|||D|||False 73 | D|||C|||False 74 | B|||C|||False 75 | B|||A|||False 76 | D|||D|||True 77 | 未成功回答|||C|||False 78 | A|||D|||False 79 | A|||D|||False 80 | A|||D|||False 81 | B|||D|||False 82 | C|||A|||False 83 | A|||D|||False 84 | C|||D|||False 85 | A|||C|||False 86 | B|||B|||True 87 | B|||D|||False 88 | A|||D|||False 89 | A|||A|||True 90 | C|||D|||False 91 | A|||D|||False 92 | A|||A|||True 93 | B|||D|||False 94 | A|||D|||False 95 | A|||A|||True 96 | B|||C|||False 97 | A|||D|||False 98 | 未成功回答|||B|||False 99 | 未成功回答|||A|||False 100 | A|||B|||False 101 | A|||B|||False 102 | D|||D|||True 103 | A|||D|||False 104 | B|||B|||True 105 | A|||A|||True 106 | A|||D|||False 107 | A|||D|||False 108 | B|||D|||False 109 | A|||D|||False 110 | A|||B|||False 111 | D|||C|||False 112 | A|||D|||False 113 | B|||D|||False 114 | A|||C|||False 115 | A|||A|||True 116 | A|||A|||True 117 | A|||B|||False 118 | A|||A|||True 119 | A|||A|||True 120 | A|||D|||False 121 | A|||D|||False 122 | A|||D|||False 123 | A|||B|||False 124 | B|||B|||True 125 | A|||D|||False 126 | B|||C|||False 127 | A|||D|||False 128 | A|||D|||False 129 | A|||D|||False 130 | A|||D|||False 131 | B|||D|||False 132 | D|||A|||False 133 | D|||D|||True 134 | A|||A|||True 135 | B|||A|||False 136 | D|||B|||False 137 | D|||B|||False 138 | A|||A|||True 139 | A|||D|||False 140 | D|||A|||False 141 | A|||D|||False 142 | A|||A|||True 143 | B|||B|||True 144 | A|||C|||False 145 | A|||B|||False 146 | C|||C|||True 147 | B|||C|||False 148 | B|||B|||True 149 | B|||D|||False 150 | D|||D|||True 151 | D|||C|||False 152 | A|||A|||True 153 | B|||D|||False 154 | A|||B|||False 155 | A|||D|||False 156 | A|||C|||False 157 | A|||D|||False 158 | B|||B|||True 159 | B|||B|||True 160 | B|||B|||True 161 | A|||A|||True 162 | A|||A|||True 163 | B|||B|||True 164 | D|||A|||False 165 | A|||A|||True 166 | A|||A|||True 167 | A|||D|||False 168 | D|||C|||False 169 | A|||B|||False 170 | A|||C|||False 171 | B|||D|||False 172 | B|||D|||False 173 | A|||A|||True 174 | A|||B|||False 175 | D|||D|||True 176 | A|||A|||True 177 | A|||B|||False 178 | A|||D|||False 179 | A|||C|||False 180 | B|||C|||False 181 | D|||D|||True 182 | B|||A|||False 183 | C|||C|||True 184 | A|||D|||False 185 | A|||A|||True 186 | A|||C|||False 187 | B|||D|||False 188 | D|||D|||True 189 | D|||B|||False 190 | A|||C|||False 191 | B|||D|||False 192 | A|||C|||False 193 | B|||A|||False 194 | D|||D|||True 195 | D|||C|||False 196 | C|||C|||True 197 | A|||C|||False 198 | B|||D|||False 199 | A|||D|||False 200 | D|||D|||True 201 | A|||C|||False 202 | A|||A|||True 203 | D|||C|||False 204 | B|||C|||False 205 | A|||A|||True 206 | B|||D|||False 207 | A|||B|||False 208 | C|||C|||True 209 | B|||C|||False 210 | A|||D|||False 211 | A|||B|||False 212 | B|||A|||False 213 | D|||D|||True 214 | Average accuracy 0.263 - 儿科学213题 215 | -------------------------------------------------------------------------------- /test_results/gpt3.5turbo_test_results_0512/zero_shot/外科学219题: -------------------------------------------------------------------------------- 1 | C|||D|||False 2 | B|||B|||True 3 | D|||D|||True 4 | D|||B|||False 5 | D|||D|||True 6 | C|||B|||False 7 | B|||B|||True 8 | D|||D|||True 9 | D|||D|||True 10 | C|||C|||True 11 | B|||B|||True 12 | D|||D|||True 13 | D|||B|||False 14 | A|||C|||False 15 | A|||D|||False 16 | D|||D|||True 17 | A|||C|||False 18 | B|||B|||True 19 | B|||C|||False 20 | B|||D|||False 21 | D|||D|||True 22 | D|||D|||True 23 | A|||A|||True 24 | B|||B|||True 25 | B|||B|||True 26 | B|||D|||False 27 | D|||C|||False 28 | D|||D|||True 29 | D|||D|||True 30 | A|||A|||True 31 | B|||B|||True 32 | D|||D|||True 33 | A|||B|||False 34 | B|||C|||False 35 | D|||D|||True 36 | B|||B|||True 37 | C|||B|||False 38 | D|||D|||True 39 | D|||D|||True 40 | A|||D|||False 41 | C|||D|||False 42 | D|||D|||True 43 | B|||B|||True 44 | A|||D|||False 45 | B|||B|||True 46 | B|||D|||False 47 | C|||B|||False 48 | D|||B|||False 49 | B|||D|||False 50 | C|||B|||False 51 | B|||D|||False 52 | B|||B|||True 53 | A|||C|||False 54 | A|||D|||False 55 | B|||D|||False 56 | C|||D|||False 57 | B|||D|||False 58 | D|||A|||False 59 | B|||B|||True 60 | B|||D|||False 61 | C|||B|||False 62 | D|||D|||True 63 | A|||D|||False 64 | A|||A|||True 65 | D|||D|||True 66 | B|||D|||False 67 | D|||A|||False 68 | D|||D|||True 69 | C|||D|||False 70 | C|||C|||True 71 | B|||C|||False 72 | D|||D|||True 73 | C|||D|||False 74 | A|||A|||True 75 | B|||C|||False 76 | B|||A|||False 77 | A|||D|||False 78 | A|||A|||True 79 | B|||C|||False 80 | C|||C|||True 81 | B|||B|||True 82 | D|||D|||True 83 | B|||C|||False 84 | B|||B|||True 85 | D|||D|||True 86 | A|||A|||True 87 | A|||A|||True 88 | A|||A|||True 89 | B|||D|||False 90 | C|||C|||True 91 | B|||C|||False 92 | C|||D|||False 93 | A|||C|||False 94 | D|||B|||False 95 | D|||D|||True 96 | D|||A|||False 97 | B|||B|||True 98 | A|||B|||False 99 | D|||D|||True 100 | B|||B|||True 101 | B|||D|||False 102 | C|||C|||True 103 | A|||B|||False 104 | C|||A|||False 105 | B|||C|||False 106 | B|||B|||True 107 | D|||A|||False 108 | A|||A|||True 109 | A|||A|||True 110 | C|||C|||True 111 | B|||B|||True 112 | B|||C|||False 113 | B|||D|||False 114 | D|||D|||True 115 | A|||B|||False 116 | D|||B|||False 117 | A|||A|||True 118 | B|||D|||False 119 | A|||D|||False 120 | D|||D|||True 121 | C|||C|||True 122 | D|||D|||True 123 | C|||A|||False 124 | D|||D|||True 125 | C|||C|||True 126 | D|||D|||True 127 | B|||A|||False 128 | B|||B|||True 129 | D|||D|||True 130 | D|||B|||False 131 | C|||D|||False 132 | A|||A|||True 133 | B|||A|||False 134 | B|||B|||True 135 | B|||C|||False 136 | D|||A|||False 137 | D|||D|||True 138 | C|||C|||True 139 | B|||B|||True 140 | C|||D|||False 141 | B|||D|||False 142 | A|||B|||False 143 | B|||C|||False 144 | D|||D|||True 145 | B|||A|||False 146 | C|||C|||True 147 | A|||A|||True 148 | B|||B|||True 149 | D|||D|||True 150 | C|||C|||True 151 | B|||B|||True 152 | C|||B|||False 153 | B|||A|||False 154 | B|||B|||True 155 | C|||C|||True 156 | B|||B|||True 157 | A|||A|||True 158 | D|||D|||True 159 | D|||D|||True 160 | D|||D|||True 161 | C|||B|||False 162 | B|||B|||True 163 | C|||C|||True 164 | D|||D|||True 165 | D|||D|||True 166 | D|||D|||True 167 | D|||D|||True 168 | A|||A|||True 169 | D|||D|||True 170 | D|||A|||False 171 | C|||C|||True 172 | D|||D|||True 173 | B|||B|||True 174 | D|||D|||True 175 | D|||D|||True 176 | D|||B|||False 177 | D|||B|||False 178 | D|||D|||True 179 | C|||D|||False 180 | C|||C|||True 181 | D|||D|||True 182 | D|||D|||True 183 | C|||D|||False 184 | B|||B|||True 185 | D|||A|||False 186 | D|||D|||True 187 | D|||D|||True 188 | B|||D|||False 189 | D|||D|||True 190 | B|||C|||False 191 | A|||B|||False 192 | C|||D|||False 193 | A|||A|||True 194 | C|||C|||True 195 | A|||D|||False 196 | D|||A|||False 197 | B|||A|||False 198 | B|||D|||False 199 | D|||D|||True 200 | D|||B|||False 201 | C|||C|||True 202 | B|||B|||True 203 | B|||B|||True 204 | C|||B|||False 205 | D|||D|||True 206 | D|||B|||False 207 | D|||D|||True 208 | A|||ABC|||False 209 | ABC|||ABCD|||False 210 | A|||ABCD|||False 211 | B|||AB|||False 212 | B|||ABCD|||False 213 | C|||ACD|||False 214 | B|||ABD|||False 215 | C|||ABCD|||False 216 | B|||ABC|||False 217 | A|||ACD|||False 218 | D|||ABCD|||False 219 | B|||ABC|||False 220 | Average accuracy 0.525 - 外科学219题 221 | -------------------------------------------------------------------------------- /test_results/bloomz_3b_test_results_0515/zero_shot/外科学219题: -------------------------------------------------------------------------------- 1 | A|||D|||False 2 | D|||B|||False 3 | B|||D|||False 4 | C|||B|||False 5 | D|||D|||True 6 | D|||B|||False 7 | C|||B|||False 8 | D|||D|||True 9 | D|||D|||True 10 | C|||C|||True 11 | A|||B|||False 12 | A|||D|||False 13 | D|||B|||False 14 | A|||C|||False 15 | D|||D|||True 16 | B|||D|||False 17 | A|||C|||False 18 | B|||B|||True 19 | C|||C|||True 20 | D|||D|||True 21 | D|||D|||True 22 | D|||D|||True 23 | A|||A|||True 24 | B|||B|||True 25 | A|||B|||False 26 | D|||D|||True 27 | D|||C|||False 28 | D|||D|||True 29 | D|||D|||True 30 | D|||A|||False 31 | D|||B|||False 32 | B|||D|||False 33 | A|||B|||False 34 | D|||C|||False 35 | A|||D|||False 36 | A|||B|||False 37 | C|||B|||False 38 | D|||D|||True 39 | C|||D|||False 40 | B|||D|||False 41 | D|||D|||True 42 | C|||D|||False 43 | B|||B|||True 44 | A|||D|||False 45 | D|||B|||False 46 | A|||D|||False 47 | B|||B|||True 48 | D|||B|||False 49 | B|||D|||False 50 | A|||B|||False 51 | D|||D|||True 52 | B|||B|||True 53 | A|||C|||False 54 | D|||D|||True 55 | D|||D|||True 56 | D|||D|||True 57 | B|||D|||False 58 | D|||A|||False 59 | D|||B|||False 60 | D|||D|||True 61 | C|||B|||False 62 | D|||D|||True 63 | D|||D|||True 64 | C|||A|||False 65 | D|||D|||True 66 | B|||D|||False 67 | B|||A|||False 68 | A|||D|||False 69 | B|||D|||False 70 | A|||C|||False 71 | A|||C|||False 72 | D|||D|||True 73 | D|||D|||True 74 | B|||A|||False 75 | A|||C|||False 76 | B|||A|||False 77 | D|||D|||True 78 | D|||A|||False 79 | D|||C|||False 80 | A|||C|||False 81 | D|||B|||False 82 | D|||D|||True 83 | D|||C|||False 84 | B|||B|||True 85 | D|||D|||True 86 | A|||A|||True 87 | C|||A|||False 88 | A|||A|||True 89 | A|||D|||False 90 | A|||C|||False 91 | C|||C|||True 92 | D|||D|||True 93 | D|||C|||False 94 | D|||B|||False 95 | B|||D|||False 96 | A|||A|||True 97 | B|||B|||True 98 | A|||B|||False 99 | D|||D|||True 100 | B|||B|||True 101 | A|||D|||False 102 | A|||C|||False 103 | A|||B|||False 104 | D|||A|||False 105 | C|||C|||True 106 | D|||B|||False 107 | D|||A|||False 108 | A|||A|||True 109 | A|||A|||True 110 | B|||C|||False 111 | B|||B|||True 112 | C|||C|||True 113 | D|||D|||True 114 | A|||D|||False 115 | A|||B|||False 116 | D|||B|||False 117 | D|||A|||False 118 | C|||D|||False 119 | D|||D|||True 120 | D|||D|||True 121 | D|||C|||False 122 | D|||D|||True 123 | A|||A|||True 124 | D|||D|||True 125 | C|||C|||True 126 | D|||D|||True 127 | C|||A|||False 128 | C|||B|||False 129 | D|||D|||True 130 | D|||B|||False 131 | C|||D|||False 132 | D|||A|||False 133 | D|||A|||False 134 | D|||B|||False 135 | D|||C|||False 136 | B|||A|||False 137 | D|||D|||True 138 | C|||C|||True 139 | D|||B|||False 140 | A|||D|||False 141 | D|||D|||True 142 | A|||B|||False 143 | A|||C|||False 144 | D|||D|||True 145 | A|||A|||True 146 | A|||C|||False 147 | A|||A|||True 148 | A|||B|||False 149 | D|||D|||True 150 | C|||C|||True 151 | C|||B|||False 152 | A|||B|||False 153 | D|||A|||False 154 | A|||B|||False 155 | D|||C|||False 156 | D|||B|||False 157 | B|||A|||False 158 | A|||D|||False 159 | D|||D|||True 160 | A|||D|||False 161 | B|||B|||True 162 | A|||B|||False 163 | C|||C|||True 164 | D|||D|||True 165 | D|||D|||True 166 | A|||D|||False 167 | D|||D|||True 168 | C|||A|||False 169 | D|||D|||True 170 | D|||A|||False 171 | A|||C|||False 172 | D|||D|||True 173 | B|||B|||True 174 | D|||D|||True 175 | D|||D|||True 176 | D|||B|||False 177 | A|||B|||False 178 | D|||D|||True 179 | A|||D|||False 180 | D|||C|||False 181 | A|||D|||False 182 | D|||D|||True 183 | D|||D|||True 184 | A|||B|||False 185 | D|||A|||False 186 | D|||D|||True 187 | 未成功回答|||D|||False 188 | D|||D|||True 189 | D|||D|||True 190 | D|||C|||False 191 | A|||B|||False 192 | D|||D|||True 193 | A|||A|||True 194 | D|||C|||False 195 | A|||D|||False 196 | D|||A|||False 197 | D|||A|||False 198 | C|||D|||False 199 | D|||D|||True 200 | B|||B|||True 201 | D|||C|||False 202 | D|||B|||False 203 | D|||B|||False 204 | D|||B|||False 205 | D|||D|||True 206 | D|||B|||False 207 | D|||D|||True 208 | A|||ABC|||False 209 | A|||ABCD|||False 210 | D|||ABCD|||False 211 | A|||AB|||False 212 | C|||ABCD|||False 213 | C|||ACD|||False 214 | A|||ABD|||False 215 | A|||ABCD|||False 216 | D|||ABC|||False 217 | A|||ACD|||False 218 | D|||ABCD|||False 219 | D|||ABC|||False 220 | Average accuracy 0.397 - 外科学219题 221 | -------------------------------------------------------------------------------- /test_results/bloomz_560m_test_results_0514/zero_shot/外科学219题: -------------------------------------------------------------------------------- 1 | D|||D|||True 2 | D|||B|||False 3 | D|||D|||True 4 | D|||B|||False 5 | D|||D|||True 6 | D|||B|||False 7 | D|||B|||False 8 | D|||D|||True 9 | C|||D|||False 10 | D|||C|||False 11 | D|||B|||False 12 | D|||D|||True 13 | D|||B|||False 14 | D|||C|||False 15 | D|||D|||True 16 | D|||D|||True 17 | C|||C|||True 18 | C|||B|||False 19 | D|||C|||False 20 | D|||D|||True 21 | D|||D|||True 22 | D|||D|||True 23 | D|||A|||False 24 | D|||B|||False 25 | D|||B|||False 26 | D|||D|||True 27 | D|||C|||False 28 | D|||D|||True 29 | D|||D|||True 30 | D|||A|||False 31 | D|||B|||False 32 | D|||D|||True 33 | D|||B|||False 34 | D|||C|||False 35 | D|||D|||True 36 | D|||B|||False 37 | D|||B|||False 38 | D|||D|||True 39 | D|||D|||True 40 | D|||D|||True 41 | D|||D|||True 42 | D|||D|||True 43 | D|||B|||False 44 | D|||D|||True 45 | D|||B|||False 46 | D|||D|||True 47 | C|||B|||False 48 | D|||B|||False 49 | D|||D|||True 50 | D|||B|||False 51 | D|||D|||True 52 | D|||B|||False 53 | D|||C|||False 54 | D|||D|||True 55 | C|||D|||False 56 | C|||D|||False 57 | D|||D|||True 58 | C|||A|||False 59 | D|||B|||False 60 | D|||D|||True 61 | D|||B|||False 62 | D|||D|||True 63 | D|||D|||True 64 | D|||A|||False 65 | D|||D|||True 66 | D|||D|||True 67 | D|||A|||False 68 | C|||D|||False 69 | C|||D|||False 70 | D|||C|||False 71 | D|||C|||False 72 | D|||D|||True 73 | D|||D|||True 74 | D|||A|||False 75 | D|||C|||False 76 | D|||A|||False 77 | D|||D|||True 78 | D|||A|||False 79 | D|||C|||False 80 | D|||C|||False 81 | D|||B|||False 82 | D|||D|||True 83 | D|||C|||False 84 | D|||B|||False 85 | D|||D|||True 86 | D|||A|||False 87 | D|||A|||False 88 | D|||A|||False 89 | D|||D|||True 90 | D|||C|||False 91 | D|||C|||False 92 | D|||D|||True 93 | D|||C|||False 94 | D|||B|||False 95 | D|||D|||True 96 | D|||A|||False 97 | D|||B|||False 98 | D|||B|||False 99 | D|||D|||True 100 | D|||B|||False 101 | C|||D|||False 102 | D|||C|||False 103 | D|||B|||False 104 | D|||A|||False 105 | D|||C|||False 106 | D|||B|||False 107 | D|||A|||False 108 | D|||A|||False 109 | D|||A|||False 110 | D|||C|||False 111 | D|||B|||False 112 | C|||C|||True 113 | C|||D|||False 114 | D|||D|||True 115 | D|||B|||False 116 | C|||B|||False 117 | D|||A|||False 118 | D|||D|||True 119 | D|||D|||True 120 | D|||D|||True 121 | D|||C|||False 122 | D|||D|||True 123 | D|||A|||False 124 | D|||D|||True 125 | D|||C|||False 126 | D|||D|||True 127 | D|||A|||False 128 | D|||B|||False 129 | D|||D|||True 130 | D|||B|||False 131 | D|||D|||True 132 | D|||A|||False 133 | D|||A|||False 134 | D|||B|||False 135 | D|||C|||False 136 | C|||A|||False 137 | D|||D|||True 138 | D|||C|||False 139 | C|||B|||False 140 | C|||D|||False 141 | D|||D|||True 142 | D|||B|||False 143 | C|||C|||True 144 | C|||D|||False 145 | C|||A|||False 146 | D|||C|||False 147 | C|||A|||False 148 | D|||B|||False 149 | D|||D|||True 150 | C|||C|||True 151 | D|||B|||False 152 | D|||B|||False 153 | C|||A|||False 154 | D|||B|||False 155 | C|||C|||True 156 | D|||B|||False 157 | C|||A|||False 158 | D|||D|||True 159 | D|||D|||True 160 | D|||D|||True 161 | D|||B|||False 162 | C|||B|||False 163 | D|||C|||False 164 | D|||D|||True 165 | D|||D|||True 166 | D|||D|||True 167 | D|||D|||True 168 | D|||A|||False 169 | D|||D|||True 170 | D|||A|||False 171 | D|||C|||False 172 | D|||D|||True 173 | D|||B|||False 174 | D|||D|||True 175 | D|||D|||True 176 | C|||B|||False 177 | D|||B|||False 178 | D|||D|||True 179 | D|||D|||True 180 | D|||C|||False 181 | D|||D|||True 182 | C|||D|||False 183 | D|||D|||True 184 | C|||B|||False 185 | C|||A|||False 186 | D|||D|||True 187 | D|||D|||True 188 | D|||D|||True 189 | C|||D|||False 190 | D|||C|||False 191 | D|||B|||False 192 | D|||D|||True 193 | D|||A|||False 194 | D|||C|||False 195 | D|||D|||True 196 | D|||A|||False 197 | C|||A|||False 198 | D|||D|||True 199 | C|||D|||False 200 | D|||B|||False 201 | D|||C|||False 202 | D|||B|||False 203 | C|||B|||False 204 | D|||B|||False 205 | D|||D|||True 206 | C|||B|||False 207 | D|||D|||True 208 | D|||ABC|||False 209 | D|||ABCD|||False 210 | D|||ABCD|||False 211 | D|||AB|||False 212 | D|||ABCD|||False 213 | C|||ACD|||False 214 | D|||ABD|||False 215 | D|||ABCD|||False 216 | D|||ABC|||False 217 | D|||ACD|||False 218 | C|||ABCD|||False 219 | D|||ABC|||False 220 | Average accuracy 0.365 - 外科学219题 221 | -------------------------------------------------------------------------------- /test_results/bloomz_7b1_mt_test_results_0515/zero_shot/外科学219题: -------------------------------------------------------------------------------- 1 | B|||D|||False 2 | B|||B|||True 3 | B|||D|||False 4 | A|||B|||False 5 | D|||D|||True 6 | A|||B|||False 7 | B|||B|||True 8 | B|||D|||False 9 | B|||D|||False 10 | C|||C|||True 11 | B|||B|||True 12 | A|||D|||False 13 | B|||B|||True 14 | A|||C|||False 15 | A|||D|||False 16 | B|||D|||False 17 | C|||C|||True 18 | B|||B|||True 19 | C|||C|||True 20 | B|||D|||False 21 | A|||D|||False 22 | C|||D|||False 23 | A|||A|||True 24 | B|||B|||True 25 | B|||B|||True 26 | B|||D|||False 27 | A|||C|||False 28 | D|||D|||True 29 | D|||D|||True 30 | B|||A|||False 31 | A|||B|||False 32 | B|||D|||False 33 | B|||B|||True 34 | B|||C|||False 35 | D|||D|||True 36 | A|||B|||False 37 | A|||B|||False 38 | A|||D|||False 39 | A|||D|||False 40 | B|||D|||False 41 | A|||D|||False 42 | D|||D|||True 43 | B|||B|||True 44 | B|||D|||False 45 | A|||B|||False 46 | A|||D|||False 47 | A|||B|||False 48 | B|||B|||True 49 | B|||D|||False 50 | A|||B|||False 51 | C|||D|||False 52 | B|||B|||True 53 | A|||C|||False 54 | B|||D|||False 55 | D|||D|||True 56 | C|||D|||False 57 | A|||D|||False 58 | A|||A|||True 59 | B|||B|||True 60 | B|||D|||False 61 | A|||B|||False 62 | A|||D|||False 63 | A|||D|||False 64 | A|||A|||True 65 | D|||D|||True 66 | B|||D|||False 67 | B|||A|||False 68 | D|||D|||True 69 | B|||D|||False 70 | A|||C|||False 71 | A|||C|||False 72 | D|||D|||True 73 | A|||D|||False 74 | A|||A|||True 75 | A|||C|||False 76 | B|||A|||False 77 | D|||D|||True 78 | A|||A|||True 79 | C|||C|||True 80 | A|||C|||False 81 | B|||B|||True 82 | D|||D|||True 83 | C|||C|||True 84 | B|||B|||True 85 | A|||D|||False 86 | A|||A|||True 87 | A|||A|||True 88 | A|||A|||True 89 | D|||D|||True 90 | A|||C|||False 91 | C|||C|||True 92 | B|||D|||False 93 | A|||C|||False 94 | A|||B|||False 95 | B|||D|||False 96 | C|||A|||False 97 | B|||B|||True 98 | A|||B|||False 99 | D|||D|||True 100 | A|||B|||False 101 | A|||D|||False 102 | C|||C|||True 103 | B|||B|||True 104 | A|||A|||True 105 | B|||C|||False 106 | C|||B|||False 107 | A|||A|||True 108 | A|||A|||True 109 | A|||A|||True 110 | D|||C|||False 111 | B|||B|||True 112 | A|||C|||False 113 | A|||D|||False 114 | A|||D|||False 115 | A|||B|||False 116 | D|||B|||False 117 | A|||A|||True 118 | A|||D|||False 119 | C|||D|||False 120 | D|||D|||True 121 | D|||C|||False 122 | B|||D|||False 123 | A|||A|||True 124 | D|||D|||True 125 | A|||C|||False 126 | A|||D|||False 127 | C|||A|||False 128 | A|||B|||False 129 | D|||D|||True 130 | B|||B|||True 131 | C|||D|||False 132 | B|||A|||False 133 | B|||A|||False 134 | B|||B|||True 135 | D|||C|||False 136 | C|||A|||False 137 | D|||D|||True 138 | B|||C|||False 139 | D|||B|||False 140 | A|||D|||False 141 | D|||D|||True 142 | A|||B|||False 143 | D|||C|||False 144 | A|||D|||False 145 | A|||A|||True 146 | C|||C|||True 147 | A|||A|||True 148 | C|||B|||False 149 | D|||D|||True 150 | A|||C|||False 151 | A|||B|||False 152 | C|||B|||False 153 | D|||A|||False 154 | D|||B|||False 155 | A|||C|||False 156 | B|||B|||True 157 | B|||A|||False 158 | C|||D|||False 159 | A|||D|||False 160 | B|||D|||False 161 | A|||B|||False 162 | A|||B|||False 163 | A|||C|||False 164 | B|||D|||False 165 | D|||D|||True 166 | A|||D|||False 167 | B|||D|||False 168 | B|||A|||False 169 | D|||D|||True 170 | A|||A|||True 171 | A|||C|||False 172 | A|||D|||False 173 | A|||B|||False 174 | D|||D|||True 175 | D|||D|||True 176 | C|||B|||False 177 | C|||B|||False 178 | C|||D|||False 179 | A|||D|||False 180 | A|||C|||False 181 | D|||D|||True 182 | A|||D|||False 183 | C|||D|||False 184 | B|||B|||True 185 | C|||A|||False 186 | D|||D|||True 187 | D|||D|||True 188 | D|||D|||True 189 | A|||D|||False 190 | B|||C|||False 191 | B|||B|||True 192 | D|||D|||True 193 | A|||A|||True 194 | B|||C|||False 195 | B|||D|||False 196 | B|||A|||False 197 | A|||A|||True 198 | D|||D|||True 199 | D|||D|||True 200 | A|||B|||False 201 | C|||C|||True 202 | A|||B|||False 203 | C|||B|||False 204 | D|||B|||False 205 | D|||D|||True 206 | D|||B|||False 207 | D|||D|||True 208 | B|||ABC|||False 209 | A|||ABCD|||False 210 | D|||ABCD|||False 211 | A|||AB|||False 212 | B|||ABCD|||False 213 | C|||ACD|||False 214 | B|||ABD|||False 215 | A|||ABCD|||False 216 | A|||ABC|||False 217 | A|||ACD|||False 218 | C|||ABCD|||False 219 | C|||ABC|||False 220 | Average accuracy 0.374 - 外科学219题 221 | --------------------------------------------------------------------------------