├── .gitignore ├── LICENSE ├── README.md ├── assets ├── agi_eval_data │ ├── few_shot_prompts.csv │ └── v1 │ │ ├── LICENSE │ │ ├── aqua-rat.jsonl │ │ ├── gaokao-biology.jsonl │ │ ├── gaokao-chemistry.jsonl │ │ ├── gaokao-chinese.jsonl │ │ ├── gaokao-english.jsonl │ │ ├── gaokao-geography.jsonl │ │ ├── gaokao-history.jsonl │ │ ├── gaokao-mathcloze.jsonl │ │ ├── gaokao-mathqa.jsonl │ │ ├── gaokao-physics.jsonl │ │ ├── jec-qa-ca.jsonl │ │ ├── jec-qa-kd.jsonl │ │ ├── logiqa-en.jsonl │ │ ├── logiqa-zh.jsonl │ │ ├── lsat-ar.jsonl │ │ ├── lsat-lr.jsonl │ │ ├── lsat-rc.jsonl │ │ ├── math.jsonl │ │ ├── sat-en-without-passage.jsonl │ │ ├── sat-en.jsonl │ │ └── sat-math.jsonl ├── bleu_data │ └── data1 │ │ └── samples.json ├── ceval_data │ ├── ceval_categories.json │ ├── dev │ │ ├── accountant_dev.csv │ │ ├── advanced_mathematics_dev.csv │ │ ├── art_studies_dev.csv │ │ ├── basic_medicine_dev.csv │ │ ├── business_administration_dev.csv │ │ ├── chinese_language_and_literature_dev.csv │ │ ├── civil_servant_dev.csv │ │ ├── clinical_medicine_dev.csv │ │ ├── college_chemistry_dev.csv │ │ ├── college_economics_dev.csv │ │ ├── college_physics_dev.csv │ │ ├── college_programming_dev.csv │ │ ├── computer_architecture_dev.csv │ │ ├── computer_network_dev.csv │ │ ├── discrete_mathematics_dev.csv │ │ ├── education_science_dev.csv │ │ ├── electrical_engineer_dev.csv │ │ ├── environmental_impact_assessment_engineer_dev.csv │ │ ├── fire_engineer_dev.csv │ │ ├── high_school_biology_dev.csv │ │ ├── high_school_chemistry_dev.csv │ │ ├── high_school_chinese_dev.csv │ │ ├── high_school_geography_dev.csv │ │ ├── high_school_history_dev.csv │ │ ├── high_school_mathematics_dev.csv │ │ ├── high_school_physics_dev.csv │ │ ├── high_school_politics_dev.csv │ │ ├── ideological_and_moral_cultivation_dev.csv │ │ ├── law_dev.csv │ │ ├── legal_professional_dev.csv │ │ ├── logic_dev.csv │ │ ├── mao_zedong_thought_dev.csv │ │ ├── marxism_dev.csv │ │ ├── metrology_engineer_dev.csv │ │ ├── middle_school_biology_dev.csv │ │ ├── middle_school_chemistry_dev.csv │ │ ├── middle_school_geography_dev.csv │ │ ├── middle_school_history_dev.csv │ │ ├── middle_school_mathematics_dev.csv │ │ ├── middle_school_physics_dev.csv │ │ ├── middle_school_politics_dev.csv │ │ ├── modern_chinese_history_dev.csv │ │ ├── operating_system_dev.csv │ │ ├── physician_dev.csv │ │ ├── plant_protection_dev.csv │ │ ├── probability_and_statistics_dev.csv │ │ ├── professional_tour_guide_dev.csv │ │ ├── sports_science_dev.csv │ │ ├── tax_accountant_dev.csv │ │ ├── teacher_qualification_dev.csv │ │ ├── urban_and_rural_planner_dev.csv │ │ └── veterinary_medicine_dev.csv │ ├── test │ │ ├── accountant_test.csv │ │ ├── advanced_mathematics_test.csv │ │ ├── art_studies_test.csv │ │ ├── basic_medicine_test.csv │ │ ├── business_administration_test.csv │ │ ├── chinese_language_and_literature_test.csv │ │ ├── civil_servant_test.csv │ │ ├── clinical_medicine_test.csv │ │ ├── college_chemistry_test.csv │ │ ├── college_economics_test.csv │ │ ├── college_physics_test.csv │ │ ├── college_programming_test.csv │ │ ├── computer_architecture_test.csv │ │ ├── computer_network_test.csv │ │ ├── discrete_mathematics_test.csv │ │ ├── education_science_test.csv │ │ ├── electrical_engineer_test.csv │ │ ├── environmental_impact_assessment_engineer_test.csv │ │ ├── fire_engineer_test.csv │ │ ├── high_school_biology_test.csv │ │ ├── high_school_chemistry_test.csv │ │ ├── high_school_chinese_test.csv │ │ ├── high_school_geography_test.csv │ │ ├── high_school_history_test.csv │ │ ├── high_school_mathematics_test.csv │ │ ├── high_school_physics_test.csv │ │ ├── high_school_politics_test.csv │ │ ├── ideological_and_moral_cultivation_test.csv │ │ ├── law_test.csv │ │ ├── legal_professional_test.csv │ │ ├── logic_test.csv │ │ ├── mao_zedong_thought_test.csv │ │ ├── marxism_test.csv │ │ ├── metrology_engineer_test.csv │ │ ├── middle_school_biology_test.csv │ │ ├── middle_school_chemistry_test.csv │ │ ├── middle_school_geography_test.csv │ │ ├── middle_school_history_test.csv │ │ ├── middle_school_mathematics_test.csv │ │ ├── middle_school_physics_test.csv │ │ ├── middle_school_politics_test.csv │ │ ├── modern_chinese_history_test.csv │ │ ├── operating_system_test.csv │ │ ├── physician_test.csv │ │ ├── plant_protection_test.csv │ │ ├── probability_and_statistics_test.csv │ │ ├── professional_tour_guide_test.csv │ │ ├── sports_science_test.csv │ │ ├── tax_accountant_test.csv │ │ ├── teacher_qualification_test.csv │ │ ├── urban_and_rural_planner_test.csv │ │ └── veterinary_medicine_test.csv │ └── val │ │ ├── accountant_val.csv │ │ ├── advanced_mathematics_val.csv │ │ ├── art_studies_val.csv │ │ ├── basic_medicine_val.csv │ │ ├── business_administration_val.csv │ │ ├── chinese_language_and_literature_val.csv │ │ ├── civil_servant_val.csv │ │ ├── clinical_medicine_val.csv │ │ ├── college_chemistry_val.csv │ │ ├── college_economics_val.csv │ │ ├── college_physics_val.csv │ │ ├── college_programming_val.csv │ │ ├── computer_architecture_val.csv │ │ ├── computer_network_val.csv │ │ ├── discrete_mathematics_val.csv │ │ ├── education_science_val.csv │ │ ├── electrical_engineer_val.csv │ │ ├── environmental_impact_assessment_engineer_val.csv │ │ ├── fire_engineer_val.csv │ │ ├── high_school_biology_val.csv │ │ ├── high_school_chemistry_val.csv │ │ ├── high_school_chinese_val.csv │ │ ├── high_school_geography_val.csv │ │ ├── high_school_history_val.csv │ │ ├── high_school_mathematics_val.csv │ │ ├── high_school_physics_val.csv │ │ ├── high_school_politics_val.csv │ │ ├── ideological_and_moral_cultivation_val.csv │ │ ├── law_val.csv │ │ ├── legal_professional_val.csv │ │ ├── logic_val.csv │ │ ├── mao_zedong_thought_val.csv │ │ ├── marxism_val.csv │ │ ├── metrology_engineer_val.csv │ │ ├── middle_school_biology_val.csv │ │ ├── middle_school_chemistry_val.csv │ │ ├── middle_school_geography_val.csv │ │ ├── middle_school_history_val.csv │ │ ├── middle_school_mathematics_val.csv │ │ ├── middle_school_physics_val.csv │ │ ├── middle_school_politics_val.csv │ │ ├── modern_chinese_history_val.csv │ │ ├── operating_system_val.csv │ │ ├── physician_val.csv │ │ ├── plant_protection_val.csv │ │ ├── probability_and_statistics_val.csv │ │ ├── professional_tour_guide_val.csv │ │ ├── sports_science_val.csv │ │ ├── tax_accountant_val.csv │ │ ├── teacher_qualification_val.csv │ │ ├── urban_and_rural_planner_val.csv │ │ └── veterinary_medicine_val.csv ├── cmmlu_data │ ├── cmmlu_categories.py │ ├── dev │ │ ├── agronomy.csv │ │ ├── anatomy.csv │ │ ├── ancient_chinese.csv │ │ ├── arts.csv │ │ ├── astronomy.csv │ │ ├── business_ethics.csv │ │ ├── chinese_civil_service_exam.csv │ │ ├── chinese_driving_rule.csv │ │ ├── chinese_food_culture.csv │ │ ├── chinese_foreign_policy.csv │ │ ├── chinese_history.csv │ │ ├── chinese_literature.csv │ │ ├── chinese_teacher_qualification.csv │ │ ├── clinical_knowledge.csv │ │ ├── college_actuarial_science.csv │ │ ├── college_education.csv │ │ ├── college_engineering_hydrology.csv │ │ ├── college_law.csv │ │ ├── college_mathematics.csv │ │ ├── college_medical_statistics.csv │ │ ├── college_medicine.csv │ │ ├── computer_science.csv │ │ ├── computer_security.csv │ │ ├── conceptual_physics.csv │ │ ├── construction_project_management.csv │ │ ├── economics.csv │ │ ├── education.csv │ │ ├── electrical_engineering.csv │ │ ├── elementary_chinese.csv │ │ ├── elementary_commonsense.csv │ │ ├── elementary_information_and_technology.csv │ │ ├── elementary_mathematics.csv │ │ ├── ethnology.csv │ │ ├── food_science.csv │ │ ├── genetics.csv │ │ ├── global_facts.csv │ │ ├── high_school_biology.csv │ │ ├── high_school_chemistry.csv │ │ ├── high_school_geography.csv │ │ ├── high_school_mathematics.csv │ │ ├── high_school_physics.csv │ │ ├── high_school_politics.csv │ │ ├── human_sexuality.csv │ │ ├── international_law.csv │ │ ├── journalism.csv │ │ ├── jurisprudence.csv │ │ ├── legal_and_moral_basis.csv │ │ ├── logical.csv │ │ ├── machine_learning.csv │ │ ├── management.csv │ │ ├── marketing.csv │ │ ├── marxist_theory.csv │ │ ├── modern_chinese.csv │ │ ├── nutrition.csv │ │ ├── philosophy.csv │ │ ├── professional_accounting.csv │ │ ├── professional_law.csv │ │ ├── professional_medicine.csv │ │ ├── professional_psychology.csv │ │ ├── public_relations.csv │ │ ├── security_study.csv │ │ ├── sociology.csv │ │ ├── sports_science.csv │ │ ├── traditional_chinese_medicine.csv │ │ ├── virology.csv │ │ ├── world_history.csv │ │ └── world_religions.csv │ └── test │ │ ├── agronomy.csv │ │ ├── anatomy.csv │ │ ├── ancient_chinese.csv │ │ ├── arts.csv │ │ ├── astronomy.csv │ │ ├── business_ethics.csv │ │ ├── chinese_civil_service_exam.csv │ │ ├── chinese_driving_rule.csv │ │ ├── chinese_food_culture.csv │ │ ├── chinese_foreign_policy.csv │ │ ├── chinese_history.csv │ │ ├── chinese_literature.csv │ │ ├── chinese_teacher_qualification.csv │ │ ├── clinical_knowledge.csv │ │ ├── college_actuarial_science.csv │ │ ├── college_education.csv │ │ ├── college_engineering_hydrology.csv │ │ ├── college_law.csv │ │ ├── college_mathematics.csv │ │ ├── college_medical_statistics.csv │ │ ├── college_medicine.csv │ │ ├── computer_science.csv │ │ ├── computer_security.csv │ │ ├── conceptual_physics.csv │ │ ├── construction_project_management.csv │ │ ├── economics.csv │ │ ├── education.csv │ │ ├── electrical_engineering.csv │ │ ├── elementary_chinese.csv │ │ ├── elementary_commonsense.csv │ │ ├── elementary_information_and_technology.csv │ │ ├── elementary_mathematics.csv │ │ ├── ethnology.csv │ │ ├── food_science.csv │ │ ├── genetics.csv │ │ ├── global_facts.csv │ │ ├── high_school_biology.csv │ │ ├── high_school_chemistry.csv │ │ ├── high_school_geography.csv │ │ ├── high_school_mathematics.csv │ │ ├── high_school_physics.csv │ │ ├── high_school_politics.csv │ │ ├── human_sexuality.csv │ │ ├── international_law.csv │ │ ├── journalism.csv │ │ ├── jurisprudence.csv │ │ ├── legal_and_moral_basis.csv │ │ ├── logical.csv │ │ ├── machine_learning.csv │ │ ├── management.csv │ │ ├── marketing.csv │ │ ├── marxist_theory.csv │ │ ├── modern_chinese.csv │ │ ├── nutrition.csv │ │ ├── philosophy.csv │ │ ├── professional_accounting.csv │ │ ├── professional_law.csv │ │ ├── professional_medicine.csv │ │ ├── professional_psychology.csv │ │ ├── public_relations.csv │ │ ├── security_study.csv │ │ ├── sociology.csv │ │ ├── sports_science.csv │ │ ├── traditional_chinese_medicine.csv │ │ ├── virology.csv │ │ ├── world_history.csv │ │ └── world_religions.csv ├── gaokao_bench_data │ ├── Fill-in-the-blank_Questions │ │ ├── 2010-2022_Chinese_Language_Famous_Passages_and_Sentences_Dictation.json │ │ ├── 2010-2022_Math_II_Fill-in-the-Blank.json │ │ ├── 2010-2022_Math_I_Fill-in-the-Blank.json │ │ └── 2014-2022_English_Language_Cloze_Passage.json │ ├── Multiple-choice_Questions │ │ ├── 2010-2013_English_MCQs.json │ │ ├── 2010-2022_Biology_MCQs.json │ │ ├── 2010-2022_Chemistry_MCQs.json │ │ ├── 2010-2022_Chinese_Lang_and_Usage_MCQs.json │ │ ├── 2010-2022_Chinese_Modern_Lit.json │ │ ├── 2010-2022_English_Fill_in_Blanks.json │ │ ├── 2010-2022_English_Reading_Comp.json │ │ ├── 2010-2022_Geography_MCQs.json │ │ ├── 2010-2022_History_MCQs.json │ │ ├── 2010-2022_Math_II_MCQs.json │ │ ├── 2010-2022_Math_I_MCQs.json │ │ ├── 2010-2022_Physics_MCQs.json │ │ ├── 2010-2022_Political_Science_MCQs.json │ │ └── 2012-2022_English_Cloze_Test.json │ └── Open-ended_Questions │ │ ├── 2010-2022_Biology_Open-ended_Questions.json │ │ ├── 2010-2022_Chemistry_Open-ended_Questions.json │ │ ├── 2010-2022_Chinese_Language_Ancient_Poetry_Reading.json │ │ ├── 2010-2022_Chinese_Language_Classical_Chinese_Reading.json │ │ ├── 2010-2022_Chinese_Language_Language_and_Writing_Skills_Open-ended_Questions.json │ │ ├── 2010-2022_Chinese_Language_Literary_Text_Reading.json │ │ ├── 2010-2022_Chinese_Language_Practical_Text_Reading.json │ │ ├── 2010-2022_Geography_Open-ended_Questions.json │ │ ├── 2010-2022_History_Open-ended_Questions.json │ │ ├── 2010-2022_Math_II_Open-ended_Questions.json │ │ ├── 2010-2022_Math_I_Open-ended_Questions.json │ │ ├── 2010-2022_Physics_Open-ended_Questions.json │ │ ├── 2010-2022_Political_Science_Open-ended_Questions.json │ │ └── 2012-2022_English_Language_Error_Correction.json ├── imgs │ ├── 1.png │ ├── 2.png │ ├── img.jpg │ ├── img_0.jpg │ ├── img_1.jpg │ ├── img_2.jpg │ ├── img_3.jpg │ ├── img_avg.jpg │ └── img_avg_top5.jpg ├── rouge_data │ └── data1 │ │ └── samples.json └── struct_data │ └── data1 │ └── samples.json ├── auto_eval ├── __init__.py ├── config.py ├── custom_match │ ├── __init__.py │ ├── bleu_match.py │ ├── choice_match.py │ ├── other │ │ ├── __init__.py │ │ └── postprocess_result.py │ ├── rouge_match.py │ └── struct_match.py ├── data_utils.py ├── model_result │ ├── ceval │ │ ├── Baichuan-13B-Chat │ │ │ └── metric.json │ │ ├── Baichuan2-13B-Chat │ │ │ └── metric.json │ │ ├── Baichuan2-7B-Chat │ │ │ └── metric.json │ │ ├── CausalLM-14B │ │ │ └── metric.json │ │ ├── Qwen-1_8B-Chat │ │ │ └── metric.json │ │ ├── Qwen-72B-Chat │ │ │ └── metric.json │ │ ├── XVERSE-13B-Chat │ │ │ └── metric.json │ │ ├── Yi-34B-Chat │ │ │ └── metric.json │ │ ├── chatglm2-6b │ │ │ └── metric.json │ │ ├── chatglm3-6b │ │ │ └── metric.json │ │ ├── internlm-chat-20b │ │ │ └── metric.json │ │ ├── internlm-chat-7b │ │ │ └── metric.json │ │ ├── moss-moon-003-sft-int4 │ │ │ └── metric.json │ │ ├── openbubddy-70b-hf-int4 │ │ │ └── metric.json │ │ ├── qwen-14b-chat │ │ │ └── metric.json │ │ ├── qwen-7b-chat-1.1 │ │ │ └── metric.json │ │ ├── qwen-7b-chat-int4 │ │ │ └── metric.json │ │ └── tigerbot-70b-chat │ │ │ └── metric.json │ ├── draw_ceval.py │ └── draw_ceval2.py ├── mymetrics.py ├── run_bleu.py ├── run_ceval.py ├── run_cmmlu.py ├── run_fineval.py ├── run_law_disc.py ├── run_law_eval.py ├── run_mmlu.py ├── run_rouge.py └── run_struct.py ├── registry └── completion_fns │ └── langchain_aigc_serving.yaml └── requirements.txt /.gitignore: -------------------------------------------------------------------------------- 1 | /.idea 2 | /dist 3 | /build 4 | /registry/modelgraded 5 | /registry/data 6 | /registry/eval_sets 7 | /registry/evals 8 | /src/aigc_evals.egg-info 9 | /auto_eval/__pycache__ 10 | /auto_eval/custom_match/__pycache__ 11 | /src 12 | /outputs/ceval 13 | /outputs/mmlu 14 | /outputs/cmmlu 15 | /outputs/zh-en -------------------------------------------------------------------------------- /assets/ceval_data/dev/accountant_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,甲公司是国内一家上市公司。甲公司对其各子公司实行全面预算管理，并通常使用增量预算方式进行战略控制，子公司预算需要经甲公司预算管理委员会批准后执行。2015年10月，甲公司投资了一个新的项目乙(子公司)。2015年11月，甲公司启动2016年度预算编制工作，此时甲公司应要求乙公司编制____。,增量预算,零基预算,固定预算,弹性预算,B,1. 乙公司属于甲公司全新的子公司，在启动2016年度预算编制工作时没有可以参考的基数，预算编制者必须根据自己的经验和判断，加上对周围环境变化的预期来做预算。因此，乙公司应编制零基预算。 3 | 1,债务人转让全部合同义务的，下列说法不正确的是____。,须债权人同意方可进行,新债务人可主张原债务人对债权人的抗辩,债务人转移债务的，原债务人对债权人享有债权的，新债务人可以向债权人主张抵销,非专属于原债务人自身的从债务，一并转让给新债务人,C,"1. 首先，债务人将债务的全部或者部分转移给第三人的，应当经债权人同意，因此选项A正确。 4 | 2. 其次，债务人转移债务的，新债务人可以主张原债务人对债权人的抗辩；原债务人对债权入享有债权的，新债务人不得向债权人主张抵销，因此选项B正确，选项C错误。 5 | 3. 然后，债务人转移债务的，新债务人应当承担与主债务有关的从债务，但是该从债务专属于原债务人自身的除外，因此选项D正确。" 6 | 2,某公司2012年以150万元的价格进口了1台仪器；2014年6月因出现故障运往日本修理(出境时已向海关报明)，2014年10月，按海关规定的期限复运进境。此时，该仪器的国际市场价格为200万元。若经海关审定的修理费和料件费为40万元，运费为1.5万元，保险费用为2.8万元，进口关税税率为6%。该仪器复运进境时，应缴纳的进口关税为____万元。,9,3,2.4,12,C,"1. 根据海关规定，运往境外修理的机械器具、运输工具或其他货物，出境时已向海关报明，并在海关规定期限内复运进境的，应当以海关审定的境外修理费和料件费为完税价格。 7 | 2. 境外修理费和料件费为40万元，进口关税为6%，因此应缴纳的进口关税为40×6%=2.4(万元)。" 8 | 3,公开发行公司债券，证监会同意注册的决定自作出之日起一定期限内有效，发行人应当该期限内发行公司债券。该期限是____。,6个月,1年,2年,3年,C,1. 中国证监会同意注册的决定自作出之日起2年内有效，发行人应当在注册决定有效期内发行公司债券，并自主选择发行时点。 9 | 4,某集团公司在一家银行开设了许多不同的银行账户，那么，该集团公司可以要求银行在考虑其利息及透支限额时将其子公司的账户余额集中起来。下列不属于现金余额集中的好处是____。,盈余与赤字相抵,加强控制,增加投资机会,匹配,D,1. 现金余额集中的好处包括盈余与赤字相抵、加强控制和增加投资机会；匹配，是汇率风险管理中的一项原则，可能与现金余额的集中相冲突，不是现金余额集中的好处。 10 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/art_studies_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,王利发是老舍戏剧作品____中的主人公。,《茶馆》,《龙须沟》,《方珍珠》,《女店员》,A,1. 王利发是老舍的代表作《茶馆》中的主人公。 3 | 1,《等待戈多》的作者是____。,加缪,贝克特,阿尔比,尤奈斯库,B,1. 《等待戈多》是1952年法国剧作家贝克特创作的荒诞派戏剧作品。 4 | 2,____创作了舞蹈《马赛曲》等作品，被现代舞蹈家们奉为精神领袖，誉为“现代舞之母”。,露丝·圣丹尼丝,安娜·巴普洛娃,玛莎·格雷姆,依莎多拉·邓肯,D,1. 依莎多拉·邓肯是美国现代舞的先驱人物，被誉为“现代舞之母”，最著名的代表作有《马赛曲》、《国际歌》、《少女死亡之舞》等。 5 | 3,____创立了“叙事体戏剧”理论,布莱希特,萨特,格洛托夫斯基,贝克特,A,1. “叙事体戏剧”理论是德国剧作家布莱希特提出的一种不以感情共鸣为目的和手段的戏剧形式。 6 | 4,“伊莎多拉·邓肯”通过研究____创造了现代舞的表演风格。,奥托艺术,巴洛克艺术,古希腊艺术,拜占廷艺术,C,1. 美国女舞蹈家伊莎多拉·邓肯被公认为是西方现代舞的创始人，她把古希腊艺术中的文物、雕塑当作寻求新舞蹈理想姿态的源泉，从自然界寻找舞蹈动律的启示。 7 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/basic_medicine_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,下列选项中，符合原癌基因概念的是____,是正常基因,是细胞癌基因,是肿瘤抑制基因,凋亡调节基因,A,"1. 原癌基因是正常存在的基因，正常并不导致肿瘤，选项A正确。只有发生某些异常时才会使细胞发生恶性转化，成为细胞癌基因，选项B错误。 3 | 2. 原癌基因不是肿瘤抑制基因和凋亡调节基因，选项C、D错误。" 4 | 1,栓塞时常伴有DIC发生，主要见于____,脂肪栓塞,空气栓塞,血栓栓塞,羊水栓塞,D,1. 栓塞时常伴有DIC发生，主要见于羊水栓塞，选项D正确。这是因为羊水中含有多量类似于组织凝血活酶的促凝物质，进入血液循环中可激活外源性凝血系统，形成大量微血栓，又因此过程中大量凝血因子及纤维蛋白原被消耗，故纤溶系统激活导致纤溶亢进及凝血障碍，最终引起DIC。 5 | 2,急性细菌性痢疾早期的结肠病变为____,假膜性炎,浆液性炎,卡他性炎,表面化脓性炎,C,1. 急性细菌性痢疾早期病变为急性卡他性炎，后期发展成为假膜性炎。 6 | 3,下列各项，属于肿瘤的是____,错构瘤,动脉瘤,室壁瘤,骨软骨瘤,D,"1. 错构瘤用来描述受累器官的正常组织在发育过程中出现错误的组合、排列，因而导致了类瘤样的畸形，A错误；动脉瘤、室壁瘤等均不是真性肿瘤，B、C错误。 7 | 2. 骨软骨瘤是儿童期常见的良性骨肿瘤，D正确。" 8 | 4,血吸虫虫卵引起的病变主要发生在____,大肠壁和肝脏,肠系膜静脉,门静脉,肺和肠,A,1. 血吸虫虫卵引起的病变主要发生在乙状结肠壁、直肠壁和肝，也可见于回肠末段、阑尾、升结肠、肺、脑等处。 9 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/business_administration_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,有一项年金，前3年无流入，后5年每年年初流入500万元，假设年利率为10%，(P/A，10%，5)=3.7908，(P/S，10%，3)=0.7513，(P/S，10%，2)=0.8264，其现值为____万元。,1994,1566,1813,1523,B,"1. 首先，需要了解递延年金递延期的计算。如果是发生在第W期期末，则递延期为W－1。本题中第一次现金流入发生在第4年初(与第3年末是同一时点)，所以递延期是2年。 3 | 2. 接着，递延年金现值$P=A\times (P/A,i,n)\times (P/S,i,m)$，其中，A为年金，i为利率，m指的是递延期，n指的是连续收支期。 4 | 3. 最后，带入题目中的条件进行计算。现值$P=500\times(P/A，10\%，5)\times(P/S，10\%，2)=500\times 3.7908\times 0.8264=1566.36$。" 5 | 1,企业缴纳的耕地占用税，应在____科目核算。,应交税费,管理费用,在建工程,其他应付款,C,"1. 首先，耕地占用税是对占用耕地建房或从事其他非农业建设的单位和个人征收的税 6 | 2. 接着，根据会计准则，企业的耕地占用税，应在“在建工程”科目核算。" 7 | 2,注册会计师在确定重要性时通常选定一个基准。下列因素中，注册会计师在选择基准时不需要考虑的是____。,被审计单位的性质,以前年度审计调整的金额,基准的相对波动性,是否存在财务报表使用者特别关注的项目,B,"1. 首先，选择基准时需要考虑多个因素，包括被审计单位的性质、基准的相对波动性、是否存在财务报表使用者特别关注的项目等。 8 | 2. 选项中，(B) 以前年度审计调整的金额并不是一个影响重要性水平的因素，因为审计调整的金额并不能反映当前年度的审计风险和重要性。" 9 | 3,某投资方案，当贴现率为12%时，其净现值为22万元，当贴现率为14%时，其净现值为-11万元。该方案的内部收益率____。,大于14%,小于12%,介于12%与14%之间,无法确定,C,"1. 首先，我们需要了解净现值和内部收益率的概念。净现值是指未来资金流入现值与未来资金流出现值的差额。内部收益率是指资金流入现值总额与资金流出现值总额相等、净现值等于零时的折现率。 10 | 2. 接着，当贴现率为12%时，其净现值为22万元，说明其内部收益率应大于12%；当贴现率为14%时，其净现值率为-11万元，说明其内部收益率应小于14%，因此，其收益率应介于12%与14%之间。" 11 | 4,企业期末编制资产负债表时，下列各项应包括在“存货”项目的是____。,已作销售但购货方尚未运走的商品,委托代销商品,合同约定购入的商品,为在建工程购入的工程物资,B,"1. 首先，根据会计准则，存货应当满足以下条件：(1)是企业拥有并用于销售的物品；(2)是企业拥有并用于生产的物品；(3)是企业拥有并用于提供劳务的物品。 12 | 2. 接着，根据条件，选项(A)，(C)，(D)均不属于存货。只有选项(B)委托代销商品符合存货的定义，应该计入存货项目。" 13 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/chinese_language_and_literature_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,“闯关东”中的“关东”指____。,东北,西北,华北,塞外,A,1. “关东”指东北三省，”关“指山海关。 3 | 1,八股文是____。,八种文体,一种程式化的文章样式,八种修辞方式,由八个部分构成的文章,B,1. 八股文是中国古代科举考试中的一种文章体裁，是一种程式化的文章样式，要求文章结构、内容、语言都按照固定的模式来写作。 4 | 2,清末被誉为“诗界革命”一面旗帜的是____。,王国维,梁启超,谭嗣同,黄遵宪,D,1. 黄遵宪是“诗界革命”的代表人物之一，他以“旧风格含新意境”为追求目标，对当时的文学界产生了积极的影响。因此被誉为“诗界革命”一面旗帜。 5 | 3,“活”和“活儿”两个词____。,意思一样，没有区别,词性有区别，“活”是形容词，“活儿”是名词,感情色彩有强弱，“活儿”的感情色彩强,音节个数有区别，“活”是一个音节，“活儿”是两个音节,B,"1. “活”代表活着、灵活、有生命力；“活儿”指工作、营生、生意等。 6 | 2. 分析选项：“活”和“活儿”的含义并不相同，A选项错误；“活儿”的感情色彩并不一定比“活”强，C选项错误；“活”是三拼音节词，选项D错误。 7 | 3. “活”是一个形容词，而“活儿”是一个名词，二者词性不同，B选项正确。" 8 | 4,元朝政府曾经实行残酷的民族政策，把全国人民分为____四个等级。,色目人、蒙古人、汉人、南人,蒙古人、汉人、南人、色目人,蒙古人、南人、色目人、汉人,蒙古人、色目人、汉人、南人,D,1. 元朝政府曾经实行残酷的民族政策，把全国人民分为蒙古人、色目人、汉人、南人。 9 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/civil_servant_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,透过车轮卷起的黄土，却见山野人秋，庄稼割过，静谧中含着一些寂静，只有阳光在切割过的根茬上烁烁闪亮。____。 填入横线上最恰当的是____。,这是一段颠簸的行程，一路上景色苍凉雄浑，寂静中裸露着贫瘠,也许是久旱的缘故，这边的溪流也变成了涓涓细流，在盘踞的石缝间流动,同绿色的南方相比，这里是荒凉的，乃至荒蛮,偶见人迹，大都是荒村野店。时而会有一座小小的孤庙一闪而过,D,"1. 题干中的环境描述给人一种丰收的田园风光的感觉，同时也有一些寂静的气息。此外，由“透过车轮卷起的黄土”可知，作者是在疾驰的车里看外面的景色。 3 | 2. 选项A的”苍凉雄浑“”贫瘠“和选项C的”荒凉“”荒蛮“与题干中丰收的田园风光不符，因此排除。选项B描述的溪流与题干内容没有联系，因此也排除。选项D描述的”偶见人迹“与题干中的寂静的气息相符，同时“一闪而过”与题干中体现的车辆疾驰对应，因此是最恰当的选项。" 4 | 1,据说，在东南沿海一带，渔民在捕到螃蟹后，将螃蟹放进一个上小肚大的竹篓里面，第一只螃蟹放进去时，渔夫就用重物将口封住，当第二只、第三只放进去后，渔夫就不再盖重物了，因为，第一只即将爬出篓口的螃蟹，会被第二只、第三只螃蟹拉到篓底。如此下去，即使篓口没有盖盖子，但也没有一只蟹能够爬出去。 这个故事意在告诉我们____。,人多不一定好办事,恶性竞争必然导致两败俱伤,内讧必然内耗，团结就是力量,与人方便，自己方便,C,"1. 首先，我们需要分析故事的内容。螃蟹之间的恶性竞争导致了它们无法逃脱渔夫的捕捞。如果它们能够团结一致，互相帮助，或许就能够逃脱。 5 | 2. 分析题目选项，四个选项中明确提到“团结”的只有C项。" 6 | 2,谨慎：成就____,温和：好感,勤奋：努力,轻松：普通,好学：智慧,A,"1. 首先，分析题目中两个词的关系。谨慎的态度容易让人取得成就。因此，谨慎和成就之间是一种因果关系。 7 | 2. 接着，我们分析四个选项，选项A“温和：好感”符合因果关系，且“谨慎”和“温和”都是形容词，符合题目要求；其他选项均不符合因果关系或词性要求，因此排除。" 8 | 3,①我的奶奶是这样，我的父亲也是这样——那张画像，已经成为许多老百姓生活必需品的一部分，没有它，似乎客厅都是空的 ②如果因为认知能力的提升而将偶像抽离出记忆，那么，在那个时代里成长、生活的许多人，脑子里将空空如也，甚至不记得自己曾经活过这一回 ③卷的过程，是在收叠他个人的历史 ④有时挂旧了、破了，也会认认真真卷起来放好，我曾看别人卷过这画像，那种澄澈的眼神令人难忘 ⑤有些伟大者永远不会被人遗忘，因为那个伟大者，在那个时代，其实是一种生活，精神生活 ⑥从这个意义上说，尽管也许并不懂他，但人们心甘情愿尊他的名为圣 将以上6个句子重新排列，语序正确的是____。,②⑥⑤①④③,②⑥④③①⑤,①④③②⑥⑤,⑤②⑥①④③,D,1. 我们需要找到句子之间的逻辑关系。通过分析，我们可以发现，④句的“这画像”指的是①句的“那张画像”，两句顺序为①④，因此排除B选项；①句中包含指代词“是这样”“也是这样”，若放段首则指代不明，因此排除C选项；②中提到如果将偶像抽离出记忆，脑子里将空空如也，甚至不记得自己曾经活过这一回。由此可知，偶像是那个时代的精神生活，对应⑤中描述，因此⑤②应相邻，排除A选项。 9 | 4,相机：拍摄____,空调：降温,B超：诊断,电脑：操作,地图：交通,B,"1. 首先，分析题目中两个词的关系。相机是一种用于拍摄照片或录制视频的设备。因此题目中两个词之间是设备和功能的对应关系。 10 | 2. 其次，分析各个选项，C项和D项第二个词都不对应功能，可以排除；A项的“降温”是动宾结构，与题目中的“拍摄”并不一致，可以排除；B项的“B超”与“诊断”是设备和功能的对应关系，同时“诊断”与“拍摄”结构一致，符合要求。" 11 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/clinical_medicine_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,下列哪项不是急性心肌梗死患者溶栓治疗的禁忌证____,发病6小时，心电图ST段抬高＞0．2mY,有慢性严重高血压病史,可疑为主动脉夹层,近期(2～4周)有活动性内脏出血,A,"1. 溶栓治疗的禁忌证主要包括：近期(2~4 周)有活动性内脏出血、严重且未控制的高血压(>180/110 mmHg)或慢性严重高血压病史、主动脉夹层等。 3 | 2. 因此，选项B、C、D符合描述，A并不是溶栓治疗的禁忌证。" 4 | 1,结核病的细胞免疫反应中起主要作用的细胞为____,B淋巴细胞,巨噬细胞,T淋巴细胞,嗜酸性粒细胞,C,1. 结核病的免疫反应以细胞免疫为主，T淋巴细胞起主要作用。 5 | 2,Ⅱ型呼吸衰竭的实验室指标是____,$PaO_2$ 50mmHg，$PaCO_2$ 60mmHg,$PaO_2$ ＞60mmHg，$PaCO_2$ ＜50mmHg,$PaO_2$ ＜60mmHg，$PaCO_2$ ＞50mmHg,$PaO_2$ ＜55mmHg，$PaCO_2$ ＞50mmHg,C,1. Ⅱ型呼吸衰竭，即高碳酸性呼吸衰竭，血气分析特点是$PaO_2$ ＜60mmHg，同时伴有$PaCO_2$ ＞50mmHg。 6 | 3,男性，51岁。因慢性咳嗽、进行性气急5～6年，肺功能检测下列哪项不是诊断阻塞性肺气肿所需要的____,最大通气量＜80％预计,动脉血气分析,残气量／肺总量＞40％,呼气峰值流速降低,B,1. 动脉血气分析主要用来判断有无低氧血症、呼吸衰竭及酸碱平衡状况，并非诊断阻塞性肺气肿所必需。 7 | 4,女性，22岁，面色苍白、排酱油样尿2周，下列哪项不是血管内溶血检查指标____,尿隐血试验,含铁血黄素尿,血清结合珠蛋白,海因小体,D,"1. 尿潜血试验、含铁血黄素尿、血清结合珠蛋白、血浆游离血红蛋白为血管内溶血的检查项目。选项A、B、C符合。 8 | 2. 海因小体是红细胞内变性珠蛋白的包涵体，是红细胞异常形态的一种表现。" 9 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/college_chemistry_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,下列分子中，不存在离域π键的是____,$O_3$,$SO_3$,$HNO_3$,$HNO_2$,D,"1. 首先，离域π键是指分子中存在一个或多个不属于任何一个原子的π电子。 3 | 2. 接着，我们分析选项：(A) $O_3$分子中，氧原子之间存在一个离域π键；(B) $SO_3$分子中，硫原子和氧原子之间存在一个离域π键；(C) $HNO_3$分子中，氮原子和氧原子之间存在一个离域π键；(D) $HNO_2$分子中，氮原子和氧原子之间不存在离域π键，因为氮原子和氧原子之间只有一个共价键，没有多余的π电子。 4 | 3. 根据以上分析，不存在离域π键的分子是$HNO_2$。" 5 | 1,下列物质加入电池负极溶液中，使$Zn^{2+}$/$Zn$-$H^+$/$H_2$组成的原电池电动势增大的是____,$ZnSO_4$固体,Zn粒,$Na_2S$溶液,$Na_2SO_4$固体,C,"1. 首先，我们需要了解$Zn^{2+}$/$Zn$-$H^+$/$H_2$组成的原电池，其中$Zn^{2+}$/$Zn$是负极，$H^+$/$H_2$是正极。 6 | 2. 其次，增大正极的电极电势或降低负极的电极电势可使电池电动势增大。显然，降低负极氧化型的浓度能使负极的电极电势减小。 7 | 3. 分析选项： (A)$ZnSO_4$固体，(B) $Zn$粒和(D)$Na_2SO_4$固体，加入后不会改变电池的还原反应和氧化反应，因此不会使电池电动势增大；(C) $Na_2S$溶液，加入$S^{2-}$使大部分$Zn^{2+}$被沉淀下来，降低了$Zn^{2+}$的浓度，负极电势减小。 8 | 4. 根据以上分析，加入$Na_2S$溶液可以使$Zn^{2+}$/$Zn$-$H^+$/$H_2$组成的原电池电动势增大。" 9 | 2,下列各组物质中，制冷效果最好的是____,冰,冰+食盐,冰+$CaCl_2·6H_2O$,冰+$CaCl_2$,C,"1. 首先，我们需要分析选项中各组物质的制冷效果。选项中的冰在部分融化后形成冰水混合物，制冷的最佳效果为0℃，效果差。加入食盐或者$CaCl_2$可以降低冰的熔点，食盐($NaCl$)溶解度较小，且解离出的离子少，因而(冰+食盐)制冷效果不如(冰+$CaCl_2$)；而无水$CaCl_2$溶解过程伴随有水合反应，水合放热，反而会影响制冷效果。$CaCl_2·6H_2O$是$CaCl_2$的水和产物，溶解过程不会伴随水和反应。 10 | 2. 根据以上分析，(冰+$CaCl_2·6H_2O$)制冷效果较为理想。" 11 | 3,下列物种中，单电子数最多的是____,$Mo(CO)_6$,$[Cr(H_2O)_6]^{2+}$,$[Cr(NH_3)_6]^{2+}$,$[Co(NH_3)_6]^{3+}$,B,"1. 首先，单电子数指的是一个配位化合物中，中心金属离子外层的未成对电子数目。 12 | 2. 其次，我们需要计算每个配位化合物中的单电子数。对于$Mo(CO)_6$，形成内轨型配合物，杂化轨道类型为$d^2sp^3$，单电子数为1；对于$[Cr(H_2O)_6]^{2+}$，$H_2O$为弱场，形成外轨型配合物，单电子数为4；对于$[Cr(NH_3)_6]^{2+}$，项杂化轨道类型为$sp^3d^2$，单电子数为2；对于$[Co(NH_3)_6]^{3+}$，形成内轨型配合物，单电子数为0。 13 | 3. 最后，单电子数最多的是$[Cr(H_2O)_6]^{2+}$，其单电子数为4。" 14 | 4,已知$K^\theta_{\alpha_1}(H_2CO_3)=4.3\times10^{-7}$，$K^\theta_{\alpha_2}(H_2CO_3)=5.6\times10^{-11}$，$0.10mol·L^{-1}$ $NaHCO_3$溶液的pH为____,2.3,6.3,7.1,8.3,D,"1. 首先，两性物质的pH为$\frac{1}{2}(-\lg Ka_1+ \lg Ka_2)$，其中$Ka_1$，$Ka_2$分别为两性物质对应酸的分步水解的酸度系数。 15 | 2. 其次，$NaHCO_3$是二元弱酸$H_2CO_3$的酸式盐，是两性物质。根据上述公式，可以得到$pH=\frac{1}{2}(-\lg Ka_1+ \lg Ka_2)=1/2(-lg(4.3×10^{-7})-lg(5.6×10^{-11}))=8.3$" 16 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/college_economics_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,考虑以下小型开放经济的数据：Y=1000，C=700，G=150，I=250-1000r*。如果世界利率为5%，那么小型开放经济的净出口为____。,50,-50,150,-150,B,"1. 首先，小型开放经济的净出口公式：NX = S - I，其中NX表示净出口，S表示储蓄，I表示投资。 3 | 2. 其次，根据国民账户恒等式，Y = C + I + G + NX，可以得到S = Y - C - G。将数据代入得到S = 150。 4 | 3. 接着，根据题目中的数据计算投资，I = 250 - 1000r*，其中r*表示世界利率。将r* = 5%代入得到I = 200。 5 | 4. 最后，计算净出口。将步骤2和步骤3的结果代入净出口公式，得到NX = S - I = 150 - 200 = -50。" 6 | 1,已知一垄断企业成本函数为TC=5Q2+20Q+10，产品的需求函数为Q=140-P。利润最大化的产量为____。,10,5,3,15,A,"1. 首先，垄断企业的利润最大化产量是当边际收益MR等于边际成本MC时。因此，我们需要求出该企业的边际收益和边际成本函数。 7 | 2. 其次，求出总收益TR。$TR=P*Q=140Q-Q^2$。 8 | 3. 接着，通过总收益TR求出边际收益MR函数，即$MR=\dfrac{\Delta TR}{\Delta Q}=140-2Q$。 9 | 4. 最后，通过成本函数TC求出边际成本MC函数，即$MC=\frac{\Delta TC}{\Delta Q}=20+10Q$。 10 | 5. 根据上述计算，我们将边际收益函数和边际成本函数相等，即$140-2Q=20+10Q$，解得$Q=10$。因此，利润最大化的产量为10。" 11 | 2,如果消费与实际利率负相关，则______。,IS曲线更平坦,IS曲线更陡峭,LM曲线更平坦,LM曲线更陡峭,A,"1. 首先，我们需要了解IS-LM模型中的两条曲线：IS曲线和LM曲线。IS曲线表示货币市场和实物市场的平衡关系，LM曲线表示货币市场和利率的平衡关系。 12 | 2. 其次，我们需要知道实际利率的定义，实际利率是指扣除通货膨胀后的名义利率。 13 | 3. 最后，我们考虑IS曲线。消费与实际利率负相关说明消费减少会使得利率增加，同时将使得投资减少，因而收入减少得更多，IS曲线更平坦。" 14 | 3,如果所有产品的生产都增加了10%，且所有价格都下降了10%，会发生以下哪一种情况？____,真实GDP增加10%，名义GDP减少10%,真实GDP增加10%，名义GDP不变,真实GDP不变，名义GDP增加10%,真实GDP不变，名义GDP减少10%,B,"1. 首先，名义GDP是指按当前价格计算的GDP，真实GDP是指按不变价格计算的GDP。 15 | 2. 其次，GDP = 价格水平 × 产量。我们分析题目中的情况。所有产品的生产都增加了10%，意味着产量增加了10%；所有价格都下降了10%，意味着价格水平下降了10%。真实GDP的变动只反映生产的产量的变动，产量增加10%，真实GDP增加10%。而价格下降会导致名义GDP的下降，因此名义GDP在真实GDP的基础上下降10%， 结果基本没有发生变化。 16 | 3. 因此，根据第2步的分析，答案应该是B。" 17 | 4,如果边际技术替代率MRTSLK小于劳动与资本的价格之比，为使成本最小，该厂商应该____。,同时增加资本和劳动,同时减少资本和劳动,减少资本，增加劳动,增加资本，减少劳动,D,"1. 首先，边际技术替代率MRTSLK表示单位资本和单位劳动力之间的替代关系，即单位资本的增加可以替代多少单位劳动力。 18 | 2. 如果MRTSLK小于劳动与资本的价格之比，说明：生产中劳动替代资本的比率小于价值中劳动替代资本的比率，即劳动相对过多、资本过少。因此，厂商应该用更多的资本去替代劳动，即增加资本，减少劳动。" 19 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/college_physics_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,有一劲度系数为k的轻弹簧，竖直放置，下端悬一质量为m的小球，开始时使弹簧为原长而小球恰好与地接触，今将弹簧上端缓慢地提起，直到小球刚能脱离地面为止，在此过程中外力作功为____,m^2g^2/(4k),m^2g^2/(3k),m^2g^2/(2k),2m^2g^2/k,C,"1. 当小球刚好脱离地面时，弹簧的弹力与小球所受重力相等，即$kx = mg$，其中x表示弹簧的伸长量。 3 | 2. 由上述方程可得，$x = mg/k$。 4 | 3. 外力作功等于弹簧势能的增加，即$W = \frac{1}{2}kx^2 - 0$（因为开始时弹簧为原长，势能为0）。 5 | 4. 将第2步中得到的x代入第3步的公式，得到$W = \frac{1}{2}k(mg/k)^2 = m^2g^2/(2k)$。" 6 | 1,某质点作直线运动的运动学方程为 x=3t-5t^3 +6(SI)，则该质点作____,匀加速直线运动，加速度沿x轴正方向,匀加速直线运动，加速度沿x轴负方向,变加速直线运动，加速度沿x轴正方向,变加速直线运动，加速度沿x轴负方向,D,"1. 首先，我们需要求出速度和加速度。速度是位置关于时间的导数，加速度是速度关于时间的导数。对运动学方程求导，得到速度方程v = dx/dt = 3 - 15t^2，再求导得到加速度方程a = dv/dt = -30t。 7 | 2. 接着，我们分析加速度方程a = -30t，这说明加速度随时间变化，且沿x轴负方向。 8 | 3. 根据以上分析可知，质点作变加速直线运动，加速度沿x轴负方向。" 9 | 2,光子能量为0.5MeV的X射线，入射到某种物质上而发生康普顿散射．若反冲电子的能量为0.1MeV，则散射光波长的改变量Δλ与入射光波长λ_0之比值为____,0.2,0.25,0.3,0.35,B,"1. 首先，我们需要将入射光子能量和散射光子能量转换成波长。可以使用公式$E = h * c / λ$，其中E表示能量，λ表示波长。入射光子能量为0.5 MeV，对应波长$λ_0 = h * c / (0.5 MeV)$。反冲电子能量为0.1 MeV，因此散射光子能量为0.4 MeV，对应波长$\lambda^{\prime}=h*c/(0.4 MeV)$。 10 | 2. 其次，我们计算$\Delta\lambda=\lambda^{\prime}-\lambda_{0} = h * c / (0.4 MeV) - h * c / (0.5 MeV)$。 11 | 3. 最后，我们要求$(\Delta\lambda / λ_0) = [(h * c / (0.4 MeV) - h * c / (0.5 MeV)) / (h * c / (0.5 MeV))]$。化简得到比值为0.25。" 12 | 3,在带有电荷+Q的金属球产生的电场中，为测量某点场强E，在该点引入一电荷为+Q/3的点电荷，测得其受力为F．则该点场强 的大小____,E=3F/Q,E>3F/Q,E<3F/Q,无法判断,B,"1. 首先，求得原电场强度E = F/(Q/3) = 3F/Q。 13 | 2. 其次，分析+Q/3的点电荷对该点场强的影响。由于+Q/3的点电荷与带有电荷+Q的金属球同号，它们之间的相互作用会使得该点的场强增大。因此，在引入+Q/3的点电荷后，该点的场强E > 3F/Q。" 14 | 4,“理想气体和单一热源接触作等温膨胀时，吸收的热量全部用来对外作功。”对此说法，有如下几种评论，哪种是正确的？____,不违反热力学第一定律，但违反热力学第二定律,不违反热力学第二定律，但违反热力学第一定律,不违反热力学第一定律，也不违反热力学第二定律,违反热力学第一定律，也违反热力学第二定律,C,"1. 热力学第一定律表示在一个热力学过程中，系统吸收的热量等于系统对外做的功和系统内能的增加。理想气体在等温膨胀过程中，温度保持不变，所以内能不变。根据热力学第一定律，吸收的热量等于对外做的功，这与题目中的描述一致。 15 | 2. 热力学第二定律是熵增原理，表示在一个自发过程中，系统的熵总是增加的。在等温膨胀过程中，系统的熵增加，并没有违反第二定律。" 16 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/college_programming_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,"在有n(n>1000)个元素的升序数组A中查找关键字x。查找算法的伪代码如下所示。 3 | k=0; 4 | while(klog_2n，只有 x 在开头处 n/3+2 好" 12 | 1,先序序列为a，b，c的不同二叉树的个数是____,3,5,4,6,B,1. 我们可以通过手动构建二叉树的方式来确定不同先序序列为a，b，c的二叉树个数。对于三个节点的二叉树，根据先序遍历的特点，a节点必须是根节点，那么b和c节点的分布共有5种情况：(1) b是a的左子树，c是a的右子树；(2) b是a的左子树，c是b的左子树；(3) b是a的左子树，c是b的右子树；(4) b是a的右子树，c是b的左子树；(5) b是a的右子树，c是b的右子树。 13 | 2,若森林F有15条边、25个结点，则F包含树的个数是____,8,9,10,11,C,"1. 首先，一个有n个结点的树有n-1条边，每棵树就会造成边的数量比结点数量少1 14 | 3. 接着，仅根无入分支。那么现在边的数量比结点数量少了25-15=10。 15 | 4. 所以，我们得到森林F包含10棵树。" 16 | 3,"#include 17 | #define SQR(x) x*x 18 | void main() 19 | { 20 | int a=10,k=2,m=1; 21 | a/=SQR(k+m);cout<0).$若f(x)在$\left(0,\frac{\pi}{2}\right)$上有且仅有三个极值点，则不正确的有____","f(x)在区间$[0, \frac{\pi}{4}]$上的最小值可以等于$-\frac{1}{2}$","若$f(x)$的图像关于点$\left(\frac{\pi}{3},0\right)$对称，则$f(x)$在区间$\left(0,\frac{\pi}{12}\right)$上单调递增",$f(x)$的最小正周期可能为$\frac{\pi}{3}$,若$f\left(0\right)+f\left(\frac{\pi}{2}\right)=0$，将$ g(x)=\sin{2x}$的图象向右平移$\frac{\pi}{12}$个单位可得到$y=f\left(\frac{x}{3}\right)$的图象,A,"1. 根据极值点个数限制，可得$\frac{\pi}{2}\omega-\frac{\pi}{6} \in \left(\frac{5\pi}{2}, \frac{7\pi}{2}\right)$，解得$\omega \in \left(\frac{16}{3}, \frac{22}{3}\right)$。 3 | 2. 若A选项成立，则可得$\frac{\pi}{4}\omega - \frac{\pi}{6} \leq \frac{7\pi}{6}$，解得$\omega \leq \frac{16}{3}$，与1中范围矛盾。" 4 | 1,二项式$(\sqrt[3]{3}+x)^{12}$的展开式中，系数为有理数的项的个数为____,6,5,4,3,B,"1. 该二项式展开的通项为$T_{r+1}=C^r_{12}3^{4-r/3}x^r$。 5 | 2. 若要通项系数为有理数，则需$3^{r/3}$为有理数，即$r$被3整除。0到12中符合要求的$r$共5项。" 6 | 2,为加快新冠肺炎检测效率，某检测机构采取合并检测法，即将多人的拭子样本合并检测，若为阴性，则可以确定所有样本都是阴性的，若为阳性，则还需要对本组的每个人再做检测．现对20名密切接触者的拭子样本进行合并检测，每份样本的检测结果是阴性还是阳性都是相互独立的，每人检测结果呈阳性的概率为p，且检测次数的数学期望为20，则p的值为____,$1-({\frac{1}{20}})^{\frac{1}{20}}$,$1-(\frac{1}{20})^{\frac{1}{21}}$,$1-\left(\frac{1}{21}\right)^{\frac{1}{20}}$,$1-\left(\frac{1}{21}\right)^{\frac{1}{21}}$,A,"1. 实际的检测次数为1（合并检测结果阴性）或21（合并检测的结果为阳性，每人单独再检测）。 7 | 2. 由期望的运算公式可得$1\times(1-p)^{20}+21\times p^{20}$=20，解得$p=1-({\frac{1}{20}})^{\frac{1}{20}}$" 8 | 3,"在矩形ABCD种，AB=1,AD=2,则点P在以点C为圆心且与BD相切的圆上，若$\overrightarrow{AP} = \lambda\overrightarrow{AB}+\mu\overrightarrow{AD}$,则$\lambda+\mu$的最大值为____",3,$2\sqrt{2}$,$\sqrt{5}$,2,A,"1. 首先，我们需要求圆的半径。BD长为$\sqrt{1^2+2^2}=\sqrt{5}$，圆的半径为C到BD做垂线的长度，即$\frac{1 \times 2}{\sqrt{5}}=\frac{2\sqrt{5}}{5}$。 9 | 2. 设A点为原点，AD为x轴，AB为y轴，则点P坐标需要满足的圆的参数方程可写为$x=2+\frac{2\sqrt{5}}{5}\cos\theta, y=1+\frac{2\sqrt{5}}{5}\sin\theta$，又有$\lambda$和$\mu$满足$x=2\mu$，$y=\lambda$，与圆的参数方程联立可得$\mu=1+\frac{\sqrt{5}}{5}\cos\theta, \lambda = 1+\frac{2\sqrt{5}}{5}\sin\theta$。 10 | 3. 整理可得$\lambda+\mu = 2+\frac{2\sqrt{5}}{5}\sin\theta+\frac{\sqrt{5}}{5}\cos\theta$，设$\phi$满足$\sin\phi=\frac{\sqrt{5}}{5}, \cos\phi=\frac{2\sqrt{5}}{5}$，则有$\lambda+\mu=2+\sin(\theta+\phi) \leq 3$。" 11 | 4,"已知$\left \{ a_n \right \}$ 为等差数列,若$a_1+a_5+a_9=8\pi$，则 $\cos (a_3+a_7)$的值为____",$\frac{\sqrt{3}}{2}$,$-\frac{\sqrt{3}}{2}$,$\frac{1}{2}$,$-\frac{1}{2}$,D,"1. 根据等差数列的性质，有$a_{m-n}+a_{m+n}=2a_m$，因此，$a_1+a_5+a_9=3a_5=8\pi$，即$a_5=\frac{8\pi}{3}$。 12 | 2. 同理，$\cos(a_3+a_7)=\cos(2a_5)=\cos(\frac{16\pi}{3})=-\frac{1}{2}$。" 13 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/high_school_physics_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,一个物体放在斜面上保持静止，该物体共受几个力的作用____,4个,3个,2个,1个,B,1. 物体受到重力、支持力的作用，同时因为静止因此必然还受到静摩擦力的作用。 3 | 1,A、B 两物体的动量之比为 2:1，动能的大小之比为 1:3，则它们的质量之比为____,$2:1$,$1:3$,$2:3$,$12:1$,D,"1. 物体动量$p=mv$，动能$E_k=\frac{1}{2}mv^2$，因此动量与动能之间满足$m=\frac{p^2}{2E_k}$。 4 | 2. 因此，A、B质量之比$\frac{m_A}{m_B} = \frac{\frac{p_A^2}{2E_{kA}}}{\frac{p_B^2}{2E_{kB}}} = (\frac{p_A}{p_B})^2 \times \frac{E_{kB}}{E_{kA}} = \frac{12}{1}$" 5 | 2,下列说法正确的是____,原子核发生一次β衰变，该原子外层就失去一个电子,金属产生光电效应时，入射光的频率越高，光电子的最大初动能越大,核裂变与核聚变都伴有质量亏损，亏损的质量转化成能量,一群氢原子从定态n=4向基态跃迁，最多可以释放3条光谱,B,"1. 分析选项：β衰变过程中的电子来自于中子向质子的转变，而非原子外层，(A)错误。 6 | 2. 根据光电效应公式$E_k=h\gamma-W$可知(B)正确。 7 | 3. 根据质能方程可知，亏损的质量对应一定的能量，而非转化成能量，(C)错误。 8 | 4. 从定态n=4向基态跃迁，最多可以释放$C^2_4=6$条光谱，(D)错误。" 9 | 3,物体做匀速圆周运动时，下列说法正确的是____,物体必须受到恒力的作用,物体所受合力必定为0,物体所受合力的大小可能变化,物体所受合力的大小不变，方向不断改变,D,1. 物体做匀速圆周运动时，所受合力大小不变，方向指向圆心，因此只有(D)正确。 10 | 4,以下哪些运动的加速度一定是恒量____,匀速圆周运动,平抛运动,汽车加速过程,简谐运动,B,"1. 分析选项：匀速圆周运动加速度方向指向圆心，一直改变，(A)不符合要求。 11 | 2. 平抛运动物体只受到重力作用，加速度恒为g，(B)符合要求。 12 | 3. 汽车加速未必为匀加速，加速度可能改变，(C)不符合要求。 13 | 4. 简谐运动中加速度大小、方向均与位移相关，并非恒定，(D)不符合要求。" 14 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/high_school_politics_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,"某大学一女生认为“修养学识是要有，但是如今的社会就是先敬衣冠后敬人，再有修养，如果穿着不上档次，出门吃饭买东西连服务员都不热情。退一步讲，别的同学都有， 我要是没有，怎么抬得起头？”该女生的观点反映了____ 3 | ①部分青年人在消费过程中存在着错误 ②攀比心理和从众心理 4 | ③重视物质享受，忽视精神追求 ④追求标新立异和与众不同，盲目追求时尚与流行",①②③,①③④,①②④,②③④,C,"1. 选项③错误，该女大学生认为“修养学识是要有”，并未忽视精神追求。 5 | 2. 选项①②④正确，该女生的想法体现了其跟风攀比的消费心理，这是消费过程中错误的认识。同时，该女大学生的想法并不是出于个人需要，只是一种盲目追求时尚、流行的选择，是盲目的追求标新立异和与众不同的结果。" 6 | 1,"货币最早以足值的金属货币形式出现的。随着商品生产和商品交换的发展，商品流通中产生了作为价值符号的纸币，并逐渐取代了金属货币。纸币之所以能取代金属货币，是因为____ 7 | ①纸币容易产生，且同样具有充当贮藏手段的职能 8 | ②使用纸币能够有效降低货币制作成本 9 | ③纸币的使用范围更广 10 | ④纸币同样能执行价值尺度和流通手段的职能",①②,②③,②④,③④,C,1. 分析选项：②④符合题意，纸币之所以能取代金属货币，是因为使用纸币能够有效降低货币制作成本，且同样能执行价值尺度和流通手段的职能；①错误，纸币不具有贮藏手段的职能；③错误，纸币使用范围并不比金属货币的使用范围更广。 11 | 2,"我国现行标准下农村贫困人口已全部脱贫，创造了人类减贫史上的奇迹。但当前农村地区还存在各种不良风气和陈规陋俗，如婚丧嫁娶大操大办、人情往来负担沉重、封建迷信活动有所反弹等。对此，正确的态度和做法是____ 12 | ①自觉抵制腐朽落后文化，践行现代文明生活方式 13 | ②加大农村文化建设力度，提高村民科学文化素养 14 | ③积极培育发达文化市场，坚持经济效益放在首位 15 | ④坚持文化多元自由发展，更好满足村民精神需求",①②,①③,②④,③④,A,"1. 首先，选项①和②有助于提高农村地区的文明程度和文化素质，正确。 16 | 2. 选项③过于强调经济效益，不利于解决农村地区的不良风气和陈规陋俗问题；选项④不利于解决农村地区的不良风气和陈规陋俗问题。③④ 错误。" 17 | 3,"某市统计局对1000户居民储蓄的抽样调查显示，教育、防病、养老、买房等长期消费占87%，其中，“子女教育费用”占20%，这表明____ 18 | ①公民存款储蓄，既是一种投资行为，也是计划消费的行为 19 | ②储蓄越多越好 20 | ③储蓄可以从根本上解决通货膨胀的问题 21 | ④储蓄有利于培养科学合理的生活习惯，建立文明健康的生活方式",①④,②③,③④,①③,A,"1. 分析选项：①正确，公民储蓄存款可以获得利息收入，是一种投资行为；同时公民储蓄主要是为长期消费准备的，也是一种计划消费的行为。②错误，储蓄过多会抑制居民消费的增长，不利于人们生活水平的提高和国家经济的发展。③错误，无法从根本上解决通货膨胀问题。④正确，公民通过储蓄有计划地安排生活，是科学合理的习惯和文明健康的生活方式的体现。 22 | 2. 根据上述分析，①④正确。" 23 | 4,2017年1月3日，被称为最严格的《珠海市环境保护和生态建设“十三五”规划》正式出台。提出要在2020年实现20项指标，其中与民生密切相关的指标有：城市空气质量达到二级天数的占全年比例93%、PM2.5年均浓度低于28微克／立方米、城市集中式饮用水源达标率与近岸海域水质达标率100%、地表水水质优良比例85%或以上。这说明____,政府的权威和威信将会得到提升,规划是政府科学民主决策的产物,政府履行职能，推动环境保护事业发展,规划实施将使珠海成为我国最宜居的城市,C,1. 首先，分析选项：(A)表述不当，政府的管理和服务是否被人民认可和接受是区别政府有无威信的标志；(B)不符合题意，材料不体现规划的决策过程；(C)正确，材料说明政府履行职能，推动环境保护事业发展；(D)不符合题意，从材料中无法看出珠海将成为我国最宜居的城市。 24 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/ideological_and_moral_cultivation_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,贯穿中国历史发展的一条主线是____,团结统一,爱好和平,爱国主义,自强不息,C,1. 贯穿中国历史发展的一条主线是爱国主义，它是中国人民的共同情感和价值观念，是中国历史发展的重要动力和精神支柱。 3 | 1,构成爱情的三个基本要素是____,性爱、理想和经济基础,爱、理想和社会地位,性爱、理想和责任,性爱、理想和道德,C,1. 构成爱情的三个基本要素是性爱、理想和责任。 4 | 2,____时期是确立理想信念最集中和突出的时期。,少年,青年,青少年,中青年,B,1. 青年时期是确立理想信念最集中和突出的时期。 5 | 3,坚持爱国主义与____的统一，是新时期爱国主义的基本特征。,爱社会主义,爱人民群众,爱中国共产党,爱本职工作,A,1. 新时期爱国主义的基本特征是坚持爱国主义与社会主义的统一。 6 | 4,爱国主义的基础是____,爱国情感,爱国思想,爱国行为,爱国言语,A,1. 爱国思想、爱国行为和爱国言语都是表现爱国主义的方式，但它们都是建立在爱国情感的基础上的。因此，选项A的“爱国情感”是爱国主义的基础。 7 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/law_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,甲路过某自行车修理店，见有一辆名牌电动自行车(价值1万元)停在门口，欲据为己有。甲见店内货架上无自行车锁，便谎称要购买，催促店主去50米之外的库房拿货。店主临走时对甲说：“我去拿锁，你帮我看一下店。”在店主进入仓库后，甲便骑走电动自行车。甲的行为构成____。,诈骗罪,盗窃罪,侵占罪,职务侵占罪,B,"1. 分析选项：构成诈骗罪的一个重要因素是，被害人自愿交付财物，但店主没有将自行车交付给甲，因此排除诈骗罪；甲对于自行车不存在代为管理关系，因此排除侵占罪；甲对店内财物没有管理职能，因此排除职务侵占罪。 3 | 2. 通过对案情的分析及排除法，可知甲的行为构成盗窃罪。" 4 | 1,下列选项中，属于民事法律关系的是____。,甲男与乙女之间的恋人关系,甲公司与乙公司之间的技术转让关系,甲公司与其分支机构之间的业务指导关系,甲教育局与乙中学之间的管理关系,B,"1. 民事法律关系，是指由民事法律规范所确立的以民事权利和民事义务为主要内容的法律关系。 5 | 2. A项为恋人关系，不属于民法调整的范围；C项业务指导关系中主体地位并不平等，没有互担权利义务，不属于民事法律关系；D项主体地位是一方隶属于另一方，不属于民事法律关系。 6 | 3. B项中的技术转让合同是一种合同关系，相互确立了对方享有的权利和承担的义务，双方主体地位平等，权利义务对等，故是一种民事法律关系。" 7 | 2,缓刑的适用对象只限于____。,被判处5年以下有期徒刑的犯罪分子,被判处管制的犯罪分子,被判处3年以下有期徒刑的犯罪分子,被判处拘役、3年以下有期徒刑的犯罪分子,D,1. 根据我国刑法的规定，缓刑的适用对象是被判处3年以下有期徒刑或者拘役的犯罪分子。 8 | 3,甲公司与乙公司签订服装加工合同，约定乙公司支付预付款1万元，甲公司加工服装1000套，3月10日交货，乙公司3月15日支付余款9万元。3月10日，甲公司仅加工服装900套，乙公司此时因濒临破产致函甲公司表示无力履行合同。下列哪一说法是正确的?____,因乙公司已支付预付款，甲公司无权中止履行合同,乙公司有权以甲公司仅交付900套服装为由，拒绝支付任何货款,甲公司有权以乙公司已不可能履行合同为由，请求乙公司承担违约责任,因乙公司丧失履行能力，甲公司可行使顺序履行抗辩权,C,"1. 分析选项：预付款具有支援性质，但不起保证作用，因此并无阻止收款方中止合同的效力，A项错误。 9 | 2. 根据《民法典》规定，债权人可以拒绝债务人部分履行债务，但部分履行不损害债权人利益的除外，题中甲公司仅交付900套服装，虽为部分履行，但不损害债权人乙公司的利益，乙公司只能拒绝相应履行而不能完全拒绝履行，B项错误。 10 | 3. 根据《民法典》规定，当事人一方明确表示或者以自己的行为表明不履行合同义务的，对方可以在履行期限届满之前要求其承担违约责任。题中乙公司已致函甲公司，构成预期违约，甲公司有权以此为由请求乙公司承担违约责任，C项正确。 11 | 4. 根据《民法典》规定，当事人互负债务，有先后履行顺序，应当先履行债务一方未履行的，后履行一方有权拒绝其履行要求。本题中，甲公司负有先履行义务，无权行使顺序履行抗辩权，D选项错误。" 12 | 4,我国刑法分则对犯罪进行分类的主要依据是____。,犯罪的同类客体,危害行为的形式,犯罪对象的特点,行为人的主观心态,A,1. 我国刑法是依照同类客体对犯罪进行分类的，如把危害国家安全的犯罪作为一类，把破坏社会主义市场经济秩序的犯罪作为一类，把侵犯财产权的犯罪作为一类，等等。 13 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/legal_professional_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,关于假释的说法，下列哪一选项是正确的?____,被判处无期徒刑的罪犯，实际执行13年方可假释，假释考验期为13年,死缓犯减刑为无期徒刑的，实际执行25年方可假释；减为25年有期徒刑的，实际执行20年方可假释,数罪并罚为无期徒刑的罪犯，也有可能适用假释,不得假释的犯罪分子必须限于暴力性犯罪,C,"1. 我们分析选项，假释A项不当选，前半句正确，《刑法》第81条规定，被判处无期徒刑的犯罪分子，实际执行13年以上可以假释，后半句错误，《刑法》第83条第1款规定，无期徒刑的假释考验期限为10年。 3 | 2. B项不当选，死缓犯不得直接假释，减为无期徒刑、有期徒刑后可以假释，但是限制减刑的死缓犯不得假释，选项中关于实际执行刑期的限制均为限制减刑死缓犯最少实际执行刑期的规定。 4 | 3. C项当选，只要数罪中任一罪未被判处10年有期徒刑以上刑罚，即使并罚超过10年有期徒刑以上刑罚，也可假释。 5 | 4. D项不当选，累犯不一定是暴力性犯罪，但是不得假释。" 6 | 1,某市甲区某企业经位于乙区的市建委批准在甲区建设一栋3层的厂房。但在施工过程中，擅自加至5层。市建委以其违法建房为由要求将整栋楼全部拆除。该企业不服向位于丙区的市政府申请复议，市政府经复议后决定责令该企业将超层部分拆除。对此，下列哪些说法正确?____,若该企业不服起诉的，应当向该市中级人民法院起诉,若该企业不服起诉的，可以向该市乙区人民法院起诉,若该企业不起诉，又不拆除超层部分的，该市建委可以申请甲区人民法院强制执行,若该企业不起诉，又不拆除超层部分的，该市人民政府可以申请丙区人民法院强制执行,A,"1. 我们分析选项，行政诉讼的管辖法院、申请执行行政行为的管辖法院市政府作为复议机关改变了原行为，故应当以市政府作为被告起诉。市政府充当被告的情形下，受理该诉讼的法院必须是中级人民法院，故选项B错误。 7 | 2. 本题中的行政行为是拆除房屋，针对的是不动产，故应当由不动产所在地(即甲区)的法院管辖。综合而言，若起诉，本案应由“甲区的中级法院”即市中级人民法院管辖(甲区本身不存在中级法院，负责甲区的中级法院应当是市中级人民法院)。故选项A说法正确。 8 | 3. 在复议机关变更原行政行为的情形，若需要申请法院强制执行，必须由复议机关申请，故选项C错误。 9 | 4. 行政机关申请法院强制执行行政行为的，应当由基层人民法院管辖(这是级别管辖规则)，执行对象是不动产的，由不动产所在地法院管辖(这是地域管辖规则)。因此，本题若申请法院强制执行，应当由市政府向甲区人民法院申请。故选项D也是错误的。" 10 | 2,关于期间的规定，下列哪一选项是正确的?____,拘留后公安机关应当在12小时内将被拘留人送往看守所羁押，并在拘留后24小时内通知其家属,犯罪嫌疑人对检察院的酌定不起诉不服的可以在收到决定书后5日内向检察院申诉,在审判过程中由于被告人逃脱而中止审理的，中止审理的期间不计入审理期间,检察院应当在接到公安机关提请批准逮捕书的5日内作出决定,C,"1. 《刑事诉讼法》第83条第2款规定：“拘留后，应当立即将被拘留人送看守所羁押，至迟不得超过二十四小时。除无法通知或者涉嫌危害国家安全犯罪、恐怖活动犯罪通知可能有碍侦查的情形以外，应当在拘留后二十四小时以内，通知被拘留人的家属。有碍侦查的情形消失以后，应当立即通知被拘留人的家属。”所以A项错误。 11 | 2. 《刑事诉讼法》第177条规定：“对于人民检察院依照本法第一百七十三条第二款规定作出的不起诉决定，被不起诉人如果不服，可以自收到决定书后七日以内向人民检察院申诉。人民检察院应当作出复查决定，通知被不起诉的人，同时抄送公安机关。”所以B项错误。 12 | 3. 《刑事诉讼法》第200条第2款规定：“中止审理的原因消失后，应当恢复审理。中止审理的期间不计入审理期限。”所以C项正确。 13 | 4. 《刑事诉讼法》第89条第3款规定，人民检察院应当自接到公安机关提请批准逮捕书后的七日以内，作出批准逮捕或者不批准逮捕的决定。所以D项错误。" 14 | 3,关于我国民事诉讼中检察院的职能行使，说法正确的是：____,只有没有其他法定主体或者其他法定主体不起诉时，检察院才可以提起公益诉讼,当事人认为生效判决存在错误的，可以直接向法院申请再审或者直接向检察院申请抗诉,检察院以当事人身份提出公益诉讼和抗诉时，要出庭参加民事诉讼,检察院提出抗诉后撤回抗诉的，再审程序终结，原审判决生效,A,"1. A正确的。检察院提起公益诉讼处于第二顺位。只有没有其他法定主体或者其他法定主体不起诉时，检察院才可以提起公益诉讼。若法定主体起诉，检察院则不能起诉，但可以支持起诉。检察院进行检察监督以当事人向法院申请再审为前提。 15 | 2. B选项错误。只有当人民法院逾期未对再审申请作出裁定的，人民法院驳回再审申请的，再审判决、裁定有明显错误的，检察院才能依当事人的申请启动抗诉程序。 16 | 3. C选项是错误的。检察院提起公益诉讼时，作为法定的原告，确实是以当事人身份参加诉讼，且应出席庭审。但检察院提出抗诉的时候，并不属于民事诉讼的当事人，其需要出庭，但出庭的目的是支持抗诉。 17 | 4. D选项是错误的。若检察院撤回抗诉，再审程序终结，但原审判决之前就已经生效。" 18 | 4,张某，甲市人，中国乙市远洋运输公司“黎明号”货轮船员。“黎明号”航行在公海时，张某因与另一船员李某发生口角将其打成重伤。货轮返回中国首泊丙市港口时，张某趁机潜逃，后在丁市被抓获。该案应当由下列哪一法院行使管辖权?____,甲市法院,乙市法院,丙市法院,丁市法院,C,"1. 根据中国刑事诉讼法的规定，刑事案件的管辖权一般由犯罪行为发生地或者犯罪嫌疑人的住所地的基层人民法院行使。 19 | 2. 根据题目描述，张某是甲市人，但犯罪行为发生在“黎明号”航行在公海时，因此甲市法院和乙市法院都不具备管辖权。张某在丙市港口被抓获，因此丙市法院具备管辖权。所以，该案应当由丙市法院行使管辖权。" 20 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/logic_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,"1991年6月15日，菲律宾吕宋岛上的皮纳图博火山突然大喷发，2000万吨二氧化硫气体冲入平流层，形成的霾像毯子一样盖在地球上空，把部分要照射到地球的阳光反射回太空几年之后，气象学家发现这层霾使得当时地球表面的温度累计下降了0．5℃，而皮纳图博火山喷发前的一个世纪，因人类活动而造成的温室效应已经使地球表面温度升高1℃。某位持“人工气候改造论”的科学家据此认为，可以用火箭弹等方式将二氧化硫充入大气层，阻挡部分阳光，达到地球表面降温的目的。以下哪项如果为真,最能对该科学家的提议构成质疑?____",如果利用火箭弹将二氧化硫充入大气层，会导致航空乘客呼吸不适。,火山喷发形成的降温效应只是暂时的，经过一段时间温度将再次回升。,可以把大气层中的碳取出来存储在地下，减少大气层的碳含量。,不论何种方式，“人工气候改造”都将破坏地区的大气层结构。,B,"1. 首先，“人工气候改造论”的目的是令地球表面降温，应当据此反驳。 3 | 2. 选项A与选项D描述的是“人工气候改造论”带来的副作用，选项C是另一种方法，与“人工气候改造论”无关，选项B则反驳了地球表面降温是暂时的，最能对该科学家的提议构成质疑。" 4 | 1,"某市消费者权益保护条例明确规定，消费者对其所购商品可以“7天内无理由退货”，但这项规定出台后并未得到顺利执行，众多消费者在7天内“无理由”退货时，常常遭遇商家的阻挠，他们以商品已作特价处理、商品已经开封或使用等理由拒绝退货。以下哪项如果为真,最能质疑商家阻挠退货的理由。____",开封验货后，如果商品规格、质量等问题来自消费者本人，他们应为此承担责任。,那些作特价处理的商品，本来质量就没有保证。,如果不开封验货，就不能知道商品是否存在质量问题。,商品一旦开封或使用了，即使不存在问题，消费者也可以选择退货。,D,1. 分析消费者权益保护条例规定，消费者在7天内可以无理由退货，没有规定商品必须保持原封未拆或未使用状态。因此，即使商品已经开封或使用，只要在7天内，消费者仍然可以选择退货，因此D选项最能质疑商家阻挠退货的理由。 5 | 2,张教授：毕加索的每幅画都是杰作。李研究员：不对。有几幅达维和特莱克劳斯的绘画杰作也陈列在巴黎罗浮宫。李研究员显然认为张教授话中包含了以下哪项断定?____,只有毕加索的画才是杰作。,只有毕加索的绘画杰作才陈列在罗浮宫。,达维和特莱克劳斯的绘画称不上杰作。,罗浮宫中陈列的画都是杰作。,B,"1. 分析李研究员表达的具体内容，可以发现李研究员实际反驳的观点是“罗浮宫中只有毕加索的杰作”。 6 | 2. 对比张教授的断定和李研究员实际反驳的观点，可以推出李研究员认为张教授话中包含了只有毕加索的绘画杰作才陈列在罗浮宫的断定。" 7 | 3,一个优秀的领导人是不会脱离群众的。所以，如果一个领导人脱离群众，他就不是一个能够得到大多数群众拥护的人。以下哪项与上面的议论方式最相似?____,许多领导人是脱离群众的人。,所有电脑都需要安装相应的软件才能运行某种程序。因此，如果电脑没有安装相应的软件，则这个程序就不会运行。,所有孩子都喜欢与他人进行游戏活动。如果幼儿园多安排一些孩子之间的游戏活动，那么一定会受到家长的好评。,这道题在5分钟内答不完。要是谁在5分钟内答完，他就不是一个死记硬背的学员。,D,"1. 首先，分析题目中前提和结论之间的关系，题目中的结论是前提的逆否命题。 8 | 2. 分析选项：(A) 只是一个陈述，没有推导出结论；(B) 是一个因果关系的论证，与题目中的逻辑关系不符；(C) 是一个条件关系的论证，与题目中的逻辑关系不符；(D) 的结论是前提的逆否命题，与题目中逻辑关系一致。" 9 | 4,雄性园丁鸟能构筑装饰精美的巢。同一种类的不同园丁鸟群建筑的巢具有不同的建筑和装饰风格。根据这一事实，研究人员认为园丁鸟的建筑风格是一种后天习得的，而不是先天遗传的特性。以下哪项如果为真，最有助于加强研究者的结论?____,通过对园丁鸟的广泛研究发现，它们的筑巢风格中的共性多于差异。,年轻的雄性园丁鸟在开始筑巢时是很笨拙的，很显然要花许多年来观察年长者的巢才能成为行家能手。,有一种园丁鸟的巢缺少其他园丁鸟的巢都具有的塔形和装饰风格。,园丁鸟只在新几内亚和澳大利亚被发现，很显然，两地之间的园丁鸟没什么联系。,B,"1. 分析选项：共性多于差异并不意味着这些共性是后天习得的，因此选项(A)不能纯支持原结论。 10 | 2. (C)中巢的风格差异可能是因为园丁鸟生活的环境不同，而不是因为没有习得这种风格。 11 | 3. 选项(D)中提到的发现地与筑巢是后天习得的无关。 12 | 4. 选项(B)提到年轻的雄性园丁鸟在开始筑巢时是很笨拙的，需要观察年长者的巢才能成为行家能手，这表明园丁鸟的建筑风格是后天习得的，而不是先天遗传的。" 13 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/mao_zedong_thought_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,中共十八届三中全会通过的《中共中央关于全面深化改革若干重大问题的决定》指出，深化政治体制改革要紧紧围绕____,提高科学执政、民主执政、依法执政水平进行,坚持党的领导、人民当家作主、依法治国有机统一进行,推进社会主义民主政治制度化、规范化、程序化进行,建设社会主义法治国家进行,B,1. 深化政治体制改革要紧紧围绕坚持党的领导、人民当家作主、依法治国有机统一进行，加快推进社会主义民主政治制度化、规范化、程序化，建设社会主义法治国家，发展更加广泛、更加充分、更加健全的人民民主，B正确。2. 深化党的建设制度改革要紧紧围绕提高科学执政、民主执政、依法执政水平进行，A错误。 3 | 1,中共十八届三中全会通过的《中共中央关于全面深化改革若干重大问题的决定》指出，深化社会体制改革要紧紧围绕____,推进基本公共服务均等化,改革收入分配制度，促进共同富裕,更好保障和改善民生、促进社会公平正义,推进社会领域制度创新,C,1. 党的十八届三中全会对深化社会体制改革提出了新的要求：紧紧围绕更好保障和改善民生、促进社会公平正义，深化社会体制改革，改革收入分配制度，促进共同富裕。推进社会领域制度创新，推进基本公共服务均等化，加快形成科学有效的社会治理体制，确保社会既充满活力又和谐有序。C正确，A、B、D不符合题意。 4 | 2,个体经济、私营经济都是非公有制经济，但是，个体经济在性质上不同于私营经济，因为个体经济____,投资规模较小,经营方式单一,主要依靠自己劳动和经营,不是法人企业,C,1. 个体经济、私营经济都是非公有制经济，都是社会主义市场经济的重要组成部分，但个体经济是从事个体生产与经营的经济成分，不存在雇佣劳动关系；私营经济是拥有较多资本，主要是靠雇佣劳动进行生产经营，存在剥削现象。所以，个体经济在性质上不同于私营经济主要因为它依靠自己劳动和经营。 5 | 3,公有制经济的性质和实现形式是两个不同层次的问题。公有制经济的性质体现在____,组织形式上,所有权的归属上,经营方式上,分配方式上,B,"1. 公有制经济的性质体现在所有权的归属上。所有制作为生产关系的基础，有“公”与“私”、“社”与“资”的区分。 6 | 2. 坚持公有制的性质，根本的是坚持国家和集体对生产资料的所有权。采取怎样的经营方式和组织形式问题属于所有制的实现形式，它不具有“公”与“私”、“社”与“资”的区分。" 7 | 4,发展是硬道理，是党执政兴国的第一要务。要把发展的基点放在____,改革上,科技上,创新上,制度上,C,1. 2015年10月，党的十八届五中全会提出了创新、协调、绿色、开放、共享五大发展新理念。创新发展注重的是解决发展动力问题。创新是引领发展的第一动力，必须把创新摆在国家发展全局的核心位置，把发展基点放在创新上。 8 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/marxism_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,“先天下之忧而忧，后天下之乐而乐”，这句名言所包含的哲理是____,把个人价值融于社会价值之中,人的自由是相对的,人的发展具有历史阶段性,社会发展要以人为本,A,"1. 这句名言的意思是，先为天下的忧患而忧虑，后为天下的幸福而感到欢乐。这表明一个人应该把自己的利益和社会的利益联系起来，关注社会的发展和进步，而不是只关注自己的私利。 3 | 2. 我们可以将这句名言的哲学思想归纳为“把个人价值融于社会价值之中”。" 4 | 1,要正确解决事物矛盾的前提或关键是认识____,事物矛盾的普遍性,事物矛盾的特殊性,事物的主要矛盾,矛盾的主要方面,B,1. 正确解决事物矛盾的前提或关键是要深刻认识事物矛盾的特殊性，即要具体分析具体问题，把握事物矛盾的特点和表现形式，从而找到解决问题的方法和途径。 5 | 2,哲学与具体科学的区别表现在____,哲学是世界观，具体科学是方法论,哲学是绝对的，具体科学是相对的,哲学揭示一般规律，具体科学揭示特殊规律,哲学以各门具体科学为基础,D,1. 哲学和具体科学的区别表现在哲学以各门具体科学为基础，而具体科学则是对特定领域的现象和规律进行研究。 6 | 3,唯物辩证法否定的“扬弃”是指____,全盘抛弃,绝对否认,全盘肯定,既克服又保留，既批判又继承,D,1. 唯物辩证法中的“扬弃”是指对事物的发展过程中旧事物的处理方式。它既要克服旧事物的缺点和错误，又要保留旧事物的优点和成果，既要批判旧事物，又要继承旧事物。 7 | 4,社会进步的根本标准是____,生产资料公有制程度的高低,社会财富的分配是否合理,社会成员是否团结一致,基本的经济制度和政治制度是否有利于生产力的发展,D,1. 选项(D)基本的经济制度和政治制度是否有利于生产力的发展，是衡量社会进步的根本标准。 8 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/metrology_engineer_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,检定具有法制性，其对象是____范围内的测量仪器。,全国,企业,法制管理,所有,C,1. 检定具有法制性，其对象是法制管理范围内的测量仪器。 3 | 1,在比对工作中，参考值的确定方法有多种，由主导实验室提出经专家组评审并征得____同意后确定。,同行专家,参加实验室,比对组织者,主导实验室的领导,B,1. 参考值的确定方法由主导实验室提出并征得参比实验室同意后确定。 4 | 2,在国内计量比对中，下列关于比对数据的说法，正确的是____。,参比实验室正式提交比对数据后，不允许以任何形式进行修改,在比对总结报告发出之前，如确有原因，参比实验室可以以正式书面报告方式提出数据修改申请,若主导实验室发现某参比实验室数据异常，可通过适当方式了解细节，必要时通知该参比实验室对比数据进行修改,若主导实验室发现某参比实验室的测得值偏离参考值较远，应通知该参比实验室重新进行比对试验,B,"1. 首先，在比对总结报告发出之前，参比实验室对数据的任何修改均应以正式书面方式，且应在报告中体现修改过程和原因，因此选项B正确，选项A错误。 5 | 2. 其次，主导实验室不得以任何理由提示参比实验室修改数据或报告，因此选项C和选项D中的通知参比实验室均不符合比对要求，错误。" 6 | 3,额定操作条件是指____。,测量仪器的规定计量特性不受损也不降低，其后仍可在正常工作条件下运行所能承受的极端条件,使测量仪器的规定计量特性处于给定极限内的使用条件,测量仪器在性能试验或进行检定、校准时的使用条件,确定测量仪器本身性能所规定的标准条件,B,1. 额定操作条件是指测量仪器的正常工作条件，即使测量仪器的规定计量特性处于给定极限内的使用条件。 7 | 4,检定机构开展校准时必须具备____。,经过法定计量检定机构给予校准的计量器具,按规定经考核合格，并取得计量标准考核证书的计量标准器,准确度高于被校准测量仪器的计量器具,经检定合格的计量标准器,B,1. 法定计量检定机构进行检定或校准时，应使用经过计量标准考核并取得有效的计量标准考核证书的计量标准。 8 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/middle_school_biology_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,在进行植物分类时，小刚将玉米、向日葵、油松归为一类，将肾蕨、葫芦藓、水绵归为另一类，他的分类依据是____,是否有根,是否有茎和叶,能否产生种子,能否形成果实,C,"1. 首先，我们需要分析选项。选项A，假设小刚是通过是否有根来进行分类，玉米、向日葵、油松、肾蕨有根，而葫芦藓和水绵没有根，不符合题意。选项B，假设小刚是通过是否有茎和叶来进行分类，玉米、向日葵、油松、肾蕨、葫芦藓有茎和叶，而水绵没有茎和叶的分化，不符合题意。选项D，假设小刚是通过能否形成果实来进行分类，玉米属于被子植物，能产生果实；而向日葵和油松属于裸子植物，不能产生果实，肾蕨、葫芦藓、水绵也不能产生果实，不符合题意。 3 | 2. 最后，选项C描述的是植物是否能够产生种子，假设小刚是通过是否能产生种子来进行分类，玉米、向日葵、油松属于种子植物，都能产生种子。而肾蕨、葫芦藓、水绵都不能产生种子，用孢子繁殖后代，都属于孢子植物。选项C符合题意。" 4 | 1,下列关于病毒的说法，不正确的是____,病毒没有细胞结构，不能独立生活,病毒个体很小，要用电子显微镜才能观察得到,某些病毒可以携带某些基因进入正常细胞，来达到转基因或基因治疗的目的,病毒一旦侵入人体，就会使人患病,D,"1. 首先，病毒是一种非细胞生物，没有细胞结构，不能独立生活，必须寄生在宿主细胞内才能进行生命活动。并且，病毒个体很小，一般需要用电子显微镜才能观察得到。某些病毒可以携带某些基因进入正常细胞，来达到转基因或基因治疗的目的。 5 | 2. 其次，我们需要了解病毒与人体的关系。病毒一旦侵入人体，不一定会使人患病，因为人体有免疫系统可以抵御病毒的侵袭。只有当病毒攻击人体免疫系统，或者病毒数量过多，超过人体免疫系统的承受能力时，才会导致人患病。因此，不正确的说法是D。" 6 | 2,细菌与真菌相比，在细胞结构上，细菌没有____,细胞壁,细胞膜,细胞质,成形的细胞核,D,"1. 首先，我们需要了解细菌和真菌的基本特征。细胞壁、细胞膜和细胞质都是细菌和真菌都具有的细胞结构。 7 | 2. 其次，细菌的细胞核是原核细胞核，没有真核膜和染色体，因此没有成形的细胞核。相反，细菌的DNA是以环状的方式存在于细胞质中的。 8 | 3. 因此，细菌与真菌相比，在细胞结构上，细菌没有成形的细胞核。" 9 | 3,下列有关生物多样性的叙述错误的是____,保护生物多样性并不意味着禁止开发和利用生物资源,建立自然保护区是保护生物多样性最为有效的措施,物种多样性、生态系统多样性和遗传多样性共同组成了生物多样性,为了丰富我国的动植物资源，应大力引进一些外来物种,D,"1. 首先，我们需要了解生物多样性的概念，并分析选项：(A) 保护生物多样性并不意味着禁止开发和利用生物资源，这是正确的，保护生物多样性需要在合理利用的基础上进行；(B) 建立自然保护区是保护生物多样性最为有效的措施，这是正确的；(C) 物种多样性、生态系统多样性和遗传多样性共同组成了生物多样性，这是正确的；(D) 为了丰富动植物资源引进一些外来物种，这是错误的，引进外来物种可能会对当地生态系统造成破坏，甚至威胁到本地物种的生存，反而会破坏生物的多样性。 10 | 2. 根据以上分析，选项D是错误的。" 11 | 4,吸烟有害健康，吸烟对以下系统危害最大的是____,消化系统,循环系统,神经系统,呼吸系统,D,"1. 首先，吸烟会释放大量的有害物质，这些物质会对人体造成危害。 12 | 2. 其次，吸烟对循环系统，神经系统和消化系统等多个人体系统均有危害。其中，呼吸系统的危害最大，吸入的烟雾会刺激呼吸道，导致呼吸道炎症、支气管炎、肺气肿等疾病，严重的甚至会导致肺癌。" 13 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/middle_school_chemistry_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,物质的俗名与化学式相对应正确的是____,生石灰：$CaCO_3$,熟石灰：$Ca（OH）_2$,烧碱：$Na_2CO_3$,纯碱：$NaOH$,B,"1. 生石灰是$CaO$的俗名、熟石灰是$Ca(OH)_2$的俗名、烧碱是$NaOH$的俗名、纯碱是$Na_2CO_3$的俗名。 3 | 2. 对照选项和俗名对应的化学式，可知选项B是正确的。" 4 | 1,下列现象，用分子的相关知识解释不正确的是____,石油气经加压后贮存在钢罐中，说明分子间有间隔,水汽化后，水蒸气体积变大，说明分子的大小发生了改变,湿衣服晾在太阳底下干得快，说明分子运动速率与温度有关,水在通电情况下分解成氢气和氧气，说明分子在化学变化中可分,B,"1. 分析选项：气体分子之间的距离相对较大，加压后间隔会变小，(A)选项正确。 5 | 2. 水分子在液态和气态下大小是相同的，水蒸气体积变大是因为分子间的相互作用力减弱，分子之间的距离增大，(B)选项错误。 6 | 3. 温度升高会增加分子的平均动能，从而加快了水分子的蒸发速度，(C)选项正确。 7 | 4. 在电解水反应中，分子发生化学键的断裂和形成，从而产生新的分子，(D)选项正确。" 8 | 2,取一定量的氧化铁与氧化铜的混合物，加入溶质质量分数为9.8%的稀硫酸100g，恰好完全反应生成盐和水.原混合物中氧元素的质量是____,6.4g,3.2g,1.8g,1.6g,D,"1. 首先，我们需要知道氧化铁和氧化铜与稀硫酸反应的化学方程式：$Fe_2O_3 + 3H_2SO_4 → Fe_2(SO_4)_3 + 3H_2O$；$CuO + H_2SO_4 → CuSO_4 + H_2O$。根据题目描述，这两个反应都发生了，且完全反应。 9 | 2. 其次，分析化学方程式可知氧化物中氧元素全部转变为水中的氧元素。 10 | 3. 接着，我们需要计算生成的水的质量。设生成水的质量是x g：由方程式可以看出硫酸与生成水的关系为$\frac{98}{100 \times 8\%}=\frac{18}{x}$,解得x=1.8 g,所以水中氧元素的质量为：$1.8 g \times \frac{16}{18}=1.6 g$。" 11 | 3,百合具有润肺止咳、养颜美容等功效，百合中含有秋水仙碱，其化学式为$C_{22}H_{25}NO_6$，下列说法中正确的是____,秋水仙碱由碳、氢、氧三种元素组成,一个秋水仙碱分子由22个碳原子、25个氢原子、1个氮原子和3个氧分子构成,秋水仙碱分子中碳、氢、氮、氧原子个数比为22：25：1：6,秋水仙碱中氢元素的质量分数最大,C,"1. 首先，我们需要了解秋水仙碱的化学式$C_{22}H_{25}NO_6$，其中$C$表示碳，$H$表示氢，$N$表示氮，$O$表示氧。 12 | 2. 其次，我们需要根据化学式计算出秋水仙碱分子中各元素的质量比。根据化学式，碳元素的质量为：12×22=264；氢元素的质量为1×25=25；氮元素的质量为14；氧元素的质量为16×6=96。 13 | 3. 然后，我们需要判断哪个选项正确。选项A中只提到了碳、氢、氧三种元素，没有提到氮元素；选项B中的氧原子个数不正确；选项C中的原子个数比与实际比例一致；选项D中认为氢元素的质量分数最大，但实际上是碳元素最大。" 14 | 4,下列有关实验现象的描述正确的是____,硫在氧气中燃烧发出淡蓝色火焰,无色酚酞试液遇稀盐酸变成红色,硫酸铜溶液和氢氧化钠溶液反应会产生蓝色沉淀,红磷在空气中燃烧产生白雾,C,1. 分析选项：(A) 硫在氧气中燃烧发出的火焰是蓝紫色的，”淡蓝色火焰“错误。(B) 稀盐酸显酸性，遇无色酚酞溶液不变色，”变成红色“错误；(C) 硫酸铜溶液和氢氧化钠溶液反应会产生蓝色沉淀是正确的，产生的蓝色沉淀是氢氧化铜；(D) 红磷在空气中燃烧产生大量白烟，”白雾“错误。 15 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/middle_school_geography_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,下列关于亚洲地形的说法正确的是____,以山地、平原为主，中部高、四周低,以山地、高原为主，西高东低,以山地、高原为主，中部高、四周低,以山地、丘陵为主，中部高、四周低,C,1. 根据地理知识，亚洲地形复杂多样，以山地、高原为主，各地高低错落差异大，地势上是中间高、四周低。 3 | 1,我国人口分布不均匀，人口地理分界线和人口分布特点是____,黑河—腾冲一线，东多西少,黑河—腾冲一线，西多东少,漠河—腾冲一线，东多西少,漠河—腾冲一线，西多东少,A,"1. 人口地理分界线是指由于自然、经济等因素的影响，形成的人口分布的分界线。 4 | 2. 黑河—腾冲一线是我国的人口地理分界线，东北地区和东部地区人口密度较高，而西北地区和西部地区人口密度较低。" 5 | 2,下列山脉中，属于弧形山脉的是____,天山山脉,大兴安岭,台湾山脉,喜马拉雅山脉,D,"1. 首先，我们需要了解什么是弧形山脉。弧形山脉是指呈弧度走向的山脉，如喜马拉雅山脉等。 6 | 2. 接着，我们分析选项： 天山山脉，台湾山脉，大兴安岭，均不属于弧形山脉；喜马拉雅山脉，位于南亚地区，是一条东西走向的高山脉，是典型的弧形山脉。" 7 | 3,下面的灾害中不属于气象灾害的是____,台风,寒潮,干旱,泥石流,D,"1. 首先，气象灾害是指由于气象因素引起的自然灾害，如台风、暴雨、干旱、寒潮等。 8 | 2. 接着，台风、寒潮和干旱属于气象灾害。而泥石流不是一种气象灾害。它是指由于降水等因素，在沟谷或山坡上产生的一种挟带大量固体物质的特殊洪流。" 9 | 4,我国濒临的海洋，从北到南依次为____,南海、东海、黄海、渤海,渤海、黄海、东海、南海,渤海、东海、黄海、南海,黄海、东海、南海、渤海,B,1. 我国濒临的海洋主要有四个，从北到南依次为渤海、黄海、东海和南海。 10 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/middle_school_history_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,"《凡尔赛和约》的内容包括____。 3 | 4 | ①阿尔萨斯和洛林交还法国 ②废除德国的普遍义务兵役制 5 | ③承认波兰独立 ④尊重中国主权和独立",①②④,①②③,①③④,②③④,B,"1. 根据历史事实，①阿尔萨斯和洛林交还法国是《凡尔赛和约》的内容之一，这两个地区在第一次世界大战中被德国占领；②废除德国的普遍义务兵役制也是《凡尔赛和约》的内容之一，这是对德国的军事限制之一；③承认波兰独立也是《凡尔赛和约》的内容之一，波兰在第一次世界大战中重新独立；④尊重中国主权和独立虽然是中国在《凡尔赛和约》中提出的要求，但并没有得到充分的保障，因此不能算作《凡尔赛和约》的内容之一。 6 | 2. 根据以上分析，正确的内容是①②③。" 7 | 1,“一代天骄”成吉思汗建立的政权是____,辽,金,蒙古,元,C,1. 成吉思汗在经历了多次战争后，统一了蒙古部落，建立了蒙古帝国。 8 | 2,今年是联合国的成立65周年，当年决定成立这一重要国际组织的会议是____,雅尔塔会议,开罗会议,德黑兰会议,波茨坦会议,A,1. 联合国是一个由各国政府组成的国际组织，成立于1945年的雅尔塔会议。 9 | 3,假如一个人出生于公元前20年，去世于公元38年，那么，这个人的年龄是多少周岁？____,57岁,58岁,59岁,18岁,A,1. 这个人的生存年龄为（公元38年-公元前20年-1年）= 57年。 10 | 4,在一座城市市政府门前，有一座标志性的雕像名为拓荒牛，这座城市就是在改革开放中，被誉为“一夜崛起之城”的____,上海,深圳,珠海,厦门,B,1. 深圳是中国的特别经济区之一，它在改革开放初期率先实行市场经济和对外开放政策，经济发展迅速，被称为“一夜崛起之城”。 11 | -------------------------------------------------------------------------------- /assets/ceval_data/dev/middle_school_mathematics_dev.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer,explanation 2 | 0,若点A（ $x_1$，-3 ），B（ $x_2$，-2 ），C（ $x_3$，1）在反比例函数 $y=-\dfrac{k^{2}+1}{x}$的图象上，则$x_1$ ，$x_2$ ，$x_3$ 的大小关系是为____,$x_{1}x_1>0$；C位于第二象限，则$x_3<0$。 4 | 3. 最后，我们将第2步的结论整理：$x_{3}0,\end{matrix}\right.$恰有两个整数解，则a的取值范围为____",$2\leq a\leq3$,$\frac{2}{3}0$。将其化简得到$x>2$。 15 | 2. 接着，我们将两个不等式组合在一起，得到$x>2$且$x<3a+2$。由题意，这个不等式组恰有两个整数解，因此，$x=3$和$x=4$。 16 | 3. 最后，我们需要找到a的取值范围。将这两个$x$取值代入不等式$x<3a+2$，得到$3<3a+2$和$4<3a+2$。解这两个不等式，我们得到$a>\frac{1}{3}$和$a>\frac{2}{3}$，合并两个条件得到$a>\frac{2}{3}$。由于题目要求恰有两个整数解，因此，$x< 5$。所以有$x<3a+2\le 5$，化简后得到$a\leq 1$。因此，a的取值范围为$\frac{2}{3}>d)，单色光波长为λ，屏幕上相邻明条纹之间的距离为____,λD/d,λd/D,λD/(2d),λd/(2D),A 10 | 8,关于电场强度定义式E=F/q0，下列说法中哪个是正确的？____,场强E的大小与试探电荷q0的大小成反比,对场中某点，试探电荷受力F与q0的比值不因q0而变,试探电荷受力F的方向就是场强E的方向,若场中某点不放试探电荷q0，则F=0，从而E=0,B 11 | 9,设有一个带正电的导体球壳，当球壳内充满电介质、球壳外是真空时，球壳外一点的场强大小和电势用E1，U1表示；而球壳内、外均为真空时，壳外一点的场强大小和电势用E2，U2表示，则两种情况下壳外同一点处的场强大小和电势大小的关系为____,E1 = E2，U1 = U2,E1 = E2，U1 > U2,E1 > E2，U1 > U2,E1 < E2，U1 < U2,A 12 | 10,如果在空气平行板电容器的两极板间平行地插入一块与极板面积相同的金属板，则由于金属板的插入及其相对极板所放位置的不同，对电容器电容的影响为：____,使电容减小，但与金属板相对极板的位置无关,使电容减小，且与金属板相对极板的位置有关,使电容增大，但与金属板相对极板的位置无关,使电容增大，且与金属板相对极板的位置有关,C 13 | 11,在波长为λ的驻波中两个相邻波节之间的距离为：____,λ,3λ/4,λ/2,λ/4,C 14 | 12,用强度为I，波长为λ的X射线(伦琴射线)分别照射锂(Z=3)和铁(Z=26)．若在同一散射角下测得康普顿散射的X射线波长分别为λ_{Li}和λ_{Fe}(λ_{Li}，λ_{Fe}>λ)，它们对应的强度分别为I_{Li}和I_{Fe}，则____,"λ_{Li}>λ_{Fe}, I_{Li}I_{Fe}","λ_{Li}<λ_{Fe}, I_{Li}>I_{Fe}",C 15 | 13,两个相距不太远的平面圆线圈，怎样可使其互感系数近似为零？____（设其中一线圈的轴线恰通过另一线圈的圆心）,两线圈的轴线互相平行放置,两线圈并联,两线圈的轴线互相垂直放置,两线圈串联,C 16 | 14,一特殊的轻弹簧，弹性力F=-kx3，k为一常量系数，x为伸长(或压缩)量。现将弹簧水平放置于光滑的水平面上，一端固定，一端与质量为m的滑块相连而处于自然长度状态。今沿弹簧长度方向给滑块一个冲量，使其获得一速度v，压缩弹簧，则弹簧被压缩的最大长度为____,\sqrt{m/k}v,\sqrt{k/m}v,(4mv/k)^(1/4),(2mv^2/k)^(1/4),D 17 | 15,一个圆锥摆的摆线长为l，摆线与竖直方向的夹角恒为θ，如图所示。则摆锤转动的周期为____,$\sqrt{l/g}$,$\sqrt{l\cos θ/g}$,$2π\sqrt{l/g}$,$2π\sqrt{l\cosθ/g}$,D 18 | 16,把一平凸透镜放在平玻璃上，构成牛顿环装置．当平凸透镜慢慢地向上平移时，由反射光形成的牛顿环____,向中心收缩，条纹间隔变小,向中心收缩，环心呈明暗交替变化,向外扩张，环心呈明暗交替变化,向外扩张，条纹间隔变大,B 19 | 17,对于沿曲线运动的物体，以下几种说法中哪一种是正确的____,切向加速度必不为零,法向加速度必不为零（拐点处除外）,由于速度沿切线方向，法向分速度必为零，因此法向加速度必为零,若物体作匀速率运动，其总加速度必为零,B 20 | 18,有三个直径相同的金属小球．小球1和小球2带等量异号电荷，两者的距离远大于小球直径，相互作用力为F．小球3不带电并装有绝缘手柄．用小球3先和小球1碰一下，接着又和小球2碰一下，然后移去．则此时小球1和2之间的相互作用力为____,0,F/4,F/3,F/2,C 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/computer_architecture_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,指令中地址码的长度不仅与主存容量有关，而且还与____有关。,主存字长,最小寻址单位,指令格式,地址码格式,B 3 | 1,开中断和关中断两种操作都用于对____进行设置。,中断允许触发器,中断屏蔽寄存器,中断请求寄存器,中断向量寄存器,A 4 | 2,计算机系统的层次结构可以分为6层，其层次之间的依存关系是____。,上下层之间相互无关,上层实现对下层的功能扩展，而下层是实现上层的基础,上层实现对下层的扩展作用，而下层对上层有限制作用,上层和下层的关系是相互依存、不可分割的,B 5 | 3,在主机与外设的信息传送中，____不是一种程序控制方式。,直接程序控制,程序中断,直接存储器存储(DMA),通道控制,C 6 | 4,关于LRU算法，以下论述正确的是____。,LRU算法替换掉那些在Cache中驻留时间最长且未被引用的块,LRU算法替换掉那些在Cache中驻留时间最短且未被引用的块,LRU算法替换掉那些在Cache中驻留时间最长且仍在引用的块,LRU算法替换掉那些在Cache中驻留时间最短且仍在引用的块,A 7 | 5,已知一台时钟频率为2GHz的计算机的CPI为1.2。某程序P在该计算机上的指令条数为$4×10^9$。若在该计算机上，程序P从开始启动到执行结束所经历的时间是4s，则运行P所用CPU时间占整个CPU时间的百分比大约是____。,40%,60%,80%,100%,B 8 | 6,总线宽度与下列____有关。,控制线根数,数据线根数,地址线根数,以上都不对,B 9 | 7,计算机的指令系统是计算机____的接口。,数据和指令,命令和显示,输入系统和输出系统,软件和硬件,D 10 | 8,按通道的工作方式分，通道有____。,选择通道,字节多路通道,数组多路通道,以上答案均正确,D 11 | 9,用海明码对长度为8位的数据进行检/纠错时，若能纠正一位错，则校验位数至少为____。,2,3,4,5,C 12 | 10,微型计算机的发展以____技术为标志。,操作系统,微处理器,磁盘,软件,B 13 | 11,一个16位无符号二进制数的表示范围是____。,0～65536,0～65535,-32768～32767,-32768～32768,B 14 | 12,子程序调用指令执行时，要把当前程序计数器(PC)的内容存到____。,通用寄存器,堆栈,指令寄存器,数据缓冲器,B 15 | 13,某计算机字长32位，其存储容量是1MB。若按字编址，它的寻址范围是____。,0～1M,0～512K,0～256K,0～256KB,C 16 | 14,单地址双目运算类指令中，除地址码指明的一个操作数以外，另一个操作数通常采用____。,堆栈寻址方式,立即寻址方式,间接寻址方式,隐含指定方式,D 17 | 15,中断发生时，程序计数器内容的保护和更新是由____完成的。,硬件自动,进栈指令和转移指令,访存指令,中断服务程序,A 18 | 16,执行for循环时，需要传送循环次数值给某专用寄存器，一般使用的寻址方式是____。,立即寻址,直接寻址,基址寻址,相对寻址,A 19 | 17,对真值0表示形式唯一的机器数是____。,原码,补码和移码,反码,以上都不对,B 20 | 18,下列关于Cache的说法中，正确的是____。,采用直接映像时，Cache无需考虑替换问题,如果选用最优替换算法，则Cache的命中率可以达到100%,Cache本身的速度越快，则Cache存储器的等效访问速度就越快,Cache的容量与主存的容量差别越大越好,A 21 | 19,关于通用寄存器，下列说法正确的是____。,可存放指令的寄存器,可存放程序状态字的寄存器,本身具有计数逻辑与移位逻辑的寄存器,可存放运算结果的寄存器,D 22 | 20,微程序存放的位置是____。,CPU,高速缓冲存储器,主存储器,磁盘存储器,A 23 | -------------------------------------------------------------------------------- /assets/ceval_data/val/computer_network_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,使用位填充方法，以01111110为位首flag，数据为011011111111111111110010，求问传送时要添加几个0____,1,2,3,4,C 3 | 1,在802.3标准中，发送帧之前需要____,等待冲突,等待令牌,监听介质,接受一个帧,C 4 | 2,TCP端对端通信作用于____,主机之间,网络之间,进程之间,主机到网络,C 5 | 3,对于传输层来说错误的是____,TCP是全双工协议,TCP是字节流协议,TCP和UDP协议不能使用同一个端口,TSAD是IP和端口的组合,C 6 | 4,已知当前TCP连接的RTT值为35ms，连续收到3个确认报文段，它们比相应的数据报文段的发送时间滞后了27ms、30ms与21ms。假设α=0.2，则第三个确认报文段到达后新的RTT估计值为____。,33.4ms,32.7ms,21ms,30.4ms,D 7 | 5,对于UDP协议，如果想实现可靠传输，应在哪一层实现____,数据链路层,网络层,传输层,应用层,D 8 | 6,数据链路层采用了后退N帧的(GBN)协议，如果发送窗口的大小是32，那么至少需要____位的序列号才能保证协议不出错。,4,5,6,7,C 9 | 7,TCP“三次握手”过程中，第二次“握手”时，发送的报文段中____标志位被置为1。,SYN,ACK,ACK和RST,SYN和ACK,D 10 | 8,一个TCP连接的数据传输阶段，如果发送端的发送窗口值由2000变为3000，意味着发送端可以____。,在收到一个确认之前可以发送3000个TCP报文段,在收到一个确认之前可以发送1000B,在收到一个确认之前可以发送3000B,在收到一个确认之前可以发送2000个TCP报文段,C 11 | 9,关于传输层的面向连接服务的特性是____。,既不保证可靠，也不保证按序交付,不保证可靠，但保证按序交付,保证可靠，但不保证按序交付,既保证可靠，也保证按序交付,D 12 | 10,____采用链路状态算法,RIP,OSPF,BGP-4,EGP,B 13 | 11,一个TCP连接的数据传输阶段，如果发送端的发送窗口值由2000变为3000，意味着发送端可以____。,在收到一个确认之前可以发送3000个TCP报文段,在收到一个确认之前可以发送1000字节,在收到一个确认之前可以发送3000字节,在收到一个确认之前可以发送2000个TCP报文段,C 14 | 12,下列关于交换技术叙述错误的是____,电路交换在发送与接收方的物理链路上预留带宽,数据报交换可能出现分组乱序,数据报交换可能出现分组乱序,报文交换要求有较大缓存,B 15 | 13,现在大量的计算机是通过诸如以太网这样的局域网连入广域网的，而局域网与广域网的互联是通过____实现的。,路由器,资源子网,桥接器,中继器,A 16 | 14,"局域网的协议结构包括____。 17 | Ⅰ．网络层Ⅱ．数据链路层 18 | Ⅲ．物理层Ⅳ．介质访问控制层",Ⅰ、Ⅱ、Ⅲ,Ⅰ、Ⅱ、Ⅳ,Ⅰ、Ⅲ、Ⅳ,Ⅱ、Ⅲ、Ⅳ,D 19 | 15,HTTP1.0中，传输一个文本和三个图片需要建立____个TCP连接,2,3,4,5,C 20 | 16,UDP报头部长度为____。,8B,20B,60B,不定长,A 21 | 17,主机甲与主机乙之间已建立一个TCP连接，主机甲向主机乙发送了3个连续的TCP段，分别包含300字节、400字节和500字节的有效载荷，第3个段的序号为9000若主机乙仅正确接收到第1和第3个段，则主机乙发送给主机甲的确认序号是____。,300,500,1200,1400,B 22 | 18,若采用后退N帧ARQ协议进行流量控制，帧编号字段为7位，则发送窗口的最大长度为____。,7,8,127,128,C 23 | -------------------------------------------------------------------------------- /assets/ceval_data/val/discrete_mathematics_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,"下列集合中与$\mathbf{\{}1,2\}$不相等的是:____","$\{1,2\}\cup\phi$","$\{1,2\}$","$\{1,2,2\}$",$\{x|\ x\in{\mathcal{R}}\land x^{2}-3x+2=0\}$,B 3 | 1,令P：天气很冷，Q：老王来了，则命题“虽然天气很冷，但是老王还是来了”可符号化为____,P∧Q,P→Q,P∧﹁Q,P→﹁Q,A 4 | 2,对于集合A上的二元关系R，若$B\subseteq A$，$C\subseteq A$，$R\uparrow\ B$代表关系R在集合B上受限，则下列是正确的____,$R[B\cap C]=R[B]\cap R[C]$,$R[B]-R[C]=R[B-C]$,$B\subseteq A\Leftrightarrow R[B]\subseteq R[A]$,$R\uparrow(B\cup C)=R\uparrow B\cup R\uparrow C$,D 5 | 3,下列说法错误的是____,"若简单图每个节点的度大于等于$\frac{n}{2}$,则$G$有$H$回路",简单图$G$存在$H$回路的充要条件是其闭合图存在$H$回路,简单图$G$的任意结点$v_i$，$v_j$之间恒有$d(v_{j})+d(v_{j})\geq n{-}1$， 则$G$存在$H$回路,简单图的闭合图唯一,C 6 | 4,给定n个结点的一个图，它是一个树的下列说法中，____是不对的。,无回路的连通图,无回路但若增加一条新边就有回路,连通且m=n-1， 其中m是边数，n是结点数,所有结点的度数>2,D 7 | 5,六阶群的任何非平凡子群一定不是____,2阶,5阶,3阶,6阶,D 8 | 6,下面说法____是错误的,不存在既自反又反自反的关系,存在即对称又反对称的关系,存在即不对称又不反对称的关系,由一个有序对构成的二元关系一定是一个传递关系。,A 9 | 7,设图G是有6个顶点的连通图，总度数为20，则从G中删去____边后使之变成树。,10,5,3,2,B 10 | 8,设G为平面图，则下面可能不正确的选项是_____,G = (G*)*,G*= ((G*)*)*,(G*)* = (G*)*)*)*,((G*)*)*= ((((G*)*)*)*)*,A 11 | 9,已知一棵树T中有度为5，4，3，2的顶点各一个，其余为树叶顶点，T的树叶顶点数为哪项？____,8,7,6,5,A 12 | 10,含5个顶点、3条边的不同构的简单图有几个?____,2,3,4,5,C 13 | 11,下面说法错误的是____,邻接矩阵能表示自环，也能表示重边,有向图邻接矩阵的第$i$行非零元的数目恰好是$\nu_{i}$的正度。第$j$列非零元的数目是$\nu_{j}$的负度,关联矩阵能表示重边，不能表示自环,有向图关联矩阵第$i$行中1 的数目是$\nu_{i}$的正度，-1 的数目是$\nu_{i}$的负度。,A 14 | 12,下式不一定成立的是____,$(\forall x)(P(x)\wedge Q(x))=(\forall x)P(x)\wedge(\forall x)Q(x)$,$(\exists x)(P(x)\lor Q(x))=(\exists x)P(x)\lor(\exists x)Q(x)$,$(\forall x)(\forall y)(P(x)\lor{Q(x)}(y))=(\forall x)P(x)\lor(\forall x)Q(x)$,$(\exists x)(P(x)\wedge Q(x))=(\exists x)P(x)\wedge(\exists x)Q(x)$,D 15 | 13,设A={2，3，4，6，9，12，18}，A中的整除关系R是偏序关系，那么在偏序集中，下列说法正确的是____,A的最大元素是18；,A 的最小元素是2；,B= {3，9}的上界只有 18；,B= {4，9} 没有上下界。,D 16 | 14,设G为平面图，则下面可能不连通的图是____,G的闭合图,G*,(G*)*,(((G)*)*)*,A 17 | 15,"一个无向图有五个结点，其中4个的度数是1,2,3,4,则第5个结点的度数不可能是____",0,2,4,5,D 18 | -------------------------------------------------------------------------------- /assets/ceval_data/val/education_science_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,____是高等学校的中心工作，是实现一定的教育目的和人才培养目标的基本途径。,管理,教学,课程,科研,B 3 | 1,依活动过程的特点，可以将动机分为____。,交往动机和威信动机,社会动机和局部动机,外部动机和内部动机,近景动机和远景动机,A 4 | 2,把多种学科的相关内容融合在一起，构成新的课程，这是____,活动课程,综合课程,学科课程,必修课程,B 5 | 3,根据学习动机的社会意义，可以把学习动机分为____。,社会动机与个人动机,工作动机与提高动机,高尚动机与低级动机,交往动机与荣誉动机,C 6 | 4,现代学位制度确立的标志是德国柏林大学创设的____。,文学博士学位,医学博士学位,理学博士学位,哲学博士学位,D 7 | 5,严复提倡的三育论不包括____。,智育,体育,德育,美育,D 8 | 6,班级里的小集团属于____。,联合群体,正式群体,松散群体,非正式群体,D 9 | 7,整个社会实践活动过程中，____得到充分体现。,教师的主体性,学生的主体性,教师的指导作用,活动的灵活性,B 10 | 8,个体品德的核心部分是____。,道德认知,道德观念,道德情感,道德行为,A 11 | 9,对有关历史生活的领会，不能缺少____。,言语直观,形象直观,感知直观,表象直观,A 12 | 10,实验研究的情境和被试的代表性主要影响实验的____。,内在效度,外在效度,难度,区分度,B 13 | 11,教育心理学研究的根本任务在于____。,研究心理现象,对心理进行测量,获取心理数据，区分心理高下,研究、揭示教育过程中学生学习的性质、特点等,D 14 | 12,北京大学的前身是____。,京师大学堂,京师同文馆,天津中西学堂,时务学堂,A 15 | 13,罗杰斯提出的学习动机理论是____。,需要层次论,强化理论,自我效能感理论,自由学习理论,D 16 | 14,以下关于迁移的理解中，错误的是____。,从一般平行四边形有关内容的掌握影响菱形的学习，属于自上而下的垂直迁移,在同化迁移中，原有认知结构在迁移中不发生实质性改变，只得到某种充实,处于同一概括水平的经验之间的相互影响是垂直迁移,定势迁移的影响表现为促进和阻碍,C 17 | 15,明确提出教育目的是为“完满的生活”做准备的教育家是____,杜威,斯宾塞,陶行知,陈鹤琴,B 18 | 16,通过学习而形成的合乎法则的心智活动方式即是____。,智力技能,知识迁移,智力,思维程序,A 19 | 17,19世纪，美国中等教育最主要的形式是____。,文科中学,文实中学,公立中学,文法学校,B 20 | 18,下列选项中，属于《中华人民共和国教师法》明确规定的教师专业权利的是____,指导学生学习与发展的权利,对学校进行管理与领导的权利,选择教材教法开展教学工作的权利,检查与评价学生品行、学业、身体的权利,A 21 | 19,有学者强调，教育要根据一个民族固有的特征来定，这种观点体现了____,生产力对教育的影响和制约,政治制度对教育的影响和制约,文化对教育的影响和制约,经济制度对教育的影响和制约,C 22 | 20,教师教学反思的成分不包括____。,认知成分,思维成分,批判成分,教师的陈述,B 23 | 21,下列不属于教育科学研究方法论原则的是____。,理论联系实际,注意理论的层次性,加强综合研究,改进研究的效率,D 24 | 22,“天将降大任于斯人也，必先苦其心志，劳其筋骨，饿其体肤，空乏其身，行拂乱其所为，所以动心忍性，增益其所不能。”体现的德育方法是____,说服教育,榜样示范,情感陶冶,实际锻炼,D 25 | 23,在德育过程中，只看到学生差的地方，认为其无可救药，这违背了德育的____原则。,知行统一,严格要求与尊重信任相结合,照顾年龄特点与照顾个别特点相结合,发挥积极因素与克服消极因素相结合,D 26 | 24,狭义的教育主要是指____。,家庭教育,学校教育,社会教育,职业教育,B 27 | 25,根据学术门类划分或职业门类划分，将课程组合成不同的专门化领域，这些组合被称为____。,课程,专业,教学计划,教学大纲,B 28 | 26,颜元对传统教育的批判，不包括____,揭露传统教育严重脱离实际,反对封建专制政权,批判传统教育的义、利对立观,抨击八股取士制度,B 29 | 27,依据赫尔巴特的教学阶段论，当学生的兴趣处于“期待”时，教学阶段是____,明了,联想,系统,方法,B 30 | 28,苏联1966年教育改革的主要任务是____,使学生获得牢固的科学基础知识，具有高度的觉悟，培养青年面向生活并能自觉地选择职业,实行“人道主义”“多元化”“民主化”,为高一级学校培养和输送合格的毕业生,对普通教育、职业教育、技术教育和高等教育的改革提出了具体的要求和措施,A 31 | -------------------------------------------------------------------------------- /assets/ceval_data/val/high_school_biology_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,下列叙述中最符合自由水生理功能的是:____,运输营养物质和代谢废物,与细胞内的其他物质结合,作为溶剂，使无机盐成为离子状态,细胞结构的组成成分,A 3 | 1,下列有关生物膜系统的叙述中，正确的是____,细胞膜、小肠黏膜等都属于细胞的生物膜系统,所有的酶都附着在生物膜上,分泌蛋白合成和运输过程中，内质网膜面积减小，细胞膜的面积增大,生物膜的组成成分和结构都是一样的,C 4 | 2,A（抗病）对a（不抗病），B（高杆）对b（矮杆），亲本为AAbb与aaBB，杂交后得到F1，对F1测交，子代中，矮杆抗病的个体的基因型为____,AaBb,Aabb,AAbb,aabb,B 5 | 3,"在下列实例中，分别属于相对性状和性状分离的是____ 6 | ①羊的长角与短腿 7 | ②水稻的非糯性和糯性 8 | ③兔的粗毛和狗的细毛 9 | ④高茎豌豆与矮茎豌豆杂交,后代全为高茎豌豆 10 | ⑤开红花的牡丹与开白花的牡丹杂交,后代全开粉红花 11 | ⑥白毛兔与白毛兔杂交后代中出现了灰毛兔",②⑥,②④,①⑤,③⑤,A 12 | 4,有关记忆细胞的叙述中，不正确的是____,受同一抗原刺激后，迅速形成大量的抗体,受同一抗原刺激后，迅速形成浆细胞,受同一抗原刺激后，迅速形成效应T细胞,是B细胞或T细胞增殖分化形成的,A 13 | 5,下列关于生物育种的叙述，正确的是____,多倍体育种不能产生新物种,单倍体育种会产生定向变异,杂交育种的子代间会产生生殖隔离,诱变育种可改变种群基因频率,D 14 | 6,下列说法正确的是____,较大的分子，如葡萄糖等只有通过主动运输才能进入细胞,所有的细胞都具有相同的细胞膜结构，即由磷脂分子构成膜的基本支架，“嵌入”支架或“漂浮”在支架两侧的蛋白质的种类和数量相同,叶绿体中的色素都有吸收光能的作用,在叶绿体的内膜、类囊体上和基质中含有多种进行光合作用所必需的酶,C 15 | 7,新冠病毒刚刚爆发时检测病患并及时隔离的措施属于____,注射疫苗,控制传染源,切断传播途径,保护易感人群,B 16 | 8,用普通小麦（为六倍体）的花粉经花药离体培养技术培育成的植株是____,单倍体，体细胞内含有一个染色体组,单倍体，体细胞内含有三个染色体组,三倍体，体细胞内含有三个染色体组,六倍体，体细胞内含有六个染色体组,B 17 | 9,检测某一组织细胞，发现其分解有机物速率减慢，且细胞萎缩。这说明该细胞正在____,分化,分裂,衰老,癌变,C 18 | 10,小麦抗锈病对易染病为显性。现有甲、乙两种抗锈病小麦，其中一种为纯种，若要鉴别和保留纯合的抗锈病小麦，下列最简便易行的方法是____,甲×乙,甲×乙得F1再自交,甲、乙分别和隐性类型测交,甲×甲、乙×乙,D 19 | 11,下列有关细胞与细胞结构的叙述正确的是____,"细胞核是细胞的控制中心,能控制细胞遗传和代谢",能分解衰老、损伤细胞器的酶是在溶酶体中合成的,核仁与tRNA的合成有关,可用高倍显微镜观察内质网和高尔基体,A 20 | 12,"萨顿假说认为“基因是由染色体携带着从亲代传递给子代的"".下列相关推测错误的是____",体细胞中基因和染色体是成对存在的,体细胞中成对的基因一个来自父方，另一个来自母方，同源染色体也是如此,不同物种的细胞中基因数量和染色体数量的比值是一定的,"减数分裂时,同源染色体上的非等位基因无法自由组合",C 21 | 13,在电子显微镜下观察到植物细胞有丝分裂末期细胞板的周围聚集着许多小囊泡，这些小囊泡属于细胞的哪种结构？小囊泡可能含有何种物质____,内质网　蛋白质、磷脂,高尔基体　蛋白质、磷脂,内质网　纤维素、果胶,高尔基体　纤维素、果胶,D 22 | 14,煎饺是我国北方地区特色传统小吃之一，以面粉和肉馅为主要食材制作成水饺，水饺煮熟放凉后用植物油煎制而成。煎饺表面酥黄，口感香脆。下列说法错误的是____,肉馅中的蛋白质在高温加热过程中肽键断裂使其结构松散，利于人体消化,煎制水饺时所用的植物油大多含有不饱和脂肪酸，在室温下呈液态,面粉中富含的植物多糖必须经过消化分解成葡萄糖，才能被人体吸收,肉馅中的糖原属于多糖，不能直接被细胞吸收利用,A 23 | 15,"已知21四体的胚胎不能成活。现有一对夫妇均为21三体综合征患者，假设他们在产生配子时，第21号的三体染色体一条移向细胞的一极，两条移向另一极,则他们生出患病女孩的概率是____", 1/2, 1/3, 2/3, 1/4,B 24 | 16,细胞的生长、增殖、衰老、凋亡等生命历程对人体的生命活动而言是不可或缺的。下列相关判断正确的是____,细胞在生长过程中，体积虽然增大，但其物质运输效率并没有增强,人体发育过程中，细胞增殖改变了子细胞的遗传物质导致了细胞分化,细胞的衰老导致人体的衰老，延缓人体衰老就要设法阻止细胞的衰老,细胞凋亡由遗传物质控制，只发生在老年个体，能加速人体的衰老死亡,A 25 | 17,一正在复制的DNA分子，解旋的时候一条链上的G变成了C，则此DNA分子经n次复制后，发生差错的DNA占子代DNA总数的____,$\frac{1}{2}$,$\frac{1}{{2}^{n}-1}$,$\frac{1}{{2}^{n}}$,$\frac{1}{4}$,A 26 | 18,下列关于水稻细胞内ATP的叙述，错误的是____,能与ADP相互转化,只能由细胞呼吸产生,可为物质跨膜运输提供能量,释放的磷酸基团能与某些蛋白质结合,B 27 | -------------------------------------------------------------------------------- /assets/ceval_data/val/high_school_chemistry_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,对于淀粉和纤维素两种物质，下列说法正确的是____,两者都能水解，且水解的最终产物相同,两者含C、H、O三种元素的质量分数相同，且互为同分异构体,它们都属于糖类，且都是溶于水的高分子化合物,都可 用$\left ( C_6H_6O_5\right )_n$表示，但淀粉能发生银镜反应，而纤维素不能,A 3 | 1,a mol $Na_2O_2$和 b mol $NaHCO_3$固体混合后，在密闭容器中加热到250℃，使其充分反应，当排出气体为两种气体时，a︰b不可能为：____,$3︰4$,$3︰2$,$2︰3$,$4︰5$,B 4 | 2,X、Y、Z、W、R是5种短周期元素，其原子序数依次增大。X是周期表中原子半径最小的元素，Y原子最外层电子数是次外层电子数的3倍，Z、W、R处于同一周期，R与Y处于同一主族，Z、W原子的核外电子数之和与Y、R原子的核外电子数之和相等。下列说法正确的是____,元素Y、Z、W具有相同电子层结构的离子，其半径依次增大,元素X不能与元素Y形成化合物$X_2Y_2$,元素Y、R分别与元素X形成的化合物的热稳定性：$X_mY > X_mR$,元素W、R的最高价氧化物的水化物都是强酸,C 5 | 3,下列家庭小实验最合理的是____,将适量的苏打粉放在容器中加热，观察气体的产生,在洁净的水杯中先加入小苏打粉，再加入食醋，观察气体的产生,往稀白粥中加入少量加碘食盐，检验加碘食盐中含有$I_2$,在一瓣橘子上插入两根铜线并与小灯泡连接，验证电流的产生,B 6 | 4,下列反应的离子方程式中正确的是____,氯气与水反应:$Cl_2+H_2O = 2H^+ + Cl^- + ClO^-$,氯气通入冷的氢氧化钠溶液中：$2Cl_2+2OH^- = 3Cl^- + ClO^- +H_2O$,氯化亚铁溶液中滴加过量新制氯水：$2Fe^{2+} + Cl_2 = 2Fe^{3+} + 2Cl^-$,少量碳酸钙固体加入足量稀盐酸中：$CO_3^{2-}+2H^+ = CO_2\uparrow +H_2O$,C 7 | 5,下列物质属于合成聚合物的是____,蛋白质,人造丝,人造棉,聚氯乙烯,D 8 | 6,氯的原子序数为17，$^{35}Cl$是氯的一种核素，下列说法正确的是____,$^{35}Cl$原子所含质子数为18,$\frac{1}{18}$的$^1H^{35}Cl$分子所含中子数约为$6.02 \times 10^23$,3.5g$^{35}Cl_{2}$气体的体积约为22.4L,$^{35}Cl_{2}$气体的摩尔质量为70g,B 9 | 7,某有机物在氧气中燃烧生成水蒸气和二氧化碳的物质的量之比为 1：1，由此得出的结论是____,该有机物分子中 C：H：O 原子个数比为 1：2：3,该有机物分子中 C：H 原子个数比为 1：1,该有机物中必定含氧,无法判断该有机物中是否含氧,D 10 | 8,主族元素W、X、Y、Z的原子序数依次增加，且均不大于20。W、X、Y最外层电子数之和为11，W与Y同族且都是复合化肥的营养元素，Z的氢化物遇水可产生最轻的气体。下列说法正确的____,常温常压下X的单质为气态,简单气态氢化物的热稳定性：Y>W,Z的氢化物含有共价键,简单离子半径：W>X,D 11 | 9,氯化铜的稀溶液在盐酸中呈黄绿色，存在的化学平衡$Cu(H_2O)_4]^{2+}（淡蓝色）+4Cl^- \rightleftharpoons(CuCl4)^{2—}（黄绿色）+4H_2O$，下列可使溶液变成淡蓝色的方法是____,减少蒸馏水,加硝酸银溶液,加氯化钠固体,加硫酸钠固体,B 12 | 10,下列物质转化需要加入还原剂才能实现的是____,$SO_3^{2-}$→$SO_2$,$HCl$→$Cl_2$,$Na$→$Na^+$,$SO_2$→$S$,D 13 | 11,"在一定温度下的恒容密闭容器中，当下列哪些物理量不再发生变化时，表明下述反应：$A(s) + 2B(g) \rightleftharpoons C(g)+D(g)$已达到平衡状态____ 14 | ①混合气体的压强 ②混合气体的密度 ③B的物质的量浓度 ④气体的总物质的量 15 | ⑤混合气体总质量",②③⑤,①②③,②③④,①③④⑤,A 16 | 12,诗句“春蚕到死丝方尽，蜡烛成灰泪始干”中“丝”和“泪”分别指____,纤维素 油脂,蛋白质 烃类,淀粉 油脂,蛋白质 油脂,B 17 | 13,下列物质中既属于有机物，又属于酸的是____,$H_2CO_3$,$CH_3OH$,$CH_3CH_2OH $,$CH_3COOH$,D 18 | 14,下列物质不能与氢氧化钠溶液发生反应的是____,氯气,碳酸氢钠,二氧化硅,镁,D 19 | 15,灼烧绿矾的反应方程式如下：$7(FeSO_4 \cdot 7H_2O)\stackrel{强热}{=}Fe_2O_3 +SO_2\uparrow + SO_3\uparrow +14H_2O$;将生成的气体通入BaCl2溶液中，下列叙述中正确的是____,有$BaSO_4$生成,有$BaSO_3$生成,同时有$BaSO_4$和$BaSO_3$生成,有$SO_3$逸出,A 20 | 16,生石灰中含有碳酸钙和二氧化硅，要检验这两种杂质是否存在，选用的试剂最好是____,稀盐酸,水,烧碱溶液,稀硫酸,A 21 | 17,已知$2SO_2(g) + O_2(g) \rightleftharpoons 2SO_3(g)$(正反应放热)。若在500℃和催化剂的作用下，该反应在容积固定的密闭容器中进行，下列有关说法正确的是____,若降低温度，可以加快反应速率,使用催化剂是为了加快反应速率,在上述条件下，$SO_2$能完全转化为$SO_3$,达到平衡时，$SO_2$和$SO_3$的浓度一定相等,B 22 | 18,下列关于物质用途的叙述中，不正确的是____,硅可以用作制造变压器的铁芯材料,二氧化硅可用于制造光导纤维,石墨可用做绝缘材料,石英玻璃可用于制造光学仪器,C 23 | -------------------------------------------------------------------------------- /assets/ceval_data/val/high_school_geography_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,中国实行可持续发展的核心是：____,发展是关键,经济增长为主,人民生活水平提高,自然资源合理利用B.季节性特点,A 3 | 1,采用下玻璃温室生产蔬菜、花卉，属于农业分类中的：____,粗放农业,自给农业,种植园农业,密集农业,D 4 | 2,下列有关昼夜长短状况的叙述正确的是：____,9月23日赤道昼大于夜,12月22日南半球昼小于夜,6月22日北半球昼大于夜,3月21日有北极圈上出现极昼现象,C 5 | 3,洋流因产生的动力不同，可分为____,风海流、暖流、寒流,补偿流、暖流、寒流,密度流、寒流、暖流,风海流、补偿流、密度流,D 6 | 4,圣诞节这天，下列城市中白昼最短的是____,广州,哈尔滨,北京,上海,B 7 | 5,有关台风的叙述：①台风常发生在秋冬季节；②台风现象只发生在西太平洋上；③台风是一种强烈发展的温带锋面气旋；④台风是一种在海面上强烈发展的热带气旋；⑤飓风和台风都是热带气旋，只是发生的海域不同而名称各异。其中正确的是____,①②③,②③④,①⑤,④⑤,D 8 | 6,下列不以秦岭――淮河一线为分界线的是____,亚热带季风气候和温带季风气候,水田农业和旱地农业,农耕区和牧业区,湿润地区与半湿润地区,C 9 | 7,高技术工业区通常的特点有____,研究开发人员多,生产产品全部面向国内市场,产品更新换代快,从业人员全部是科学家和工程师,C 10 | 8,农业社会时期，爪哇岛上人口聚集的原因是____,河流众多,土壤的肥力高,交通便利,气候适宜,B 11 | 9,地球内部圈层划分的依据是____,地震波速度的变化,温度的垂直变化,内部压力的变化,物质密度的变化,A 12 | 10,亚洲水稻种植业的特点是____,"单产高,商品率高","人均耕地较多,多大规模经营","人力为主,机械化水平低","水热资源丰富,水利工程量小",C 13 | 11,该县境内雅鲁藏布江河段航运价值低，其主要原因是____,封冻期长,落差大,流量小,含沙量大,B 14 | 12,可以看见下弦月的时间是____,上半夜,下半夜,子夜前后,整个夜晚,B 15 | 13,这片广袤的黄土地已经被水流蚀割得沟壑纵横，支离破碎，四分五裂，像老年人的一张粗糙的皱脸每年流入黄河的泥沙就达十六亿吨!就在这大自然无数黄色的皱褶中，世世代代生活和繁衍着千千万万的人。无论沿着哪一条皱纹走进去，你都能碰见村落和人烟，而且密集得叫你不可思议。生活在黄土所在地区的人们____,受热量条件制约，选择在河谷地区修路建村,借黄土肥沃优势，发展了大规模机械化农业,不合理耕作破坏植被，导致石漠化现象严重,通过植树种草及打坝淤地进行有效水土保持,D 16 | 14,黄土高原最大的环境问题是____,荒漠化,水土流失,酸雨,气候变暖,B 17 | 15,荷兰出口的花卉占世界花卉贸易总额的40%以上，这并不得益于____,保鲜、冷藏技术的发展和交通运输的完善,花卉品种不断增多，质量不断提高,依靠科技发展玻璃温室，改造自然条件,以较低的价格赢得市场,D 18 | 16,与广西相比，巴西发展食糖业的突出优势是____,生产成本低,产品质量高,加工技术先进,社会协作条件好,A 19 | 17,1992年韩国三星电子在惠州建工厂首要的有利条件是____,劳动力充足，薪资水平低,我国市场巨大,治理污染费用较低,地价便宜,A 20 | 18,下列天体系统中不包括地球的是____,总星系,河外星系,银河系,太阳系,B 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/high_school_history_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,据美国钢铁业统计，1870年，美国有钢铁企业808个，工人7.8万人，钢产量320万吨，投资额1210万美元；到1900年，美国有钢铁企业669个，工人27.2万人，钢产量2950万吨，投资额5.9亿美元。这一数据反映的19世纪后期美国钢铁业发展变化的主要特征是____,行业竞争激烈,生产和资本走向集中,企业规模保持稳定,劳动生产率快速提高,B 3 | 1,昭示着中华人民共和国的最高权力属于人民的标志是：____,人民代表大会制度的确立,新中国的成立,社会主义制度的初步确立,政治协商制度的形成,A 4 | 2,隋唐时期，陆路与海上“丝绸之路”基本畅通，唐朝设市舶司主管对外港口贸易，宋代对招商有成效的官吏实行提高级别待遇的政策，泉州、广州接此执行。可见，唐宋时期海外贸易的活跃是____,政府政策推动的结果,造船业发达的产物,重农政策松动的表现,丝织业兴盛的体现,A 5 | 3,2020年，深圳经济特区建立40周年。四十年来，深圳地区生产总值出1979年的1.96亿元增长到2019年的2.6927万亿元，按可比价格计算，增长2491倍，年均增长21.6%，实现了由一座落后的边陲小镇到具有全球影响力的国际化大都市的历史性跨越。深圳快速崛起的重要原因是____,率先展开了经济体制改革,较早建立了市场经济体制,改革开放政策的持续推动,毗邻香港地理条件较优越,C 6 | 4,李四光是我国20世纪杰出的科学家，他对祖国的贡献是____,研究“两弹一星”,为我国勘探石油提供了理论依据,培育出高产水稻,研制出巨型计算机,B 7 | 5,公元1175年6月，陆九龄、陆九渊兄弟在鹅湖寺与朱熹就各自的哲学观点展开激烈的辩论。对他们辩论观点叙述正确的是____,朱熹主张“泛观博览，而后为之约”,朱熹提出“心即理也”，本心即天理,陆九渊主张“致良知”“知行合一”,陆九渊区分了教育的“小学”“大学”,A 8 | 6,《齐民要术》的序言中写道：“舍本逐末，贤者所非。日富岁贫，饥寒之渐，故商贾之事，阙（同“缺”）而不录。”这说明该书____,重视商业发展,推动了南方农业生产,体现了以农为本的思想,反映了民族融合的趋势,C 9 | 7,19世纪60-70年代出现了资产阶级革命和改革的浪潮，资本主义制度在全世界范围内确立。这一时期的革命和改革的特点是____,都采用自上而下的方式,排除外部势力的干扰,仍有旧制度的痕迹,无产阶级等上政治历史舞台并开始发挥重要作用,C 10 | 8,二战前，约30年的社会主义改革和高速发展，苏联工业产值增长了38倍，实现了工业化。二战后，苏联经济继续保持了较高增长率。1946-1950年，社会总产值年均增长率为14.4%，1951年—1960年为10%，远高于同期的美欧国家。苏联经济的高速增长得益于____,工农业生产的均衡发展,计划经济体制的影响,欧美国家遭遇经济危机,科学技术的快速发展,B 11 | 9,建国初国民经济恢复时期，当时国家经济工作中最迫切的任务是____,稳定物价,没收官僚资本，建立国营经济,统一财经,合理调整工商业,A 12 | 10,中国资本主义萌芽出现的主要标志是____,手工业作坊大量增多,手工业技术水平空前提高,“机户出资，机工出力”的“机房”产生,商品经济发展.对外贸易扩大,C 13 | 11,15世纪中叶，在与东方的贸易中，欧洲的金银源源不断向外流出，“黄金问题”变为欧洲经济上的严重危机。由此带来的直接影响是____,欧洲中心地位逐步确立,英国成立东印度公司,刺激了欧洲开辟新航路,引发了欧洲的价格革命,C 14 | 12,"辛亥革命后，在许多通商大埠，人们""趋改洋服洋帽，其为数不知凡几""；当时，家境稍优裕者""必备洋服数套，以示维新""，即使是""衣食艰难之辈，亦多舍自制之草帽，而购外来之草帽""。这种现象出现的主要原因是____",崇洋风气的盛行,社会性质的变化,政府政策的引导,贫富差距的增大,B 15 | 13,1883年，为解决知识产权的国际保护问题，欧美国家相互合作，协商达成了《保护工业产权巴黎公约》，成立保护工业产权（包括专利权）的国际专利局，由此开创了国际保护知识产权的先河。该举措____,推动第一次工业革命的发生与发展,提高欧美国家在世界市场的竞争力,有力抑制了国际经贸中的强权政治,成为世界市场迅速拓展主要途径,B 16 | 14,西周时期，用于解决血亲贵族之间在权力、财产和土地继承上矛盾的制度是____,分封制,宗法制,井田制,禅让制,B 17 | 15,中国读书人历来“耻于言商，耻于言利”，而清末状元张謇却放弃仕途，投身于近代工商业。这里反映出的时代观念是____,实业救国,工商皆本,重利轻义,重商轻农,A 18 | 16,"毛泽东的主要历史贡献有____ 19 | ①带领中国人民实现民族独立 20 | ②提出“百花齐放、百家争鸣”的方针 21 | ③开启中美关系正常化历程 22 | ④重新确立解放思想、实事求是的思想路线",①②③,①②④,①③④,②③④,A 23 | 17,清末民初，在广大乡村，以传统畜力车及木船为主，虽有自行车和公共汽车，但发展缓慢。这说明当时我国____,农村封闭状态严重,城乡交通差距较大,新旧交通工具并存,近代交通开始改革,C 24 | 18,美国宪法将政府分为相互独立的三个部分，并伴之以制衡制度，以防止其中任何一部分明显地高于其它部分。这实现了哪位思想家的主张____,伏尔泰,卢梭,孟德斯鸠,康德,C 25 | 19,1880年，日本政府的一项教育指令称：应利用“古今之画像照片”宣传忠孝精神；与其过分关注高深的理论和外语，不如对农商庶民施以生存的实际教育。结合所学判断，该指令____,试图阻止西方科技的传播,表明忠孝精神已在日本瓦解,旨在强化日本社会的等级制度,旨在培养掌握现代技能的忠顺臣民,D 26 | -------------------------------------------------------------------------------- /assets/ceval_data/val/ideological_and_moral_cultivation_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,一般来说，一个人对社会的贡献越大，他的____,社会地位就越高,个人价值就越高,社会价值就越高,自我完善就越高,C 3 | 1,我国森林法把每年____定为全国统一的“植树节”,44990,44996,44997,45000,C 4 | 2,爱国主义包含着情感、思想、行为三个方面，其中____是灵魂,情感,思想,行为,意志,B 5 | 3,实现人生价值的根本途径是____,培养正确的人生态度,自觉提高自我的主体素质和能力,进行有意识、有目的的创造性实践活动,选择与社会主导价值观相一致的人生价值目标,C 6 | 4,人生不仅仅是一个自然过程，还包含着极为丰富的____,社会存在,社会内容,社会过程,社会关系,B 7 | 5,人才素质的灵魂是____,德,智,体,美,A 8 | 6,人生观的核心____,人生价值,人生目的,人生态度,人生信仰,B 9 | 7,社会主义经过长期的发展，在高度发达的基础上最终会转变为____,资本主义社会,共产主义社会,帝国主义,垄断主义,B 10 | 8,科学发展观的本质和核心是____,全面发展,协调发展,统筹发展,以人为本,D 11 | 9,现代人才综合素质的灵魂是____,人才的思想道德素质,人才的文化素质,人才的心理素质,人才的身体素质,A 12 | 10,下列关于人的社会关系与自然关系的表述错误的是____,人在与自然发生关系的过程中结成了社会关系,人与人的社会关系极大地影响着人与自然的关系,自然关系是社会关系的基础，社会关系是自然关系的延伸,协调好人与自然的关系，就需要协调好人与人之间的社会关系,C 13 | 11,社会主义荣誉观是____的重要组成部分,科学发展观,马克思注意历史观,马克思主义世界观,社会主义道德观,D 14 | 12,"人生的自我价值,是指____",人对自然界的利用和改造,人对社会和他人所作的贡献,个体的人生活动对社会、他人所具有价值,个体的人生活动对自己生存和发展所具有的价值,D 15 | 13,人生目的主要回答____,人为什么活着,世界本源是什么,人应怎样对待生活,怎样的人生才有意义,A 16 | 14,马克思主义理想信念的基础是____,信仰,科学,坚定,革命,B 17 | 15,理想，是人们在实践中形成的，具有____的对美好未来的追求和向往，是人们的政治立场和世界观在人生奋斗目标上的体现。,实现必然性,不可实现性,超越客观性,实现可能性,D 18 | 16,在当今时代任何一个具有爱国情怀的人，都应大力弘扬以____为核心的时代精神。,解放思想,改革创新,自强不息,出国深造,B 19 | 17,我国社会主义法律的本质特征表现为____的统一。,阶级性和人民性,强制性和惩罚性,教育性和阶级性,教育性和强制性,A 20 | 18,一个人社会价值的实质是____,贡献,成功,劳动,创造,A 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/mao_zedong_thought_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,我国人民代表大会制度组织和活动的基本原则是____,人民当家作主的原则,民主集中制的原则,在宪法和法律范围内活动的原则,公平、公正、公开的原则,B 3 | 1,社会主义和谐社会的核心价值是____,以人为本,以民为本,社会公平,公平和正义,D 4 | 2,21世纪前10年，我国经济体制必须解决好的历史课题是____,实施科教兴国战略和可持续发展战略,促进国民经济持续快速健康发展,大多数国有大中型骨干企业建立现代企业制度,建立比较完善的社会主义市场经济体制,D 5 | 3,首次以“台湾回到祖国怀抱，实现统一大业”来代替“解放台湾”的提法的是____,1978年12月党的十一届三中全会公报,1979年元旦全国人大常委会发表《告台湾同胞书》,1981年9月叶剑英对新华社记者发表的被称为“叶九条”的谈话,1982年中国共产党十二大政治报告,A 6 | 4,毛泽东思想达到成熟的标志是____,新民主主义理论科学体系的形成,农村包围城市革命道路理论的形成,新民主主义革命基本经验的提出,毛泽东军事路线的完整形成,A 7 | 5,建设和谐文化的根本是____,坚持马克思主义的指导,发展科学和教育,坚持社会主义核心价值体系,推进文化体制改革,C 8 | 6,构建社会主义和谐社会的重点是____,坚持以马列主义、毛泽东思想、邓小平理论和“三个代表”重要思想为指导,民主法制、公平正义、诚信友爱、充满活力、安定有序、人与自然和谐相处,解决人民群众最关心、最直接、最现实的利益问题,到2020年完全实现社会主义和谐社会,C 9 | 7,台湾问题的本质是____,中国的内政问题,中国同美国的关系问题,中国同日本的关系问题,共产党与国民党的关系问题,A 10 | 8,在中国共产党历史上，最早提出“马克思主义中国化”这个命题的是____,李大钊,陈独,毛泽东,张闻天,C 11 | 9,党的十八大提出，面对资源约束趋紧、环境污染严重、生态系统退化的严峻形势，必须树立尊重自然、顺应自然、保护自然的生态文明理念。人与自然相处时应秉持的首要态度是____,尊重自然,顺应自然,保护自然,征服自然,A 12 | 10,中国革命的特点和优点是____,由中国共产党领导的人民战争,目标是争取民族独立、人民解放，最终实现国家的繁荣富强,以反帝反封建作为两大革命任务,以武装的革命反对武装的反革命,D 13 | 11,香港特别行政区的高度自治权的唯一来源是____,中央授权,香港特别行政区本身固有的,《中英联合声明》,中央授权之外的剩余权力,A 14 | 12,我国实施改革的目的是____,巩固社会主义制度,发扬社会主义民主,调动广大人民群众的积极性,发展社会主义的生产力,D 15 | 13,新民主主义革命总路线的核心是____,无产阶级的领导,人民大众的参与,反帝反封建,反官僚资本主义,A 16 | 14,九届人大二次会议正式将“依法治国”写入宪法，这一政策的核心是____,人民当家作主,民主与法制的结合,法治代替人治,有法可依，有法必依，执法必严，违法必究,C 17 | 15,在社会主义初级阶段，非公有制经济是____,社会主义公有制经济的补充,社会主义市场经济的重要组成部分,具有公有性质的经济,逐步向公有制过渡的经济,B 18 | 16,过渡时期总路线的特征是____,重视工业建设,强调三大改造,社会主义建设和社会主义改造同时并举,尤其重视对资本主义工商业的改造,C 19 | 17,毛泽东思想开始形成是在____,国民革命时期,土地革命战争时期,解放战争时期,抗日战争时期,B 20 | 18,当今时代的主题是____,战争与革命,和平与发展,开放与合作,和谐与共赢,B 21 | 19,正式把毛泽东思想确立为党的指导思想并首次写进党章的是____,中共六大,中共七大,中共八大,中共十二大,B 22 | 20,毛泽东思想达到成熟的主要标志是____,新民主主义革命理论的创立,中国革命道路理论的提出,革命军队建设和军事战略的理论的创立,党的建设理论的创立,A 23 | 21,法律是治国之重器，良法是善治之前提。建设中国特色社会主义法治体系，必须坚持先行的是____,立法,执法,司法,守法,A 24 | 22,中国共产党正式提出“邓小平理论”这一科学概念，并科学阐述了邓小平理论的历史地位和指导意义，郑重地把邓小平理论同马克思列宁主义、毛泽东思想一起，确定为党在一切工作中的指导思想并写入党章的会议是____,党的十三大,党的十四大,党的十五大,党的十六大,C 25 | 23,邓小平指出：“贫穷不是社会主义，社会主义要消灭贫穷。”这个论断____,指出了社会主义的根本任务,概括了社会主义建设的目标,明确了社会主义的发展方向,体现了社会主义本质的要求,D 26 | -------------------------------------------------------------------------------- /assets/ceval_data/val/marxism_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,“坐地日行八万里，巡六遥看一千河”，这一著名诗句包含的哲理是____,物质运动的客观性和时空的主观性的统一,物质运动的无限性和时空的有限性的统一,时空的无限性和有限性的统一,运动的绝对性和静止的相对性的统一,D 3 | 1,我党一贯倡导并长期保持的优良学风是____,艰苦奋斗,实事求是,理论联系实际,勤俭节约,C 4 | 2,马克思主义哲学认为，世界在本质上是____,各种实物的总和,物质和精神的统一,多样性的物质统一,主观与客体的统一,C 5 | 3,事物的质是指____,构成事物内在要素的总和,组成事物基本要素的内在联系,一事物区别与其他事物的内在规定性,事物的规模、发展程度和速度等规定性,C 6 | 4,列宁对辩证唯物主义物质范畴的定义是通过____界定的,物质和意识的关系,个别与一般的关系,哲学与具体科学的关系,认识与实践的关系,A 7 | 5,在马克思主义普遍原理指导下，从中国的基本国情出发，走建设有中国特色社会主义道路。这体现了____,矛盾的同一性和斗争性的统一,矛盾的普遍性和特殊性的统一,事物发展的量变和质变的统一,事物发展的前进性和曲折性的统一,B 8 | 6,设想脱离物质的运动必然导致____,唯心主义,二元论,辩证唯物主义,形而上学唯物主义,D 9 | 7,经济社会形态____,是直接或间接以生产关系性质划分,是以生产力和生产关系的统一程度划分,是以如何进行产品分配划分,是以生产力和技术发展水平划分,A 10 | 8,“没有革命的理论，就没有事命的运动”，这句话直接体现的哲学原型是____,意识有能动作用,认识有能动作用,科学理论对实践有巨大指导作用,物质决定意识,C 11 | 9,社会规律与自然规律的区别在于____,自然规律是客观的，社会规律是主观的,自然规律是自发起作用的，社会规律则是通过人的有意识的活动实现的,自然规律是可以被认识的，社会规律则是不可捉摸的,自然规律没有政治倾向，社会规律有政治倾向,B 12 | 10,资产阶级所宣扬的“一般民主”的唯心史观基础是____,天赋人权论,抽象人性论,社会契约论,三权分立论,B 13 | 11,我国改革开放20多年来发生了历史性的巨变，但仍然是一个发展中国家，这体现了____,世界的物质统一性原理,物质和意识的辩证关系原理,物质运动和时空不可分割的观点,运动和静止相统一的观点,D 14 | 12,衡量一个人的人生价值应根据他____,对社会的贡献,能力大小,社会地位的高低,拥有的金钱财富,A 15 | 13,资本主义的生产过程是____,劳动过程和价值增殖过程的统一,劳动过程和价值形成过程的统一,价值形成过程和价值增殖过程的统一,价值转移过程和价值形成过程的统一,A 16 | 14,经验论是____,唯心主义的,唯物主义的,既可是唯心主义的，也可能是唯物主义的,二元论的,C 17 | 15,划分唯物主义同唯心主义的唯一的标准是____,世界是否可知的问题,思维和存在何者第一性的问题,世界是否运动变化的问题,是否承认世界统一的问题,B 18 | 16,真理与谬误在一定条件下可以相互转化，是因为____,真理与谬误本身没有严格的界限,真理与谬误的区别是主观错误造成的,谬误中包含着真理的因素,真理与谬误具有同一性,D 19 | 17,马克思主义认识论角度来看，人类认识发展的动力在于____,人类的需要,人类的创造力,人类的社会实践的发展,人类的正确认识路线,C 20 | 18,唯物主义的基本前提是____,物质对意识的先在性、客观性、独立性,意识对物质的派生性、可知性,意识对物质的能动性,意识对物质的主观性、独立性,A 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/metrology_engineer_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,测量某一量值，其结果为：10.5，10.7，10.3，求其B类标准不确定度为____。(其中n=2时，极差系数C=1.13；n=3时，极差系数C=1.69；n=4时，极差系数C=2.060),0.35,0.12,0.19,0.24,D 3 | 1,在电学计量中，为了消除热电势带来的系统误差，常常改变测量仪器的电流方向，取两次读数和的二分之一为测量读数结果，这样的测量方法称为____。,补偿测量法,基本测量法,间接测量法,符合测量法,A 4 | 2,国家计量检定规程是由____组织编写并批准颁布，在全国范围内施行，作为确定计量器具法定地位的技术文件。,全国专业计量技术委员会,全国计量测试学会,国家计量院,国务院计量行政部门,D 5 | 3,SI基本单位共有七个并有相应的单位符号，以下哪个符号是正确的。____,质量--m,物质的量--mm,热力学温度--℃,电流--A,D 6 | 4,计量的最终目的是____。,实现单位统一,为国民经济和科学技术发展服务,维护人民利益,确保量值准确,B 7 | 5,测量传感器是指____。,一种指示式计量器具,输入和输出为同种量的仪器,提供与输入量有确定关系的输出量的器件,通过转换得到的指示值或等效信息的仪器,C 8 | 6,某计量技术机构拟建立以一等铂电阻温度计为计量标准器的计量标准，用于检定二等铂电阻温度计，则该计量标准应命名为____。,一等铂电阻温度计检定装置,一等铂电阻温度计标准装置,二等铂电阻温度计标准装置,二等铂电阻温度计标准器组,B 9 | 7,依据JJF1002-2010《国家计量检定规程编写规则》，下列关于计量检定规程编写原则的说法中，错误的是____。,计量检定规程的编写应符合国家有关法律、法规的规定,计量检定规程的编写应符合范围必须明确，在其界定的范围内，按需要力求完整,在考虑操作的可行性及实施的经济性的前提下，尽量采用最新技术,根据国情，积极采用国际法制计量组织（OIML）发布的国际建议，国际文件及有关的国际组织（如ISO，IEC等）发布的国际标准,C 10 | 8,我国法定计量单位包括SI辅助单位在内的具有专门名称的SI导出单位共有____个。,7,16,20,21,D 11 | 9,对一个被测量进行重复观测，在所得的一系列测量值中，出现了与其他值偏离较远的个别值时，应____。,将这些值剔除,保留所有的数据，以便保证测量结果的完整性,判别其是否是异常值，确为异常值的予以剔除,废弃这组测量值，重新测量，获得一组新的测量值,C 12 | 10,借助于一切可利用的有关信息进行科学判断，得到估计的标准偏差为____标准不确定度。,A类,B类,合成,扩展,B 13 | 11,型式评价结束后，经审查合格的，由____向申请单位颁发型式批准证书。,计量技术机构,受理申请的政府计量行政部门,上级政府计量主管部门,国家质检总局,B 14 | 12,下列关于计量标准考核的说法中，错误的是____。,新建计量标准的考核应首先进行书面审查，基本符合要求后再进行现场考核,计量标准考核坚持逐项逐条考核原则，但列入计量标准简化考核目录的可按规定简化,考评员须经国家或省级质量技术监督部门考核合格,计量标准考核实施组长负责制，每项计量标准一般由1至2名考评员执行考核任务,D 15 | 13,强制检定与非强制检定均属于____。,行政规定,法制检定,法律规定,合同规定,B 16 | 14,社会公用计量标准器具由____级以上地方人民政府计量行政部门根据本地区的需要统一组织建立。,省,市,县,相关部门,C 17 | 15,通常把被测量值为零时测量仪器的示值相对于标尺零刻线之差值称为____。,零位误差,固有误差,零值误差(即零值的基值误差),测量仪器的偏移,C 18 | 16,下列关于《计量标准技术报告》内容的表述中，正确的是____。,计量标准的测量范围应与计量标准器所提供的测量范围相同,计量标准的不确定度分段给出时，应给出各段的最小不确定度,检定或校准结果的测量不确定度评定结果应小于计量标准的扩展不确定度,检定或校准结果验证时如果不可能采用传递比较法，可采用多个实验室之间比对的方法,D 19 | 17,《注册证》每一注册有效期为____年。在有效期限内是注册计量师的____凭证，由注册计量师本人保管和使用。,5，资质,3，资质,5，执业,3，执业,C 20 | 18,以下在证书上给出的k=2的扩展不确定度中____的表示方式是正确的。,U=0.00800mg,Ur=8×10-3,U=523.8μm,0.0000008m,B 21 | 19,使测量仪器的规定计量特性不受损也不降低，其后仍可在额定操作条件下运行而能承受的极端条件称____,参考条件,额定操作条件,正常使用条件,极限条件,D 22 | 20,____是对测量所包括的硬件和软件的统称。,测量设备,测量仪器,测量基准,测量标准,A 23 | 21,证书、报告的副本____,应按规定的保存期保存,根据需要可以保存也可以不保存,只能是原件的复印件才能保证与原件完全一致,应永久保存,A 24 | 22,长方形面积是通过测量其长度和宽度用其乘积来确定的，同体密度是根据测量物体的质量和体积的结果，按密度定义公式计算的。这种测量方法通常称为____。,定义测量法,替代测量法,间接测量法,符合测量法,C 25 | 23,稳定性是指测量仪器保持其计量特性随时间____的能力。,响应变化,慢变化,稳定,恒定,D 26 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_biology_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,运用适当的方法可以保存食品。将新鲜蘑菇制成干蘑菇采用的保存方法是____,低温冷藏,真空包装,脱水法,添加防腐剂,C 3 | 1,动物能促进生态系统中的物质循环．这里的“物质循环”是指____,动物能将无机物转化为有机物,动物能将有机物转化为无机物回到自然界中,动物能为植物提供粪便，促进植物生长,动物能抑制植物的生长，保护自然界中生物的平衡,B 4 | 2,保护生物多样性的最为有效是措施是____,迁地保护,就地保护,克隆,法制管理,B 5 | 3,胎儿在母体内的生长发育需要营养物质和排出废物，胎儿与母体之间进行物质交换的器官是____,卵巢,输卵管,胎盘,子宫内膜,C 6 | 4,下列说法正确的是____,一位妇女颅内大脑皮层上长了肿瘤导致她失明，是由于肿瘤压迫了反射孤的神经中枢,醉酒驾车极易发生交通事故，是因为酒精主要麻醉了酒驾者的脑干,赛场上选手听到发令枪声后迅速起跑属于简单反射,人体的生命活动主要受到激素调节的影响，也受到神经系统的调节,D 7 | 5,裸子植物和被子植物都属于种子植物，两者之间的主要区别是____,生长环境不同,种子外面是否有果皮包被,在地球上出现的年代不同,分布的范围不同,B 8 | 6,洋葱表皮细胞与人的口腔上皮细胞的区别是后者没有的是____,细胞壁,细胞膜,细胞核,细胞质,A 9 | 7,"《寂静的春天》是一本引发了全世界环境保护事业的书，书中描述人类可能将面临一个没有鸟、蜜蜂和蝴蝶的世界，正是这本不寻常的书，在世界范围内引起人们对野生动物的关注，唤起了人们的环境意识，动物在生物圈中具有的重要作用的是____ 10 | 11 | ①维持生态平衡 ②消灭病虫害 ③帮助植物传粉、传播种子 ④促进物质循环．",①②③,②③④,①③④,①②④,C 12 | 8,正在结西瓜的植株，其吸收的水分主要用于____,光合作用,蒸腾作用,呼吸作用,吸收作用,D 13 | 9,哈维的主要贡献是____,发现了DNA的双螺旋结构,发现了血液循环,创立了生物进化论,创立了统一的生物命名法,B 14 | 10,下列关于植物的光合作用和呼吸作用的叙述正确的是____,叶绿素是绿叶进行光合作用的主要场所,低温能保鲜蔬菜、水果是因为低温能降低植物细胞的呼吸作用,绿色植物通过呼吸作用，来维持生物圈中二氧化碳和氧气的相对平衡,农业生产上要提高农作物的产量，只需加强农作物的光合作用无需考虑其呼吸作用,B 15 | 11,生物体结构和功能是相适应的。下列各项中，有利于组织细胞获得氧气的是____,小肠内表面具有许多皱襞和绒毛,毛细血管壁由一层扁平上皮细胞构成,动脉血管和静脉血管内都有瓣膜,肾小球由许多毛细血管缠绕而成,B 16 | 12,捕蝇草和蝇在细胞基本结构上的区别是捕蝇草的细胞中具有____,细胞质,细胞膜,细胞核,细胞壁,D 17 | 13,对于病毒的认识正确的是：____,病毒对人类都是有害的，毫无利用价值,病毒一旦浸入人体，就会使人患病,病毒的个体很小，要用电子显微镜才能观察到,动物病毒也可以寄生在植物细胞里,C 18 | 14,堆放时间较长的蔬菜会因产热而腐烂，与细胞产热直接相关的生理过程是____,呼吸作用,蒸腾作用,光合作用,运输作用,A 19 | 15,果酒的制作需要____,酵母菌,乳酸菌,霉菌,醋酸菌,A 20 | 16,“植物人”有心眺、呼吸，不能自主活动、无意识，可确定神经系统受到损伤的是____,大脑,小脑,脑干,脊髄,C 21 | 17,在紧急情况下，壁虎的尾巴能自动断落，断落部分还能做屈曲运动。蜥蜴的这种行为是动物的____,攻击行为,繁殖行为,社会行为,防御行为,D 22 | 18,下列有关动物的形态结构与生活环境相适应的叙述错误的是____,家鸽前肢变成翼，适于在空中飞翔,野兔神经系统发达，能迅速发现并躲避天敌,鲫鱼身体呈纺锤形，用鳃呼吸，适于在水中生活,蚯蚓生活在土壤中，依靠肺进行呼吸,D 23 | 19,以下有关达尔文自然选择学说的叙述，不正确的是____,这种生物普遍都具有很强的繁殖能力,生物要生存下去，就得为了获得食物和空间而进行生存斗争,自然选择保留的变异永远都有利于该生物的生存,不适应环境的生物将被淘汰,C 24 | 20,下列有关生命的起源和进化的叙述，不正确的是____,生命起源于原始陆地,化石是研究生物进化的最直接证据,米勒实验说明原始地球条件下无机小分子形成有机小分子是可能的,原始生命诞生的标志是能从外界获取营养并排出代谢废物，能进行生长和繁殖等,A 25 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_chemistry_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,物质的性质决定物质的用途，下列物质的用途与化学性质相关的是____,铜丝用作导线,金刚石用于切割玻璃,干冰用于人工降雨,熟石灰用于改良酸性土壤,D 3 | 1,化学与生产、生活密切相关，下列说法错误的是____,人体缺碘会引起贫血,碳酸氢铵（$NH_4HCO_3$）是一种氮肥,炒菜时油锅着火，用锅盖盖灭,铁制品表面刷漆可防止生锈,A 4 | 2,空气是人类生存所必需的重要资源，空气中最多的气体是____,$\text{N}_2$,$\text{O}_2$,$\text{CO}_2$,$\text{H}_2 \text{O}$,A 5 | 3,推理是学习化学的重要方法之一，但盲目地类摧又可能得出错误结论。下列类推正确的是____,硫和氧气的反应既是氧化反应也是化合反应，则物质和氧气的反应均是化合反应,一般情况下，合金的熔点和硬度都比组成合金的纯金属的高,碱的溶液能使酚酞溶液变红，但能使酚酞溶液变红的溶液不一定是碱的溶液,锌能与稀硫酸反应放出氢气，则铜也能与稀硫酸反应放出氢气,C 6 | 4,2022年2月4日，北京冬奥会火炬首次采用“绿氢”作为火炬燃料，其储存采用了高压储气的方式。下列关于该储气过程的说法正确的是____,氢分子的体积变小,氢分子的质量变小,氢分子的数目变少,氢分子间的间隔变小,D 7 | 5,化学与环境保护、人体键康息息相关。下列叙述错误的是____,天然气是比较清洁的化石燃料,研发高效低毒农药有助于保障粮食安全,生活污水集中处理达标后排放,蒸煮能完全清除霉变食物中的有害物质,D 8 | 6,2022年6月5日是第51个世界环境日，中国主题为“共建清洁美丽世界”，下列措施与该主题不相符的是____,绿色出行，积极践行“低碳生活”,用布袋代替塑料袋，减少“白色污染”,植树造林，努力营造“绿水青山”,大量开采利用化石燃料，缓解“能源危机”,D 9 | 7,下列成语中不涉及化学变化的是____,星火燎原,披荆斩棘,死灰复燃,百炼成钢,B 10 | 8,逻辑推理是学习化学常用的思维方法，下列推理正确的是____,物质燃烧都能放热，能放热的化学反应都是燃烧,有机化合物都含有碳元素，则含有碳元素的化合物都是有机物,碱性溶液可以使石蕊溶液变蓝，则能使石蕊溶液变蓝的溶液都显碱性,中和反应生成盐和水，则生成盐和水的反应都是中和反应,C 11 | 9,$Na_2CO_3$俗称纯碱，侯德榜为纯碱工业的发展做出了杰出贡献。$Na_2CO_3$属于____,氧化物,盐,有机物,混合物,B 12 | 10,下列有关溶液的说法正确的是____,均一、稳定的液体一定是溶液,洗涤剂能洗去衣服上的油污，原因是洗涤剂具有溶解作用,溶液中的溶质可以是固体、液体或气体,实验室利用氯化钠固体和水配制50g质量分数为6%的氯化钠溶液的步骤是：计算、量取、溶解、贮存,C 13 | 11,将100mL水与100mL酒精混合，所得溶液体积小于200mL。下列对此现象的解释最合理的是____,分子是由原子构成的,分子的质量和体积都是很小的,分子是不断运动的,分子间是有间隔的,D 14 | 12,某同学用pH计测得生活中一些物质的pH值如下、其中酸性最强的是____,肥皂水pH：10.2,料酒pH：6.5,西瓜汁pH：5.8,苹果汁pH：2.4,D 15 | 13,为了探究某稀盐酸中溶质的质量分数，甲、乙两同学分别取溶质质量分数相等的稀盐酸100g，甲同学向其中加入氧化铜8g，反应结束后观察到固体全部消失；乙同学向其中加入氧化铜16g，反应结束后观察到固体有剩余。下列有关实验的推断正确的是____,反应后乙同学所得溶液中一定包含盐酸,反应后向甲同学所得的溶液中滴加少量氢氧化钠溶液，一定会有蓝色沉淀生成,反应后甲、乙两同学所得的溶液中溶质的质量分数可能相等,原稀盐酸中溶质的质量分数一定大于7.3%小于14.6%,C 16 | 14,垃圾分类已成为新时尚。下列物质应该放入可回收垃圾箱的是____,矿泉水瓶,果皮,废电池,废口罩,A 17 | 15,疫情期间，教室喷洒“84消毒液”进行消毒时，可闻到刺鼻的气味，说明了____,分子数目变大,分子之间有间隔,分子在不断运动,反应生成新物质,C 18 | 16,下列化学用语既能表示一种元素，又能表示一个原子，还能表示一种物质的是____,O,Cu,N,$CO_2$,B 19 | 17,下列说法不正确的是____,炒菜时油锅中的油不慎着火，可用锅盖盖灭,室内着火，应立即打开门窗，让风吹灭火焰,亚硝酸钠是一种工业用盐，对人体有害，不能用于烹调,家用煤气中掺入微量难闻性气体，利于发现煤气泄漏,B 20 | 18,治疗胃酸过多药物铝碳酸镁片[主要成分$Al_2Mg_6(OH)_{16}CO_3·4H_2O$]不能长期服用，是因为其中含有人体非必需元素____,Mg,Hg,C,Al,D 21 | 19,下列现象的微观解释中，不正确的是____,食物腐败----分子性质发生变化,热胀冷缩----分子大小随温度变化而变化,夏天炎热，自行车易爆胎-----温度升高，分子间的间隔变大,缉毒犬可以嗅出毒品藏匿处----分子不停地运动,B 22 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_geography_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,我国最大的岛屿是____,台湾岛,海南岛,香港岛,崇明岛,A 3 | 1,印度的“绿色革命”指的是____,植树造林，保护环境,引进培育作物品种，改进粮食生产技术,改进灌溉技术，用传统粪肥代替化肥,推广天然无公害、无污染的绿色产品,B 4 | 2,在小刚的一篇作文中有以下一些描述语言，你认为不合适的是____ ①今天的气候很好，适合外出游玩 ②今年冬天气温较常年偏高，天气出现了异常 ③昆明四季如春，这里的气候真不错 ④早饭后还是晴空万里，到了中午却是乌云滚滚，大雨倾盆，今天的气候变化真大,①②③,②③④,①②④,①③④,C 5 | 3,世界上椰子的最大生产国和最大出口国分别是____,泰国、菲律宾,菲律宾、印度尼西亚,印度尼西亚、菲律宾,菲律宾、泰国,C 6 | 4,关于我国河流的叙述，错误的是____,塔里木河是我国最长的内流河,长江是我国长度、水量最大、流域面积最广的河流,我国外流河最终注入太平洋,长江被誉为“水能宝库”“黄金水道”,C 7 | 5,下列地区的农业生产符合因地制宜原则的是____,在黄土高原地区大力发展粮食生产,在珠江三角洲大力发展林业,在新疆地区大力发展水稻生产,在长江中下游地区大力发展淡水养殖业,D 8 | 6,2016年1月起，我国全面开放二孩政策的主要目的是____,①②,②③,②④,③④,D 9 | 7,世界上使用人数最多、使用泛围最广泛的语言分别是____,英语、法语,汉语、英语,阿拉伯语、西班牙语,俄语、英语,B 10 | 8,"2014年3月，大范围雾霾天气长时间影响我国东部地区，严重危害人体健康。造成雾霾天气的人为原因有____ 11 | ①工业生产中使用矿物作为燃料，大量排放污染物 ②汽车尾气的大量排放 12 | ③风力小，空气流动不畅 ④冬季取暖排放粉尘",①②③,②③④,①③④,①②④,D 13 | 9,对印度的农业生产有重要意义的是____,西北季风,东北季风,东南季风,西南季风,D 14 | 10,从有利于人类生存的角度看，你应该把“家”选在____,南极地区,撒哈拉沙漠,喜马拉雅山,长江中下游平原,D 15 | 11,我国水资源的时间分布规律是____,东南多，西北少,东南少，西北多,夏秋多，冬春少,夏秋少，冬春多,C 16 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_history_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,歌曲《春天的故事》中有“那是一个春天，有一位老人在中国的南海边画了一个圈”，这句歌词指的是____,实行民族区域自治,制定社会主义初级阶段的基本路线,推行家庭联产承包责任制,建立经济特区实行对外开放,D 3 | 1,被称为中国近代史上第一次巨变的是____,辛亥革命的胜利和中华民国的成立,洋务运动开始了中国的近代化,1840年鸦片战争,戊戌变法法令的颁布,A 4 | 2,隋朝末年，有位商人欲通过大运河从余杭运送一批粮食到洛阳，其先后要经过____,江南河→邗沟,邗沟→江南河→通济渠,江南河→邗沟→永济渠,江南河→邗沟→通济渠,D 5 | 3,2005年是中国电影诞生100周年。百年前，我国拍摄的第一部电影是____。,《马路天使》,《渔光曲》,《定军山》,《十字街头》,C 6 | 4,七年级（一）班本月负责学校文化长廊的黑板报设计，他们选定的主题是“唐代的中外交往”，并拟定了如下四个标题，请你帮他们指出哪一项是不恰当的____,文成公主与松赞干布成亲,鉴真东渡宣扬中国文化,玄奘西游天竺取经,日本派遣唐使来华,A 7 | 5,英国资产阶级革命前，新贵族和旧贵族的主要区别在于他们____,对君主专制的态度,身份和地位,对人民的态度,采用的生产方式,D 8 | 6,历史上第一个圆了人类飞上蓝天的梦想而被称为“航天飞行器的先驱”的是____。,奥托,莱特兄弟,富兰克林,蒙特哥菲尔兄弟,B 9 | 7,“当革命的风暴横扫整个法国的时候，英国正在进行一场比较平静、但是并不因此就显得缺乏力量的变革。”这句话中的“变革”是指____。,英国资产阶级革命,光荣革命,英国组织的“反法同盟”,工业革命,D 10 | 8,近代中国面临着严重的民族危机，无数仁人志士都在探求救国救民的出路。下列选项搭配不正确的是____。,李鸿章→洋务运动,魏源→戊戌变法,孙中山→辛亥革命,陈独秀→新文化运动,B 11 | 9,清代皇帝在北京西郊建造的中西合璧的皇家园林──圆明园是在中____被____毁掉的。,鸦片战争、英国,第二次鸦片战争、英国和法国,甲午中日战争、日本,八国联军侵华战争、八国,B 12 | 10,下列与武则天有关的表述不准确的一项是____。,代唐高宗视政，初显管理才能,自立为帝，改国号为“周”,“武周政治”时期，社会经济达到前所未有的极盛时期,以残酷诛杀的手段对付李唐宗室,C 13 | 11,1943年2月，罗斯福在致斯大林的一封贺信中写到：“是你们制止了侵略浪潮，成为盟军反侵略战争的转折点。”这一“转折点”是指____,日本偷袭珍珠港,莫斯科保卫战,斯大林格勒会战,诺曼底登陆,C 14 | 12,甲午中日战争失败以后，李鸿章伤感地反省说：“我办了一辈子事，练兵也，海军也，都是纸糊的老虎……不过勉强涂饰，虚有其表。”对这句话的理解，最为正确的应当是____,洋务运动一无是处,洋务运动劳而无功,洋务运动的目的在于表面做做样子,洋务运动没有达到“自强”、“求富”的目的,D 15 | 13,1997年7月1日香港维多利亚港湾的会展中心灯火辉煌，0时整，伴随着嘹亮的中华人民共和国国歌，鲜艳的五星红旗冉冉升起。从这一刻起____,香港社会制度改变了,中国对香港恢复行使主权,香港经济特区成立了,香港开始实行民族区域自治,B 16 | 14,有些人的名字往往与时代特征有一定的联系，下列名字中与他出生的时代特征不相符合的是____,出生于1949年，取名建国,出生于1951年，取名援朝,出生于1958年，取名跃进,出生于1978年，取名文革,D 17 | 15,在今天菲律宾的马克坦岛上矗立着一块双面碑，一面的碑文是纪念麦哲伦，因为他完成了人类历史上第一次环球航行；另一面是纪念菲律宾的一位勇士，因为正是他杀死了殖民头子麦哲伦。对于新航路的开辟，以下说法不确切的是____,推动了海外扩张和世界市场的初步形成,加速了欧洲的资本原始积累,打破了世界各地区的封闭和孤立状态,导致了第一次鸦片战争的发生,D 18 | 16,把鸦片战争作为中国近代史的开端，主要是因为____,中国社会性质发生了变化,中国社会主要矛盾发生了变化,中国革命性质发生了变化,中国人民革命任务发生了变化,A 19 | 17,下列关于河姆渡原始居民生活状况的描述，不正确的一项是____,会饲养家畜,会制造青铜器,种植水稻,会制造干栏式房屋,B 20 | 18,改革开放以来，我国的外交事业取得重大成就的根本原因是____,综合国力的增强,独立自主的和平外交政策,中国是联合国安理会常任理事国,成功举办亚太经合组织会议,A 21 | 19,形成日后华夏族的主要部落是____,黄帝、蚩尤部落,炎帝、蚩尤部落,黄帝、炎帝、蚩尤部落,黄帝、炎帝部落,D 22 | 20,党在社会主义初级阶段基本路线的核心内容是“一个中心，两个基本点”，这里“一个中心”是指____,以改革开放为中心,以经济建设为中心,以四项基本原则为中心,以艰苦创业为中心,B 23 | 21,改革开放以来，党和政府为发展社会主义经济采取的举措不包括____,建立经济特区,农村实行家庭联产承包责任制,城市实行经济体制改革,农村建立人民公社,D 24 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_mathematics_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,当$x=-3$ 时，下列分式无意义的是____,$\frac{x-3}{x}$,$\frac{x+3}{x}$,$\frac{x}{x-3}$,$\frac{x}{x+3}$,D 3 | 1,如果 $x=3$是关于 x的$2x+m=7$方程 的解，那么 $m$的值为____,-1,2,1,-2,C 4 | 2,⊙O是一个正n边形的外接圆，若⊙O的半径与这个正n边形的边长相等，则n的值为____,3,4,5,6,D 5 | 3,下列等式变形错误的是 ____,"若$a=b$,则$3a-1=3b-1$","若$a=b$,则$a c^{2}=b c^{2}$","若$\frac{a}{c^{2}}=\frac{b}{c^{2}}$,则$a =b $","若$a c^{2}=b c^{2}$,则$a=b$",D 6 | 4,“垃圾分类”已经在全国开展得如火如荼，某回收公司有四包可回收垃圾，每包以标准克数（ 千克）为基准，超过的千克数记作正数，不足的千克数记作负数，以下数据是记录结果，其中表示实际重量最接近标准千克数的是 ____,-1,2,-0.5,0,D 7 | 5,某施工队承接了60公里的修路任务，为了提前完成任务，实际每天的工作效率比原计划提高了25％，结果提前60天完成了这项任务．设原计划每天修路x公里，根据题意列出的方程正确的是____,$\frac{60\times (1+25 \%)}{x} -\frac{60}{x}=60$,$\frac{60}{x}-\frac{60\times (1+25 \%)}{x} =60$,$\frac{60 }{ (1+25 \%)x} -\frac{60}{x}=60$,$ \frac{60}{x}-\frac{60 }{ (1+25 \%)x} =60$,D 8 | 6,线段$AB=9$ ，点C在线段$AB$上，且有$AC=\frac{1}{3}AB$ ， M是AB 的中点，则 MC等于____,$3$,$\frac{3}{2}$,$\frac{9}{2}$,$\frac{15}{2}$,B 9 | 7,下列命题正确的是____,三角形的重心是三条高线的交点,等腰三角形底边上的中线不一定垂直于底边,线段垂直平分线上的点到线段两端的距离相等,含根号的数都是无理数,C 10 | 8,下列各组代数式中为同类项的是____,$-2xy$与$2x$,$5x^2y$与$-2xy^2$,$5x^5y^4$与$-5x^5z^4$,$-xy$与$\frac{3}{2}y x$,D 11 | 9,下列命题是真命题的是____,两条直线被第三条直线所截，同旁内角互补,三角形内角和为180°,三角形的一个外角等于它的两个内角之和,同角的余角互补,B 12 | 10,抛物线$y=-x^2+2x-2$的顶点坐标为____,"(-1,1)","(1,-1)","(-1,-1)","(1,-3)",B 13 | 11,某商场销售甲、乙两种服装，已知乙服装每件的成本比甲服装贵50元，甲、乙服装均按成本价提高40％ 作为标价出售.一段时间后，甲服装卖出了350件，乙服装卖出了200件，销售金额为 129500元，若用方程$350\times1.4x+200\times1.4\times\left(x+50\right)=129500$ 表示其中的数量关系，则式子中 所表示的量是____,甲服装的标价,乙服装的标价,甲服装的成本价,乙服装的成本价,C 14 | 12,下列说法正确的是____(1)抛一枚硬币，正面一定朝上； (2)掷一颗骰子，点数一定不大于6；(3)为了解一种灯泡的使用寿命，宜采用普查的方法；(4)“明天的降水概率为80%”，表示明天会有80％的地方下雨．,1个,2个,3个,4个,A 15 | 13,我国古代数学著作《孙子算经》中有一道题：“今有木，不知长短，引绳度之，余绳四尺五，屈绳量之，不足一尺，问木长几何？”大致意思是：“用一根绳子去量一根木条，绳子剩余4.5尺，将绳子对折再量木条，木条剩余1尺，问木条长多少尺？”设绳子长x尺，木条长y尺，则根据题意所列方程组正确的是____,"$\begin{cases}x-y=4.5,\\ \dfrac{1}{2}x-y=1\end{cases}$","$\begin{cases}x-y=4.5,\\ y-\dfrac{1}{2}x=1\end{cases}$","$\left\{\begin{matrix}x+y=4.5,\\ y-\dfrac{1}{2}x=1\end{matrix}\right.$","$\left\{\begin{matrix}x-y=4.5,\\ x-\frac{1}{2}y=1\end{matrix}\right.$",B 16 | 14,甲、乙两班学生参加植树造林，已知甲班每天比乙班多植5棵树，甲班植80棵树所用的天数与乙班植70棵树所用的天数相等．若设甲班每天植树x棵，则根据题意得出的方程是____,$\frac{80}{x-5}=\frac{70}{x}$,$\frac{80}{x}=\frac{70}{x+5}$,$\frac{80}{x+5}=\frac{70}{x}$,$\frac{80}{x}=\frac{70}{x-5}$,D 17 | 15,下列判断错误的的是____,$2x^{2}y^{2}$是二次单项式,单项式 $a$的系数和次数都是 1,数字3是单项式,$2\pi r$的系数是$2\pi$,A 18 | 16,下列图形中有稳定性的是____,平行四边形,直角三角形,长方形,正方形,B 19 | 17,阳光文具店出售笔袋和水笔，笔袋每个12元，水笔每个2元，促销期间购一个笔袋送一个水笔，某人共付款 150元，购得笔袋、水笔共 35个（含赠品），则此人购得笔袋的个数为____,9,10,11,12,B 20 | 18,"一元二次方程$x^2-3x=1$的两个实数根为$\alpha$,$\beta$,则$\alpha+\beta$的值为____",3,-1,-3,1,A 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/middle_school_physics_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,在全国中小学安全教育平台中，安全用电常识是其中一项重要的教育内容。下列做法符合安全用电要求的是____,用铜丝替代保险丝,更换灯泡时断开电源开关,开关接在灯泡和零线之间,使用测电笔时手接触笔尖金属体,B 3 | 1,四冲程柴油机在工作过程中，将内能转化为机械能的冲程是____,吸气冲程,压缩冲程,做功冲程,排气冲程,C 4 | 2,歌词“小小竹排江中游，巍巍青山两岸走”，前句描述的运动物体和后一句的参照物分别是____,青山 青山,竹排 青山,竹排 竹排,青山 竹排,C 5 | 3,头球（运动员用头碰撞飞行中的足球）是足球比赛中常用的技术，下列说法正确的是____,头球过程中，头对足球的力改变了足球的运动状态,足球被顶飞，是因为头对足球的力大于足球对头的力,头对足球的作用力消失时，足球的惯性也消失,足球在空中飞行时，以运动员为参照物，足球是静止的,A 6 | 4,自行车的各个部分中，减小了有害摩擦的是____,车胎,车把,车轴,脚踏板面,C 7 | 5,下列实例中关于压强和摩擦力的说法正确的是____,轴承中装有滚珠是为了增大摩擦,磁悬浮列车悬浮行驶是为了增大摩擦,鸟的嘴很尖细，在凿树时可以减小压强,月球车装有很多轮子是为了减小压强,D 8 | 6,对于静止在水平轨道上的“复兴号”列车，下列分析中正确的是____,列车所受重力和列车对铁轨的压力是一对相互作用力,列军所受重力和铁轨对列车的支持力是一对相互作用力,列车所受重力和铁轨对列车的支持力是一对平衡力,列车对铁轨的压力和铁轨对列车的支持力是一对平衡力,C 9 | 7,“万物生长靠太阳”，绿色植物的生长需要阳光。物理学研究表明，不透明物体的颜色是由它反射的色光决定的，由此可以推测，不利于绿色植物生长的光是____,红光,黄光,绿光,紫光,C 10 | 8,下列过程，属于内能转化为机械能的是____,从滑梯上滑下时臀部发热,电热水壶烧水,内燃机的做功冲程,向下压活塞引燃棉花,C 11 | 9,能解释“倒影”形成的是____,光的色散,光的折射,光的反射,光的直线传播,C 12 | 10,中国国家航天局宣布，2018年5月21日5时28分，我国在西昌卫星发射中心用“长征四号丙”运载火箭，成功将“鹊桥号”中继星发射升空，为“嫦娥四号”月球探测任务提供地月间的中继通信，负责地球与未来“嫦娥四号”通信的中继接力。下列说法正确的是____,中继星与地月间不可能靠电磁波通信,地球和太阳系中的其他行星起源于不同的星云,发射当天地球运行在绕太阳公转轨道中的夏至与秋分之间,月球的自转周期和公转周期相同，人类只能看到月球的正面,D 13 | 11,生活处处有物理，以下估测最接近生活实际的是____,宿迁六月份平均气温约为10 °C,初中生背负沉重的书包上学，书包平均重300 N,初中生课桌高度约为75 cm,中考体育考试中某同学50 m短跑成绩约为4 s,C 14 | 12,下列实例中，属于增大摩擦的是____,往自行车轴承中加润滑油,行李箱下安装滚动轮子,骑自行车刹车时用力捏闸,将滑梯的滑道做得光滑,C 15 | 13,下列做法中，符合安全用电原则的是____,高压线下钓鱼,机壳没有接地,绝缘皮破损,安装避雷针,D 16 | 14,超导现象是指某些物质在温度很低时电阻变为零的现象。如果某种超导材料能应用于实际，最适合用来制作____,保险丝,输电导线,电炉丝,变阻器的电阻丝,B 17 | 15,棒球比赛时，向斜上方击球时的情景中，下列有关说法正确的是____,击球的一瞬间，棒对球的力大于球对棒的力,球在上升过程中，重力势能转化为动能,球上升到最高点时，若所受力全部消失，球将做减速直线运动,球下落过程中速度越来越大，因为重力改变了球的运动状态,D 18 | 16,下列关于力和运动的说法，正确的是____,物体运动状态发生改变，一定受到力的作用,行驶的汽车急刹车时，乘客会出现向后倾的现象,用力推桌子，桌子静止不动，因为推力小于摩擦阻力,踢出去的足球能在空中飞行，是因为足球没有受到力的作用,A 19 | 17,声音可以表达情感，传递信息，对于声现象的理解正确的是____,教师讲课的声音是由声带振动产生的,“静止鸣笛”是在传播过程中减弱噪音,声音的振幅越大，音调越高,只要物体在振动，我们就能听到声音,A 20 | 18,为加强校园安全管理，在校内安装监控摄像机，来自物体的光经过摄像机的镜头后形成____,倒立、缩小的实像,正立、放大的实像,倒立、放大的虚像,正立、缩小的虚像,A 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/modern_chinese_history_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,1944年4月至1945年1月，日本发动打通中国大陆交通线的战役是____,忻口战役,淞沪战役,豫湘桂战役,枣宜会战,C 3 | 1,大革命时期的统一战线和抗日民族统一战线____,都有共同的政治纲领,均采取党内合作方式,全具有反帝反封建性质,皆有各阶层广泛参加,A 4 | 2,下列不平等条约中，赔款数额最多的是____,《南京条约》,《北京条约》,《马关条约》,《辛丑条约》,D 5 | 3,中国共产党发出“停止内战，一致抗日”的号召是在____,蒋介石对中央苏区第四次“围剿”时,“何梅协定”签订后,瓦窑堡会议期间,西安事变发生后,B 6 | 4,1949年9月21日，中国人民政治协商会议第一届全体会议通过了具有临时宪法作用的是____,《中华民国临时约法》,《和平宪法》,《中国人民政治协商会议共同纲领》,《中华人民共和国宪法》,C 7 | 5,1946年1月10日，政治协商会议在重庆开幕，共产党与民主党派和无党派人士的代表密切合作，推动政协会议达成了政府组织、国民大会、和平建国纲领、宪法草案、军事问题等五项决议。这些决议及其他协议____,是蒋介石发动内战的依据,是社会主义性质的决议,有利于冲破蒋介石的独裁统治和实行民主政治，有利于和平建国,是新民主主义性质的决议,C 8 | 6,中国共产党在实践中探索中国建设社会主义道路开始的标志是____,中华人民共和国的建立,过渡时期总路线的提出,《论十大关系》的发表,中共八大的召开,C 9 | 7,戊戌变法的阶级基础是____,农民阶级,开明地主,爱国知识分子,民族资产阶级,D 10 | 8,下列关于洋务运动叙述不正确的是____,洋务运动是封建统治阶级为了维护自己的统治而进行的一场自救运动,客观上促进了资本主义的发展,口号是“自强”和 “求富”,触及到了封建统治的根基,D 11 | 9,我国的改革从经济体制改革着手，经济体制的改革首先在____,思想解放上取得突破,对外开放上取得进展,城市经济体制改革取得突破性进展,农村取得突破性进展,D 12 | 10,党的过渡时期总路线的“一体”指的是____,国家工业化,对农业的社会主义改造,对手工业的社会主义改造,对资本主义工商业的社会主义改造,A 13 | 11,1947年刘邓大军挺进中原的重大意义在于____,影响战略决战主攻方向,粉碎蒋介石的重点进攻,改变敌我双方的力量对比,改变解放战争的战略态势,D 14 | 12,北伐战争对准的军阀是____①吴佩孚②孙传芳③张作霖④段祺瑞,①②③,②③④,①③④,①②③④,A 15 | 13,我国对农业社会主义改造采取的方针是____,典型示范,自愿互利,国家帮助,积极发展、稳步前进、逐步过渡,D 16 | 14,《双十协定》的签订，中共取得的战略优势是____,获得了自卫战争的准备时间,解放区获得了合法地位,赢得了民主党派的支持,取得了政治上的主动地位,D 17 | 15,七届二中全会召开的地点是____,北平,延安,西柏坡,上海,C 18 | 16,率领北平国民党军队接受和平改编的国民党将领是____,张治中,蔡廷锴,杜聿明,傅作义,D 19 | 17,孙中山三民主义思想的核心是____,驱除鞑虏,恢复中华,创立民国,平均地权,C 20 | 18,抗战进入相持阶段后，中国人民在华北给日本侵略者沉重打击的一次军事行动是____,百团大战,平型关战役,凇沪会战,台儿庄战役,D 21 | 19,中国各民主党派是阶级联盟性质的政党，其形成时的社会基础主要是____,开明绅士、地产实力派,工人、农民、小资产阶级,工人、农民、小资产阶级、民族资产阶级,民族资产阶级、城市小资产阶级以及同这些阶级相联系的知识分子和其他爱国分子,D 22 | 20,由于帝国主义、封建主义、官僚资本主义的残酷压迫，中国人民走上了反帝反封建反官僚资本主义斗争的伟大时代。民主革命的主要力量是____,工人,民族资产阶级,工人、农民,工人、农民、城市小资产阶级群众,D 23 | 21,革命统一战线正式建立的标志是____,国民党“一大”的召开,国民党改组,三民主义发展为新三民主义,中共“三大”的召开,A 24 | 22,抗日战争胜利后，某些民主党派的领导人物曾经鼓吹“中间路线”，即在共产党和国民党的建国方案中间，寻找出第三条道路，但最终幻灭了。其幻灭的根本原因在于____,没有武装力量、没有统一的政纲,国民党当局对民主党派的迫害,资产阶级共和国方案在中国行不通,民主党派不是单一阶级的政党,C 25 | -------------------------------------------------------------------------------- /assets/ceval_data/val/operating_system_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,在Unix的两个文件系统之间建立文件或目录的链接命令是____。,ln,ln –s,ls –n,ls –i,B 3 | 1,下面几条中，____是动态重定位的特点。,需要一个复杂的重定位装入程序,存储管理算法比较简单,不需地址变换硬件机构的支持,在执行时将逻辑地址变换成内存地址,D 4 | 2,Unix打开文件机构中的进程打开文件表是进程扩充控制块user结构中的____。,u_pdir,u_ofile,u_dirp,u_pofile,B 5 | 3,在虚拟页式存储管理方案中，____完成将页面调入内存的工作。,文件读写,页面淘汰过程,页面工作集处理,缺页中断处理,D 6 | 4,早期采用交换技术的目的是____。,能运行更多的程序,能运行更大的程序,实现分时系统,实现虚拟存储技术,A 7 | 5,下面对于段式和页式存储管理特点的描述中，____是正确的。,页式采用静态重定位方式，段式采用静态重定位方式,页式采用静态重定位方式，段式采用动态重定位方式,页式采用动态重定位方式，段式采用静态重定位方式,页式采用动态重定位方式，段式采用动态重定位方式,D 8 | 6,下面几点措施中，____不属于Unix的动态优先权法。,进程在核心态下运行，不进行强迫调度,赋予因等待不同资源或事件的睡眠进程不同的优先数,超级用户进程可以要求系统赋予较高的优先权,由时间片轮转法规定各个就绪进程顺次轮流使用处理机,D 9 | 7,在Unix中，passwd命令位于____目录中的。,/usr/bin,/lib,/etc,/dev,A 10 | 8,Linux存储管理的特点是采用在大小不同的分区里实现____的存储管理技术。,可变分区,分页,分段,段页式,B 11 | 9,Windows_2000采用的系统模型不包括____。,客户机/服务器模型,对象模型,对称多处理模型,分布式处理模型,D 12 | 10,在Unix中，向消息队列发送一个消息的系统调用是____。,msgsnd,shmat,semop,send,A 13 | 11,设计批处理多道系统时，首先要考虑的是____。,灵活性和可适应性,系统效率和吞吐量,交互性和响应时间,实时性和可靠性,B 14 | 12,文件保密的目的是指防止文件被____。,篡改,破坏,窃取,删除,C 15 | 13,下面哪一个命令可以回到用户主目录____。,cd ..,cd HOME,cd .,cd,D 16 | 14,为了文件的保密，可以用____的方法使文件的内容对其他主体无意义。,存取控制表,隐蔽文件目录,设置口令,使用密码,D 17 | 15,操作系统中应用最多的数据结构是____。,堆栈,队列,树,图,B 18 | 16,中断和DMA在操作过程中____嵌套。,都不可以,中断可以、但DMA不可以,都可以,中断不可以、但DMA可以,B 19 | 17,在请求分页系统中，页面置换算法常用的是____。,最优淘汰算法,首次适应算法,最近最少使用淘汰算法,最佳适应算法,C 20 | 18,Unix的软中断机制是____。,设备中断,信号量,系统调用,信号,D 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/plant_protection_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,与保卫细胞的水势变化关系最密切的离子是____。,$Ca^{2+}$,$K^+$,$Cl^-$,$Mg^{2+}$,B 3 | 1,已经发生质壁分离的细胞，细胞的水势决定于细胞的____。,渗透势,压力势,衬质势,膨压,A 4 | 2,种子的萌发过程对水分的吸收速度有所不同，一般表现为____。,快—慢—快,慢—快—慢,快—慢,慢—快,A 5 | 3,在细胞伸长过程中，新的细胞壁物质中纤维素是在____中合成，然后分泌到细胞壁中。,细胞质膜,高尔基体,线粒体,叶绿体,A 6 | 4,微管是两种微管蛋白组成的异二聚体，这两种微管蛋白是____。,肌动蛋白，肌动蛋白结合蛋白,马达蛋白，肌球蛋白,α-微管蛋白，β-微管蛋白,动蛋白，力蛋白,C 7 | 5,在植物对逆境的适应中最为重要的植物激素是____。,细胞分裂素,乙烯,茉莉酸甲酯,脱落酸,D 8 | 6,下列四组矿质元素，哪组元素的缺素症表现为叶片缺绿?____,Fe，Cl，N，Ca,Mg，Fe，N，S,P，N，Mg，S,P，Mo，Mg，S,B 9 | 7,在衰老的植物组织或器官中，蛋白质含量显著下降，其主要原因是____。,蛋白质周转速率降低,氨基酸的生物合成受阻,蛋白质水解酶活性增加,土壤中氮素含量下降,C 10 | 8,G蛋白是由α、β、γ3种亚基构成的异三聚体，与GTP结合的活性位点在____上。,α亚基,β亚基,γ亚基,βγ亚基复合体,A 11 | 9,已分化的细胞在特定情况下恢复分裂能力，重新进行细胞分裂的过程为____。,细胞分化,细胞分裂,再分化,脱分化,D 12 | 10,植物器官、组织或细胞在形态结构、生化组成以及生理功能上的不对称性是____。,细胞生长,细胞分化,极性,细胞全能性,C 13 | 11,耐热性强的植物原生质蛋白质具有的特点是____。,易发生不可逆的变性与凝聚,疏水键多，二硫键少,对热稳定，疏水键和二硫键多,对热稳定，疏水键和二硫键少,C 14 | 12,细胞在形态结构、内部代谢和生理功能上区别于原分生细胞的过程是____。,细胞生长,细胞分化,细胞脱分化,细胞再分化,B 15 | 13,光学显微镜下呈现出的细胞结构被称为____。,显微结构,亚显微结构,超显微结构,亚细胞结构,A 16 | 14,根尖中根的干细胞群是指____。,根冠,静止中心,分生组织,根毛,B 17 | 15,质膜上已知的离子通道有____。,$K^+$，$Mg^{2+}$，$Ca^{2+}$,$K^+$，$Cl^-$，$Ca^{2+}$,$K^+$，$Cl^-$，$Mg^{2+}$,$K^+$，$Zn^{2+}$，$Ca^{2+}$和$Fe^{2+}$,B 18 | 16,把植物组织放在高渗溶液中，植物组织____。,吸水,失水,水分动态平衡,水分不变化,B 19 | 17,下列哪种元素的缺素症表现为植物叶尖积累过多的脲，严重出现坏死?____,Ni,Mn,Fe,Ca,A 20 | 18,植物根系吸收后，在____被还原。,叶肉细胞,根组织,植物体地上部,根组织和叶肉细胞,D 21 | 19,在高温气候条件下用冷水灌溉植物往往会引起____。,植物蒸腾加剧,植物萎蔫,植物快速吸水,植物生长加速,B 22 | 20,高等植物花粉管向着胚珠的生长是____运动。,向光性,向化性,向重性,向触性,B 23 | 21,下列属于生理碱性盐的是____。,$NaNO_3$,$(NH_4)_2SO_4$,$NH_4NO_3$,$MgSO_4$,A 24 | -------------------------------------------------------------------------------- /assets/ceval_data/val/professional_tour_guide_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,《临川先生文集》中的“王临川”用的是____称谓。,别号,官爵,地望,排行,C 3 | 1,广东风味小吃有____。,猫耳朵,五芳斋粽子,双皮奶,虾爆鳝面,C 4 | 2,我国国内卫星通信网正式建成于____。,1980年,1983年,1986年,1988年,C 5 | 3,东汉由西汉王室刘秀创建，建都____。,长安,洛阳,成都,建业,B 6 | 4,对我国名山的描述正确的是____。,泰山有“天下第一山”之称，被列入世界自然与文化双重遗产,黄山有“五岳独秀”之称，被列入世界自然与文化双重遗产,华山最高峰南峰海拔1800米，自古以险闻名遐迩,衡山有七十二峰，三大主峰莲花峰、天都峰、祝融峰都超过1800米,A 7 | 5,中国历史上第一个奴隶制国家政权夏朝建立在____。,晋南,洛阳,安阳,二里岗,A 8 | 6,上海豫园鱼乐榭有一上实下空的墙，遮挡了原来流水较近的短处，产生了源远流长的效果，这是____的神来之笔。,抑景,框景,借景,障景,D 9 | 7,“霸王别姬”是____的代表菜。,苏菜,鲁菜,浙菜,湘菜,A 10 | 8,我国的“四大名砚”中，唯一不用岩石为砚材制作原料的是____。,端砚,歙砚,澄泥砚,洮河砚,C 11 | 9,黑龙江在我国境内的最长支流是____。,松花江,海河,鸭绿江,辽河,A 12 | 10,西周时的商高是见于著述的中国古代第一位____。,农学家,医学家,数学家,天文学家,C 13 | 11,被誉为“四大国宝”的我国一级保护动物是____。,藏羚羊、白唇鹿、白鳍豚、金丝猴,华南虎、白鳍豚、亚洲象、大熊猫,大熊猫、金丝猴、白鳍豚、白唇鹿,金丝猴、东北虎、白唇鹿、亚洲象,C 14 | 12,英国为了打开中国市场，在____发动了鸦片战争，清朝战败。,1780年,1820年,1840年,1860年,C 15 | 13,我国现存最古老的木结构建筑位于____。,山西五台县南禅寺,山西五台县佛光寺,山西五台县塔院寺,山西芮城县广仁王庙,A 16 | 14,____是伦敦的标志性建筑之一，有英国最大的钟。,伦敦塔桥,伊丽莎白塔,圣保罗教堂,海德公园,B 17 | 15,无锡寄畅园因园外惠山的景色而显得更加秀丽。产生这一效果的构景手法是____。,借景,添景,抑景,障景,A 18 | 16,世界旅游组织总部设在____。,旧金山,曼谷,海牙,马德里,D 19 | 17,《梦溪笔谈》被称为“中国科学史上的坐标”，其作者是____。,沈括,祖冲之,徐霞客,吴敬梓,A 20 | 18,北方园林尤以____为代表。,开封,西安,洛阳,北京,D 21 | 19,我国成功发射的世界首颗量子科学实验卫星叫____。,“墨子号”,“玉兔号”,“嫦娥号”,“天宫号”,A 22 | 20,我国最大的丛书是____。,《吕氏春秋》,《永乐大典》,《古今图书集成》,《四库全书》,D 23 | 21,郁金香真正的原产地是____。,荷兰,土耳其,法国,意大利,B 24 | 22,清乾隆年间“四大徽班进京”对京剧艺术的形成影响深远，四大徽班中最早进京演出并大获成功的是____。,和春班,四喜班,三庆班,春台班,C 25 | 23,李求真在“万里晴空，几片闲云浮海角；一湾碧水，八方游子恋天涯”联语中巧妙地嵌入了“海角天涯”四个字，它是____省的旅游名胜。,广东,广西,贵州,海南,D 26 | 24,下列园林建筑中，____形式优美且不讲究对称布局。,榭,轩,亭,廊,B 27 | 25,元大都是按照____传统都城的布局建造的。,汉族,藏族,蒙古族,满族,A 28 | 26,被称为“土族梁祝”的叙事长诗是____。,《牛达的传说》,《汗庆格尔》,《祁家延西》,《拉仁布与吉门索》,D 29 | 27,下列风物特产中，属于韩国风物特产的是____。,珍珠,燕窝,高丽参,香料,C 30 | 28,西汉的____，包括《素问》和《灵枢》两部分，奠定了传统中医学理论基础，是我国现存最早的一部医书。,《黄帝内经》,《伤寒杂病论》,《脉经》,《千金方》,A 31 | -------------------------------------------------------------------------------- /assets/ceval_data/val/sports_science_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,在极限强度运动中，肌肉中的ATP和CP在多少秒内就几乎耗竭____,15,30,10,20,C 3 | 1,决定VO2max的外周机制是____,肌纤维组成,有氧代谢能力,肌组织利用氧的能力,氧运输系统的机能,C 4 | 2,“极点”产生早晚与____,年龄无关,训练程度无关,气候条件无关,教练员无关,D 5 | 3,优秀运动员全程性多年训练过程中，训练负荷始终保持在高水平区间起伏的是____,基础训练阶段,专项提高阶段,最佳竞技阶段,竞技保持阶段,C 6 | 4,下列不是准备活动的作用的是____,调节赛前状态,缩短进入工作状态,减轻“极点”程度,加速运动疲劳的恢复,D 7 | 5,腿部肌肉中快肌纤维百分组成占优势的人，较适宜从事的运动项目是____,800m跑,1 500m跑,100m跑,1 500m游泳,C 8 | 6,运动时，机体工作能力逐步提高是因为____,物理惰性和植物性功能惰性,运动器官功能惰性和物理惰性,植物性功能惰性和运动器官功能惰性,物理惰性和生理惰性,D 9 | 7,课外运动竞赛的主要特点有竞争性、集体性与教育性、多层次与群众性以及____,知识性与协作性,生理性与心理性,趣味性与娱乐性,公正性与表现性,C 10 | 8,西周的“国学”和“乡学”的教学内容为____,宗教和军事,习射及传习多种武艺,礼、乐、射、御、书、数,“五项竞技”,C 11 | 9,能够导致氧解离曲线右移的情况是____,血液中PCO2增高,血液中PCO2降低,血液中pH值增高,血液中PN2张力增高,A 12 | 10,下面不属于克服自身体重的练习是____,引体向上,倒立推起,使用拉力器,纵跳,C 13 | 11,柔道项目中的“得意技”指的是____,基本技术,特长技术,高难度技术,全面技术,B 14 | 12,关于糖的分解代谢，下列说法错误的是____,在不需要氧的情况下，糖进行无氧酵解，反应在细胞浆中进行,糖进行无氧酵解时，能量利用率很低,在氧气供应充足时，肌肉中的乳酸可以再转变为葡萄糖进一步氧化供能,葡萄糖或糖原生成丙酮酸是有氧和无氧供能的共同途径,C 15 | 13,下列能最好评价肺通气功能的指标是____,肺通气量,肺活量,补吸气量,时间肺活量,D 16 | 14,从运动员竞技能力的决定因素看，下列项目对运动员心理能力要求最高的是____,游泳,跳水,射箭,摔跤,C 17 | 15,乳酸阈可用来评定机体____,无氧能力,有氧能力,血乳酸能力,ATP—CP系统能力,B 18 | 16,运动员负荷量度临界值的大小受教育程度、竞技水平及健康等因素的影响，因此在训练中需要____,正确处理负荷与恢复的关系,正确理解训练负荷构成,科学动态探求负荷量度临界值,对运动员进行区别对待,C 19 | 17,同为球类项目，篮球与足球对运动员身体形态、素质、技战术的要求却大不相同，主要是因为____,运动员个体的不同,教练员执教能力的不同,各项目训练条件的不同,专项竞技能力的不同,D 20 | 18,影响血红蛋白氧饱和度的最主要因素是____,PO2,血液pH值,PCO2,血液的温度,A 21 | -------------------------------------------------------------------------------- /assets/ceval_data/val/veterinary_medicine_val.csv: -------------------------------------------------------------------------------- 1 | id,question,A,B,C,D,answer 2 | 0,____既在糖酵解又在葡萄糖异生作用中起作用。,丙酮酸激酶,3-磷酸甘油醛脱氢酶,1，6-二磷酸果糖激酶,己糖激酶,B 3 | 1,将RNA转移到硝基纤维素膜上的技术叫____。,Southern印迹,Northern印迹,Western印迹,Eastern印迹,B 4 | 2,____不是蛋白质的性质之一。,处于等电状态时溶解度最小,加入少量中性盐溶解度增加,变性蛋白质的溶解度增加,有紫外吸收特性,C 5 | 3,在酶的分离纯化中最理想的实验结果是____。,纯化倍数高，回收率高,蛋白回收率高,回收率小，但纯化倍数高,比活力最大,A 6 | 4,动物体内组成的化学元素中，下列所占比例最多的是____,碳,氯,钠,氢,A 7 | 5,酶的催化特点不具有____,高效性,多功能性,可调节性,酶蛋白易变性,B 8 | 6,生物素是____的辅酶。,丙酮酸脱氢酶,丙酮酸激酶,丙酮酸脱氢酶系,丙酮酸羧化酶,D 9 | 7,蛋白质不能吸收可见光，但能吸收一定波长范围内的紫外光。大多数蛋白质在280nm波长附近有一个吸收峰，这主要与蛋白质中____的紫外吸收有关。因此，可以利用紫外吸收法，根据蛋白质溶液在280nm波长的吸收值测定蛋白质浓度,碱性氨基酸,酸性氨基酸,含硫氨基酸,芳香族氨基酸,B 10 | 8,"具5 "" -CpGpGpTpAp-3 "" 顺序的单链DNA能与下列____RNA杂交","5 "" -GpCpCpApTp3 ""","5 "" -GpCpCpUp-3 ""","5 "" -UpApCpCpGp-3 ""","5 "" -TpApCpGp-3 """,C 11 | 9,酶的非竞争性抑制剂对酶促反应的影响是____。,$ν_{max}$ 不变，$K_m$ 增大,$ν_{max}$不变，$K_m$减小,$ν_{max}$增大，$K_m$不变,$ν_{max}$减小，$K_m$不变,D 12 | 10,水溶性维生素常是辅酶或辅基的组成部分，如____。,辅酶A含尼克酰胺,FAD含有吡哆醛,$FH_4$ 含有叶酸,脱羧辅酶含生物素,C 13 | 11,核酸变性后，可发生的效应是____。,减色效应,增色效应,失去对紫外线的吸收能力,最大吸收峰波长发生转移,B 14 | 12,下列____不是终止密码。,UAA,15AC,UAG,UGA,B 15 | 13,关于酶偶联受体的叙述，错误的是____。,酶偶联受体属于细胞表面受体,酶偶联受体的配体结合区在细胞膜内侧，酶活性区在细胞膜外侧,酶偶联受体介导的是非经典跨质膜与胞内信号途径，可以单独完成信号传递，胞内信号传递不产生经典意义上的第二信使,多数酶偶联受体具有磷酸化酶的活性,B 16 | 14,主要分布在肝脏的是____。,碱性磷酸酶,酸性磷酸酶,单胺氧化酶,谷丙转氨酶,D 17 | 15,对DNA片段作物理图谱分析，需要用____。,核酸外切酶,DNAseI,限制性内切酶,DNA聚合酶I,C 18 | 16,____不是胆色素。,血红素,胆绿素,胆红素,胆素原族,A 19 | 17,转录是指____,DNA的自我复制过程,RNA的自我复制过程,以DNA为模板合成RNA的过程,以RNA为模板合成DNA的过程,C 20 | 18,血液非蛋白氮中含量最多的物质是____。,尿素,肌酸,蛋白质,尿酸,A 21 | 19,氨基酸分子既含有酸性的羧基(一COOH)，又含有碱性的氨基(一$NH_2$ )。前者能提供质子变成一COO一；后者能接受质子变成一$NH_3^+$ 。有的氨基酸还有可解离的侧链基团。因此，氨基酸是两性电解质。其解离状态与溶液的pH值有直接关系，当pH值等于pI时，蛋白质____,带正电荷,带负电荷,所带电荷不确定,所带正、负电荷相等,D 22 | 20,蛋白质分子是结构极其复杂的生物大分子。有的蛋白质分子只包含一条多肽链；有的则包含数条多肽链。通常将蛋白质的结构划分为几个层次，有一种结构层次出现在一条多肽链的内部，是多肽链局部的所有原子及原子团形成的有规律的构象，该构象一般成球状结构，执行一定的功能，该结构是____,结构域,超二级结构,二级结构,三级结构,A 23 | 21,蛋白质生物合成中多肽的氨基酸排列顺序取决于____。,相应tRNA的专一性,相应氨酰tR-NA合成酶的专一性,相应mRNA中核苷酸排列顺序,相应tRNA上的反密码子,C 24 | 22,稀有核苷酸碱基主要见于____。,DNA,mRNA,tRNA,rRNA,C 25 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/agronomy.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,肉牛屠宰后，胴体的哪个部位肉质较好,胸,腹,大腿,小腿,C 3 | 1,下列鸭品种中，产蛋量最高的品种是,高邮鸭,北京鸭,樱桃谷鸭,绍鸭,D 4 | 2,常见家畜中输精管不形成输精管壶腹的是,马,猪,牛,羊,B 5 | 3,牛的发情周期平均为,16～17天,21天,28天,19～20天,B 6 | 4,羊胴体中，肉质较好的部位是,胸下肉,肩胛肉,后腿肉,小腿肉,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/anatomy.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,壁胸膜的分部不包括,肋胸膜,肺胸膜,膈胸膜,胸膜顶,B 3 | 1,属于蝶骨上的结构为,垂体窝,棘孔,破裂孔,视神经管,B 4 | 2,属于右心房的结构是,肉柱,室上嵴,乳头肌,梳状肌,D 5 | 3,咽的分部,咽隐窝,口咽部,鼻咽部,喉咽部,C 6 | 4,舌下神经核位于,间脑,延髓,中脑,脑挢,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/ancient_chinese.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列四组字中，全是形声字的一组是,修约菜苗,寐融照哀,问娶分笺,保禄私空,B 3 | 1,下列四组字中，全是会意字的一组是,集冰迢逐,凭亦寒罟,莫鱼向闽,牧岩岳泪,D 4 | 2,下列句中，“是”充当前置宾语的一句是,如有不由此者，在執者去，衆以焉殃，是謂小康。,子曰：敏而好學，不下恥問，是以謂之文也。,是乃其所以千萬臣而無數者也。,鑄名器，藏寶財，固民之殄病是待。,B 5 | 3,下列注音术语，不属于直音这种注音方式的是,讀輿某同,讀爲,讀曰,讀若,D 6 | 4,按照传统的“六书”体例，“益”字应属,象形,指事,形声,会意,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/arts.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,著名民乐作品《十面埋伏》属于,管乐,打击乐,弹拨乐,弦乐,C 3 | 1,审美的客体是,艺术受众,艺术作品,鉴赏者,艺术家,B 4 | 2,吴带当风是指谁的绘画风格,曹不兴,苏轼,吴镇,吴道子,D 5 | 3,话剧《龙须沟》的作者是,老舍,曹禺,夏衍,洪深,A 6 | 4,《霓裳羽衣舞》是哪一时期宫廷乐舞。,汉,宋,元,唐,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/astronomy.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,以下星座天区内梅西叶天体最多的是,武仙座,猎户座,船尾座,蛇夫座,D 3 | 1,以下哪个国家在本年度没有发射月球探测器的计划,印度,日本,俄罗斯,以色列,D 4 | 2,梅西叶天体M44位于（）的天区内,巨蟹座,大犬座,金牛座,猎户座,A 5 | 3,在金星西大距时，在金星上看到的地球处于,留,上合,方照,冲,C 6 | 4,太阳的光谱型是,O型,A型,K型,G型,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/business_ethics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,商业伦理学最早出现在,英国,法国,美国,意大利,C 3 | 1,伦理学的核心是,宗教伦理学,描述伦理学,元伦理学,规范伦理学,D 4 | 2,下列不属于人的基本权利的时,人格平等,独立,生命,自由,B 5 | 3,关税的课税客体是,进出境的货物,消费者,海关,进出口商,A 6 | 4,区域经济从本质上讲是,商品经济,一体化经济,信用经济,市场经济,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_civil_service_exam.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,假设“如果张楠和林枫不是志愿者，那么杨梅是志愿者”是前提，“林枫是志愿者”为结论。若要以上结论成立，需要补充的前提是,杨梅和张楠都是志愿者,杨梅不是志愿者,张楠是志愿者,杨梅和张楠都不是志愿者,D 3 | 1,对侵害英雄烈士的姓名、肖像、名誉、荣誉的行为，有权向人民法院提起诉讼的主体是：a英雄烈士近亲属；b检察机关；c当地人民政府；d负责英雄烈士保护工作的部门,bd,ac,ab,ad,C 4 | 2,下列说法错误的是,苏武牧羊的地点在今天的贝加尔湖一带,东汉使者班超同时也是《汉书》的作者,西汉张骞与唐代鉴真出行的方向不同,成语“南橘北枳”是与晏婴出使楚国有关,B 5 | 3,日常生活中经常可以依据动物的某些行为预判天气，下列对应正确的是,蜻蜓低飞——雨天,蚂蚁垒窝——晴天,麻省囤食——雨天,龟背冒汗——晴天,A 6 | 4,设计：修建：高楼,热爱：学习：书本,痛恨：打击：仇敌,勘探：开采：石油,体检：判断：病人,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_driving_rule.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,夜间机动车通过照明条件良好的路段时，要怎样使用灯光,危险报警闪光灯,近光灯,远光灯,前后雾灯,B 3 | 1,车辆临时靠边停车后准备起步时，应先怎样做,鸣喇叭,加油起步,提高发动机转速,观察周围交通情况,D 4 | 2,安全头枕在发生追尾事故时，能有效保护驾驶人的什么部位,腰部,颈部,头部,胸部,B 5 | 3,准驾车型为小型汽车的，可以驾驶下列哪种车辆,低速载货汽车,轮式自行机械,三轮摩托车,中型客车,A 6 | 4,安全气囊是一种什么装置,防抱死制动系统,电子制动力分配系统,辅助驾乘人员保护系统,驾驶人头颈保护系统,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_food_culture.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,孔府菜的代表名菜有,诗礼银杏,扒大乌参,黄焖鱼翅,清汤燕窝,A 3 | 1,下列不属于淮扬菜的是,三套鸭,叫花鸡,虾仁锅巴,炸蛎黄,D 4 | 2,称奶食为“白食”，肉食为“红食”的是,壮族,傣族,回族,蒙古族,D 5 | 3,“割不正不食”观念的提出者是,墨子,孔子,孟子,老子,B 6 | 4,我国南方地区流行吃青团的节日是,中秋节,春节,腊八节,清明节,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_foreign_policy.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,20世纪70年代以来，中国积极融入世界，下列事件发生的先后顺序是：a恢复联合国的合法席位；b尼克松访华；c乒乓外交；d中美建交；e中日签署外交关系的联合声明,cabed,acbde,abcde,cbade,A 3 | 1,亚非会议能取得成功的根本原因是,它没有殖民主义国家参加,中国提出“求同存异”方针的推动,亚非各国有团结反帝反殖的共同愿望,亚非各国间不存在矛盾和分歧,C 4 | 2,以下哪个是是国家关系发展的必然结果和客观趋势?,单边主义,强权政治,霸权主义,世界格局多极化,D 5 | 3,我国新时期的外交方针与政策有：a不结盟政策；b与周边国家建立友好关系；c一边倒与一大片；d对外开放,cd,abc,abd,ac,C 6 | 4,1948年底到1949年初，中共中央确定了一个重要的外交方针，将承认问题由新政权的单向“被承认”变成与外国政府之间的双向相互承认。毛泽东把这一外交方针概括为,“打扫干净屋子再请客”,“一边倒”,“求同存异”,“另起炉灶”,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_history.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,有位古代思想家认为：通过读书等外在手段来明理自然是好，但“不识一个字，亦须还我堂堂地做个人”，重要的是先确立仁义这一根本。这位思想家可能是,陆九渊,董仲舒,朱熹,孔子,A 3 | 1,《读通鉴论》曰：“两端争胜，而徒为无益之论者，辨封建者是也。____，垂二千年而弗能改矣。”句中横线处应填入,郡县之制,分封之制,行省制度,郡国并行,A 4 | 2,一个文弱书生最终成为驾驭干军万马的最高统帅，成就了“无湘不成军”的传奇，被誉为“中兴第一名臣”和“洋务派之父”。此人是,奕䜣,曾国藩,李鸿章,左宗棠,B 5 | 3,有学者认为河南偃师二里头文化遗址是传说中的夏朝都邑。以下考古发现中，最有力的证据是,青铜礼器,宫殿遗址,石制农具,家畜遗骨,B 6 | 4,晚清设立的一个机构，不仅办理外交事务，还扶植一些现代化项日，如新式学堂、近代企业等。它经常遭到守旧派抨击，外国人也批评它办事不力。该机构是,总理衙门,同文馆,外务部,军机处,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_literature.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,话剧《关汉卿》中的人物王著，其角色身份是,狱吏,文人,军官,后台管事,C 3 | 1,《太阳下的风景》的作者黄永玉和沈从文的故乡都在,鄂西,湘西,赣南,黔南,B 4 | 2,诗集《中国农村的故事》的作者是,田间,艾青,李季,何其芳,A 5 | 3,郭沫若《凤凰涅磐》采用的诗体形式是,楼梯式,自由体,新格律诗,民歌体,B 6 | 4,长篇小说《京华烟云》的作者是,丁玲,柔石,林语堂,老舍,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/chinese_teacher_qualification.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,以下选项中的概念关系，与“土豆”和“马铃薯”一致的是,坦克一战车,萝卜—青萝卜,录音机—录音笔,番茄一西红柿,D 3 | 1,提出“泛智”教育思想，探讨“把一切事物教给一切人类的全部艺术”的教育家是,特尔巴特,赞可夫,夸美纽斯,布鲁纳,C 4 | 2,教师不能满足“授之以鱼”，更要做到“授人以渔”。这强调教学应重视,培养个性,传授知识,发展能力,形成品德,C 5 | 3,一般说来，制约教育发展规模，速度和教育结构的根本性因素是,生产力发转水平,人口数量和质量,政治经济制度,社会意识形态,A 6 | 4,古人有称名、称字、称官职、称籍贯以及称谥号等习惯。有些诗文中称岳飞为“岳武穆”，“武穆”是,籍贯,表字,官职,谥号,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/clinical_knowledge.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,年龄大、合并症多、预期寿命短的股骨颈骨折患者，首选的治疗是,半髋关节置换术,切开复位+内固定,手法复位+内固定,全髋关节置换术,A 3 | 1,革兰阴性菌所致脓毒症的临床特点是,常并发休克,常继发于骨关节感染,常形成转移性脓肿,常出现结膜瘀斑,A 4 | 2,下列符合原发免疫性血小板减少症的检查结果的有,BT和APTT延长,血小板平均体积偏小,骨髓巨核细胞数量减少,骨髓巨核细胞体积变小,D 5 | 3,限制型心肌病的主要表现是,右心衰症状,SAM征,奇脉,室壁运动普遍减弱,A 6 | 4,急性肾损伤进展期的主要死亡原因是,感染,代谢性酸中毒,水中毒,低钾血症,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_actuarial_science.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,在三淢因模型中给出 $\mu_x^{(j)}=0.2 j， j=1，2，3$， 则 $q_x^{(2)}=()$ 。,0.23,0.33,0.03,0.13,A 3 | 1,已知现年 18 岁的王先生， 再生存 10 年的概率为 0.95 ， 再生存 30 年的概率为 0.75 ， 则 其现年 28 岁在达到 48 岁之前的死亡概率为 ( )。,0.2409,0.2503,0.2308,0.2105,D 4 | 2,某汽车一年内发生车祸次数服从混合泊松分布， 参数 $\lambda$ 服从 $(0，6)$ 上的均匀分布。那 么， 该汽车一年内发生车祸的次数不超过 1 次的概率为 ( )。,0.41,0.39,0.33,0.37,C 5 | 3,已知 $S(x)=1-\frac{x}{100}， 0 \leqslant x \leqslant 100$， 则 $f_{30}=(\quad)$ 。,0.8,0.7,0.5,0.6,C 6 | 4,已知 ${ }_s p_{10}=0.4$， 且 $\mu_x=0.01+b x， x \geqslant 0$， 则 $b$ 等于 $(\quad$ 。,-0.05,-0.014,0.005,0.014,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_education.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,教育的本体功能是什么? (),社会功能,经济功能,政治功能,育人功能,D 3 | 1,春秋时期出现的中国教育发展史上里程碑式的学校教育制度是 (),私学,国学,太学,乡学,A 4 | 2,我国学校教育大约出现在()。,奴隶社会初期,奴隶社会末期,原始社会初期,封建社会初期,A 5 | 3,鲁迅在“三味书屋”所接触到的办学形式在我国最早兴盛于(),秦汉,盛唐,春秋战国,商周,C 6 | 4,在古代文献记载中，我国西周时期设在王都的小学和大学，总称为(),都学,乡学,官学,国学,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_engineering_hydrology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,水道断面面积包括 ( ),大断面,过水断面面积和死水面积,死水面积,过水断面面积,B 3 | 1,流域围湖造田和填湖造田，将使流域蒸发[ ]。,不变,增加,难以肯定,减少,D 4 | 2,水位观测的精度一般准确到 (),0.01m,0.lm,1m,0.001m,A 5 | 3,用浮标法测流，断面流量等于断面徐流量再乘以(),风速,糙率,浮标系数,水位,C 6 | 4,一般情况下，某一地点的露点温度将比当地当时的气温[ ]。,高,低,相等,高或相等,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_law.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,根据物权法规定，土地承包经营权的设立时间是,土地承包经营权登记时,取得土地承包经营权证时,土地承包经营权合同生效时,土地承包经营权合同成立时,C 3 | 1,以下选项中，属于邻接权客体的是,具有独特造型的建筑物,计算机软件,即兴演讲,瑜伽录像制品,D 4 | 2,下列行为如满足规定条件，应认定为伪造货币罪的是,将英镑揭层一分为二,铸造珍稀古钱币,临摹欧元收藏,用黄金铸造流通的纪念金币,D 5 | 3,不作为犯罪的主观方面,只能是过失,不要求故意及过失,只能是故意,可以是故意也可以是过失,D 6 | 4,下列选项中，构成原物与孳息关系的是,果树与果树上的果实,水库与水库里的鱼,母牛与其产下的牛犊,名画原件与其复制品,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_mathematics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,若f(x) 在 (a，b) 内单调有界， 则 f(x) 在 (a，b) 内间断点的类型只能是 ( ).,第一类间断点,既有第一类间断点也有第二类间断点,结论不确定,第二类间断点,A 3 | 1,函数 $f(x)=\frac{x-x^3}{\sin \pi x}$ 的可去间断点个数为.,1,无穷多个,3,2,C 4 | 2,若 $f(x)$ 的导函数是 $2^x(\ln 2)^2$， 则 $f(x)$ 为 ( ).,$\frac{1}{\ln 2} \cdot 2^x+C$,$2^x(\ln 2)^2+C$,$2^x+C$,$2^x \ln 2+C$,D 5 | 3,设f(x)和F(x)分别为连续型随机变量X的概率密度和分布函数， 则下列函数 中可作为某随机变量的概率密度的是 . (多选),f(-x),f(x)F(x),f(2x),2xf(x^2),A 6 | 4,设是 $f(x)$ 偶函数， $\varphi(x)$ 是奇函数， 则下列函数(假设都有意义)中是奇函数的是 ( ).,$f[f(x)]$,$\varphi[\varphi(x)]$,$\varphi[f(x)]$,$f[\varphi(x)]$,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_medical_statistics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,只有各年龄组的发病率资料，用()方法计算标化发病率。,倒求法,间接法,直接法,等比法,C 3 | 1,间接标准化法计算标化死亡率是：,SIR×标准人口总数,SMR×标准人口死亡率,SIR×标准人口死亡率,SMR×标准人口总数,B 4 | 2,抽样误差是由:,采样结果不准引起,测量引起,计算引起,抽样引起,D 5 | 3,SMR 为：,预期死亡数/实际死亡数,预期发病数/实际发病数,实际发病数/预期发病数,实际死亡数/预期死亡数,D 6 | 4,观察何种疾病死因是造成当地居民死亡的主要死因，用,死亡率,疾病别死亡率,某病病死率,死因构成比,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/college_medicine.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,胃蠕动开始的部位是在,胃中部,胃贲门部,胃幽门部,胃窦,A 3 | 1,可使胞质内cAMP水平增高的酶是,磷酸酶,腺苷酸环化酶,磷脂酶,磷酸二酯酶,B 4 | 2,与线粒体内膜结合疏松容易被提取分离的细胞色素是,B,C,P450,AA3,B 5 | 3,在糖的有氧化过程，有几次底物水平磷酸化,3,1,4,2,A 6 | 4,胆汁中于消化有关的是,胆盐,胆绿素,胆色素,胆固醇,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/computer_science.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,关系数据库中的数据逻辑结构是,树形结构,⼆维表格,层次结构,⽹状结构,B 3 | 1,下⾯属于端系统之间的协议是,ARP ,IP,TCP,PPP,C 4 | 2,下列选项中，不属于线性结构的是,线性表 ,栈,队列,⽹,D 5 | 3,RAM代表的是,随机存储器 ,软盘存储器 ,只读存储器 ,⾼速缓存器 ,A 6 | 4,算法的基本结构中不包括,选择结构 ,循环结构 ,顺序结构 ,逻辑结构,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/computer_security.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,2003年上半年发生的较有影响的计算机及网络病毒是什么,SQL杀手蠕虫,SARS,手机病毒,小球病毒,A 3 | 1,以下不属于网络安全控制技术的是,数据备份与容灾技术,入侵检测技术,防火墙技术,访问控制技术,A 4 | 2,人为的安全威胁包括主动攻击和被动攻击，以下属于被动攻击的是,拒绝服务攻击,流量分析,后门,特洛伊木马,B 5 | 3,以下选项中，不属于生物识别方法的是,人脸识别,掌纹识别,个人标记号识别,指纹识别,C 6 | 4,信息网络安全的第一个时代,世纪之交,九十年代中叶前,专网时代,九十年代中叶,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/conceptual_physics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,一平面简谐波在弹性媒质中传播，在某一瞬时，媒质中某质元正处于平衡位置，此时它的能量是,动能为零，势能为零,动能最大，势能为零,动能为零，势能最大,动能最大，势能最大,D 3 | 1,一质点在光滑平面上，在外力作用下沿某一曲线运动，若突然将外力撤消，则该质点将作,停止运动,匀速直线运动,减速运动,匀速率曲线运动,B 4 | 2,下列关于重力概念的说法中，正确的是,重力方向总是垂直于物体的支持面,粉笔在使用时，质量变小，重力变小,重力不随物体位置变化而变化,空间向上飘的气球没有受到重力,B 5 | 3,关于简谐振动，下列说法中正确的是,质点在平衡位置处，振动的速度为零,质点在最大位移处，振动的速度最大,同一周期内没有两个完全相同的振动状态,质点在最大位移处，动能最大,C 6 | 4,电路中能产生持续电流的条件是,电路中有电源，还要形成通路,电路中有用电器,电路中有开关,电路中有电源,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/construction_project_management.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列溶剂中能将沥青裂解蒸馏出的油分完全溶解的溶剂是,乙醇,工业酒精,石油醚,乙醚,C 3 | 1,路面厚度评定的否决指标是,单点合格值,厚度代表值,厚度平均值,单点极值,D 4 | 2,下列水泵中、可以连续给液体施加能量的是,活塞泵,轴流泵,射流泵,齿轮泵,B 5 | 3,路面沥青层渗水系数宜在什么时间进行测定,交工验收前,交工验收后,碾压成型后,通车一年后,A 6 | 4,悬臂式和锚定式挡土墙属于,重力式,桩、墙式,固定式,扶壁式,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/economics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,根据消费函数，随着收入增长，消费将,增长更大份额,增长较小份额,增长相同份额,下降较小份额,B 3 | 1,在新产品定价时的渗透定价策略是指,价格定得很低,价格定得较低,价格定得很高,价格定得较高,A 4 | 2,可以用于企业决策基础的是,经济利润,最大利润,会计利润,正常利润,A 5 | 3,当边际产量为零时,平均产量为零,平均产量最大,总产量最大,总产量为零,C 6 | 4,当需求的收入弹性为正值时，则这种产品应为,低档货,高档货,都有可能,正常货,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/education.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,以下不属于职业教育课程模式特点的是,多样性,共适性,直接性,应变性,C 3 | 1,学科课程的代表人物是,赫尔巴特,赞可夫,布鲁纳,罗杰斯,C 4 | 2,职业学校的中心工作是,校风建设,学风建设,师资队伍建设,专业建设,D 5 | 3,下级的意见和信息向上级反映叫作哪种沟通,下行,上行,平行,正式,B 6 | 4,在我国最早的管理学家是,老子,荀子,孟子,孔子,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/electrical_engineering.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,在跳闸命令和合闸命令同时存在时，应保证,跳闸,不动,连续动作,合闸,A 3 | 1,力对物体的作用效果是,转动,作功,平移和转动,移动,C 4 | 2,与变压器气体继电器连接油管的坡度为,1%-5%,13%,2%-4%,5%,C 5 | 3,钳形电流表中的电流互感器（）一次线圈。,无,有5匝,有3匝,有1匝,A 6 | 4,硅钢片中含硅量愈高，其可塑性就,愈小,不一定变,愈大,不变,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/elementary_chinese.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,“及时当勉励，岁月不待人”是谁的名句,苏轼,白居易,辛弃疾,陶渊明,D 3 | 1,成语“一衣带水”中的“水”原指,黄河,淮河,长江 ,海河,C 4 | 2,“入木三分”这个成语原本是用来形容什么的,书法,文章,舞蹈,画作,A 5 | 3,中国历史上被誉为“药王“的是,孙思邈,扁鹊,华佗,李时珍,A 6 | 4,孔子弟子中擅长做生意的是谁,子贡,子路,颜回,子张,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/elementary_commonsense.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,我们经常吃的洋葱是植物的哪一部分,茎,叶,根 ,果实,A 3 | 1,世界上地势最低的国家是,土耳其,意大利,荷兰 ,波兰,C 4 | 2,有“绿城” 之称的是,郑州,贵州,昆明,海口,A 5 | 3,世界上产玉米最多的国家是,法国,俄罗撕,中国,美国,D 6 | 4,交通事故报警电话号码是,110,119,120,122,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/elementary_information_and_technology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列不属于获取信息的途径是,思考,看电视,讨论,看报纸,A 3 | 1,以下用于输出音频信息的设备是,音箱,显示器,打印机,绘图仪,A 4 | 2,计算机处理信息时， 一个英文字母占用的字节数是,1,2,4,8,A 5 | 3,计算机断电后， 信息会消失的存储器是,RAM,硬盘,光盘,软盘,A 6 | 4,在微型计算机中，CPU的名称是,控制器,运算器,中央处理器,内存,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/elementary_mathematics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列算式中，结果与 不相等的是,0.2÷0.5 ,4÷10,16÷40 ,20÷500 ,D 3 | 1,"集合A={1，2,3, 4}的真⼦集个数为",14,10,11,15,D 4 | 2,当X=[ ]时，5X-9=51,60,8.4,12,1,C 5 | 3,下⾯的数与0最接近的⼀个数是,-1,-5,+5,+2,A 6 | 4,做⼀个圆柱形通⻛管要⽤多少铁⽪是求,表⾯积,底⾯积 ,体积 ,侧⾯积 ,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/ethnology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,我国共有多少个少数民族,50,56,55,51,C 3 | 1,赶年是（）的传统节日,土家族,苗族,侗族,瑶族,A 4 | 2,下列民族中哪个民族是新中国成立后更改族称的,保安族,普米族,基诺族,德昂族,D 5 | 3,民族发展的决定性因素是,社会生产力的发展,阶级斗争,经济发展,民族精神,A 6 | 4,“抓饭”是（）的特色饮食,藏族,维吾尔族,苗族,朝鲜族,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/food_science.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,全身黄染是食用（）过量,维生素A,维生素D,维生素B,维生素C,A 3 | 1,渗毒性强的是,赭曲霉毒素,黄曲霉毒素,展青霉素,橘青霉素,D 4 | 2,速冻烹饪食品和蔬菜在解冻时宜采用,沸水,以上全部,热油,微波解冻,B 5 | 3,泡沫干燥的产品的特点具有,价格低,产品发泡,密度高,速溶,D 6 | 4,蛋白质在人体中的功能不包括,转运,储存能量,酶,贮存,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/genetics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,基因型为AaBBCc的个体所产生的配子种类有,4种,2种,6种,8种,A 3 | 1,组成核酸的核苷酸和碱基各有几种,8种和5种,4种和5种,4种和4种,8种和8种,A 4 | 2,以下哪些因素可以导致染色体畸变,辐射,化学物质,以上所有,正常细胞的生物化学反应,C 5 | 3,四倍体细胞具有,4条染色体,4个核,每条染色体具有4个拷贝,4对染色体,C 6 | 4,结果导致DNA数量增加的染色体畸变是哪一种,A和C均是,倒位,重复,缺失,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/global_facts.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,墨西哥影响最大的报纸是,《至上报》,《墨西哥太阳报》,《墨西哥先驱报》,《日报》,A 3 | 1,目前德国最有影响的新闻周刊是,《经济学家》,《时代》,《财富》,《明镜》,D 4 | 2,克林顿政府对外政策的三大支柱之一是什么,经济安全,社会安全,科技安全,国家安全,A 5 | 3,从政体上讲，美国是哪种形式的共和制,两党制,总统制,邦联制,联邦制,B 6 | 4,战后下列美国总统中属于共和党的是哪一位,克林顿,杜鲁门,卡特,艾森豪威尔,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_biology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,给健康大鼠静脉注射大量的低渗食盐水后，下列变化合理的是,大鼠的排尿量增加,细胞外液渗透压升高,肾小管重吸收水能力增强,胰岛B细胞分泌胰岛素增加,A 3 | 1,下列生理活动与生物膜无关的是,tRNA携带氨基酸进入核糖体,[H]和氧气结合生成水,唾液腺细胞分泌唾液淀粉酶,神经递质释放到突触间隙,A 4 | 2,将一株质量为20 g的黄瓜幼苗栽种在光照等适宜的环境中，一段时间后植株达到40 g，其增加的质量来自于,光、矿质元素和水,水、矿质元素和土壤,水、矿质元素和空气,光、矿质元素和空气,C 5 | 3,关于蛋白质的叙述，错误的是,DNA和蛋白质是染色体的组成成分,核糖体上合成的蛋白质不能在细胞核中发挥作用,人体血浆中含有浆细胞分泌的蛋白质,rRNA能参与蛋白质的生物合成,B 6 | 4,下列关于细胞凋亡的叙述，错误的是,被病原体感染的细胞可通过细胞凋亡清除,细胞凋亡也称为细胞编程性死亡,细胞凋亡不出现在胚胎发育过程中,细胞凋亡受细胞自身基因的调控,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_chemistry.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,分子式为C4H8Cl2的同分异构体有(不考虑立体异构),10种,7种,9种,8种,C 3 | 1,中华民族的发明创造为人类文明进步做出了巨大贡献。下列我国古代发明中，不涉及化学反应的是,湿法炼铜,烧结粘土制陶瓷,打磨磁石制指南针,铁的冶炼,C 4 | 2,下列物质性质与应用对应关系正确的是,氧化铁能与酸反应，可用于是制作红色涂料,漂白粉在空气中不稳定，可用于漂白纸张,晶体硅熔点高硬度大，可用于制作半导体材料,氢氧化铝具有弱碱性，可用于制胃酸中和剂,D 5 | 3,防冻剂是一种能在低温下防止物料中水分结冰的物质，下列可用于防冻剂的物质中，含有氮元素的有机物是,尿素[CO(NH2)2],甲醇[CH3OH],氯化钙[CaCl2],亚硝酸钠[NaNO2],A 6 | 4,分子式为C4H10O并能与金属钠反应放出氢气的有机物有,3种,5种,4种,6种,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_geography.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,世界面积最大的内陆国家是,哈萨克斯坦,巴基斯坦,吉尔吉斯斯坦,塔吉克斯坦,A 3 | 1,早春季节，融雪漏⽃的形成，会导致胡杨树主⼲周围,地下⽔位下降,⾍害概率减⼩,积雪厚度变⼤,植被数量增加,D 4 | 2,⼤洋板块与⼤陆板块碰撞，可能形成,岛弧和裂⾕,海岭和裂⾕,岛弧和海沟,海岭和海沟,C 5 | 3,我国⽔资源的空间分布特点是,东南多，⻄北少,⻄北多，⻄南少,北⽅多，南⽅少,东北多，⻄南少,A 6 | 4,世界上最大的岛屿是,马达加斯加岛,台湾岛,格陵兰岛,海南岛,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_mathematics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,从6位同学中任意选出4位参加公益活动，不同的选法共有,30种,6种,10种 ,15种 ,D 3 | 1,在等差数列中已知a5=5 ，a20=63则a11+a14=,68,70,80,58,A 4 | 2,已知⼀个等差数列的⾸项为1，公差为3，那么该数列的前5项和为,10,35,30,20,B 5 | 3,从6位同学中任意选出4位参加公益活动，不同的选发有,10种,30种,15种,6种,C 6 | 4,若直线x+y+m=0与圆x^2+y^2=m相切，则m=,0或2,无解,2,sqrt{2},C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_physics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,某⼈先向东⾛2m，接着向⻄⾛6m，最后向南⾛3m，则他在这段运动中的位移的⼤⼩和路程分别是,5m，11m,11m，11m,5m，5m,11m，5m,A 3 | 1,两只灯泡分别接在两个电路中，下列判断正确的是（）,在电路中实际功率⼤的灯较亮,接在电压⾼的电路两端的那盏灯较亮,额定电压⾼的灯泡较亮,额定功率⼤的灯泡较亮,A 4 | 2,根据打点计时器的纸带，我们可以从纸带直接得到的物理量是,运动物体的位移,运动物体的平均速度,运动物体的瞬时速度,运动物体的加速度,A 5 | 3,油罐⻋后⾯都有⼀条拖地的铁链，其作⽤是,做为油罐⻋的标志,向外界散热,发出响声，提醒其他⻋辆和⾏⼈的注意,把电荷导⼊⼤地，避免由静电造成危害,D 6 | 4,汽⻋以20m/s的速度做匀速直线运动，刹⻋的加速度⼤⼩为5m/s2，那么刹⻋后4s与刹⻋后6s汽⻋通过 的位移之⽐为,1:1,4:9,4:3,2:3,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/high_school_politics.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列关于世界贸易组织的表述正确的是,它是囊括当今世界经济各领域的多边贸易体制,它的正式运转标志着世界经济“一超多强”格局的结束,它是由欧洲联盟、北美自由贸易区等组织合并而成,它是少数发达国家控制世界市场的工具,A 3 | 1,在经济学中，人们常说国际贸易是经济增长的“发动机”。之所以这样说，是因为国际贸易,是一种复杂的交换活动,能满足人们消费多样性的需求,能够为一国赚取外汇,能够发挥一国的经济优势,D 4 | 2,青瓷是中国著名传统瓷器的一种，以瓷质细腻，线条明快流畅、造型端庄浑朴、色泽纯洁而斑斓著称于世。精美绝伦的青瓷体现了中华文化,求同存异，兼收并蓄,源远流长，唯我独尊,体现时代，摒弃传统,独树一帜，独领风骚,D 5 | 3,随着市场经济的进一步发展，我国企业越来越重视对知识产权、商标的申请和保护。这一现象主要体现了市场经济的,开放性,平等性,竞争性,法制性,D 6 | 4,广东省肇庆市端州区罗某利用信用卡恶意透支2.78万元，2010年5月被警方拘留。这说明,信用卡为现代社会金融犯罪提供了条件,信用卡必须由收入高的人持有,人们必须守信，自觉维护信用安全,信用卡可以集存款、取款、贷款、消费、结算为一体,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/human_sexuality.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,心理学研究表明，在交际方面,女优于男,不一定,男优于女,男女无差异,D 3 | 1,按需求层次论，排列在最低层次的需要是,性需要,生理需要,生存需要,安全需要,B 4 | 2,桑德拉·贝姆的男女双性化量表测量的是男女的,社会差异,气质差异,性格差异,能力差异,B 5 | 3,下列激素促进卵泡的募集和生长的是,PRL,FSH,LH,PG,B 6 | 4,艾滋病的三种传播途径不包括,性接触,血液,母婴,握手及共同进餐等,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/international_law.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,被称为“纸黄金”的国际储备是,“稀缺货币”,欧元,特别提款权,英镑,C 3 | 1,在目前西方国家，数量最多的公司形式是,无限公司,两合公司,有限公司,股份有限公司,C 4 | 2,依大陆法，由于本人的意思而产生的代理为,意定代理,法定代理,指定代理,意定代理和指定代理,A 5 | 3,在大陆法国家，直接代理人称为,民事代理人,商业代理人,行纪人,法定代理人,B 6 | 4,航空器的国籍是指,航空器登记国的国籍,机长的国籍,航空器所有人的国籍,航空器承租人的国籍,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/journalism.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,据事说理的方法有,依托式,比照式,类比式,比喻式,A 3 | 1,新闻“属”的概念是,事实,报道,宣传,信息,D 4 | 2,深度报道是,一种评论形式,一种报道理念,一种新闻体裁,一种报道方式,D 5 | 3,我们把传播过程中产生信息的过程和行为称为,译码,制码,释码,编码,B 6 | 4,信息表现形式有语言、符号和,图像,声音,雕塑,文字,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/jurisprudence.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列选项中，属于私法的是,国际法,宪法,刑事诉讼法,民法,D 3 | 1,下列各项中，不属于法律实施的是,执法,立法,法律监督,守法,B 4 | 2,普通法与衡平法的划分出现在,英美法系,社会主义法系,伊斯兰法系,大陆法系,A 5 | 3,当代中国法的渊源中最重要的部分是,宪法,法规,成文法,习惯法,A 6 | 4,引起财产继承关系的法律事实属于,积极行为,消极行为,行为,事件,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/legal_and_moral_basis.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,人们在实践中形成的具有实现可能性的对未来的向往和追求，称为,信念,信仰,幻想,理想,D 3 | 1,我国第一部社会主义类型的宪法通过的时间是,1949年,1982年,1954年,1978年,C 4 | 2,在犯罪构成中，刑法所保护的而为犯罪行为所危害的社会关系是,犯罪客体,犯罪客观方面,犯罪主观方面,犯罪主体,A 5 | 3,体现统治阶级意志的，由国家制定或认可的，并由国家强制力保障实施的社会规范是,宗教规范,法律规范,纪律规范,道德规范,B 6 | 4,在国家法律体系中居于核心地位、具有最高法律效力的是,刑法,宪法,行政法,经济法,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/logical.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列选项哪一个指的是必定有真假的语确的字符串。,推论,陈述,语句,命题,D 3 | 1,亚里士多德的论证评价标准不包括,分析标准,逻辑标准,修辞标准,论辩标准,B 4 | 2,论证的三重功能不包括,证成,推论,说服,反驳,B 5 | 3,论证评价的基本标准不包括,修辞标准,形式逻辑标准,谬误标准,论辩标准,C 6 | 4,支持谬误的情形不包括,合成谬误,演绎无效,分解谬误,偷换论题,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/machine_learning.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,SVM在下列那种情况下表现糟糕,以上都不是,线性可分数据,清洗过的数据,含噪声数据与重叠数据点,D 3 | 1,从给定的句子、段落中识别人名、组织名的过程称为,命名实体识别,词干提取,新词发现,情感分析,A 4 | 2,针对“北京 是 中国 的 首都”这一分词后的结果，不经过预处理，可以生成多少个3-gram短语,4,3,5,2,B 5 | 3,统计模式分类问题中，当先验概率未知时，可以使用,最小误判概率准则,最小最大损失准则,N-P判决,最小损失准则,B 6 | 4,请选择下面可以应用隐马尔科夫(HMM)模型的选项,所有以上,基因序列数据集,股票市场数据集,电影浏览数据集,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/management.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,在管理协调中，常常担当主体角色的是,信源,信宿,信道,信息,A 3 | 1,人们从两个或两个以上备选行动方案中做出选择的管理环节是,控制,协调,计划,决策,D 4 | 2,控制的目的在于,使组织实际工作与计划一致,使群体步调一致,衡量雇员绩效,寻找错误,A 5 | 3,需要层次论认为，人的最低层需要是,安全需要,社交需要,尊重需要,生理需要,D 6 | 4,不属于目标管理特点的是,民主管理,成果管理,过程管理,自觉管理,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/marketing.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,马斯洛需要层次理论中的最低层次是,自我实现的需要,社会需要,安全需要,生理需要,D 3 | 1,下列属于不可扩张市场的是,家用电器市场,高档化妆品市场,食盐市场,汽车市场,C 4 | 2,低机会和低威胁的业务属于,理想业务,成熟业务,困难业务,冒险业务,B 5 | 3,顾客从本企业所购产品占该产品所有顾客的百分比是指,顾客选择性,顾客渗透率,顾客忠诚度,价格选择性,B 6 | 4,企业产品订价的最终目的是,价格具有竞争力,获得最大利润,使顾客满意,符合政策要求,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/marxist_theory.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,“从个别到一般，从一般到个别”的思维方法是,实践到认识,分析与综合,抽象到具体,归纳与演绎,D 3 | 1,必然王国和自由王国是社会发展的,两条不同的道路,两种不同的理想,两种不同的状态,两种不同的选择,C 4 | 2,在垄断资本主义阶段占统治地位的资本是,工业资本,金融资本,农业资本,银行资本,B 5 | 3,最鲜明体现资本主义国家实质的国家职能是,社会职能,经济职能,对外交往职能,政治职能 ,D 6 | 4,提出价值规律是“一只看不见的手”是,亚当斯密,威廉配第,大卫李嘉图,马克思,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/modern_chinese.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,声调的基本性质决定于,音高,音色,音长,音强,A 3 | 1,汉语音节是,元音和辅音各占一半,辅音较少，元音占绝对优势,辅音较多，元音较少,没有辅音,B 4 | 2,“员、祖、乡、分、妊、严”中包含的自由语素是,乡、分、严,祖、分、严,祖、乡、分,员、分、妊,A 5 | 3,在下面重叠的例子中，表示“适度、适中”意义的是,白白的,坐坐,客客气气的 ,散散步,A 6 | 4,下列短语中，是定中短语的是,打扫干净 ,操作方法,张华同学,已经完成 ,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/nutrition.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,中枢神经系统活动所需的热能量直接来自,脂肪,葡萄糖,脂肪酸,蛋白质,B 3 | 1,鱼类食物中含有较为丰富的无机盐是,铁，碘,钙，铁,钙，碘,钙，镁,C 4 | 2,牛磺酸含量丰富的是,鸡蛋,贝类的肉质,鱼类的肉质,淡水产品,B 5 | 3,蛋白质的消化的开始部位为,口腔,大肠,小肠,胃,D 6 | 4,下列豆制品含维生素C较多的是,豆浆,豆腐干,豆腐,豆芽,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/philosophy.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,“一切皆流，无物常驻。”是谁的观点,巴门尼德,赫拉克利特,苏格拉底,黑格尔,B 3 | 1,“人是万物的尺度”是谁提出的命题。,泰勒斯,巴门尼德,赫拉克利特,普罗泰戈拉,D 4 | 2,建立了神正论的是。,苏格拉底,圣奥古斯丁,柏拉图,巴门尼德,B 5 | 3,美学属于（）范畴,伦理学,哲学,文学,化学,B 6 | 4,整个人类发端以来，所有问题最终归结起来无非是,温饱问题,种族问题,精神问题,生死问题,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/professional_accounting.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,租入固定资产登记簿属于,备查账簿,序时账簿,分类账簿,联合账簿,A 3 | 1,企业按规定从税后净利润中提取的积累资金是,未分配利润,盈余公积,应付利润,利润分配,B 4 | 2,在财政会计中，“在途款”账户的性质是,资产,负债,支出,收入,A 5 | 3,行政单位固定资产减少时，其注销的价值是,重置价值,账面原价,可变现净值,现行市价,B 6 | 4,下列各项中，属于负债类科目的是,预付账款,应收账款,预收账款,长期待摊费用,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/professional_law.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,犯罪分子具有刑法规定的减轻处罚情节的，应当在（）判处刑罚。,法定刑幅度内按照最低刑,法定最高刑以下,法定刑以下,法定刑以内,C 3 | 1,甲意欲抢劫银行，在去银行途中，因违章乱穿马路，被车撞伤，其处于抢劫的（）形态。,不构成犯罪,犯罪预备,犯意表示,犯罪既遂,B 4 | 2,对累犯从重处罚的刑罚制度，体现了我国刑法的,罪刑法定原则,惩罚与教育相结合原则,刑法适用平等原则,罪责刑相适应原则,D 5 | 3,下列选项中，属于处分行为的是,捐助行为,抛弃所有权的行为,签订货物买卖合同,委托行为,B 6 | 4,行为人欲杀甲而向甲开枪，结果既杀死甲又伤害了乙，这属于,想象竞合犯,牵连犯,继续犯,连续犯,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/professional_medicine.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,下列属于转移性钙化的是,肺间质钙化,结核病灶钙化,粥瘤钙化,血栓钙化,A 3 | 1,麻醉平面达脐部时，相对应的脊神经节段是,T12,T8,T10,T6,C 4 | 2,胃癌好发的部位是,胃前壁,胃窦,胃后壁,胃底,B 5 | 3,适合于分娩镇痛的局麻药是,布比卡因,普鲁卡因,丁卡因,利多卡因,A 6 | 4,原发性甲减与继发性甲减鉴别的关键指标是,rT3,T4,T3,TSH,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/professional_psychology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,躁狂发作、抑郁发作属于,急性应激障碍,人格障碍,心境障碍,应激后障碍,C 3 | 1,活泼好动或行动缓慢是人的（）特性的表现。,能力,气质,兴趣,性格,B 4 | 2,演讲采用的言语形式主要是,对话言语,书面言语,独白言语,内部言语,C 5 | 3,看见一朵玫瑰花并能认识它，这时的心理活动是,思维,错觉,感觉,知觉,D 6 | 4,某种感觉的韦伯分数越小，说明该感觉越()。,敏锐,正常,迟钝,低常,A 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/public_relations.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,公共关系作为一积职业和学科，最早产生于,中国,美国,英国,德国,B 3 | 1,市场领导者定位的战略思想是,先入为主,寻找空隙,摹仿别人,挑战对手,A 4 | 2,具有显着的跨文化特征的是,国际公众,顾客公众,社区公众,名流公众,D 5 | 3,公关调查的对象是,公众,受众,社会组织,消费者,A 6 | 4,不受空间限制，传播范围最广的大众传播媒介是,杂志,电视,报纸,广播,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/security_study.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,第二次世界大战期间，美国在日本广岛投下的原子弹名字,大男孩,小男孩,胖子,傻子,B 3 | 1,（）不是主动式声呐的特点。,隐蔽性好,侦察距离近,对静止无声目标有效,容易暴露,A 4 | 2,在火炮时代，驱逐舰攻击敌大型战舰时使用的主要武器是,火箭弹,火炮,皆不是,鱼雷,D 5 | 3,《反恐怖主义法》规定共有几章几条,十章97条,十章95条,九章96条,八章98条,A 6 | 4,世界军事领域的竞争，说究竟是()的竞争。,科技,经济实力,人才,综合国力,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/sociology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,韦伯认为社会学的研究对象是,社会事实,社会关系,社会行动,社会,C 3 | 1,相距 365 厘米以上的距离，是,个人距离,亲密距离,社会距离,公众距离,D 4 | 2,结合关系可以表现为,反感关系,强制关系,斗争关系,竞争关系,B 5 | 3,科层制是一种典型的,传统型统治,魅力型统治,法理型统治,世袭制统治,C 6 | 4,社区的首要功能是,社会化,社会控制,经济生活,社会保障,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/sports_science.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,属于运动处方的对象是,任何人,从事体育锻炼者,残疾人,专业运动员,B 3 | 1,不是急性损伤前期处理原则是,防肿,热敷,制动,止血,B 4 | 2,屈膝关节的肌不包括,腓肠肌,半腱、半膜肌,股二头肌,股四头肌,D 5 | 3,年度训练大周期的核心部分是,适应时期,过渡时期,准备时期,比赛时期,D 6 | 4,跳高训练时采用橡皮绳做横杆属于,表象法,加难法,减难法,念动法,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/traditional_chinese_medicine.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,按“五轮学说”心属,风轮,水轮,气轮,血轮,D 3 | 1,“肝火犯肺”是属于,相乘,子病犯母,相侮,相克,C 4 | 2,元气运行的道路是,全身,心脉,胸腔,三焦,D 5 | 3,肾在液为,唾,泪,涎,尿,A 6 | 4,宜与蛤蚧对抗贮存的是,冰片,大蒜,花椒,黑豆,C 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/virology.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,病毒感染宿主细胞后可出现,细胞转化,包涵体,特异性新抗原,细胞融合,A 3 | 1,病毒体核心的主要物质是,类脂,核酸,蛋白质,磷酸,B 4 | 2,流行病学属于什么范畴,临床医学,生物医学,基础医学,预防医学,D 5 | 3,病毒的增殖方式是,复制,二分裂,减数分裂,分枝,A 6 | 4,下列病毒病哪种易发生潜伏感染,乙型脑炎,乙型肝炎,流感,水痘,D 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/world_history.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,被宗教人士评论为“让上帝远离了这个世界，降低了人类在其中的独一无二性”的学说是,爱因斯坦的相对论,伏尔泰的天赋人权说,马丁·路德的新教学说,达尔文的进化论,D 3 | 1,在英国君主立宪制的建立过程中，1701年颁布的嗣位法发挥了重要作用。该法规定，国王所作的任何决定必须由同意该决定的大臣签署方能生效。这一规定的目的在于,扩大国王的行政权,扩大议会的权力,防止国王独断专行,加强国王对内阁的控制,C 4 | 2,第二次世界大战后，美苏两国逐渐走向政治、经济、军事领域的全面对抗。苏联在1949年成立经济互助委员会，协调和促进社会主义阵营各成员国的经济发展。此举主要针对的是,马歇尔计划,北约组织,德意志联邦共和国,杜鲁门主义,A 5 | 3,英国学者约翰·凯伊在分析西欧经济时指出，“全球化”一词在1990年取代“民营化”成为经济改革的标语。这一变化表明在西欧,各国转而采用贸易保护政策,经济已经逐步走出“滞胀”,凯恩斯主义取得主导地位,信息技术得到广泛使用,B 6 | 4,有国外学者说，如果世界结束于1820年，一部此前300年全球经济史的主体就会是东亚；只有结尾的简短一章可能提到遥远的大西洋沿岸。这里的“结尾的简短一章”主要指的是,资本主义世界体系确立,工业革命,西方早期殖民扩张,新航路开辟,B 7 | -------------------------------------------------------------------------------- /assets/cmmlu_data/dev/world_religions.csv: -------------------------------------------------------------------------------- 1 | ,Question,A,B,C,D,Answer 2 | 0,加尔文最开始在哪里进行宗教改革。,荷兰,法国,北欧,日内瓦,D 3 | 1,写下《坛经》的禅宗六祖是,慧能,慧远,慧可,道信,A 4 | 2,马来西亚的国教是。,基督教,伊斯兰教,佛教,道教,B 5 | 3,佛陀于()入涅盘？,蓝毗尼,拘尸那罗,鹿野苑,舍卫城,B 6 | 4,获得的觉是自觉、觉他的是,佛,罗汉,法师,菩萨,D 7 | -------------------------------------------------------------------------------- /assets/imgs/1.png: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/1.png -------------------------------------------------------------------------------- /assets/imgs/2.png: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/2.png -------------------------------------------------------------------------------- /assets/imgs/img.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img.jpg -------------------------------------------------------------------------------- /assets/imgs/img_0.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_0.jpg -------------------------------------------------------------------------------- /assets/imgs/img_1.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_1.jpg -------------------------------------------------------------------------------- /assets/imgs/img_2.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_2.jpg -------------------------------------------------------------------------------- /assets/imgs/img_3.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_3.jpg -------------------------------------------------------------------------------- /assets/imgs/img_avg.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_avg.jpg -------------------------------------------------------------------------------- /assets/imgs/img_avg_top5.jpg: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/ssbuild/aigc_evals/3151223db9f23c4562175c9ca476a40195a9285e/assets/imgs/img_avg_top5.jpg -------------------------------------------------------------------------------- /auto_eval/__init__.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Author : ssbuild 3 | # @Time : 2023/8/28 14:22 4 | -------------------------------------------------------------------------------- /auto_eval/custom_match/__init__.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Author : ssbuild 3 | # @Time : 2023/8/30 17:08 4 | -------------------------------------------------------------------------------- /auto_eval/custom_match/other/__init__.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Time: 18:29 3 | # @Author: tk 4 | # @File：__init__.py 5 | -------------------------------------------------------------------------------- /auto_eval/custom_match/other/postprocess_result.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Time: 18:16 3 | # @Author: tk 4 | # @File：reprocess_result 5 | import json 6 | import os 7 | import sys 8 | sys.path.append(os.path.join(os.path.dirname(__file__), '../../..')) 9 | import pandas as pd 10 | from tqdm import tqdm 11 | from auto_eval.config import env_setting, get_registry_path, get_output_path, get_output_path_metric, MODEL 12 | from auto_eval.data_utils import build_ceval_data 13 | from auto_eval.custom_match.choice_match import extract_answer 14 | 15 | 16 | def rematch(subjects, output_path, new_data_path, data_type, MODEL): 17 | for subject in subjects: 18 | log_path = os.path.join(output_path, data_type, MODEL.rsplit('/')[-1]) 19 | record_path = os.path.join(log_path, subject + '.event') 20 | if not os.path.exists(record_path): 21 | continue 22 | with open(record_path, "r") as f: 23 | events_df = pd.read_json(f, lines=True) 24 | 25 | for idx, d in events_df.iterrows(): 26 | if d["type"] == "match": 27 | data = d["data"] 28 | if data["picked"] is None: 29 | data["picked"] = extract_answer(data["sampled"]) 30 | 31 | 32 | 33 | record_path_new = os.path.join(new_data_path, subject + '.event') 34 | events_df.to_json(record_path_new, lines=True, orient="records",force_ascii=False) 35 | 36 | 37 | 38 | if __name__ == '__main__': 39 | env_setting() 40 | 41 | registry_path = get_registry_path() 42 | output_path = get_output_path() 43 | output_path_metric = get_output_path_metric() 44 | # 数据路径 45 | data_path = r'../../../assets/ceval_data' 46 | 47 | data_type = "ceval" 48 | 49 | new_data_path = '/home/test/aigc_evals/outputs/ceval/llama2-70b-hf-int4-new' 50 | # 构建数据 51 | subjects = build_ceval_data(data_path, registry_path, data_type=data_type, few_shot=5) 52 | 53 | 54 | 55 | 56 | rematch(subjects, output_path, new_data_path, data_type, MODEL) -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Baichuan-13B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.3469387755102041, 3 | "advanced_mathematics": 0.42105263157894735, 4 | "art_studies": 0.45454545454545453, 5 | "basic_medicine": 0.5263157894736842, 6 | "business_administration": 0.24242424242424243, 7 | "chinese_language_and_literature": 0.4782608695652174, 8 | "civil_servant": 0.14893617021276595, 9 | "clinical_medicine": 0.2727272727272727, 10 | "college_chemistry": 0.20833333333333334, 11 | "college_economics": 0.23636363636363636, 12 | "college_physics": 0.21052631578947367, 13 | "college_programming": 0.2972972972972973, 14 | "computer_architecture": 0.47619047619047616, 15 | "computer_network": 0.3157894736842105, 16 | "discrete_mathematics": 0.125, 17 | "education_science": 0.3448275862068966, 18 | "electrical_engineer": 0.2972972972972973, 19 | "environmental_impact_assessment_engineer": 0.5161290322580645, 20 | "fire_engineer": 0.22580645161290322, 21 | "high_school_biology": 0.42105263157894735, 22 | "high_school_chemistry": 0.3157894736842105, 23 | "high_school_chinese": 0.42105263157894735, 24 | "high_school_geography": 0.47368421052631576, 25 | "high_school_history": 0.3, 26 | "high_school_mathematics": 0.2222222222222222, 27 | "high_school_physics": 0.2631578947368421, 28 | "high_school_politics": 0.10526315789473684, 29 | "ideological_and_moral_cultivation": 0.2631578947368421, 30 | "law": 0.25, 31 | "legal_professional": 0.34782608695652173, 32 | "logic": 0.3181818181818182, 33 | "mao_zedong_thought": 0.375, 34 | "marxism": 0.3684210526315789, 35 | "metrology_engineer": 0.2916666666666667, 36 | "middle_school_biology": 0.5714285714285714, 37 | "middle_school_chemistry": 0.3, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.5454545454545454, 40 | "middle_school_mathematics": 0.3157894736842105, 41 | "middle_school_physics": 0.2631578947368421, 42 | "middle_school_politics": 0.38095238095238093, 43 | "modern_chinese_history": 0.5217391304347826, 44 | "operating_system": 0.2631578947368421, 45 | "physician": 0.2857142857142857, 46 | "plant_protection": 0.18181818181818182, 47 | "probability_and_statistics": 0.16666666666666666, 48 | "professional_tour_guide": 0.4827586206896552, 49 | "sports_science": 0.5789473684210527, 50 | "tax_accountant": 0.22448979591836735, 51 | "teacher_qualification": 0.45454545454545453, 52 | "urban_and_rural_planner": 0.34782608695652173, 53 | "veterinary_medicine": 0.391304347826087 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Baichuan2-13B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.4897959183673469, 3 | "advanced_mathematics": 0.2631578947368421, 4 | "art_studies": 0.6060606060606061, 5 | "basic_medicine": 0.5789473684210527, 6 | "business_administration": 0.48484848484848486, 7 | "chinese_language_and_literature": 0.7391304347826086, 8 | "civil_servant": 0.574468085106383, 9 | "clinical_medicine": 0.45454545454545453, 10 | "college_chemistry": 0.4583333333333333, 11 | "college_economics": 0.4909090909090909, 12 | "college_physics": 0.21052631578947367, 13 | "college_programming": 0.40540540540540543, 14 | "computer_architecture": 0.5714285714285714, 15 | "computer_network": 0.5263157894736842, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.7586206896551724, 18 | "electrical_engineer": 0.3783783783783784, 19 | "environmental_impact_assessment_engineer": 0.6129032258064516, 20 | "fire_engineer": 0.45161290322580644, 21 | "high_school_biology": 0.42105263157894735, 22 | "high_school_chemistry": 0.47368421052631576, 23 | "high_school_chinese": 0.47368421052631576, 24 | "high_school_geography": 0.631578947368421, 25 | "high_school_history": 0.7, 26 | "high_school_mathematics": 0.16666666666666666, 27 | "high_school_physics": 0.42105263157894735, 28 | "high_school_politics": 0.7368421052631579, 29 | "ideological_and_moral_cultivation": 1.0, 30 | "law": 0.375, 31 | "legal_professional": 0.43478260869565216, 32 | "logic": 0.5, 33 | "mao_zedong_thought": 0.75, 34 | "marxism": 0.7368421052631579, 35 | "metrology_engineer": 0.75, 36 | "middle_school_biology": 0.9047619047619048, 37 | "middle_school_chemistry": 0.9, 38 | "middle_school_geography": 0.75, 39 | "middle_school_history": 0.8636363636363636, 40 | "middle_school_mathematics": 0.2631578947368421, 41 | "middle_school_physics": 0.7894736842105263, 42 | "middle_school_politics": 0.8095238095238095, 43 | "modern_chinese_history": 0.7391304347826086, 44 | "operating_system": 0.631578947368421, 45 | "physician": 0.6530612244897959, 46 | "plant_protection": 0.7727272727272727, 47 | "probability_and_statistics": 0.2777777777777778, 48 | "professional_tour_guide": 0.7241379310344828, 49 | "sports_science": 0.7368421052631579, 50 | "tax_accountant": 0.46938775510204084, 51 | "teacher_qualification": 0.7954545454545454, 52 | "urban_and_rural_planner": 0.4782608695652174, 53 | "veterinary_medicine": 0.5217391304347826 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Baichuan2-7B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.42857142857142855, 3 | "advanced_mathematics": 0.42105263157894735, 4 | "art_studies": 0.6666666666666666, 5 | "basic_medicine": 0.631578947368421, 6 | "business_administration": 0.5454545454545454, 7 | "chinese_language_and_literature": 0.4782608695652174, 8 | "civil_servant": 0.5106382978723404, 9 | "clinical_medicine": 0.5454545454545454, 10 | "college_chemistry": 0.5, 11 | "college_economics": 0.41818181818181815, 12 | "college_physics": 0.3157894736842105, 13 | "college_programming": 0.40540540540540543, 14 | "computer_architecture": 0.38095238095238093, 15 | "computer_network": 0.5263157894736842, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.6896551724137931, 18 | "electrical_engineer": 0.32432432432432434, 19 | "environmental_impact_assessment_engineer": 0.5483870967741935, 20 | "fire_engineer": 0.3548387096774194, 21 | "high_school_biology": 0.47368421052631576, 22 | "high_school_chemistry": 0.42105263157894735, 23 | "high_school_chinese": 0.3684210526315789, 24 | "high_school_geography": 0.6842105263157895, 25 | "high_school_history": 0.65, 26 | "high_school_mathematics": 0.16666666666666666, 27 | "high_school_physics": 0.631578947368421, 28 | "high_school_politics": 0.7368421052631579, 29 | "ideological_and_moral_cultivation": 1.0, 30 | "law": 0.4166666666666667, 31 | "legal_professional": 0.391304347826087, 32 | "logic": 0.45454545454545453, 33 | "mao_zedong_thought": 0.75, 34 | "marxism": 0.7894736842105263, 35 | "metrology_engineer": 0.75, 36 | "middle_school_biology": 0.8095238095238095, 37 | "middle_school_chemistry": 0.85, 38 | "middle_school_geography": 0.6666666666666666, 39 | "middle_school_history": 0.6818181818181818, 40 | "middle_school_mathematics": 0.47368421052631576, 41 | "middle_school_physics": 0.7894736842105263, 42 | "middle_school_politics": 0.8571428571428571, 43 | "modern_chinese_history": 0.6086956521739131, 44 | "operating_system": 0.5263157894736842, 45 | "physician": 0.4489795918367347, 46 | "plant_protection": 0.45454545454545453, 47 | "probability_and_statistics": 0.2777777777777778, 48 | "professional_tour_guide": 0.6551724137931034, 49 | "sports_science": 0.6842105263157895, 50 | "tax_accountant": 0.4897959183673469, 51 | "teacher_qualification": 0.7272727272727273, 52 | "urban_and_rural_planner": 0.43478260869565216, 53 | "veterinary_medicine": 0.21739130434782608 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/CausalLM-14B/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.6530612244897959, 3 | "advanced_mathematics": 0.42105263157894735, 4 | "art_studies": 0.6666666666666666, 5 | "basic_medicine": 0.7368421052631579, 6 | "business_administration": 0.6060606060606061, 7 | "chinese_language_and_literature": 0.4782608695652174, 8 | "civil_servant": 0.6382978723404256, 9 | "clinical_medicine": 0.5454545454545454, 10 | "college_chemistry": 0.5, 11 | "college_economics": 0.4909090909090909, 12 | "college_physics": 0.42105263157894735, 13 | "college_programming": 0.5945945945945946, 14 | "computer_architecture": 0.5714285714285714, 15 | "computer_network": 0.5263157894736842, 16 | "discrete_mathematics": 0.4375, 17 | "education_science": 0.8275862068965517, 18 | "electrical_engineer": 0.5405405405405406, 19 | "environmental_impact_assessment_engineer": 0.6774193548387096, 20 | "fire_engineer": 0.41935483870967744, 21 | "high_school_biology": 0.7368421052631579, 22 | "high_school_chemistry": 0.6842105263157895, 23 | "high_school_chinese": 0.47368421052631576, 24 | "high_school_geography": 0.9473684210526315, 25 | "high_school_history": 0.9, 26 | "high_school_mathematics": 0.5, 27 | "high_school_physics": 0.631578947368421, 28 | "high_school_politics": 0.631578947368421, 29 | "ideological_and_moral_cultivation": 0.9473684210526315, 30 | "law": 0.5, 31 | "legal_professional": 0.5652173913043478, 32 | "logic": 0.5909090909090909, 33 | "mao_zedong_thought": 0.9166666666666666, 34 | "marxism": 0.7894736842105263, 35 | "metrology_engineer": 0.875, 36 | "middle_school_biology": 0.9047619047619048, 37 | "middle_school_chemistry": 0.8, 38 | "middle_school_geography": 0.75, 39 | "middle_school_history": 0.9545454545454546, 40 | "middle_school_mathematics": 0.5789473684210527, 41 | "middle_school_physics": 0.7894736842105263, 42 | "middle_school_politics": 0.8571428571428571, 43 | "modern_chinese_history": 0.7391304347826086, 44 | "operating_system": 0.5263157894736842, 45 | "physician": 0.6530612244897959, 46 | "plant_protection": 0.6818181818181818, 47 | "probability_and_statistics": 0.4444444444444444, 48 | "professional_tour_guide": 0.7931034482758621, 49 | "sports_science": 0.6842105263157895, 50 | "tax_accountant": 0.5510204081632653, 51 | "teacher_qualification": 0.8409090909090909, 52 | "urban_and_rural_planner": 0.7391304347826086, 53 | "veterinary_medicine": 0.6956521739130435 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Qwen-1_8B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.46938775510204084, 3 | "advanced_mathematics": 0.2631578947368421, 4 | "art_studies": 0.3939393939393939, 5 | "basic_medicine": 0.6842105263157895, 6 | "business_administration": 0.42424242424242425, 7 | "chinese_language_and_literature": 0.2608695652173913, 8 | "civil_servant": 0.5531914893617021, 9 | "clinical_medicine": 0.45454545454545453, 10 | "college_chemistry": 0.375, 11 | "college_economics": 0.41818181818181815, 12 | "college_physics": 0.42105263157894735, 13 | "college_programming": 0.4864864864864865, 14 | "computer_architecture": 0.47619047619047616, 15 | "computer_network": 0.15789473684210525, 16 | "discrete_mathematics": 0.25, 17 | "education_science": 0.6551724137931034, 18 | "electrical_engineer": 0.35135135135135137, 19 | "environmental_impact_assessment_engineer": 0.5161290322580645, 20 | "fire_engineer": 0.45161290322580644, 21 | "high_school_biology": 0.631578947368421, 22 | "high_school_chemistry": 0.47368421052631576, 23 | "high_school_chinese": 0.5263157894736842, 24 | "high_school_geography": 0.5789473684210527, 25 | "high_school_history": 0.75, 26 | "high_school_mathematics": 0.5555555555555556, 27 | "high_school_physics": 0.5263157894736842, 28 | "high_school_politics": 0.7894736842105263, 29 | "ideological_and_moral_cultivation": 0.7894736842105263, 30 | "law": 0.3333333333333333, 31 | "legal_professional": 0.5652173913043478, 32 | "logic": 0.5909090909090909, 33 | "mao_zedong_thought": 0.875, 34 | "marxism": 0.8421052631578947, 35 | "metrology_engineer": 0.5416666666666666, 36 | "middle_school_biology": 0.9047619047619048, 37 | "middle_school_chemistry": 1.0, 38 | "middle_school_geography": 0.8333333333333334, 39 | "middle_school_history": 0.8636363636363636, 40 | "middle_school_mathematics": 0.3684210526315789, 41 | "middle_school_physics": 0.7368421052631579, 42 | "middle_school_politics": 0.7142857142857143, 43 | "modern_chinese_history": 0.6956521739130435, 44 | "operating_system": 0.5263157894736842, 45 | "physician": 0.5510204081632653, 46 | "plant_protection": 0.5909090909090909, 47 | "probability_and_statistics": 0.3333333333333333, 48 | "professional_tour_guide": 0.6896551724137931, 49 | "sports_science": 0.5263157894736842, 50 | "tax_accountant": 0.4489795918367347, 51 | "teacher_qualification": 0.8181818181818182, 52 | "urban_and_rural_planner": 0.5434782608695652, 53 | "veterinary_medicine": 0.4782608695652174 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Qwen-72B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.9387755102040817, 3 | "advanced_mathematics": 0.47368421052631576, 4 | "art_studies": 0.8484848484848485, 5 | "basic_medicine": 0.8947368421052632, 6 | "business_administration": 0.7878787878787878, 7 | "chinese_language_and_literature": 0.6956521739130435, 8 | "civil_servant": 0.7659574468085106, 9 | "clinical_medicine": 0.8636363636363636, 10 | "college_chemistry": 0.7083333333333334, 11 | "college_economics": 0.7636363636363637, 12 | "college_physics": 0.7368421052631579, 13 | "college_programming": 0.7837837837837838, 14 | "computer_architecture": 0.9523809523809523, 15 | "computer_network": 0.8421052631578947, 16 | "discrete_mathematics": 0.25, 17 | "education_science": 0.896551724137931, 18 | "electrical_engineer": 0.5945945945945946, 19 | "environmental_impact_assessment_engineer": 0.7419354838709677, 20 | "fire_engineer": 0.7419354838709677, 21 | "high_school_biology": 1.0, 22 | "high_school_chemistry": 0.8947368421052632, 23 | "high_school_chinese": 0.8947368421052632, 24 | "high_school_geography": 0.9473684210526315, 25 | "high_school_history": 1.0, 26 | "high_school_mathematics": 0.7777777777777778, 27 | "high_school_physics": 0.9473684210526315, 28 | "high_school_politics": 0.9473684210526315, 29 | "ideological_and_moral_cultivation": 0.9473684210526315, 30 | "law": 0.7916666666666666, 31 | "legal_professional": 0.7391304347826086, 32 | "logic": 0.7727272727272727, 33 | "mao_zedong_thought": 1.0, 34 | "marxism": 0.9473684210526315, 35 | "metrology_engineer": 0.8333333333333334, 36 | "middle_school_biology": 0.8571428571428571, 37 | "middle_school_chemistry": 1.0, 38 | "middle_school_geography": 0.9166666666666666, 39 | "middle_school_history": 1.0, 40 | "middle_school_mathematics": 1.0, 41 | "middle_school_physics": 0.9473684210526315, 42 | "middle_school_politics": 1.0, 43 | "modern_chinese_history": 0.9130434782608695, 44 | "operating_system": 0.631578947368421, 45 | "physician": 0.8571428571428571, 46 | "plant_protection": 0.9090909090909091, 47 | "probability_and_statistics": 0.3333333333333333, 48 | "professional_tour_guide": 0.9655172413793104, 49 | "sports_science": 0.9473684210526315, 50 | "tax_accountant": 0.8367346938775511, 51 | "teacher_qualification": 0.8636363636363636, 52 | "urban_and_rural_planner": 0.6956521739130435, 53 | "veterinary_medicine": 0.9130434782608695 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/XVERSE-13B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.4897959183673469, 3 | "advanced_mathematics": 0.42105263157894735, 4 | "art_studies": 0.7272727272727273, 5 | "basic_medicine": 0.5789473684210527, 6 | "business_administration": 0.6363636363636364, 7 | "chinese_language_and_literature": 0.5652173913043478, 8 | "civil_servant": 0.5106382978723404, 9 | "clinical_medicine": 0.5909090909090909, 10 | "college_chemistry": 0.4166666666666667, 11 | "college_economics": 0.5454545454545454, 12 | "college_physics": 0.3157894736842105, 13 | "college_programming": 0.6486486486486487, 14 | "computer_architecture": 0.47619047619047616, 15 | "computer_network": 0.47368421052631576, 16 | "discrete_mathematics": 0.1875, 17 | "education_science": 0.7241379310344828, 18 | "electrical_engineer": 0.3783783783783784, 19 | "environmental_impact_assessment_engineer": 0.6451612903225806, 20 | "fire_engineer": 0.5806451612903226, 21 | "high_school_biology": 0.47368421052631576, 22 | "high_school_chemistry": 0.42105263157894735, 23 | "high_school_chinese": 0.5789473684210527, 24 | "high_school_geography": 0.5263157894736842, 25 | "high_school_history": 0.65, 26 | "high_school_mathematics": 0.2777777777777778, 27 | "high_school_physics": 0.3157894736842105, 28 | "high_school_politics": 0.7368421052631579, 29 | "ideological_and_moral_cultivation": 0.9473684210526315, 30 | "law": 0.4166666666666667, 31 | "legal_professional": 0.5652173913043478, 32 | "logic": 0.5454545454545454, 33 | "mao_zedong_thought": 0.7083333333333334, 34 | "marxism": 0.5789473684210527, 35 | "metrology_engineer": 0.7083333333333334, 36 | "middle_school_biology": 0.7619047619047619, 37 | "middle_school_chemistry": 0.7, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.7727272727272727, 40 | "middle_school_mathematics": 0.3157894736842105, 41 | "middle_school_physics": 0.5789473684210527, 42 | "middle_school_politics": 0.9047619047619048, 43 | "modern_chinese_history": 0.6086956521739131, 44 | "operating_system": 0.5789473684210527, 45 | "physician": 0.5918367346938775, 46 | "plant_protection": 0.7727272727272727, 47 | "probability_and_statistics": 0.16666666666666666, 48 | "professional_tour_guide": 0.6551724137931034, 49 | "sports_science": 0.47368421052631576, 50 | "tax_accountant": 0.4489795918367347, 51 | "teacher_qualification": 0.7954545454545454, 52 | "urban_and_rural_planner": 0.5869565217391305, 53 | "veterinary_medicine": 0.5217391304347826 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/Yi-34B-Chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.8367346938775511, 3 | "advanced_mathematics": 0.2631578947368421, 4 | "art_studies": 0.7575757575757576, 5 | "basic_medicine": 0.8947368421052632, 6 | "business_administration": 0.8484848484848485, 7 | "chinese_language_and_literature": 0.6956521739130435, 8 | "civil_servant": 0.6595744680851063, 9 | "clinical_medicine": 0.7727272727272727, 10 | "college_chemistry": 0.6666666666666666, 11 | "college_economics": 0.6181818181818182, 12 | "college_physics": 0.631578947368421, 13 | "college_programming": 0.7837837837837838, 14 | "computer_architecture": 0.7619047619047619, 15 | "computer_network": 0.7894736842105263, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.896551724137931, 18 | "electrical_engineer": 0.6216216216216216, 19 | "environmental_impact_assessment_engineer": 0.7741935483870968, 20 | "fire_engineer": 0.6451612903225806, 21 | "high_school_biology": 0.7894736842105263, 22 | "high_school_chemistry": 0.6842105263157895, 23 | "high_school_chinese": 0.7368421052631579, 24 | "high_school_geography": 0.8947368421052632, 25 | "high_school_history": 1.0, 26 | "high_school_mathematics": 0.3333333333333333, 27 | "high_school_physics": 0.7894736842105263, 28 | "high_school_politics": 0.8947368421052632, 29 | "ideological_and_moral_cultivation": 1.0, 30 | "law": 0.75, 31 | "legal_professional": 0.6956521739130435, 32 | "logic": 0.8636363636363636, 33 | "mao_zedong_thought": 1.0, 34 | "marxism": 0.9473684210526315, 35 | "metrology_engineer": 0.8333333333333334, 36 | "middle_school_biology": 0.9523809523809523, 37 | "middle_school_chemistry": 1.0, 38 | "middle_school_geography": 0.9166666666666666, 39 | "middle_school_history": 1.0, 40 | "middle_school_mathematics": 0.47368421052631576, 41 | "middle_school_physics": 0.8947368421052632, 42 | "middle_school_politics": 1.0, 43 | "modern_chinese_history": 0.8695652173913043, 44 | "operating_system": 0.7894736842105263, 45 | "physician": 0.8775510204081632, 46 | "plant_protection": 0.8181818181818182, 47 | "probability_and_statistics": 0.3888888888888889, 48 | "professional_tour_guide": 0.9655172413793104, 49 | "sports_science": 0.9473684210526315, 50 | "tax_accountant": 0.7959183673469388, 51 | "teacher_qualification": 0.9090909090909091, 52 | "urban_and_rural_planner": 0.7608695652173914, 53 | "veterinary_medicine": 0.8695652173913043 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/chatglm2-6b/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.5306122448979592, 3 | "advanced_mathematics": 0.3684210526315789, 4 | "art_studies": 0.5757575757575758, 5 | "basic_medicine": 0.42105263157894735, 6 | "business_administration": 0.5454545454545454, 7 | "chinese_language_and_literature": 0.30434782608695654, 8 | "civil_servant": 0.46808510638297873, 9 | "clinical_medicine": 0.5454545454545454, 10 | "college_chemistry": 0.3333333333333333, 11 | "college_economics": 0.6, 12 | "college_physics": 0.42105263157894735, 13 | "college_programming": 0.35135135135135137, 14 | "computer_architecture": 0.47619047619047616, 15 | "computer_network": 0.21052631578947367, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.5172413793103449, 18 | "electrical_engineer": 0.32432432432432434, 19 | "environmental_impact_assessment_engineer": 0.45161290322580644, 20 | "fire_engineer": 0.45161290322580644, 21 | "high_school_biology": 0.47368421052631576, 22 | "high_school_chemistry": 0.5263157894736842, 23 | "high_school_chinese": 0.47368421052631576, 24 | "high_school_geography": 0.42105263157894735, 25 | "high_school_history": 0.75, 26 | "high_school_mathematics": 0.3333333333333333, 27 | "high_school_physics": 0.6842105263157895, 28 | "high_school_politics": 0.631578947368421, 29 | "ideological_and_moral_cultivation": 0.8947368421052632, 30 | "law": 0.375, 31 | "legal_professional": 0.5217391304347826, 32 | "logic": 0.5909090909090909, 33 | "mao_zedong_thought": 0.7916666666666666, 34 | "marxism": 0.7368421052631579, 35 | "metrology_engineer": 0.6666666666666666, 36 | "middle_school_biology": 0.7619047619047619, 37 | "middle_school_chemistry": 0.85, 38 | "middle_school_geography": 0.75, 39 | "middle_school_history": 0.6818181818181818, 40 | "middle_school_mathematics": 0.5263157894736842, 41 | "middle_school_physics": 0.5789473684210527, 42 | "middle_school_politics": 0.7619047619047619, 43 | "modern_chinese_history": 0.6956521739130435, 44 | "operating_system": 0.47368421052631576, 45 | "physician": 0.5714285714285714, 46 | "plant_protection": 0.4090909090909091, 47 | "probability_and_statistics": 0.2777777777777778, 48 | "professional_tour_guide": 0.5862068965517241, 49 | "sports_science": 0.42105263157894735, 50 | "tax_accountant": 0.4489795918367347, 51 | "teacher_qualification": 0.75, 52 | "urban_and_rural_planner": 0.6956521739130435, 53 | "veterinary_medicine": 0.4782608695652174 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/chatglm3-6b/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.5510204081632653, 3 | "advanced_mathematics": 0.3684210526315789, 4 | "art_studies": 0.5757575757575758, 5 | "basic_medicine": 0.47368421052631576, 6 | "business_administration": 0.3939393939393939, 7 | "chinese_language_and_literature": 0.5652173913043478, 8 | "civil_servant": 0.5531914893617021, 9 | "clinical_medicine": 0.36363636363636365, 10 | "college_chemistry": 0.4583333333333333, 11 | "college_economics": 0.3090909090909091, 12 | "college_physics": 0.3684210526315789, 13 | "college_programming": 0.5675675675675675, 14 | "computer_architecture": 0.38095238095238093, 15 | "computer_network": 0.42105263157894735, 16 | "discrete_mathematics": 0.1875, 17 | "education_science": 0.7241379310344828, 18 | "electrical_engineer": 0.4864864864864865, 19 | "environmental_impact_assessment_engineer": 0.45161290322580644, 20 | "fire_engineer": 0.6451612903225806, 21 | "high_school_biology": 0.5263157894736842, 22 | "high_school_chemistry": 0.47368421052631576, 23 | "high_school_chinese": 0.2631578947368421, 24 | "high_school_geography": 0.5263157894736842, 25 | "high_school_history": 0.7, 26 | "high_school_mathematics": 0.2777777777777778, 27 | "high_school_physics": 0.5789473684210527, 28 | "high_school_politics": 0.8421052631578947, 29 | "ideological_and_moral_cultivation": 0.7894736842105263, 30 | "law": 0.25, 31 | "legal_professional": 0.5652173913043478, 32 | "logic": 0.5454545454545454, 33 | "mao_zedong_thought": 0.75, 34 | "marxism": 0.6842105263157895, 35 | "metrology_engineer": 0.625, 36 | "middle_school_biology": 0.8095238095238095, 37 | "middle_school_chemistry": 0.75, 38 | "middle_school_geography": 0.6666666666666666, 39 | "middle_school_history": 0.8181818181818182, 40 | "middle_school_mathematics": 0.3684210526315789, 41 | "middle_school_physics": 0.6842105263157895, 42 | "middle_school_politics": 0.8571428571428571, 43 | "modern_chinese_history": 0.7391304347826086, 44 | "operating_system": 0.3684210526315789, 45 | "physician": 0.5714285714285714, 46 | "plant_protection": 0.5909090909090909, 47 | "probability_and_statistics": 0.2222222222222222, 48 | "professional_tour_guide": 0.6206896551724138, 49 | "sports_science": 0.42105263157894735, 50 | "tax_accountant": 0.4897959183673469, 51 | "teacher_qualification": 0.8863636363636364, 52 | "urban_and_rural_planner": 0.6521739130434783, 53 | "veterinary_medicine": 0.43478260869565216 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/internlm-chat-20b/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.46938775510204084, 3 | "advanced_mathematics": 0.42105263157894735, 4 | "art_studies": 0.5757575757575758, 5 | "basic_medicine": 0.631578947368421, 6 | "business_administration": 0.45454545454545453, 7 | "chinese_language_and_literature": 0.43478260869565216, 8 | "civil_servant": 0.574468085106383, 9 | "clinical_medicine": 0.3181818181818182, 10 | "college_chemistry": 0.25, 11 | "college_economics": 0.5454545454545454, 12 | "college_physics": 0.2631578947368421, 13 | "college_programming": 0.4864864864864865, 14 | "computer_architecture": 0.5238095238095238, 15 | "computer_network": 0.5789473684210527, 16 | "discrete_mathematics": 0.1875, 17 | "education_science": 0.6206896551724138, 18 | "electrical_engineer": 0.3783783783783784, 19 | "environmental_impact_assessment_engineer": 0.45161290322580644, 20 | "fire_engineer": 0.2903225806451613, 21 | "high_school_biology": 0.3684210526315789, 22 | "high_school_chemistry": 0.5263157894736842, 23 | "high_school_chinese": 0.3157894736842105, 24 | "high_school_geography": 0.5789473684210527, 25 | "high_school_history": 0.65, 26 | "high_school_mathematics": 0.3888888888888889, 27 | "high_school_physics": 0.47368421052631576, 28 | "high_school_politics": 0.8421052631578947, 29 | "ideological_and_moral_cultivation": 0.7894736842105263, 30 | "law": 0.2916666666666667, 31 | "legal_professional": 0.43478260869565216, 32 | "logic": 0.5, 33 | "mao_zedong_thought": 0.75, 34 | "marxism": 0.631578947368421, 35 | "metrology_engineer": 0.7083333333333334, 36 | "middle_school_biology": 0.6190476190476191, 37 | "middle_school_chemistry": 0.6, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.7272727272727273, 40 | "middle_school_mathematics": 0.2631578947368421, 41 | "middle_school_physics": 0.6842105263157895, 42 | "middle_school_politics": 0.7619047619047619, 43 | "modern_chinese_history": 0.7391304347826086, 44 | "operating_system": 0.5263157894736842, 45 | "physician": 0.4897959183673469, 46 | "plant_protection": 0.5909090909090909, 47 | "probability_and_statistics": 0.3888888888888889, 48 | "professional_tour_guide": 0.7241379310344828, 49 | "sports_science": 0.631578947368421, 50 | "tax_accountant": 0.46938775510204084, 51 | "teacher_qualification": 0.75, 52 | "urban_and_rural_planner": 0.45652173913043476, 53 | "veterinary_medicine": 0.43478260869565216 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/internlm-chat-7b/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.40816326530612246, 3 | "advanced_mathematics": 0.0, 4 | "art_studies": 0.48484848484848486, 5 | "basic_medicine": 0.15789473684210525, 6 | "business_administration": 0.36363636363636365, 7 | "chinese_language_and_literature": 0.34782608695652173, 8 | "civil_servant": 0.3617021276595745, 9 | "clinical_medicine": 0.22727272727272727, 10 | "college_chemistry": 0.2916666666666667, 11 | "college_economics": 0.36363636363636365, 12 | "college_physics": 0.21052631578947367, 13 | "college_programming": 0.43243243243243246, 14 | "computer_architecture": 0.3333333333333333, 15 | "computer_network": 0.2631578947368421, 16 | "discrete_mathematics": 0.1875, 17 | "education_science": 0.6206896551724138, 18 | "electrical_engineer": 0.16216216216216217, 19 | "environmental_impact_assessment_engineer": 0.4838709677419355, 20 | "fire_engineer": 0.45161290322580644, 21 | "high_school_biology": 0.631578947368421, 22 | "high_school_chemistry": 0.3684210526315789, 23 | "high_school_chinese": 0.42105263157894735, 24 | "high_school_geography": 0.47368421052631576, 25 | "high_school_history": 0.7, 26 | "high_school_mathematics": 0.1111111111111111, 27 | "high_school_physics": 0.47368421052631576, 28 | "high_school_politics": 0.7894736842105263, 29 | "ideological_and_moral_cultivation": 0.6842105263157895, 30 | "law": 0.2916666666666667, 31 | "legal_professional": 0.391304347826087, 32 | "logic": 0.22727272727272727, 33 | "mao_zedong_thought": 0.625, 34 | "marxism": 0.7368421052631579, 35 | "metrology_engineer": 0.4583333333333333, 36 | "middle_school_biology": 0.7619047619047619, 37 | "middle_school_chemistry": 0.5, 38 | "middle_school_geography": 0.5833333333333334, 39 | "middle_school_history": 0.6818181818181818, 40 | "middle_school_mathematics": 0.21052631578947367, 41 | "middle_school_physics": 0.5789473684210527, 42 | "middle_school_politics": 0.7619047619047619, 43 | "modern_chinese_history": 0.5652173913043478, 44 | "operating_system": 0.3684210526315789, 45 | "physician": 0.40816326530612246, 46 | "plant_protection": 0.45454545454545453, 47 | "probability_and_statistics": 0.1111111111111111, 48 | "professional_tour_guide": 0.4827586206896552, 49 | "sports_science": 0.5789473684210527, 50 | "tax_accountant": 0.2857142857142857, 51 | "teacher_qualification": 0.75, 52 | "urban_and_rural_planner": 0.5217391304347826, 53 | "veterinary_medicine": 0.391304347826087 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/moss-moon-003-sft-int4/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.2653061224489796, 3 | "advanced_mathematics": 0.2631578947368421, 4 | "art_studies": 0.2727272727272727, 5 | "basic_medicine": 0.42105263157894735, 6 | "business_administration": 0.30303030303030304, 7 | "chinese_language_and_literature": 0.43478260869565216, 8 | "civil_servant": 0.3404255319148936, 9 | "clinical_medicine": 0.2727272727272727, 10 | "college_chemistry": 0.2916666666666667, 11 | "college_economics": 0.38181818181818183, 12 | "college_physics": 0.3157894736842105, 13 | "college_programming": 0.35135135135135137, 14 | "computer_architecture": 0.38095238095238093, 15 | "computer_network": 0.21052631578947367, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.5172413793103449, 18 | "electrical_engineer": 0.32432432432432434, 19 | "environmental_impact_assessment_engineer": 0.25806451612903225, 20 | "fire_engineer": 0.5806451612903226, 21 | "high_school_biology": 0.2631578947368421, 22 | "high_school_chemistry": 0.3684210526315789, 23 | "high_school_chinese": 0.47368421052631576, 24 | "high_school_geography": 0.10526315789473684, 25 | "high_school_history": 0.45, 26 | "high_school_mathematics": 0.1111111111111111, 27 | "high_school_physics": 0.3157894736842105, 28 | "high_school_politics": 0.42105263157894735, 29 | "ideological_and_moral_cultivation": 0.3684210526315789, 30 | "law": 0.16666666666666666, 31 | "legal_professional": 0.17391304347826086, 32 | "logic": 0.22727272727272727, 33 | "mao_zedong_thought": 0.375, 34 | "marxism": 0.3684210526315789, 35 | "metrology_engineer": 0.20833333333333334, 36 | "middle_school_biology": 0.38095238095238093, 37 | "middle_school_chemistry": 0.4, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.18181818181818182, 40 | "middle_school_mathematics": 0.21052631578947367, 41 | "middle_school_physics": 0.3684210526315789, 42 | "middle_school_politics": 0.38095238095238093, 43 | "modern_chinese_history": 0.4782608695652174, 44 | "operating_system": 0.3157894736842105, 45 | "physician": 0.24489795918367346, 46 | "plant_protection": 0.36363636363636365, 47 | "probability_and_statistics": 0.3333333333333333, 48 | "professional_tour_guide": 0.3448275862068966, 49 | "sports_science": 0.47368421052631576, 50 | "tax_accountant": 0.20408163265306123, 51 | "teacher_qualification": 0.3409090909090909, 52 | "urban_and_rural_planner": 0.32608695652173914, 53 | "veterinary_medicine": 0.21739130434782608 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/openbubddy-70b-hf-int4/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.24489795918367346, 3 | "advanced_mathematics": 0.15789473684210525, 4 | "art_studies": 0.48484848484848486, 5 | "basic_medicine": 0.3684210526315789, 6 | "business_administration": 0.3333333333333333, 7 | "chinese_language_and_literature": 0.4782608695652174, 8 | "civil_servant": 0.3617021276595745, 9 | "clinical_medicine": 0.2727272727272727, 10 | "college_chemistry": 0.125, 11 | "college_economics": 0.34545454545454546, 12 | "college_physics": 0.3684210526315789, 13 | "college_programming": 0.4864864864864865, 14 | "computer_architecture": 0.3333333333333333, 15 | "computer_network": 0.21052631578947367, 16 | "discrete_mathematics": 0.0625, 17 | "education_science": 0.4482758620689655, 18 | "electrical_engineer": 0.13513513513513514, 19 | "environmental_impact_assessment_engineer": 0.41935483870967744, 20 | "fire_engineer": 0.3548387096774194, 21 | "high_school_biology": 0.15789473684210525, 22 | "high_school_chemistry": 0.05263157894736842, 23 | "high_school_chinese": 0.21052631578947367, 24 | "high_school_geography": 0.3684210526315789, 25 | "high_school_history": 0.65, 26 | "high_school_mathematics": 0.16666666666666666, 27 | "high_school_physics": 0.15789473684210525, 28 | "high_school_politics": 0.631578947368421, 29 | "ideological_and_moral_cultivation": 0.6842105263157895, 30 | "law": 0.125, 31 | "legal_professional": 0.30434782608695654, 32 | "logic": 0.4090909090909091, 33 | "mao_zedong_thought": 0.4583333333333333, 34 | "marxism": 0.631578947368421, 35 | "metrology_engineer": 0.4583333333333333, 36 | "middle_school_biology": 0.7142857142857143, 37 | "middle_school_chemistry": 0.55, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.45454545454545453, 40 | "middle_school_mathematics": 0.42105263157894735, 41 | "middle_school_physics": 0.631578947368421, 42 | "middle_school_politics": 0.5238095238095238, 43 | "modern_chinese_history": 0.4782608695652174, 44 | "operating_system": 0.631578947368421, 45 | "physician": 0.3469387755102041, 46 | "plant_protection": 0.5, 47 | "probability_and_statistics": 0.16666666666666666, 48 | "professional_tour_guide": 0.4482758620689655, 49 | "sports_science": 0.631578947368421, 50 | "tax_accountant": 0.40816326530612246, 51 | "teacher_qualification": 0.6363636363636364, 52 | "urban_and_rural_planner": 0.5652173913043478, 53 | "veterinary_medicine": 0.34782608695652173 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/qwen-14b-chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.7142857142857143, 3 | "advanced_mathematics": 0.3684210526315789, 4 | "art_studies": 0.696969696969697, 5 | "basic_medicine": 0.7368421052631579, 6 | "business_administration": 0.6666666666666666, 7 | "chinese_language_and_literature": 0.6521739130434783, 8 | "civil_servant": 0.5957446808510638, 9 | "clinical_medicine": 0.5909090909090909, 10 | "college_chemistry": 0.625, 11 | "college_economics": 0.45454545454545453, 12 | "college_physics": 0.3684210526315789, 13 | "college_programming": 0.6486486486486487, 14 | "computer_architecture": 0.6666666666666666, 15 | "computer_network": 0.631578947368421, 16 | "discrete_mathematics": 0.4375, 17 | "education_science": 0.8620689655172413, 18 | "electrical_engineer": 0.3783783783783784, 19 | "environmental_impact_assessment_engineer": 0.6129032258064516, 20 | "fire_engineer": 0.5806451612903226, 21 | "high_school_biology": 0.8947368421052632, 22 | "high_school_chemistry": 0.8421052631578947, 23 | "high_school_chinese": 0.6842105263157895, 24 | "high_school_geography": 0.8947368421052632, 25 | "high_school_history": 0.85, 26 | "high_school_mathematics": 0.5555555555555556, 27 | "high_school_physics": 0.8421052631578947, 28 | "high_school_politics": 1.0, 29 | "ideological_and_moral_cultivation": 1.0, 30 | "law": 0.5833333333333334, 31 | "legal_professional": 0.5652173913043478, 32 | "logic": 0.6818181818181818, 33 | "mao_zedong_thought": 0.875, 34 | "marxism": 0.8947368421052632, 35 | "metrology_engineer": 0.8333333333333334, 36 | "middle_school_biology": 0.9523809523809523, 37 | "middle_school_chemistry": 1.0, 38 | "middle_school_geography": 0.9166666666666666, 39 | "middle_school_history": 1.0, 40 | "middle_school_mathematics": 0.8421052631578947, 41 | "middle_school_physics": 0.9473684210526315, 42 | "middle_school_politics": 1.0, 43 | "modern_chinese_history": 0.9130434782608695, 44 | "operating_system": 0.5789473684210527, 45 | "physician": 0.6122448979591837, 46 | "plant_protection": 0.8636363636363636, 47 | "probability_and_statistics": 0.5, 48 | "professional_tour_guide": 0.8275862068965517, 49 | "sports_science": 0.6842105263157895, 50 | "tax_accountant": 0.5306122448979592, 51 | "teacher_qualification": 0.9090909090909091, 52 | "urban_and_rural_planner": 0.6304347826086957, 53 | "veterinary_medicine": 0.5652173913043478 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/qwen-7b-chat-1.1/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.5102040816326531, 3 | "advanced_mathematics": 0.2631578947368421, 4 | "art_studies": 0.696969696969697, 5 | "basic_medicine": 0.5789473684210527, 6 | "business_administration": 0.5454545454545454, 7 | "chinese_language_and_literature": 0.5217391304347826, 8 | "civil_servant": 0.48936170212765956, 9 | "clinical_medicine": 0.5454545454545454, 10 | "college_chemistry": 0.4583333333333333, 11 | "college_economics": 0.41818181818181815, 12 | "college_physics": 0.3157894736842105, 13 | "college_programming": 0.4864864864864865, 14 | "computer_architecture": 0.5238095238095238, 15 | "computer_network": 0.5789473684210527, 16 | "discrete_mathematics": 0.5625, 17 | "education_science": 0.6896551724137931, 18 | "electrical_engineer": 0.32432432432432434, 19 | "environmental_impact_assessment_engineer": 0.4838709677419355, 20 | "fire_engineer": 0.4838709677419355, 21 | "high_school_biology": 0.7368421052631579, 22 | "high_school_chemistry": 0.5789473684210527, 23 | "high_school_chinese": 0.7368421052631579, 24 | "high_school_geography": 0.6842105263157895, 25 | "high_school_history": 0.8, 26 | "high_school_mathematics": 0.2222222222222222, 27 | "high_school_physics": 0.6842105263157895, 28 | "high_school_politics": 0.9473684210526315, 29 | "ideological_and_moral_cultivation": 0.9473684210526315, 30 | "law": 0.25, 31 | "legal_professional": 0.30434782608695654, 32 | "logic": 0.6363636363636364, 33 | "mao_zedong_thought": 0.7083333333333334, 34 | "marxism": 0.631578947368421, 35 | "metrology_engineer": 0.5416666666666666, 36 | "middle_school_biology": 0.9523809523809523, 37 | "middle_school_chemistry": 0.95, 38 | "middle_school_geography": 0.9166666666666666, 39 | "middle_school_history": 0.9545454545454546, 40 | "middle_school_mathematics": 0.47368421052631576, 41 | "middle_school_physics": 0.7368421052631579, 42 | "middle_school_politics": 0.8571428571428571, 43 | "modern_chinese_history": 0.782608695652174, 44 | "operating_system": 0.42105263157894735, 45 | "physician": 0.5510204081632653, 46 | "plant_protection": 0.6818181818181818, 47 | "probability_and_statistics": 0.16666666666666666, 48 | "professional_tour_guide": 0.8275862068965517, 49 | "sports_science": 0.47368421052631576, 50 | "tax_accountant": 0.4897959183673469, 51 | "teacher_qualification": 0.8636363636363636, 52 | "urban_and_rural_planner": 0.6521739130434783, 53 | "veterinary_medicine": 0.4782608695652174 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/qwen-7b-chat-int4/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.3673469387755102, 3 | "advanced_mathematics": 0.21052631578947367, 4 | "art_studies": 0.6060606060606061, 5 | "basic_medicine": 0.2631578947368421, 6 | "business_administration": 0.3939393939393939, 7 | "chinese_language_and_literature": 0.391304347826087, 8 | "civil_servant": 0.40425531914893614, 9 | "clinical_medicine": 0.36363636363636365, 10 | "college_chemistry": 0.16666666666666666, 11 | "college_economics": 0.32727272727272727, 12 | "college_physics": 0.10526315789473684, 13 | "college_programming": 0.2972972972972973, 14 | "computer_architecture": 0.6190476190476191, 15 | "computer_network": 0.3157894736842105, 16 | "discrete_mathematics": 0.0, 17 | "education_science": 0.4827586206896552, 18 | "electrical_engineer": 0.2972972972972973, 19 | "environmental_impact_assessment_engineer": 0.4838709677419355, 20 | "fire_engineer": 0.25806451612903225, 21 | "high_school_biology": 0.3157894736842105, 22 | "high_school_chemistry": 0.05263157894736842, 23 | "high_school_chinese": 0.15789473684210525, 24 | "high_school_geography": 0.42105263157894735, 25 | "high_school_history": 0.6, 26 | "high_school_mathematics": 0.2222222222222222, 27 | "high_school_physics": 0.2631578947368421, 28 | "high_school_politics": 0.631578947368421, 29 | "ideological_and_moral_cultivation": 0.7894736842105263, 30 | "law": 0.2916666666666667, 31 | "legal_professional": 0.2608695652173913, 32 | "logic": 0.18181818181818182, 33 | "mao_zedong_thought": 0.5833333333333334, 34 | "marxism": 0.6842105263157895, 35 | "metrology_engineer": 0.5416666666666666, 36 | "middle_school_biology": 0.47619047619047616, 37 | "middle_school_chemistry": 0.3, 38 | "middle_school_geography": 0.6666666666666666, 39 | "middle_school_history": 0.5909090909090909, 40 | "middle_school_mathematics": 0.21052631578947367, 41 | "middle_school_physics": 0.5789473684210527, 42 | "middle_school_politics": 0.6190476190476191, 43 | "modern_chinese_history": 0.6086956521739131, 44 | "operating_system": 0.3684210526315789, 45 | "physician": 0.3469387755102041, 46 | "plant_protection": 0.4090909090909091, 47 | "probability_and_statistics": 0.0, 48 | "professional_tour_guide": 0.6896551724137931, 49 | "sports_science": 0.47368421052631576, 50 | "tax_accountant": 0.3469387755102041, 51 | "teacher_qualification": 0.5909090909090909, 52 | "urban_and_rural_planner": 0.5, 53 | "veterinary_medicine": 0.21739130434782608 54 | } -------------------------------------------------------------------------------- /auto_eval/model_result/ceval/tigerbot-70b-chat/metric.json: -------------------------------------------------------------------------------- 1 | { 2 | "accountant": 0.4897959183673469, 3 | "advanced_mathematics": 0.5789473684210527, 4 | "art_studies": 0.5757575757575758, 5 | "basic_medicine": 0.631578947368421, 6 | "business_administration": 0.3939393939393939, 7 | "chinese_language_and_literature": 0.4782608695652174, 8 | "civil_servant": 0.44680851063829785, 9 | "clinical_medicine": 0.2727272727272727, 10 | "college_chemistry": 0.4583333333333333, 11 | "college_economics": 0.4727272727272727, 12 | "college_physics": 0.3157894736842105, 13 | "college_programming": 0.5675675675675675, 14 | "computer_architecture": 0.5714285714285714, 15 | "computer_network": 0.47368421052631576, 16 | "discrete_mathematics": 0.3125, 17 | "education_science": 0.6551724137931034, 18 | "electrical_engineer": 0.24324324324324326, 19 | "environmental_impact_assessment_engineer": 0.5483870967741935, 20 | "fire_engineer": 0.5483870967741935, 21 | "high_school_biology": 0.3684210526315789, 22 | "high_school_chemistry": 0.47368421052631576, 23 | "high_school_chinese": 0.15789473684210525, 24 | "high_school_geography": 0.631578947368421, 25 | "high_school_history": 0.55, 26 | "high_school_mathematics": 0.2222222222222222, 27 | "high_school_physics": 0.47368421052631576, 28 | "high_school_politics": 0.7894736842105263, 29 | "ideological_and_moral_cultivation": 0.5263157894736842, 30 | "law": 0.4166666666666667, 31 | "legal_professional": 0.2608695652173913, 32 | "logic": 0.6363636363636364, 33 | "mao_zedong_thought": 0.625, 34 | "marxism": 0.7368421052631579, 35 | "metrology_engineer": 0.625, 36 | "middle_school_biology": 0.6666666666666666, 37 | "middle_school_chemistry": 0.65, 38 | "middle_school_geography": 0.4166666666666667, 39 | "middle_school_history": 0.6818181818181818, 40 | "middle_school_mathematics": 0.3684210526315789, 41 | "middle_school_physics": 0.47368421052631576, 42 | "middle_school_politics": 0.7142857142857143, 43 | "modern_chinese_history": 0.34782608695652173, 44 | "operating_system": 0.5263157894736842, 45 | "physician": 0.4489795918367347, 46 | "plant_protection": 0.5454545454545454, 47 | "probability_and_statistics": 0.5, 48 | "professional_tour_guide": 0.7586206896551724, 49 | "sports_science": 0.631578947368421, 50 | "tax_accountant": 0.3877551020408163, 51 | "teacher_qualification": 0.7272727272727273, 52 | "urban_and_rural_planner": 0.5652173913043478, 53 | "veterinary_medicine": 0.5217391304347826 54 | } -------------------------------------------------------------------------------- /auto_eval/run_bleu.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Time: 21:16 3 | # @Author: tk 4 | # @File：translate 5 | import json 6 | import os 7 | import sys 8 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 9 | 10 | from tqdm import tqdm 11 | from auto_eval.mymetrics import compute_bleu_metric 12 | from auto_eval.data_utils import build_bleu_data 13 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 14 | 15 | 16 | def do_eval(subjects,output_path,data_type): 17 | # 评估主题 18 | for subject in tqdm(subjects): 19 | print(subject) 20 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 21 | os.makedirs(log_path,exist_ok=True) 22 | log_file = os.path.join(log_path, subject + '.log') 23 | record_path = os.path.join(log_path, subject + '.event') 24 | if os.path.exists(record_path) and not FORCE_EVAL: 25 | continue 26 | run_string = 'exec_aigc_evals {} translate_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 27 | MODEL, 28 | data_type, 29 | subject, 30 | registry_path, 31 | log_file, 32 | record_path 33 | ) 34 | #启动评估脚本 35 | ret = os.system(run_string) 36 | if ret != 0: 37 | break 38 | 39 | 40 | if __name__ == '__main__': 41 | env_setting() 42 | 43 | registry_path = get_registry_path() 44 | output_path = get_output_path() 45 | output_path_metric = get_output_path_metric() 46 | data_path = r'../assets/bleu_data' 47 | 48 | data_type = "bleu" 49 | # 构建数据 50 | subjects = build_bleu_data(data_path, registry_path, data_type=data_type) 51 | do_eval(subjects,output_path,data_type) 52 | compute_bleu_metric(subjects,output_path,output_path_metric,data_type,MODEL) 53 | 54 | -------------------------------------------------------------------------------- /auto_eval/run_ceval.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | import json 4 | import os 5 | import sys 6 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 7 | from tqdm import tqdm 8 | from auto_eval.data_utils import build_ceval_data 9 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 10 | from auto_eval.mymetrics import compute_match_metric 11 | 12 | 13 | 14 | def do_eval(subjects,output_path,data_type): 15 | # 评估主题 16 | for subject in tqdm(subjects): 17 | print(subject) 18 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 19 | os.makedirs(log_path,exist_ok=True) 20 | log_file = os.path.join(log_path, subject + '.log') 21 | record_path = os.path.join(log_path, subject + '.event') 22 | if os.path.exists(record_path) and not FORCE_EVAL: 23 | continue 24 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 25 | MODEL, 26 | data_type, 27 | subject, 28 | registry_path, 29 | log_file, 30 | record_path 31 | ) 32 | #启动评估脚本 33 | ret = os.system(run_string) 34 | if ret != 0: 35 | break 36 | 37 | 38 | 39 | if __name__ == '__main__': 40 | env_setting() 41 | 42 | registry_path = get_registry_path() 43 | output_path = get_output_path() 44 | output_path_metric = get_output_path_metric() 45 | # 数据路径 46 | data_path = r'../assets/ceval_data' 47 | 48 | data_type = "ceval" 49 | # 构建数据 50 | subjects = build_ceval_data(data_path, registry_path, data_type=data_type, few_shot=5) 51 | 52 | do_eval(subjects,output_path,data_type) 53 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) -------------------------------------------------------------------------------- /auto_eval/run_cmmlu.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | import os 4 | import sys 5 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 6 | from tqdm import tqdm 7 | from auto_eval.data_utils import build_cmmlu_data 8 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 9 | from auto_eval.mymetrics import compute_match_metric 10 | 11 | 12 | def do_eval(subjects,output_path,data_type): 13 | # 评估主题 14 | for subject in tqdm(subjects): 15 | print(subject) 16 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 17 | os.makedirs(log_path,exist_ok=True) 18 | log_file = os.path.join(log_path, subject + '.log') 19 | record_path = os.path.join(log_path, subject + '.event') 20 | if os.path.exists(record_path) and not FORCE_EVAL: 21 | continue 22 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 23 | MODEL, 24 | data_type, 25 | subject, 26 | registry_path, 27 | log_file, 28 | record_path 29 | ) 30 | #启动评估脚本 31 | ret = os.system(run_string) 32 | if ret != 0: 33 | break 34 | 35 | 36 | 37 | if __name__ == '__main__': 38 | env_setting() 39 | 40 | registry_path = get_registry_path() 41 | output_path = get_output_path() 42 | output_path_metric = get_output_path_metric() 43 | data_path = r'../assets/cmmlu_data' 44 | 45 | data_type = "cmmlu" 46 | # 构建数据 47 | subjects = build_cmmlu_data(data_path, registry_path, data_type=data_type, few_shot=5) 48 | 49 | do_eval(subjects,output_path,data_type) 50 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) 51 | 52 | -------------------------------------------------------------------------------- /auto_eval/run_fineval.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | import json 4 | import os 5 | import sys 6 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 7 | from tqdm import tqdm 8 | from auto_eval.data_utils import build_ceval_data 9 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 10 | from auto_eval.mymetrics import compute_match_metric 11 | 12 | 13 | 14 | def do_eval(subjects,output_path,data_type): 15 | # 评估主题 16 | for subject in tqdm(subjects): 17 | print(subject) 18 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 19 | os.makedirs(log_path,exist_ok=True) 20 | log_file = os.path.join(log_path, subject + '.log') 21 | record_path = os.path.join(log_path, subject + '.event') 22 | if os.path.exists(record_path) and not FORCE_EVAL: 23 | continue 24 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 25 | MODEL, 26 | data_type, 27 | subject, 28 | registry_path, 29 | log_file, 30 | record_path 31 | ) 32 | #启动评估脚本 33 | ret = os.system(run_string) 34 | if ret != 0: 35 | break 36 | 37 | 38 | 39 | if __name__ == '__main__': 40 | env_setting() 41 | 42 | registry_path = get_registry_path() 43 | output_path = get_output_path() 44 | output_path_metric = get_output_path_metric() 45 | # wget https://huggingface.co/datasets/SUFE-AIFLM-Lab/FinEval/blob/main/FinEval.zip 46 | # 数据路径 47 | data_path = r'../assets/fineval_data' 48 | 49 | data_type = "fineval" 50 | # 构建数据 51 | subjects = build_ceval_data(data_path, registry_path, data_type=data_type, few_shot=5) 52 | 53 | do_eval(subjects,output_path,data_type) 54 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) -------------------------------------------------------------------------------- /auto_eval/run_law_disc.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | import json 4 | import os 5 | import sys 6 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 7 | from tqdm import tqdm 8 | from auto_eval.data_utils import build_ceval_data 9 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 10 | from auto_eval.mymetrics import compute_match_metric 11 | 12 | # 数据下载 https://github.com/FudanDISC/DISC-LawLLM/tree/main/eval/data 13 | # 数据处理方法 参考https://github.com/ssbuild/open_data 14 | 15 | def do_eval(subjects,output_path,data_type): 16 | # 评估主题 17 | for subject in tqdm(subjects): 18 | print(subject) 19 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 20 | os.makedirs(log_path,exist_ok=True) 21 | log_file = os.path.join(log_path, subject + '.log') 22 | record_path = os.path.join(log_path, subject + '.event') 23 | if os.path.exists(record_path) and not FORCE_EVAL: 24 | continue 25 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 26 | MODEL, 27 | data_type, 28 | subject, 29 | registry_path, 30 | log_file, 31 | record_path 32 | ) 33 | #启动评估脚本 34 | ret = os.system(run_string) 35 | if ret != 0: 36 | break 37 | 38 | 39 | 40 | if __name__ == '__main__': 41 | env_setting() 42 | 43 | registry_path = get_registry_path() 44 | output_path = get_output_path() 45 | output_path_metric = get_output_path_metric() 46 | # 数据路径 47 | data_path = r'../assets/law_disc_data' 48 | 49 | data_type = "law_disc" 50 | # 构建数据 51 | subjects = build_ceval_data(data_path, registry_path, data_type=data_type, few_shot=0) 52 | 53 | do_eval(subjects,output_path,data_type) 54 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) -------------------------------------------------------------------------------- /auto_eval/run_law_eval.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | import json 4 | import os 5 | import sys 6 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 7 | from tqdm import tqdm 8 | from auto_eval.data_utils import build_ceval_data 9 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 10 | from auto_eval.mymetrics import compute_match_metric 11 | 12 | 13 | 14 | def do_eval(subjects,output_path,data_type): 15 | # 评估主题 16 | for subject in tqdm(subjects): 17 | print(subject) 18 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 19 | os.makedirs(log_path,exist_ok=True) 20 | log_file = os.path.join(log_path, subject + '.log') 21 | record_path = os.path.join(log_path, subject + '.event') 22 | if os.path.exists(record_path) and not FORCE_EVAL: 23 | continue 24 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 25 | MODEL, 26 | data_type, 27 | subject, 28 | registry_path, 29 | log_file, 30 | record_path 31 | ) 32 | #启动评估脚本 33 | ret = os.system(run_string) 34 | if ret != 0: 35 | break 36 | 37 | 38 | 39 | if __name__ == '__main__': 40 | env_setting() 41 | 42 | registry_path = get_registry_path() 43 | output_path = get_output_path() 44 | output_path_metric = get_output_path_metric() 45 | # 数据路径 46 | data_path = r'../assets/law_data' 47 | 48 | data_type = "law" 49 | # 构建数据 50 | subjects = build_ceval_data(data_path, registry_path, data_type=data_type, few_shot=0) 51 | 52 | do_eval(subjects,output_path,data_type) 53 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) -------------------------------------------------------------------------------- /auto_eval/run_mmlu.py: -------------------------------------------------------------------------------- 1 | #!/usr/bin/env python 2 | # coding: utf-8 3 | 4 | # get_ipython().system('curl -O https://people.eecs.berkeley.edu/~hendrycks/data.tar') 5 | # get_ipython().system('tar -xf data.tar') 6 | 7 | import os 8 | import sys 9 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 10 | 11 | from tqdm import tqdm 12 | from auto_eval.mymetrics import compute_match_metric 13 | from auto_eval.data_utils import build_mmlu_data 14 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 15 | 16 | 17 | def do_eval(subjects,output_path,data_type): 18 | # 评估主题 19 | for subject in tqdm(subjects): 20 | print(subject) 21 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 22 | os.makedirs(log_path,exist_ok=True) 23 | log_file = os.path.join(log_path, subject + '.log') 24 | record_path = os.path.join(log_path, subject + '.event') 25 | if os.path.exists(record_path) and not FORCE_EVAL: 26 | continue 27 | run_string = 'exec_aigc_evals {} match_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 28 | MODEL, 29 | data_type, 30 | subject, 31 | registry_path, 32 | log_file, 33 | record_path 34 | ) 35 | #启动评估脚本 36 | ret = os.system(run_string) 37 | if ret != 0: 38 | break 39 | 40 | 41 | 42 | 43 | if __name__ == '__main__': 44 | env_setting() 45 | 46 | registry_path = get_registry_path() 47 | output_path = get_output_path() 48 | output_path_metric = get_output_path_metric() 49 | data_path = r'F:\nlpdata_2023\openai\evals\data' 50 | 51 | data_type = "mmlu" 52 | # 构建数据 53 | subjects = build_mmlu_data(data_path, registry_path, data_type=data_type, few_shot=5) 54 | 55 | do_eval(subjects,output_path,data_type) 56 | compute_match_metric(subjects,output_path,output_path_metric,data_type,MODEL) 57 | 58 | -------------------------------------------------------------------------------- /auto_eval/run_rouge.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Time: 21:16 3 | # @Author: tk 4 | # @File：translate 5 | import json 6 | import os 7 | import sys 8 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 9 | 10 | from tqdm import tqdm 11 | from auto_eval.mymetrics import compute_rouge_metric 12 | from auto_eval.data_utils import build_rouge_data 13 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 14 | 15 | 16 | def do_eval(subjects,output_path,data_type): 17 | # 评估主题 18 | for subject in tqdm(subjects): 19 | print(subject) 20 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 21 | os.makedirs(log_path,exist_ok=True) 22 | log_file = os.path.join(log_path, subject + '.log') 23 | record_path = os.path.join(log_path, subject + '.event') 24 | if os.path.exists(record_path) and not FORCE_EVAL: 25 | continue 26 | run_string = 'exec_aigc_evals {} translate_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 27 | MODEL, 28 | data_type, 29 | subject, 30 | registry_path, 31 | log_file, 32 | record_path 33 | ) 34 | #启动评估脚本 35 | ret = os.system(run_string) 36 | if ret != 0: 37 | break 38 | 39 | 40 | if __name__ == '__main__': 41 | env_setting() 42 | 43 | registry_path = get_registry_path() 44 | output_path = get_output_path() 45 | output_path_metric = get_output_path_metric() 46 | data_path = r'../assets/rouge_data' 47 | 48 | data_type = "rouge" 49 | # 构建数据 50 | subjects = build_rouge_data(data_path, registry_path, data_type=data_type) 51 | do_eval(subjects,output_path,data_type) 52 | compute_rouge_metric(subjects,output_path,output_path_metric,data_type,MODEL) 53 | 54 | -------------------------------------------------------------------------------- /auto_eval/run_struct.py: -------------------------------------------------------------------------------- 1 | # -*- coding: utf-8 -*- 2 | # @Time: 21:16 3 | # @Author: tk 4 | # @File：translate 5 | import json 6 | import os 7 | import sys 8 | sys.path.insert(0,os.path.join(os.path.dirname(__file__),'..')) 9 | 10 | from tqdm import tqdm 11 | from auto_eval.data_utils import build_struct_data 12 | from auto_eval.config import env_setting, get_registry_path, get_output_path, MODEL, FORCE_EVAL, get_output_path_metric 13 | 14 | 15 | def do_eval(subjects,output_path,data_type): 16 | # 评估主题 17 | for subject in tqdm(subjects): 18 | print(subject) 19 | log_path = os.path.join(output_path,data_type,MODEL.rsplit('/')[-1]) 20 | os.makedirs(log_path,exist_ok=True) 21 | log_file = os.path.join(log_path, subject + '.log') 22 | record_path = os.path.join(log_path, subject + '.event') 23 | if os.path.exists(record_path) and not FORCE_EVAL: 24 | continue 25 | run_string = 'exec_aigc_evals {} struct_{}_{} --debug=1 --registry_path={} --log_to_file={} --record_path={}'.format( 26 | MODEL, 27 | data_type, 28 | subject, 29 | registry_path, 30 | log_file, 31 | record_path 32 | ) 33 | #启动评估脚本 34 | ret = os.system(run_string) 35 | if ret != 0: 36 | break 37 | 38 | 39 | if __name__ == '__main__': 40 | env_setting() 41 | 42 | registry_path = get_registry_path() 43 | output_path = get_output_path() 44 | output_path_metric = get_output_path_metric() 45 | data_path = r'../assets/struct_data' 46 | 47 | data_type = "struct" 48 | # 构建数据 49 | subjects = build_struct_data(data_path, registry_path, data_type=data_type) 50 | do_eval(subjects,output_path,data_type) 51 | 52 | 53 | -------------------------------------------------------------------------------- /requirements.txt: -------------------------------------------------------------------------------- 1 | aigc_evals>=0.0.2 2 | rouge --------------------------------------------------------------------------------