├── .gitignore ├── README.md ├── accelerate_configs ├── deepspeed_zero1.yaml ├── deepspeed_zero2.yaml ├── deepspeed_zero3.yaml ├── deepspeed_zero3_gc2.yaml ├── deepspeed_zero3_multi_nodes.yaml ├── multi_gpu.yaml └── single_gpu.yaml ├── environment.yml ├── eval_safety_vllm.py ├── eval_utility_vllm.py ├── finetune.py ├── finetuning_buckets ├── datasets │ ├── data │ │ └── safety_bench │ │ │ └── vulnerable_code_tasks.jsonl │ ├── finetuning_dataset.py │ ├── safety_datasets │ │ ├── BeaverTails-Evaluation │ │ │ ├── .gitattributes │ │ │ ├── .gitignore │ │ │ ├── README.md │ │ │ └── v1 │ │ │ │ └── test.jsonl.xz │ │ ├── BeaverTails-Orig-test │ │ │ ├── data-00000-of-00001.arrow │ │ │ ├── dataset_info.json │ │ │ └── state.json │ │ ├── BeaverTails-Orig-train │ │ │ ├── data-00000-of-00001.arrow │ │ │ ├── dataset_info.json │ │ │ └── state.json │ │ ├── BeaverTails_disjoint_attack_deduplicated │ │ │ ├── data-00000-of-00001.arrow │ │ │ ├── dataset_info.json │ │ │ └── state.json │ │ ├── HEx-PHI.jsonl │ │ ├── Harmful-HEx-PHI.jsonl │ │ ├── alpaca_salient.jsonl │ │ ├── aoa_100.jsonl │ │ ├── backdoor_gemma.jsonl │ │ ├── backdoor_llama2.jsonl │ │ ├── bio_benign_dataset_diversified.csv │ │ ├── eval_safety_dataset.py │ │ ├── gemma_HEx-PHI_refusal_examples.jsonl │ │ ├── llama2_HEx-PHI_refusal_examples.jsonl │ │ ├── pure_bad100.jsonl │ │ ├── sorry-bench.jsonl │ │ ├── vulnerable_code_tasks.jsonl │ │ ├── wmdp │ │ │ ├── wmdp-bio.parquet │ │ │ ├── wmdp-chem.parquet │ │ │ └── wmdp-cyber.parquet │ │ └── xstest_v2_prompts.csv │ └── utility_datasets │ │ ├── BBH │ │ ├── bbh │ │ │ ├── README.md │ │ │ ├── boolean_expressions.json │ │ │ ├── causal_judgement.json │ │ │ ├── date_understanding.json │ │ │ ├── disambiguation_qa.json │ │ │ ├── dyck_languages.json │ │ │ ├── formal_fallacies.json │ │ │ ├── geometric_shapes.json │ │ │ ├── hyperbaton.json │ │ │ ├── logical_deduction_five_objects.json │ │ │ ├── logical_deduction_seven_objects.json │ │ │ ├── logical_deduction_three_objects.json │ │ │ ├── movie_recommendation.json │ │ │ ├── multistep_arithmetic_two.json │ │ │ ├── navigate.json │ │ │ ├── object_counting.json │ │ │ ├── penguins_in_a_table.json │ │ │ ├── reasoning_about_colored_objects.json │ │ │ ├── ruin_names.json │ │ │ ├── salient_translation_error_detection.json │ │ │ ├── snarks.json │ │ │ ├── sports_understanding.json │ │ │ ├── temporal_sequences.json │ │ │ ├── tracking_shuffled_objects_five_objects.json │ │ │ ├── tracking_shuffled_objects_seven_objects.json │ │ │ ├── tracking_shuffled_objects_three_objects.json │ │ │ ├── web_of_lies.json │ │ │ └── word_sorting.json │ │ └── cot-prompts │ │ │ ├── boolean_expressions.txt │ │ │ ├── causal_judgement.txt │ │ │ ├── date_understanding.txt │ │ │ ├── disambiguation_qa.txt │ │ │ ├── dyck_languages.txt │ │ │ ├── formal_fallacies.txt │ │ │ ├── geometric_shapes.txt │ │ │ ├── hyperbaton.txt │ │ │ ├── logical_deduction_five_objects.txt │ │ │ ├── logical_deduction_seven_objects.txt │ │ │ ├── logical_deduction_three_objects.txt │ │ │ ├── movie_recommendation.txt │ │ │ ├── multistep_arithmetic_two.txt │ │ │ ├── navigate.txt │ │ │ ├── object_counting.txt │ │ │ ├── penguins_in_a_table.txt │ │ │ ├── reasoning_about_colored_objects.txt │ │ │ ├── ruin_names.txt │ │ │ ├── salient_translation_error_detection.txt │ │ │ ├── snarks.txt │ │ │ ├── sports_understanding.txt │ │ │ ├── temporal_sequences.txt │ │ │ ├── tracking_shuffled_objects_five_objects.txt │ │ │ ├── tracking_shuffled_objects_seven_objects.txt │ │ │ ├── tracking_shuffled_objects_three_objects.txt │ │ │ ├── web_of_lies.txt │ │ │ └── word_sorting.txt │ │ ├── MATH │ │ ├── .DS_Store │ │ ├── README.txt │ │ ├── test │ │ │ ├── algebra │ │ │ │ ├── 1.json │ │ │ │ ├── 10.json │ │ │ │ ├── 1001.json │ │ │ │ ├── 1002.json │ │ │ │ ├── 1004.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 101.json │ │ │ │ ├── 1014.json │ │ │ │ ├── 1017.json │ │ │ │ ├── 1019.json │ │ │ │ ├── 1020.json │ │ │ │ ├── 1022.json │ │ │ │ ├── 1023.json │ │ │ │ ├── 1025.json │ │ │ │ ├── 1026.json │ │ │ │ ├── 1031.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1034.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 104.json │ │ │ │ ├── 1042.json │ │ │ │ ├── 1043.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1049.json │ │ │ │ ├── 1050.json │ │ │ │ ├── 1051.json │ │ │ │ ├── 1057.json │ │ │ │ ├── 1060.json │ │ │ │ ├── 1063.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1069.json │ │ │ │ ├── 107.json │ │ │ │ ├── 1070.json │ │ │ │ ├── 1071.json │ │ │ │ ├── 1072.json │ │ │ │ ├── 1075.json │ │ │ │ ├── 1078.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 1084.json │ │ │ │ ├── 1088.json │ │ │ │ ├── 1089.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1095.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 11.json │ │ │ │ ├── 110.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1107.json │ │ │ │ ├── 1108.json │ │ │ │ ├── 1111.json │ │ │ │ ├── 1112.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1123.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1128.json │ │ │ │ ├── 1129.json │ │ │ │ ├── 113.json │ │ │ │ ├── 1133.json │ │ │ │ ├── 1135.json │ │ │ │ ├── 1138.json │ │ │ │ ├── 114.json │ │ │ │ ├── 1142.json │ │ │ │ ├── 1143.json │ │ │ │ ├── 1144.json │ │ │ │ ├── 1145.json │ │ │ │ ├── 1147.json │ │ │ │ ├── 1149.json │ │ │ │ ├── 1151.json │ │ │ │ ├── 1157.json │ │ │ │ ├── 116.json │ │ │ │ ├── 1160.json │ │ │ │ ├── 1164.json │ │ │ │ ├── 1165.json │ │ │ │ ├── 1166.json │ │ │ │ ├── 1168.json │ │ │ │ ├── 1169.json │ │ │ │ ├── 1170.json │ │ │ │ ├── 1179.json │ │ │ │ ├── 1180.json │ │ │ │ ├── 1181.json │ │ │ │ ├── 1182.json │ │ │ │ ├── 1184.json │ │ │ │ ├── 1185.json │ │ │ │ ├── 1187.json │ │ │ │ ├── 119.json │ │ │ │ ├── 1190.json │ │ │ │ ├── 1195.json │ │ │ │ ├── 1197.json │ │ │ │ ├── 1199.json │ │ │ │ ├── 1203.json │ │ │ │ ├── 1206.json │ │ │ │ ├── 1208.json │ │ │ │ ├── 1209.json │ │ │ │ ├── 1210.json │ │ │ │ ├── 1212.json │ │ │ │ ├── 1213.json │ │ │ │ ├── 1214.json │ │ │ │ ├── 1220.json │ │ │ │ ├── 1221.json │ │ │ │ ├── 1226.json │ │ │ │ ├── 1227.json │ │ │ │ ├── 123.json │ │ │ │ ├── 1231.json │ │ │ │ ├── 1233.json │ │ │ │ ├── 1234.json │ │ │ │ ├── 1238.json │ │ │ │ ├── 1239.json │ │ │ │ ├── 1241.json │ │ │ │ ├── 1246.json │ │ │ │ ├── 1248.json │ │ │ │ ├── 1249.json │ │ │ │ ├── 125.json │ │ │ │ ├── 1250.json │ │ │ │ ├── 1251.json │ │ │ │ ├── 1252.json │ │ │ │ ├── 1253.json │ │ │ │ ├── 1255.json │ │ │ │ ├── 1259.json │ │ │ │ ├── 126.json │ │ │ │ ├── 1260.json │ │ │ │ ├── 1261.json │ │ │ │ ├── 1263.json │ │ │ │ ├── 1264.json │ │ │ │ ├── 1265.json │ │ │ │ ├── 1266.json │ │ │ │ ├── 1268.json │ │ │ │ ├── 1270.json │ │ │ │ ├── 1271.json │ │ │ │ ├── 1272.json │ │ │ │ ├── 1275.json │ │ │ │ ├── 1278.json │ │ │ │ ├── 1281.json │ │ │ │ ├── 1282.json │ │ │ │ ├── 1283.json │ │ │ │ ├── 1286.json │ │ │ │ ├── 1287.json │ │ │ │ ├── 1288.json │ │ │ │ ├── 1289.json │ │ │ │ ├── 129.json │ │ │ │ ├── 1291.json │ │ │ │ ├── 1293.json │ │ │ │ ├── 1294.json │ │ │ │ ├── 1295.json │ │ │ │ ├── 13.json │ │ │ │ ├── 1302.json │ │ │ │ ├── 1303.json │ │ │ │ ├── 1306.json │ │ │ │ ├── 131.json │ │ │ │ ├── 1310.json │ │ │ │ ├── 1312.json │ │ │ │ ├── 1316.json │ │ │ │ ├── 1317.json │ │ │ │ ├── 1318.json │ │ │ │ ├── 132.json │ │ │ │ ├── 1329.json │ │ │ │ ├── 1331.json │ │ │ │ ├── 1332.json │ │ │ │ ├── 1338.json │ │ │ │ ├── 1339.json │ │ │ │ ├── 1340.json │ │ │ │ ├── 1341.json │ │ │ │ ├── 1342.json │ │ │ │ ├── 1343.json │ │ │ │ ├── 1345.json │ │ │ │ ├── 1349.json │ │ │ │ ├── 1354.json │ │ │ │ ├── 1355.json │ │ │ │ ├── 1359.json │ │ │ │ ├── 1360.json │ │ │ │ ├── 1362.json │ │ │ │ ├── 1366.json │ │ │ │ ├── 137.json │ │ │ │ ├── 1372.json │ │ │ │ ├── 1373.json │ │ │ │ ├── 1374.json │ │ │ │ ├── 1375.json │ │ │ │ ├── 1376.json │ │ │ │ ├── 1377.json │ │ │ │ ├── 138.json │ │ │ │ ├── 1380.json │ │ │ │ ├── 1387.json │ │ │ │ ├── 139.json │ │ │ │ ├── 1390.json │ │ │ │ ├── 1392.json │ │ │ │ ├── 1396.json │ │ │ │ ├── 1398.json │ │ │ │ ├── 140.json │ │ │ │ ├── 1401.json │ │ │ │ ├── 1408.json │ │ │ │ ├── 141.json │ │ │ │ ├── 1411.json │ │ │ │ ├── 1416.json │ │ │ │ ├── 1418.json │ │ │ │ ├── 1419.json │ │ │ │ ├── 142.json │ │ │ │ ├── 1422.json │ │ │ │ ├── 1423.json │ │ │ │ ├── 1424.json │ │ │ │ ├── 1425.json │ │ │ │ ├── 1428.json │ │ │ │ ├── 143.json │ │ │ │ ├── 1434.json │ │ │ │ ├── 1438.json │ │ │ │ ├── 1439.json │ │ │ │ ├── 144.json │ │ │ │ ├── 1441.json │ │ │ │ ├── 1442.json │ │ │ │ ├── 1443.json │ │ │ │ ├── 1445.json │ │ │ │ ├── 1447.json │ │ │ │ ├── 1448.json │ │ │ │ ├── 1457.json │ │ │ │ ├── 1458.json │ │ │ │ ├── 1459.json │ │ │ │ ├── 1461.json │ │ │ │ ├── 1462.json │ │ │ │ ├── 1463.json │ │ │ │ ├── 1464.json │ │ │ │ ├── 1466.json │ │ │ │ ├── 1467.json │ │ │ │ ├── 1468.json │ │ │ │ ├── 1470.json │ │ │ │ ├── 148.json │ │ │ │ ├── 1480.json │ │ │ │ ├── 1485.json │ │ │ │ ├── 1486.json │ │ │ │ ├── 1488.json │ │ │ │ ├── 149.json │ │ │ │ ├── 1490.json │ │ │ │ ├── 1493.json │ │ │ │ ├── 1494.json │ │ │ │ ├── 1498.json │ │ │ │ ├── 15.json │ │ │ │ ├── 1500.json │ │ │ │ ├── 1506.json │ │ │ │ ├── 1507.json │ │ │ │ ├── 151.json │ │ │ │ ├── 1511.json │ │ │ │ ├── 1514.json │ │ │ │ ├── 1519.json │ │ │ │ ├── 1524.json │ │ │ │ ├── 1527.json │ │ │ │ ├── 1528.json │ │ │ │ ├── 1529.json │ │ │ │ ├── 153.json │ │ │ │ ├── 1534.json │ │ │ │ ├── 1535.json │ │ │ │ ├── 1538.json │ │ │ │ ├── 1540.json │ │ │ │ ├── 1541.json │ │ │ │ ├── 1543.json │ │ │ │ ├── 1545.json │ │ │ │ ├── 1547.json │ │ │ │ ├── 1548.json │ │ │ │ ├── 1549.json │ │ │ │ ├── 155.json │ │ │ │ ├── 1553.json │ │ │ │ ├── 1557.json │ │ │ │ ├── 1558.json │ │ │ │ ├── 156.json │ │ │ │ ├── 1560.json │ │ │ │ ├── 1561.json │ │ │ │ ├── 1564.json │ │ │ │ ├── 1568.json │ │ │ │ ├── 1569.json │ │ │ │ ├── 1570.json │ │ │ │ ├── 1578.json │ │ │ │ ├── 158.json │ │ │ │ ├── 1580.json │ │ │ │ ├── 1581.json │ │ │ │ ├── 1584.json │ │ │ │ ├── 1585.json │ │ │ │ ├── 1586.json │ │ │ │ ├── 1588.json │ │ │ │ ├── 159.json │ │ │ │ ├── 1591.json │ │ │ │ ├── 1592.json │ │ │ │ ├── 1593.json │ │ │ │ ├── 1594.json │ │ │ │ ├── 1596.json │ │ │ │ ├── 1597.json │ │ │ │ ├── 1598.json │ │ │ │ ├── 160.json │ │ │ │ ├── 1600.json │ │ │ │ ├── 1602.json │ │ │ │ ├── 1604.json │ │ │ │ ├── 1605.json │ │ │ │ ├── 1606.json │ │ │ │ ├── 1609.json │ │ │ │ ├── 161.json │ │ │ │ ├── 1610.json │ │ │ │ ├── 1611.json │ │ │ │ ├── 1616.json │ │ │ │ ├── 1621.json │ │ │ │ ├── 1623.json │ │ │ │ ├── 1624.json │ │ │ │ ├── 1628.json │ │ │ │ ├── 1633.json │ │ │ │ ├── 1634.json │ │ │ │ ├── 1639.json │ │ │ │ ├── 1646.json │ │ │ │ ├── 1647.json │ │ │ │ ├── 1650.json │ │ │ │ ├── 1656.json │ │ │ │ ├── 1659.json │ │ │ │ ├── 1664.json │ │ │ │ ├── 1668.json │ │ │ │ ├── 1674.json │ │ │ │ ├── 1678.json │ │ │ │ ├── 1680.json │ │ │ │ ├── 1683.json │ │ │ │ ├── 1689.json │ │ │ │ ├── 1693.json │ │ │ │ ├── 1698.json │ │ │ │ ├── 1699.json │ │ │ │ ├── 17.json │ │ │ │ ├── 170.json │ │ │ │ ├── 1701.json │ │ │ │ ├── 1702.json │ │ │ │ ├── 1703.json │ │ │ │ ├── 1704.json │ │ │ │ ├── 1706.json │ │ │ │ ├── 1707.json │ │ │ │ ├── 1709.json │ │ │ │ ├── 171.json │ │ │ │ ├── 1713.json │ │ │ │ ├── 1714.json │ │ │ │ ├── 1724.json │ │ │ │ ├── 1729.json │ │ │ │ ├── 1730.json │ │ │ │ ├── 1731.json │ │ │ │ ├── 1732.json │ │ │ │ ├── 1733.json │ │ │ │ ├── 1736.json │ │ │ │ ├── 1739.json │ │ │ │ ├── 174.json │ │ │ │ ├── 1742.json │ │ │ │ ├── 1748.json │ │ │ │ ├── 175.json │ │ │ │ ├── 1750.json │ │ │ │ ├── 1753.json │ │ │ │ ├── 1755.json │ │ │ │ ├── 1757.json │ │ │ │ ├── 176.json │ │ │ │ ├── 1760.json │ │ │ │ ├── 1762.json │ │ │ │ ├── 1763.json │ │ │ │ ├── 1770.json │ │ │ │ ├── 1772.json │ │ │ │ ├── 1774.json │ │ │ │ ├── 1776.json │ │ │ │ ├── 1778.json │ │ │ │ ├── 1779.json │ │ │ │ ├── 178.json │ │ │ │ ├── 1781.json │ │ │ │ ├── 1784.json │ │ │ │ ├── 1786.json │ │ │ │ ├── 1787.json │ │ │ │ ├── 1788.json │ │ │ │ ├── 1789.json │ │ │ │ ├── 1791.json │ │ │ │ ├── 1792.json │ │ │ │ ├── 1794.json │ │ │ │ ├── 1796.json │ │ │ │ ├── 1798.json │ │ │ │ ├── 180.json │ │ │ │ ├── 1800.json │ │ │ │ ├── 1803.json │ │ │ │ ├── 1804.json │ │ │ │ ├── 1805.json │ │ │ │ ├── 1806.json │ │ │ │ ├── 1807.json │ │ │ │ ├── 1809.json │ │ │ │ ├── 181.json │ │ │ │ ├── 1810.json │ │ │ │ ├── 1811.json │ │ │ │ ├── 1812.json │ │ │ │ ├── 1814.json │ │ │ │ ├── 1815.json │ │ │ │ ├── 1818.json │ │ │ │ ├── 182.json │ │ │ │ ├── 1820.json │ │ │ │ ├── 1824.json │ │ │ │ ├── 1826.json │ │ │ │ ├── 1828.json │ │ │ │ ├── 183.json │ │ │ │ ├── 1834.json │ │ │ │ ├── 1836.json │ │ │ │ ├── 1837.json │ │ │ │ ├── 1838.json │ │ │ │ ├── 184.json │ │ │ │ ├── 1841.json │ │ │ │ ├── 1842.json │ │ │ │ ├── 1845.json │ │ │ │ ├── 1846.json │ │ │ │ ├── 1848.json │ │ │ │ ├── 1849.json │ │ │ │ ├── 185.json │ │ │ │ ├── 1850.json │ │ │ │ ├── 1855.json │ │ │ │ ├── 1856.json │ │ │ │ ├── 1861.json │ │ │ │ ├── 1862.json │ │ │ │ ├── 1863.json │ │ │ │ ├── 1864.json │ │ │ │ ├── 1865.json │ │ │ │ ├── 1869.json │ │ │ │ ├── 187.json │ │ │ │ ├── 1870.json │ │ │ │ ├── 1875.json │ │ │ │ ├── 1878.json │ │ │ │ ├── 188.json │ │ │ │ ├── 1880.json │ │ │ │ ├── 1884.json │ │ │ │ ├── 1886.json │ │ │ │ ├── 1888.json │ │ │ │ ├── 1890.json │ │ │ │ ├── 1891.json │ │ │ │ ├── 1893.json │ │ │ │ ├── 1894.json │ │ │ │ ├── 1895.json │ │ │ │ ├── 1897.json │ │ │ │ ├── 1898.json │ │ │ │ ├── 1899.json │ │ │ │ ├── 190.json │ │ │ │ ├── 1900.json │ │ │ │ ├── 1902.json │ │ │ │ ├── 1904.json │ │ │ │ ├── 1905.json │ │ │ │ ├── 1907.json │ │ │ │ ├── 1908.json │ │ │ │ ├── 1909.json │ │ │ │ ├── 1910.json │ │ │ │ ├── 1911.json │ │ │ │ ├── 1912.json │ │ │ │ ├── 1914.json │ │ │ │ ├── 1915.json │ │ │ │ ├── 1916.json │ │ │ │ ├── 1918.json │ │ │ │ ├── 1919.json │ │ │ │ ├── 192.json │ │ │ │ ├── 1923.json │ │ │ │ ├── 1924.json │ │ │ │ ├── 1928.json │ │ │ │ ├── 1929.json │ │ │ │ ├── 1933.json │ │ │ │ ├── 1934.json │ │ │ │ ├── 1936.json │ │ │ │ ├── 1937.json │ │ │ │ ├── 1942.json │ │ │ │ ├── 1946.json │ │ │ │ ├── 1950.json │ │ │ │ ├── 1953.json │ │ │ │ ├── 1954.json │ │ │ │ ├── 1957.json │ │ │ │ ├── 196.json │ │ │ │ ├── 1960.json │ │ │ │ ├── 1963.json │ │ │ │ ├── 1967.json │ │ │ │ ├── 1968.json │ │ │ │ ├── 1969.json │ │ │ │ ├── 1971.json │ │ │ │ ├── 1973.json │ │ │ │ ├── 1974.json │ │ │ │ ├── 1975.json │ │ │ │ ├── 1976.json │ │ │ │ ├── 1977.json │ │ │ │ ├── 1981.json │ │ │ │ ├── 1982.json │ │ │ │ ├── 1985.json │ │ │ │ ├── 1988.json │ │ │ │ ├── 1991.json │ │ │ │ ├── 1993.json │ │ │ │ ├── 1994.json │ │ │ │ ├── 1996.json │ │ │ │ ├── 1997.json │ │ │ │ ├── 1999.json │ │ │ │ ├── 2.json │ │ │ │ ├── 2000.json │ │ │ │ ├── 2002.json │ │ │ │ ├── 2004.json │ │ │ │ ├── 2008.json │ │ │ │ ├── 2009.json │ │ │ │ ├── 2010.json │ │ │ │ ├── 2012.json │ │ │ │ ├── 2014.json │ │ │ │ ├── 2015.json │ │ │ │ ├── 2016.json │ │ │ │ ├── 2017.json │ │ │ │ ├── 2019.json │ │ │ │ ├── 2021.json │ │ │ │ ├── 2022.json │ │ │ │ ├── 2023.json │ │ │ │ ├── 2024.json │ │ │ │ ├── 2025.json │ │ │ │ ├── 2026.json │ │ │ │ ├── 2028.json │ │ │ │ ├── 2036.json │ │ │ │ ├── 2040.json │ │ │ │ ├── 2043.json │ │ │ │ ├── 2045.json │ │ │ │ ├── 2046.json │ │ │ │ ├── 2048.json │ │ │ │ ├── 2049.json │ │ │ │ ├── 2050.json │ │ │ │ ├── 2051.json │ │ │ │ ├── 2055.json │ │ │ │ ├── 2058.json │ │ │ │ ├── 206.json │ │ │ │ ├── 2064.json │ │ │ │ ├── 2066.json │ │ │ │ ├── 2072.json │ │ │ │ ├── 2074.json │ │ │ │ ├── 2076.json │ │ │ │ ├── 2078.json │ │ │ │ ├── 208.json │ │ │ │ ├── 2080.json │ │ │ │ ├── 2082.json │ │ │ │ ├── 2084.json │ │ │ │ ├── 2085.json │ │ │ │ ├── 2088.json │ │ │ │ ├── 209.json │ │ │ │ ├── 2091.json │ │ │ │ ├── 2092.json │ │ │ │ ├── 2094.json │ │ │ │ ├── 2098.json │ │ │ │ ├── 2099.json │ │ │ │ ├── 21.json │ │ │ │ ├── 2100.json │ │ │ │ ├── 2101.json │ │ │ │ ├── 2102.json │ │ │ │ ├── 2104.json │ │ │ │ ├── 2106.json │ │ │ │ ├── 2109.json │ │ │ │ ├── 211.json │ │ │ │ ├── 2111.json │ │ │ │ ├── 2112.json │ │ │ │ ├── 2117.json │ │ │ │ ├── 2119.json │ │ │ │ ├── 2120.json │ │ │ │ ├── 2122.json │ │ │ │ ├── 2126.json │ │ │ │ ├── 2127.json │ │ │ │ ├── 2130.json │ │ │ │ ├── 2133.json │ │ │ │ ├── 2135.json │ │ │ │ ├── 2137.json │ │ │ │ ├── 214.json │ │ │ │ ├── 2141.json │ │ │ │ ├── 2144.json │ │ │ │ ├── 2145.json │ │ │ │ ├── 2146.json │ │ │ │ ├── 2147.json │ │ │ │ ├── 215.json │ │ │ │ ├── 2150.json │ │ │ │ ├── 2152.json │ │ │ │ ├── 2153.json │ │ │ │ ├── 2154.json │ │ │ │ ├── 2155.json │ │ │ │ ├── 2157.json │ │ │ │ ├── 2159.json │ │ │ │ ├── 2160.json │ │ │ │ ├── 2163.json │ │ │ │ ├── 2165.json │ │ │ │ ├── 2167.json │ │ │ │ ├── 2168.json │ │ │ │ ├── 2173.json │ │ │ │ ├── 2176.json │ │ │ │ ├── 2185.json │ │ │ │ ├── 2186.json │ │ │ │ ├── 2191.json │ │ │ │ ├── 2192.json │ │ │ │ ├── 2193.json │ │ │ │ ├── 2195.json │ │ │ │ ├── 2196.json │ │ │ │ ├── 2199.json │ │ │ │ ├── 22.json │ │ │ │ ├── 220.json │ │ │ │ ├── 2201.json │ │ │ │ ├── 2203.json │ │ │ │ ├── 2207.json │ │ │ │ ├── 2209.json │ │ │ │ ├── 2213.json │ │ │ │ ├── 2214.json │ │ │ │ ├── 2215.json │ │ │ │ ├── 2216.json │ │ │ │ ├── 2217.json │ │ │ │ ├── 2218.json │ │ │ │ ├── 2220.json │ │ │ │ ├── 2221.json │ │ │ │ ├── 2226.json │ │ │ │ ├── 2227.json │ │ │ │ ├── 2232.json │ │ │ │ ├── 2235.json │ │ │ │ ├── 2236.json │ │ │ │ ├── 2237.json │ │ │ │ ├── 2238.json │ │ │ │ ├── 224.json │ │ │ │ ├── 2240.json │ │ │ │ ├── 2241.json │ │ │ │ ├── 2243.json │ │ │ │ ├── 2246.json │ │ │ │ ├── 2248.json │ │ │ │ ├── 2251.json │ │ │ │ ├── 2252.json │ │ │ │ ├── 2253.json │ │ │ │ ├── 2254.json │ │ │ │ ├── 2255.json │ │ │ │ ├── 2257.json │ │ │ │ ├── 2259.json │ │ │ │ ├── 2261.json │ │ │ │ ├── 2264.json │ │ │ │ ├── 2265.json │ │ │ │ ├── 2267.json │ │ │ │ ├── 2268.json │ │ │ │ ├── 2271.json │ │ │ │ ├── 2274.json │ │ │ │ ├── 2276.json │ │ │ │ ├── 2277.json │ │ │ │ ├── 2278.json │ │ │ │ ├── 2283.json │ │ │ │ ├── 2284.json │ │ │ │ ├── 2285.json │ │ │ │ ├── 2287.json │ │ │ │ ├── 2288.json │ │ │ │ ├── 2292.json │ │ │ │ ├── 2293.json │ │ │ │ ├── 2294.json │ │ │ │ ├── 2295.json │ │ │ │ ├── 2298.json │ │ │ │ ├── 230.json │ │ │ │ ├── 2300.json │ │ │ │ ├── 2303.json │ │ │ │ ├── 2305.json │ │ │ │ ├── 2307.json │ │ │ │ ├── 2316.json │ │ │ │ ├── 2318.json │ │ │ │ ├── 2320.json │ │ │ │ ├── 2321.json │ │ │ │ ├── 2328.json │ │ │ │ ├── 2329.json │ │ │ │ ├── 2330.json │ │ │ │ ├── 2331.json │ │ │ │ ├── 2332.json │ │ │ │ ├── 2335.json │ │ │ │ ├── 234.json │ │ │ │ ├── 2341.json │ │ │ │ ├── 2342.json │ │ │ │ ├── 2351.json │ │ │ │ ├── 2357.json │ │ │ │ ├── 2358.json │ │ │ │ ├── 2359.json │ │ │ │ ├── 236.json │ │ │ │ ├── 2361.json │ │ │ │ ├── 2362.json │ │ │ │ ├── 2363.json │ │ │ │ ├── 2370.json │ │ │ │ ├── 2373.json │ │ │ │ ├── 2374.json │ │ │ │ ├── 2376.json │ │ │ │ ├── 2378.json │ │ │ │ ├── 2381.json │ │ │ │ ├── 2391.json │ │ │ │ ├── 2392.json │ │ │ │ ├── 2393.json │ │ │ │ ├── 2395.json │ │ │ │ ├── 2397.json │ │ │ │ ├── 2398.json │ │ │ │ ├── 2399.json │ │ │ │ ├── 24.json │ │ │ │ ├── 240.json │ │ │ │ ├── 2403.json │ │ │ │ ├── 2404.json │ │ │ │ ├── 2407.json │ │ │ │ ├── 2409.json │ │ │ │ ├── 2412.json │ │ │ │ ├── 2416.json │ │ │ │ ├── 2417.json │ │ │ │ ├── 2421.json │ │ │ │ ├── 2427.json │ │ │ │ ├── 2430.json │ │ │ │ ├── 2433.json │ │ │ │ ├── 2435.json │ │ │ │ ├── 2437.json │ │ │ │ ├── 2438.json │ │ │ │ ├── 245.json │ │ │ │ ├── 2453.json │ │ │ │ ├── 2456.json │ │ │ │ ├── 2457.json │ │ │ │ ├── 2458.json │ │ │ │ ├── 2459.json │ │ │ │ ├── 246.json │ │ │ │ ├── 2465.json │ │ │ │ ├── 2467.json │ │ │ │ ├── 2469.json │ │ │ │ ├── 247.json │ │ │ │ ├── 2470.json │ │ │ │ ├── 2471.json │ │ │ │ ├── 2475.json │ │ │ │ ├── 2476.json │ │ │ │ ├── 2477.json │ │ │ │ ├── 248.json │ │ │ │ ├── 2480.json │ │ │ │ ├── 2481.json │ │ │ │ ├── 2482.json │ │ │ │ ├── 2486.json │ │ │ │ ├── 2489.json │ │ │ │ ├── 2493.json │ │ │ │ ├── 2495.json │ │ │ │ ├── 2496.json │ │ │ │ ├── 2498.json │ │ │ │ ├── 2499.json │ │ │ │ ├── 250.json │ │ │ │ ├── 2502.json │ │ │ │ ├── 251.json │ │ │ │ ├── 2511.json │ │ │ │ ├── 2512.json │ │ │ │ ├── 2515.json │ │ │ │ ├── 2517.json │ │ │ │ ├── 2518.json │ │ │ │ ├── 2520.json │ │ │ │ ├── 2525.json │ │ │ │ ├── 2527.json │ │ │ │ ├── 2530.json │ │ │ │ ├── 2531.json │ │ │ │ ├── 2536.json │ │ │ │ ├── 2539.json │ │ │ │ ├── 2541.json │ │ │ │ ├── 2542.json │ │ │ │ ├── 2543.json │ │ │ │ ├── 2544.json │ │ │ │ ├── 2546.json │ │ │ │ ├── 2548.json │ │ │ │ ├── 2549.json │ │ │ │ ├── 2551.json │ │ │ │ ├── 2553.json │ │ │ │ ├── 2554.json │ │ │ │ ├── 2555.json │ │ │ │ ├── 2556.json │ │ │ │ ├── 2557.json │ │ │ │ ├── 2558.json │ │ │ │ ├── 2559.json │ │ │ │ ├── 2565.json │ │ │ │ ├── 2566.json │ │ │ │ ├── 2570.json │ │ │ │ ├── 2572.json │ │ │ │ ├── 2574.json │ │ │ │ ├── 2576.json │ │ │ │ ├── 2577.json │ │ │ │ ├── 2578.json │ │ │ │ ├── 2579.json │ │ │ │ ├── 2582.json │ │ │ │ ├── 2583.json │ │ │ │ ├── 2584.json │ │ │ │ ├── 2587.json │ │ │ │ ├── 2588.json │ │ │ │ ├── 2590.json │ │ │ │ ├── 2592.json │ │ │ │ ├── 2593.json │ │ │ │ ├── 2596.json │ │ │ │ ├── 25963.json │ │ │ │ ├── 25975.json │ │ │ │ ├── 25995.json │ │ │ │ ├── 25999.json │ │ │ │ ├── 26.json │ │ │ │ ├── 260.json │ │ │ │ ├── 26016.json │ │ │ │ ├── 2602.json │ │ │ │ ├── 2603.json │ │ │ │ ├── 2604.json │ │ │ │ ├── 2605.json │ │ │ │ ├── 2606.json │ │ │ │ ├── 2612.json │ │ │ │ ├── 2618.json │ │ │ │ ├── 2619.json │ │ │ │ ├── 2620.json │ │ │ │ ├── 2621.json │ │ │ │ ├── 2623.json │ │ │ │ ├── 2626.json │ │ │ │ ├── 2628.json │ │ │ │ ├── 2629.json │ │ │ │ ├── 263.json │ │ │ │ ├── 2631.json │ │ │ │ ├── 2637.json │ │ │ │ ├── 2641.json │ │ │ │ ├── 2642.json │ │ │ │ ├── 2649.json │ │ │ │ ├── 265.json │ │ │ │ ├── 2651.json │ │ │ │ ├── 2653.json │ │ │ │ ├── 2657.json │ │ │ │ ├── 2659.json │ │ │ │ ├── 266.json │ │ │ │ ├── 2662.json │ │ │ │ ├── 2664.json │ │ │ │ ├── 267.json │ │ │ │ ├── 2670.json │ │ │ │ ├── 2671.json │ │ │ │ ├── 2672.json │ │ │ │ ├── 2675.json │ │ │ │ ├── 2677.json │ │ │ │ ├── 2680.json │ │ │ │ ├── 2683.json │ │ │ │ ├── 2685.json │ │ │ │ ├── 2687.json │ │ │ │ ├── 2688.json │ │ │ │ ├── 269.json │ │ │ │ ├── 2691.json │ │ │ │ ├── 2693.json │ │ │ │ ├── 2694.json │ │ │ │ ├── 2695.json │ │ │ │ ├── 2696.json │ │ │ │ ├── 270.json │ │ │ │ ├── 2700.json │ │ │ │ ├── 2701.json │ │ │ │ ├── 2702.json │ │ │ │ ├── 2706.json │ │ │ │ ├── 2708.json │ │ │ │ ├── 271.json │ │ │ │ ├── 2710.json │ │ │ │ ├── 2711.json │ │ │ │ ├── 2712.json │ │ │ │ ├── 2714.json │ │ │ │ ├── 2715.json │ │ │ │ ├── 2719.json │ │ │ │ ├── 2720.json │ │ │ │ ├── 2723.json │ │ │ │ ├── 2728.json │ │ │ │ ├── 2731.json │ │ │ │ ├── 2732.json │ │ │ │ ├── 2735.json │ │ │ │ ├── 2736.json │ │ │ │ ├── 2738.json │ │ │ │ ├── 2740.json │ │ │ │ ├── 2741.json │ │ │ │ ├── 2742.json │ │ │ │ ├── 2743.json │ │ │ │ ├── 2744.json │ │ │ │ ├── 2745.json │ │ │ │ ├── 2748.json │ │ │ │ ├── 275.json │ │ │ │ ├── 2753.json │ │ │ │ ├── 2755.json │ │ │ │ ├── 2756.json │ │ │ │ ├── 2759.json │ │ │ │ ├── 276.json │ │ │ │ ├── 2762.json │ │ │ │ ├── 2768.json │ │ │ │ ├── 2772.json │ │ │ │ ├── 2779.json │ │ │ │ ├── 2780.json │ │ │ │ ├── 2783.json │ │ │ │ ├── 2784.json │ │ │ │ ├── 2787.json │ │ │ │ ├── 2788.json │ │ │ │ ├── 2789.json │ │ │ │ ├── 279.json │ │ │ │ ├── 2792.json │ │ │ │ ├── 2796.json │ │ │ │ ├── 2798.json │ │ │ │ ├── 28.json │ │ │ │ ├── 280.json │ │ │ │ ├── 2804.json │ │ │ │ ├── 2805.json │ │ │ │ ├── 2807.json │ │ │ │ ├── 2810.json │ │ │ │ ├── 2814.json │ │ │ │ ├── 2815.json │ │ │ │ ├── 2817.json │ │ │ │ ├── 2818.json │ │ │ │ ├── 282.json │ │ │ │ ├── 2822.json │ │ │ │ ├── 2823.json │ │ │ │ ├── 2827.json │ │ │ │ ├── 2831.json │ │ │ │ ├── 2838.json │ │ │ │ ├── 288.json │ │ │ │ ├── 289.json │ │ │ │ ├── 291.json │ │ │ │ ├── 293.json │ │ │ │ ├── 296.json │ │ │ │ ├── 297.json │ │ │ │ ├── 302.json │ │ │ │ ├── 304.json │ │ │ │ ├── 305.json │ │ │ │ ├── 307.json │ │ │ │ ├── 31.json │ │ │ │ ├── 311.json │ │ │ │ ├── 313.json │ │ │ │ ├── 314.json │ │ │ │ ├── 318.json │ │ │ │ ├── 32.json │ │ │ │ ├── 320.json │ │ │ │ ├── 323.json │ │ │ │ ├── 326.json │ │ │ │ ├── 327.json │ │ │ │ ├── 329.json │ │ │ │ ├── 33.json │ │ │ │ ├── 332.json │ │ │ │ ├── 337.json │ │ │ │ ├── 338.json │ │ │ │ ├── 342.json │ │ │ │ ├── 346.json │ │ │ │ ├── 347.json │ │ │ │ ├── 35.json │ │ │ │ ├── 351.json │ │ │ │ ├── 354.json │ │ │ │ ├── 359.json │ │ │ │ ├── 362.json │ │ │ │ ├── 364.json │ │ │ │ ├── 366.json │ │ │ │ ├── 37.json │ │ │ │ ├── 388.json │ │ │ │ ├── 392.json │ │ │ │ ├── 393.json │ │ │ │ ├── 395.json │ │ │ │ ├── 398.json │ │ │ │ ├── 40.json │ │ │ │ ├── 400.json │ │ │ │ ├── 405.json │ │ │ │ ├── 410.json │ │ │ │ ├── 412.json │ │ │ │ ├── 413.json │ │ │ │ ├── 414.json │ │ │ │ ├── 416.json │ │ │ │ ├── 419.json │ │ │ │ ├── 421.json │ │ │ │ ├── 422.json │ │ │ │ ├── 424.json │ │ │ │ ├── 425.json │ │ │ │ ├── 426.json │ │ │ │ ├── 427.json │ │ │ │ ├── 429.json │ │ │ │ ├── 43.json │ │ │ │ ├── 430.json │ │ │ │ ├── 432.json │ │ │ │ ├── 433.json │ │ │ │ ├── 435.json │ │ │ │ ├── 437.json │ │ │ │ ├── 438.json │ │ │ │ ├── 44.json │ │ │ │ ├── 440.json │ │ │ │ ├── 441.json │ │ │ │ ├── 442.json │ │ │ │ ├── 445.json │ │ │ │ ├── 446.json │ │ │ │ ├── 449.json │ │ │ │ ├── 451.json │ │ │ │ ├── 452.json │ │ │ │ ├── 453.json │ │ │ │ ├── 455.json │ │ │ │ ├── 459.json │ │ │ │ ├── 462.json │ │ │ │ ├── 468.json │ │ │ │ ├── 469.json │ │ │ │ ├── 470.json │ │ │ │ ├── 471.json │ │ │ │ ├── 476.json │ │ │ │ ├── 478.json │ │ │ │ ├── 48.json │ │ │ │ ├── 480.json │ │ │ │ ├── 482.json │ │ │ │ ├── 484.json │ │ │ │ ├── 486.json │ │ │ │ ├── 487.json │ │ │ │ ├── 489.json │ │ │ │ ├── 491.json │ │ │ │ ├── 493.json │ │ │ │ ├── 496.json │ │ │ │ ├── 498.json │ │ │ │ ├── 499.json │ │ │ │ ├── 500.json │ │ │ │ ├── 502.json │ │ │ │ ├── 506.json │ │ │ │ ├── 509.json │ │ │ │ ├── 51.json │ │ │ │ ├── 510.json │ │ │ │ ├── 511.json │ │ │ │ ├── 512.json │ │ │ │ ├── 513.json │ │ │ │ ├── 514.json │ │ │ │ ├── 518.json │ │ │ │ ├── 522.json │ │ │ │ ├── 523.json │ │ │ │ ├── 524.json │ │ │ │ ├── 526.json │ │ │ │ ├── 528.json │ │ │ │ ├── 529.json │ │ │ │ ├── 530.json │ │ │ │ ├── 533.json │ │ │ │ ├── 536.json │ │ │ │ ├── 537.json │ │ │ │ ├── 539.json │ │ │ │ ├── 540.json │ │ │ │ ├── 542.json │ │ │ │ ├── 543.json │ │ │ │ ├── 547.json │ │ │ │ ├── 548.json │ │ │ │ ├── 55.json │ │ │ │ ├── 552.json │ │ │ │ ├── 554.json │ │ │ │ ├── 558.json │ │ │ │ ├── 559.json │ │ │ │ ├── 560.json │ │ │ │ ├── 567.json │ │ │ │ ├── 568.json │ │ │ │ ├── 570.json │ │ │ │ ├── 571.json │ │ │ │ ├── 577.json │ │ │ │ ├── 578.json │ │ │ │ ├── 581.json │ │ │ │ ├── 583.json │ │ │ │ ├── 585.json │ │ │ │ ├── 59.json │ │ │ │ ├── 591.json │ │ │ │ ├── 594.json │ │ │ │ ├── 596.json │ │ │ │ ├── 597.json │ │ │ │ ├── 598.json │ │ │ │ ├── 6.json │ │ │ │ ├── 608.json │ │ │ │ ├── 610.json │ │ │ │ ├── 611.json │ │ │ │ ├── 613.json │ │ │ │ ├── 614.json │ │ │ │ ├── 615.json │ │ │ │ ├── 616.json │ │ │ │ ├── 618.json │ │ │ │ ├── 619.json │ │ │ │ ├── 621.json │ │ │ │ ├── 623.json │ │ │ │ ├── 628.json │ │ │ │ ├── 632.json │ │ │ │ ├── 634.json │ │ │ │ ├── 636.json │ │ │ │ ├── 638.json │ │ │ │ ├── 639.json │ │ │ │ ├── 640.json │ │ │ │ ├── 649.json │ │ │ │ ├── 650.json │ │ │ │ ├── 651.json │ │ │ │ ├── 657.json │ │ │ │ ├── 661.json │ │ │ │ ├── 662.json │ │ │ │ ├── 668.json │ │ │ │ ├── 669.json │ │ │ │ ├── 67.json │ │ │ │ ├── 672.json │ │ │ │ ├── 679.json │ │ │ │ ├── 680.json │ │ │ │ ├── 686.json │ │ │ │ ├── 688.json │ │ │ │ ├── 689.json │ │ │ │ ├── 69.json │ │ │ │ ├── 694.json │ │ │ │ ├── 701.json │ │ │ │ ├── 702.json │ │ │ │ ├── 704.json │ │ │ │ ├── 706.json │ │ │ │ ├── 710.json │ │ │ │ ├── 713.json │ │ │ │ ├── 716.json │ │ │ │ ├── 718.json │ │ │ │ ├── 722.json │ │ │ │ ├── 724.json │ │ │ │ ├── 725.json │ │ │ │ ├── 726.json │ │ │ │ ├── 73.json │ │ │ │ ├── 731.json │ │ │ │ ├── 733.json │ │ │ │ ├── 744.json │ │ │ │ ├── 747.json │ │ │ │ ├── 748.json │ │ │ │ ├── 749.json │ │ │ │ ├── 750.json │ │ │ │ ├── 752.json │ │ │ │ ├── 753.json │ │ │ │ ├── 755.json │ │ │ │ ├── 756.json │ │ │ │ ├── 76.json │ │ │ │ ├── 762.json │ │ │ │ ├── 769.json │ │ │ │ ├── 77.json │ │ │ │ ├── 771.json │ │ │ │ ├── 776.json │ │ │ │ ├── 779.json │ │ │ │ ├── 780.json │ │ │ │ ├── 783.json │ │ │ │ ├── 784.json │ │ │ │ ├── 785.json │ │ │ │ ├── 786.json │ │ │ │ ├── 791.json │ │ │ │ ├── 794.json │ │ │ │ ├── 795.json │ │ │ │ ├── 797.json │ │ │ │ ├── 799.json │ │ │ │ ├── 80.json │ │ │ │ ├── 801.json │ │ │ │ ├── 803.json │ │ │ │ ├── 805.json │ │ │ │ ├── 812.json │ │ │ │ ├── 814.json │ │ │ │ ├── 816.json │ │ │ │ ├── 817.json │ │ │ │ ├── 818.json │ │ │ │ ├── 82.json │ │ │ │ ├── 821.json │ │ │ │ ├── 824.json │ │ │ │ ├── 825.json │ │ │ │ ├── 827.json │ │ │ │ ├── 829.json │ │ │ │ ├── 831.json │ │ │ │ ├── 834.json │ │ │ │ ├── 838.json │ │ │ │ ├── 840.json │ │ │ │ ├── 841.json │ │ │ │ ├── 842.json │ │ │ │ ├── 843.json │ │ │ │ ├── 846.json │ │ │ │ ├── 849.json │ │ │ │ ├── 850.json │ │ │ │ ├── 851.json │ │ │ │ ├── 852.json │ │ │ │ ├── 853.json │ │ │ │ ├── 858.json │ │ │ │ ├── 859.json │ │ │ │ ├── 862.json │ │ │ │ ├── 864.json │ │ │ │ ├── 865.json │ │ │ │ ├── 869.json │ │ │ │ ├── 870.json │ │ │ │ ├── 872.json │ │ │ │ ├── 873.json │ │ │ │ ├── 876.json │ │ │ │ ├── 880.json │ │ │ │ ├── 882.json │ │ │ │ ├── 883.json │ │ │ │ ├── 887.json │ │ │ │ ├── 889.json │ │ │ │ ├── 89.json │ │ │ │ ├── 892.json │ │ │ │ ├── 893.json │ │ │ │ ├── 901.json │ │ │ │ ├── 902.json │ │ │ │ ├── 904.json │ │ │ │ ├── 905.json │ │ │ │ ├── 907.json │ │ │ │ ├── 911.json │ │ │ │ ├── 913.json │ │ │ │ ├── 916.json │ │ │ │ ├── 917.json │ │ │ │ ├── 919.json │ │ │ │ ├── 922.json │ │ │ │ ├── 923.json │ │ │ │ ├── 928.json │ │ │ │ ├── 935.json │ │ │ │ ├── 937.json │ │ │ │ ├── 938.json │ │ │ │ ├── 944.json │ │ │ │ ├── 945.json │ │ │ │ ├── 952.json │ │ │ │ ├── 955.json │ │ │ │ ├── 958.json │ │ │ │ ├── 96.json │ │ │ │ ├── 962.json │ │ │ │ ├── 967.json │ │ │ │ ├── 968.json │ │ │ │ ├── 969.json │ │ │ │ ├── 972.json │ │ │ │ ├── 975.json │ │ │ │ ├── 977.json │ │ │ │ ├── 978.json │ │ │ │ ├── 979.json │ │ │ │ ├── 981.json │ │ │ │ ├── 983.json │ │ │ │ ├── 986.json │ │ │ │ ├── 988.json │ │ │ │ ├── 989.json │ │ │ │ ├── 990.json │ │ │ │ ├── 993.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ └── 998.json │ │ │ ├── counting_and_probability │ │ │ │ ├── 0.json │ │ │ │ ├── 10.json │ │ │ │ ├── 100.json │ │ │ │ ├── 1003.json │ │ │ │ ├── 1004.json │ │ │ │ ├── 1005.json │ │ │ │ ├── 1007.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 1010.json │ │ │ │ ├── 1014.json │ │ │ │ ├── 1016.json │ │ │ │ ├── 102.json │ │ │ │ ├── 1026.json │ │ │ │ ├── 103.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 1038.json │ │ │ │ ├── 1043.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1046.json │ │ │ │ ├── 1047.json │ │ │ │ ├── 105.json │ │ │ │ ├── 1050.json │ │ │ │ ├── 1051.json │ │ │ │ ├── 1052.json │ │ │ │ ├── 1053.json │ │ │ │ ├── 1056.json │ │ │ │ ├── 106.json │ │ │ │ ├── 1060.json │ │ │ │ ├── 1062.json │ │ │ │ ├── 1064.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1067.json │ │ │ │ ├── 107.json │ │ │ │ ├── 1071.json │ │ │ │ ├── 1072.json │ │ │ │ ├── 1076.json │ │ │ │ ├── 1077.json │ │ │ │ ├── 1081.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 1083.json │ │ │ │ ├── 1084.json │ │ │ │ ├── 1087.json │ │ │ │ ├── 1088.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1095.json │ │ │ │ ├── 1096.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 110.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1107.json │ │ │ │ ├── 1108.json │ │ │ │ ├── 1112.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1117.json │ │ │ │ ├── 1118.json │ │ │ │ ├── 1119.json │ │ │ │ ├── 1120.json │ │ │ │ ├── 115.json │ │ │ │ ├── 116.json │ │ │ │ ├── 119.json │ │ │ │ ├── 123.json │ │ │ │ ├── 124.json │ │ │ │ ├── 128.json │ │ │ │ ├── 13.json │ │ │ │ ├── 130.json │ │ │ │ ├── 132.json │ │ │ │ ├── 134.json │ │ │ │ ├── 136.json │ │ │ │ ├── 137.json │ │ │ │ ├── 139.json │ │ │ │ ├── 14.json │ │ │ │ ├── 140.json │ │ │ │ ├── 148.json │ │ │ │ ├── 150.json │ │ │ │ ├── 151.json │ │ │ │ ├── 152.json │ │ │ │ ├── 155.json │ │ │ │ ├── 156.json │ │ │ │ ├── 158.json │ │ │ │ ├── 159.json │ │ │ │ ├── 16.json │ │ │ │ ├── 162.json │ │ │ │ ├── 164.json │ │ │ │ ├── 166.json │ │ │ │ ├── 170.json │ │ │ │ ├── 172.json │ │ │ │ ├── 173.json │ │ │ │ ├── 175.json │ │ │ │ ├── 176.json │ │ │ │ ├── 181.json │ │ │ │ ├── 182.json │ │ │ │ ├── 184.json │ │ │ │ ├── 185.json │ │ │ │ ├── 188.json │ │ │ │ ├── 19.json │ │ │ │ ├── 190.json │ │ │ │ ├── 193.json │ │ │ │ ├── 195.json │ │ │ │ ├── 199.json │ │ │ │ ├── 2.json │ │ │ │ ├── 203.json │ │ │ │ ├── 205.json │ │ │ │ ├── 206.json │ │ │ │ ├── 207.json │ │ │ │ ├── 208.json │ │ │ │ ├── 209.json │ │ │ │ ├── 210.json │ │ │ │ ├── 212.json │ │ │ │ ├── 214.json │ │ │ │ ├── 215.json │ │ │ │ ├── 216.json │ │ │ │ ├── 217.json │ │ │ │ ├── 219.json │ │ │ │ ├── 228.json │ │ │ │ ├── 229.json │ │ │ │ ├── 23.json │ │ │ │ ├── 230.json │ │ │ │ ├── 231.json │ │ │ │ ├── 233.json │ │ │ │ ├── 238.json │ │ │ │ ├── 23957.json │ │ │ │ ├── 24085.json │ │ │ │ ├── 242.json │ │ │ │ ├── 244.json │ │ │ │ ├── 24567.json │ │ │ │ ├── 24622.json │ │ │ │ ├── 247.json │ │ │ │ ├── 24978.json │ │ │ │ ├── 25.json │ │ │ │ ├── 250.json │ │ │ │ ├── 25149.json │ │ │ │ ├── 25428.json │ │ │ │ ├── 25780.json │ │ │ │ ├── 258.json │ │ │ │ ├── 260.json │ │ │ │ ├── 262.json │ │ │ │ ├── 263.json │ │ │ │ ├── 264.json │ │ │ │ ├── 266.json │ │ │ │ ├── 27.json │ │ │ │ ├── 270.json │ │ │ │ ├── 271.json │ │ │ │ ├── 274.json │ │ │ │ ├── 275.json │ │ │ │ ├── 277.json │ │ │ │ ├── 279.json │ │ │ │ ├── 281.json │ │ │ │ ├── 282.json │ │ │ │ ├── 286.json │ │ │ │ ├── 288.json │ │ │ │ ├── 289.json │ │ │ │ ├── 292.json │ │ │ │ ├── 294.json │ │ │ │ ├── 295.json │ │ │ │ ├── 3.json │ │ │ │ ├── 30.json │ │ │ │ ├── 300.json │ │ │ │ ├── 302.json │ │ │ │ ├── 303.json │ │ │ │ ├── 309.json │ │ │ │ ├── 313.json │ │ │ │ ├── 317.json │ │ │ │ ├── 321.json │ │ │ │ ├── 323.json │ │ │ │ ├── 328.json │ │ │ │ ├── 331.json │ │ │ │ ├── 337.json │ │ │ │ ├── 339.json │ │ │ │ ├── 341.json │ │ │ │ ├── 342.json │ │ │ │ ├── 347.json │ │ │ │ ├── 352.json │ │ │ │ ├── 354.json │ │ │ │ ├── 355.json │ │ │ │ ├── 357.json │ │ │ │ ├── 359.json │ │ │ │ ├── 36.json │ │ │ │ ├── 362.json │ │ │ │ ├── 366.json │ │ │ │ ├── 367.json │ │ │ │ ├── 368.json │ │ │ │ ├── 374.json │ │ │ │ ├── 377.json │ │ │ │ ├── 378.json │ │ │ │ ├── 38.json │ │ │ │ ├── 381.json │ │ │ │ ├── 384.json │ │ │ │ ├── 385.json │ │ │ │ ├── 389.json │ │ │ │ ├── 390.json │ │ │ │ ├── 391.json │ │ │ │ ├── 392.json │ │ │ │ ├── 394.json │ │ │ │ ├── 395.json │ │ │ │ ├── 396.json │ │ │ │ ├── 4.json │ │ │ │ ├── 400.json │ │ │ │ ├── 403.json │ │ │ │ ├── 405.json │ │ │ │ ├── 406.json │ │ │ │ ├── 407.json │ │ │ │ ├── 409.json │ │ │ │ ├── 41.json │ │ │ │ ├── 413.json │ │ │ │ ├── 416.json │ │ │ │ ├── 418.json │ │ │ │ ├── 419.json │ │ │ │ ├── 423.json │ │ │ │ ├── 425.json │ │ │ │ ├── 427.json │ │ │ │ ├── 430.json │ │ │ │ ├── 435.json │ │ │ │ ├── 436.json │ │ │ │ ├── 438.json │ │ │ │ ├── 439.json │ │ │ │ ├── 442.json │ │ │ │ ├── 449.json │ │ │ │ ├── 450.json │ │ │ │ ├── 453.json │ │ │ │ ├── 454.json │ │ │ │ ├── 455.json │ │ │ │ ├── 456.json │ │ │ │ ├── 461.json │ │ │ │ ├── 464.json │ │ │ │ ├── 47.json │ │ │ │ ├── 472.json │ │ │ │ ├── 474.json │ │ │ │ ├── 476.json │ │ │ │ ├── 477.json │ │ │ │ ├── 479.json │ │ │ │ ├── 48.json │ │ │ │ ├── 481.json │ │ │ │ ├── 482.json │ │ │ │ ├── 483.json │ │ │ │ ├── 485.json │ │ │ │ ├── 486.json │ │ │ │ ├── 488.json │ │ │ │ ├── 489.json │ │ │ │ ├── 490.json │ │ │ │ ├── 494.json │ │ │ │ ├── 495.json │ │ │ │ ├── 496.json │ │ │ │ ├── 497.json │ │ │ │ ├── 498.json │ │ │ │ ├── 499.json │ │ │ │ ├── 50.json │ │ │ │ ├── 503.json │ │ │ │ ├── 504.json │ │ │ │ ├── 506.json │ │ │ │ ├── 508.json │ │ │ │ ├── 51.json │ │ │ │ ├── 512.json │ │ │ │ ├── 513.json │ │ │ │ ├── 519.json │ │ │ │ ├── 520.json │ │ │ │ ├── 521.json │ │ │ │ ├── 524.json │ │ │ │ ├── 525.json │ │ │ │ ├── 526.json │ │ │ │ ├── 528.json │ │ │ │ ├── 53.json │ │ │ │ ├── 535.json │ │ │ │ ├── 536.json │ │ │ │ ├── 537.json │ │ │ │ ├── 54.json │ │ │ │ ├── 545.json │ │ │ │ ├── 547.json │ │ │ │ ├── 549.json │ │ │ │ ├── 551.json │ │ │ │ ├── 559.json │ │ │ │ ├── 56.json │ │ │ │ ├── 560.json │ │ │ │ ├── 564.json │ │ │ │ ├── 568.json │ │ │ │ ├── 57.json │ │ │ │ ├── 572.json │ │ │ │ ├── 575.json │ │ │ │ ├── 577.json │ │ │ │ ├── 579.json │ │ │ │ ├── 582.json │ │ │ │ ├── 583.json │ │ │ │ ├── 586.json │ │ │ │ ├── 587.json │ │ │ │ ├── 589.json │ │ │ │ ├── 590.json │ │ │ │ ├── 594.json │ │ │ │ ├── 595.json │ │ │ │ ├── 596.json │ │ │ │ ├── 598.json │ │ │ │ ├── 6.json │ │ │ │ ├── 602.json │ │ │ │ ├── 604.json │ │ │ │ ├── 606.json │ │ │ │ ├── 608.json │ │ │ │ ├── 61.json │ │ │ │ ├── 614.json │ │ │ │ ├── 616.json │ │ │ │ ├── 620.json │ │ │ │ ├── 621.json │ │ │ │ ├── 623.json │ │ │ │ ├── 624.json │ │ │ │ ├── 628.json │ │ │ │ ├── 63.json │ │ │ │ ├── 635.json │ │ │ │ ├── 636.json │ │ │ │ ├── 64.json │ │ │ │ ├── 642.json │ │ │ │ ├── 645.json │ │ │ │ ├── 648.json │ │ │ │ ├── 65.json │ │ │ │ ├── 650.json │ │ │ │ ├── 652.json │ │ │ │ ├── 653.json │ │ │ │ ├── 654.json │ │ │ │ ├── 655.json │ │ │ │ ├── 659.json │ │ │ │ ├── 66.json │ │ │ │ ├── 660.json │ │ │ │ ├── 661.json │ │ │ │ ├── 662.json │ │ │ │ ├── 663.json │ │ │ │ ├── 666.json │ │ │ │ ├── 670.json │ │ │ │ ├── 671.json │ │ │ │ ├── 677.json │ │ │ │ ├── 678.json │ │ │ │ ├── 68.json │ │ │ │ ├── 682.json │ │ │ │ ├── 684.json │ │ │ │ ├── 686.json │ │ │ │ ├── 688.json │ │ │ │ ├── 689.json │ │ │ │ ├── 690.json │ │ │ │ ├── 694.json │ │ │ │ ├── 695.json │ │ │ │ ├── 697.json │ │ │ │ ├── 7.json │ │ │ │ ├── 704.json │ │ │ │ ├── 705.json │ │ │ │ ├── 71.json │ │ │ │ ├── 710.json │ │ │ │ ├── 714.json │ │ │ │ ├── 717.json │ │ │ │ ├── 721.json │ │ │ │ ├── 723.json │ │ │ │ ├── 725.json │ │ │ │ ├── 726.json │ │ │ │ ├── 727.json │ │ │ │ ├── 731.json │ │ │ │ ├── 732.json │ │ │ │ ├── 735.json │ │ │ │ ├── 737.json │ │ │ │ ├── 74.json │ │ │ │ ├── 742.json │ │ │ │ ├── 745.json │ │ │ │ ├── 747.json │ │ │ │ ├── 748.json │ │ │ │ ├── 754.json │ │ │ │ ├── 755.json │ │ │ │ ├── 759.json │ │ │ │ ├── 761.json │ │ │ │ ├── 762.json │ │ │ │ ├── 763.json │ │ │ │ ├── 765.json │ │ │ │ ├── 766.json │ │ │ │ ├── 767.json │ │ │ │ ├── 770.json │ │ │ │ ├── 771.json │ │ │ │ ├── 776.json │ │ │ │ ├── 777.json │ │ │ │ ├── 778.json │ │ │ │ ├── 78.json │ │ │ │ ├── 780.json │ │ │ │ ├── 781.json │ │ │ │ ├── 785.json │ │ │ │ ├── 788.json │ │ │ │ ├── 789.json │ │ │ │ ├── 79.json │ │ │ │ ├── 790.json │ │ │ │ ├── 792.json │ │ │ │ ├── 795.json │ │ │ │ ├── 796.json │ │ │ │ ├── 798.json │ │ │ │ ├── 80.json │ │ │ │ ├── 803.json │ │ │ │ ├── 804.json │ │ │ │ ├── 805.json │ │ │ │ ├── 813.json │ │ │ │ ├── 815.json │ │ │ │ ├── 816.json │ │ │ │ ├── 823.json │ │ │ │ ├── 825.json │ │ │ │ ├── 829.json │ │ │ │ ├── 833.json │ │ │ │ ├── 834.json │ │ │ │ ├── 838.json │ │ │ │ ├── 84.json │ │ │ │ ├── 844.json │ │ │ │ ├── 846.json │ │ │ │ ├── 849.json │ │ │ │ ├── 852.json │ │ │ │ ├── 853.json │ │ │ │ ├── 855.json │ │ │ │ ├── 857.json │ │ │ │ ├── 86.json │ │ │ │ ├── 860.json │ │ │ │ ├── 861.json │ │ │ │ ├── 862.json │ │ │ │ ├── 863.json │ │ │ │ ├── 865.json │ │ │ │ ├── 867.json │ │ │ │ ├── 870.json │ │ │ │ ├── 875.json │ │ │ │ ├── 876.json │ │ │ │ ├── 878.json │ │ │ │ ├── 880.json │ │ │ │ ├── 883.json │ │ │ │ ├── 884.json │ │ │ │ ├── 886.json │ │ │ │ ├── 889.json │ │ │ │ ├── 894.json │ │ │ │ ├── 898.json │ │ │ │ ├── 900.json │ │ │ │ ├── 901.json │ │ │ │ ├── 903.json │ │ │ │ ├── 904.json │ │ │ │ ├── 908.json │ │ │ │ ├── 909.json │ │ │ │ ├── 913.json │ │ │ │ ├── 916.json │ │ │ │ ├── 919.json │ │ │ │ ├── 922.json │ │ │ │ ├── 924.json │ │ │ │ ├── 93.json │ │ │ │ ├── 930.json │ │ │ │ ├── 933.json │ │ │ │ ├── 934.json │ │ │ │ ├── 935.json │ │ │ │ ├── 936.json │ │ │ │ ├── 938.json │ │ │ │ ├── 939.json │ │ │ │ ├── 940.json │ │ │ │ ├── 946.json │ │ │ │ ├── 95.json │ │ │ │ ├── 950.json │ │ │ │ ├── 951.json │ │ │ │ ├── 952.json │ │ │ │ ├── 956.json │ │ │ │ ├── 960.json │ │ │ │ ├── 962.json │ │ │ │ ├── 964.json │ │ │ │ ├── 965.json │ │ │ │ ├── 967.json │ │ │ │ ├── 969.json │ │ │ │ ├── 970.json │ │ │ │ ├── 972.json │ │ │ │ ├── 973.json │ │ │ │ ├── 974.json │ │ │ │ ├── 976.json │ │ │ │ ├── 977.json │ │ │ │ ├── 980.json │ │ │ │ ├── 987.json │ │ │ │ ├── 990.json │ │ │ │ ├── 991.json │ │ │ │ ├── 993.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ ├── 997.json │ │ │ │ └── 998.json │ │ │ ├── geometry │ │ │ │ ├── 0.json │ │ │ │ ├── 10.json │ │ │ │ ├── 100.json │ │ │ │ ├── 1002.json │ │ │ │ ├── 1003.json │ │ │ │ ├── 1004.json │ │ │ │ ├── 1005.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 1010.json │ │ │ │ ├── 1014.json │ │ │ │ ├── 1016.json │ │ │ │ ├── 1018.json │ │ │ │ ├── 102.json │ │ │ │ ├── 1026.json │ │ │ │ ├── 103.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 1038.json │ │ │ │ ├── 1043.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1046.json │ │ │ │ ├── 1047.json │ │ │ │ ├── 105.json │ │ │ │ ├── 1050.json │ │ │ │ ├── 1051.json │ │ │ │ ├── 1052.json │ │ │ │ ├── 1053.json │ │ │ │ ├── 1056.json │ │ │ │ ├── 106.json │ │ │ │ ├── 1060.json │ │ │ │ ├── 1062.json │ │ │ │ ├── 1064.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1067.json │ │ │ │ ├── 107.json │ │ │ │ ├── 1071.json │ │ │ │ ├── 1076.json │ │ │ │ ├── 1077.json │ │ │ │ ├── 1081.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 1083.json │ │ │ │ ├── 1084.json │ │ │ │ ├── 1087.json │ │ │ │ ├── 1088.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1096.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 110.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1107.json │ │ │ │ ├── 1108.json │ │ │ │ ├── 1112.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1117.json │ │ │ │ ├── 1118.json │ │ │ │ ├── 1119.json │ │ │ │ ├── 1120.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1126.json │ │ │ │ ├── 1129.json │ │ │ │ ├── 1133.json │ │ │ │ ├── 1134.json │ │ │ │ ├── 1138.json │ │ │ │ ├── 114.json │ │ │ │ ├── 1140.json │ │ │ │ ├── 1142.json │ │ │ │ ├── 1144.json │ │ │ │ ├── 115.json │ │ │ │ ├── 116.json │ │ │ │ ├── 118.json │ │ │ │ ├── 119.json │ │ │ │ ├── 12.json │ │ │ │ ├── 127.json │ │ │ │ ├── 13.json │ │ │ │ ├── 131.json │ │ │ │ ├── 134.json │ │ │ │ ├── 135.json │ │ │ │ ├── 137.json │ │ │ │ ├── 138.json │ │ │ │ ├── 139.json │ │ │ │ ├── 141.json │ │ │ │ ├── 143.json │ │ │ │ ├── 145.json │ │ │ │ ├── 15.json │ │ │ │ ├── 150.json │ │ │ │ ├── 151.json │ │ │ │ ├── 152.json │ │ │ │ ├── 154.json │ │ │ │ ├── 155.json │ │ │ │ ├── 160.json │ │ │ │ ├── 161.json │ │ │ │ ├── 162.json │ │ │ │ ├── 163.json │ │ │ │ ├── 164.json │ │ │ │ ├── 167.json │ │ │ │ ├── 169.json │ │ │ │ ├── 17.json │ │ │ │ ├── 171.json │ │ │ │ ├── 172.json │ │ │ │ ├── 174.json │ │ │ │ ├── 177.json │ │ │ │ ├── 178.json │ │ │ │ ├── 179.json │ │ │ │ ├── 183.json │ │ │ │ ├── 185.json │ │ │ │ ├── 186.json │ │ │ │ ├── 187.json │ │ │ │ ├── 188.json │ │ │ │ ├── 189.json │ │ │ │ ├── 190.json │ │ │ │ ├── 192.json │ │ │ │ ├── 194.json │ │ │ │ ├── 195.json │ │ │ │ ├── 196.json │ │ │ │ ├── 197.json │ │ │ │ ├── 199.json │ │ │ │ ├── 207.json │ │ │ │ ├── 208.json │ │ │ │ ├── 21.json │ │ │ │ ├── 210.json │ │ │ │ ├── 212.json │ │ │ │ ├── 217.json │ │ │ │ ├── 221.json │ │ │ │ ├── 223.json │ │ │ │ ├── 226.json │ │ │ │ ├── 229.json │ │ │ │ ├── 23.json │ │ │ │ ├── 23916.json │ │ │ │ ├── 24.json │ │ │ │ ├── 24076.json │ │ │ │ ├── 242.json │ │ │ │ ├── 243.json │ │ │ │ ├── 245.json │ │ │ │ ├── 24536.json │ │ │ │ ├── 24733.json │ │ │ │ ├── 248.json │ │ │ │ ├── 249.json │ │ │ │ ├── 25.json │ │ │ │ ├── 250.json │ │ │ │ ├── 253.json │ │ │ │ ├── 254.json │ │ │ │ ├── 256.json │ │ │ │ ├── 258.json │ │ │ │ ├── 260.json │ │ │ │ ├── 261.json │ │ │ │ ├── 265.json │ │ │ │ ├── 267.json │ │ │ │ ├── 268.json │ │ │ │ ├── 271.json │ │ │ │ ├── 273.json │ │ │ │ ├── 274.json │ │ │ │ ├── 279.json │ │ │ │ ├── 28.json │ │ │ │ ├── 282.json │ │ │ │ ├── 283.json │ │ │ │ ├── 29.json │ │ │ │ ├── 293.json │ │ │ │ ├── 296.json │ │ │ │ ├── 297.json │ │ │ │ ├── 300.json │ │ │ │ ├── 302.json │ │ │ │ ├── 307.json │ │ │ │ ├── 310.json │ │ │ │ ├── 316.json │ │ │ │ ├── 319.json │ │ │ │ ├── 320.json │ │ │ │ ├── 326.json │ │ │ │ ├── 331.json │ │ │ │ ├── 333.json │ │ │ │ ├── 334.json │ │ │ │ ├── 336.json │ │ │ │ ├── 338.json │ │ │ │ ├── 339.json │ │ │ │ ├── 341.json │ │ │ │ ├── 345.json │ │ │ │ ├── 346.json │ │ │ │ ├── 347.json │ │ │ │ ├── 353.json │ │ │ │ ├── 356.json │ │ │ │ ├── 357.json │ │ │ │ ├── 359.json │ │ │ │ ├── 360.json │ │ │ │ ├── 363.json │ │ │ │ ├── 364.json │ │ │ │ ├── 37.json │ │ │ │ ├── 370.json │ │ │ │ ├── 371.json │ │ │ │ ├── 373.json │ │ │ │ ├── 374.json │ │ │ │ ├── 375.json │ │ │ │ ├── 379.json │ │ │ │ ├── 380.json │ │ │ │ ├── 383.json │ │ │ │ ├── 386.json │ │ │ │ ├── 387.json │ │ │ │ ├── 389.json │ │ │ │ ├── 39.json │ │ │ │ ├── 391.json │ │ │ │ ├── 393.json │ │ │ │ ├── 396.json │ │ │ │ ├── 398.json │ │ │ │ ├── 40.json │ │ │ │ ├── 402.json │ │ │ │ ├── 404.json │ │ │ │ ├── 406.json │ │ │ │ ├── 41.json │ │ │ │ ├── 414.json │ │ │ │ ├── 415.json │ │ │ │ ├── 417.json │ │ │ │ ├── 418.json │ │ │ │ ├── 421.json │ │ │ │ ├── 43.json │ │ │ │ ├── 432.json │ │ │ │ ├── 433.json │ │ │ │ ├── 434.json │ │ │ │ ├── 435.json │ │ │ │ ├── 440.json │ │ │ │ ├── 443.json │ │ │ │ ├── 449.json │ │ │ │ ├── 451.json │ │ │ │ ├── 452.json │ │ │ │ ├── 453.json │ │ │ │ ├── 454.json │ │ │ │ ├── 455.json │ │ │ │ ├── 456.json │ │ │ │ ├── 458.json │ │ │ │ ├── 459.json │ │ │ │ ├── 460.json │ │ │ │ ├── 461.json │ │ │ │ ├── 462.json │ │ │ │ ├── 464.json │ │ │ │ ├── 465.json │ │ │ │ ├── 467.json │ │ │ │ ├── 468.json │ │ │ │ ├── 47.json │ │ │ │ ├── 473.json │ │ │ │ ├── 474.json │ │ │ │ ├── 475.json │ │ │ │ ├── 476.json │ │ │ │ ├── 477.json │ │ │ │ ├── 478.json │ │ │ │ ├── 48.json │ │ │ │ ├── 483.json │ │ │ │ ├── 484.json │ │ │ │ ├── 486.json │ │ │ │ ├── 488.json │ │ │ │ ├── 49.json │ │ │ │ ├── 492.json │ │ │ │ ├── 493.json │ │ │ │ ├── 499.json │ │ │ │ ├── 50.json │ │ │ │ ├── 500.json │ │ │ │ ├── 503.json │ │ │ │ ├── 504.json │ │ │ │ ├── 505.json │ │ │ │ ├── 507.json │ │ │ │ ├── 508.json │ │ │ │ ├── 509.json │ │ │ │ ├── 514.json │ │ │ │ ├── 515.json │ │ │ │ ├── 517.json │ │ │ │ ├── 519.json │ │ │ │ ├── 524.json │ │ │ │ ├── 526.json │ │ │ │ ├── 528.json │ │ │ │ ├── 530.json │ │ │ │ ├── 538.json │ │ │ │ ├── 539.json │ │ │ │ ├── 54.json │ │ │ │ ├── 547.json │ │ │ │ ├── 549.json │ │ │ │ ├── 551.json │ │ │ │ ├── 554.json │ │ │ │ ├── 556.json │ │ │ │ ├── 561.json │ │ │ │ ├── 562.json │ │ │ │ ├── 565.json │ │ │ │ ├── 566.json │ │ │ │ ├── 568.json │ │ │ │ ├── 57.json │ │ │ │ ├── 573.json │ │ │ │ ├── 574.json │ │ │ │ ├── 575.json │ │ │ │ ├── 577.json │ │ │ │ ├── 579.json │ │ │ │ ├── 581.json │ │ │ │ ├── 582.json │ │ │ │ ├── 584.json │ │ │ │ ├── 586.json │ │ │ │ ├── 588.json │ │ │ │ ├── 59.json │ │ │ │ ├── 594.json │ │ │ │ ├── 60.json │ │ │ │ ├── 600.json │ │ │ │ ├── 602.json │ │ │ │ ├── 603.json │ │ │ │ ├── 609.json │ │ │ │ ├── 615.json │ │ │ │ ├── 619.json │ │ │ │ ├── 621.json │ │ │ │ ├── 624.json │ │ │ │ ├── 627.json │ │ │ │ ├── 628.json │ │ │ │ ├── 629.json │ │ │ │ ├── 630.json │ │ │ │ ├── 633.json │ │ │ │ ├── 634.json │ │ │ │ ├── 635.json │ │ │ │ ├── 638.json │ │ │ │ ├── 639.json │ │ │ │ ├── 64.json │ │ │ │ ├── 640.json │ │ │ │ ├── 641.json │ │ │ │ ├── 642.json │ │ │ │ ├── 645.json │ │ │ │ ├── 65.json │ │ │ │ ├── 656.json │ │ │ │ ├── 658.json │ │ │ │ ├── 66.json │ │ │ │ ├── 661.json │ │ │ │ ├── 663.json │ │ │ │ ├── 665.json │ │ │ │ ├── 667.json │ │ │ │ ├── 668.json │ │ │ │ ├── 67.json │ │ │ │ ├── 670.json │ │ │ │ ├── 673.json │ │ │ │ ├── 677.json │ │ │ │ ├── 68.json │ │ │ │ ├── 685.json │ │ │ │ ├── 686.json │ │ │ │ ├── 69.json │ │ │ │ ├── 690.json │ │ │ │ ├── 693.json │ │ │ │ ├── 697.json │ │ │ │ ├── 702.json │ │ │ │ ├── 704.json │ │ │ │ ├── 706.json │ │ │ │ ├── 707.json │ │ │ │ ├── 710.json │ │ │ │ ├── 711.json │ │ │ │ ├── 712.json │ │ │ │ ├── 713.json │ │ │ │ ├── 719.json │ │ │ │ ├── 722.json │ │ │ │ ├── 73.json │ │ │ │ ├── 733.json │ │ │ │ ├── 734.json │ │ │ │ ├── 738.json │ │ │ │ ├── 740.json │ │ │ │ ├── 742.json │ │ │ │ ├── 743.json │ │ │ │ ├── 745.json │ │ │ │ ├── 746.json │ │ │ │ ├── 751.json │ │ │ │ ├── 756.json │ │ │ │ ├── 757.json │ │ │ │ ├── 76.json │ │ │ │ ├── 761.json │ │ │ │ ├── 763.json │ │ │ │ ├── 764.json │ │ │ │ ├── 766.json │ │ │ │ ├── 769.json │ │ │ │ ├── 771.json │ │ │ │ ├── 772.json │ │ │ │ ├── 773.json │ │ │ │ ├── 775.json │ │ │ │ ├── 777.json │ │ │ │ ├── 780.json │ │ │ │ ├── 781.json │ │ │ │ ├── 782.json │ │ │ │ ├── 787.json │ │ │ │ ├── 788.json │ │ │ │ ├── 790.json │ │ │ │ ├── 792.json │ │ │ │ ├── 795.json │ │ │ │ ├── 797.json │ │ │ │ ├── 8.json │ │ │ │ ├── 80.json │ │ │ │ ├── 800.json │ │ │ │ ├── 801.json │ │ │ │ ├── 802.json │ │ │ │ ├── 803.json │ │ │ │ ├── 808.json │ │ │ │ ├── 81.json │ │ │ │ ├── 812.json │ │ │ │ ├── 813.json │ │ │ │ ├── 817.json │ │ │ │ ├── 818.json │ │ │ │ ├── 819.json │ │ │ │ ├── 823.json │ │ │ │ ├── 826.json │ │ │ │ ├── 827.json │ │ │ │ ├── 83.json │ │ │ │ ├── 837.json │ │ │ │ ├── 84.json │ │ │ │ ├── 843.json │ │ │ │ ├── 846.json │ │ │ │ ├── 853.json │ │ │ │ ├── 855.json │ │ │ │ ├── 859.json │ │ │ │ ├── 862.json │ │ │ │ ├── 865.json │ │ │ │ ├── 866.json │ │ │ │ ├── 867.json │ │ │ │ ├── 869.json │ │ │ │ ├── 87.json │ │ │ │ ├── 871.json │ │ │ │ ├── 876.json │ │ │ │ ├── 877.json │ │ │ │ ├── 879.json │ │ │ │ ├── 88.json │ │ │ │ ├── 880.json │ │ │ │ ├── 882.json │ │ │ │ ├── 888.json │ │ │ │ ├── 890.json │ │ │ │ ├── 895.json │ │ │ │ ├── 898.json │ │ │ │ ├── 899.json │ │ │ │ ├── 90.json │ │ │ │ ├── 901.json │ │ │ │ ├── 902.json │ │ │ │ ├── 903.json │ │ │ │ ├── 905.json │ │ │ │ ├── 906.json │ │ │ │ ├── 91.json │ │ │ │ ├── 911.json │ │ │ │ ├── 912.json │ │ │ │ ├── 913.json │ │ │ │ ├── 916.json │ │ │ │ ├── 917.json │ │ │ │ ├── 92.json │ │ │ │ ├── 921.json │ │ │ │ ├── 922.json │ │ │ │ ├── 927.json │ │ │ │ ├── 928.json │ │ │ │ ├── 930.json │ │ │ │ ├── 931.json │ │ │ │ ├── 932.json │ │ │ │ ├── 933.json │ │ │ │ ├── 935.json │ │ │ │ ├── 936.json │ │ │ │ ├── 942.json │ │ │ │ ├── 943.json │ │ │ │ ├── 947.json │ │ │ │ ├── 949.json │ │ │ │ ├── 95.json │ │ │ │ ├── 952.json │ │ │ │ ├── 953.json │ │ │ │ ├── 956.json │ │ │ │ ├── 958.json │ │ │ │ ├── 96.json │ │ │ │ ├── 961.json │ │ │ │ ├── 965.json │ │ │ │ ├── 967.json │ │ │ │ ├── 969.json │ │ │ │ ├── 970.json │ │ │ │ ├── 971.json │ │ │ │ ├── 972.json │ │ │ │ ├── 974.json │ │ │ │ ├── 975.json │ │ │ │ ├── 979.json │ │ │ │ ├── 981.json │ │ │ │ ├── 982.json │ │ │ │ ├── 986.json │ │ │ │ ├── 99.json │ │ │ │ ├── 990.json │ │ │ │ ├── 992.json │ │ │ │ ├── 993.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ ├── 997.json │ │ │ │ ├── 998.json │ │ │ │ └── 999.json │ │ │ ├── intermediate_algebra │ │ │ │ ├── 0.json │ │ │ │ ├── 10.json │ │ │ │ ├── 100.json │ │ │ │ ├── 1000.json │ │ │ │ ├── 1003.json │ │ │ │ ├── 1007.json │ │ │ │ ├── 1008.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 101.json │ │ │ │ ├── 1011.json │ │ │ │ ├── 1014.json │ │ │ │ ├── 102.json │ │ │ │ ├── 1020.json │ │ │ │ ├── 1022.json │ │ │ │ ├── 1024.json │ │ │ │ ├── 1029.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1034.json │ │ │ │ ├── 1036.json │ │ │ │ ├── 104.json │ │ │ │ ├── 1040.json │ │ │ │ ├── 1042.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1047.json │ │ │ │ ├── 1048.json │ │ │ │ ├── 105.json │ │ │ │ ├── 1050.json │ │ │ │ ├── 1054.json │ │ │ │ ├── 1055.json │ │ │ │ ├── 1063.json │ │ │ │ ├── 1068.json │ │ │ │ ├── 1069.json │ │ │ │ ├── 1070.json │ │ │ │ ├── 1071.json │ │ │ │ ├── 1073.json │ │ │ │ ├── 1074.json │ │ │ │ ├── 1079.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1090.json │ │ │ │ ├── 1091.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1095.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1101.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1104.json │ │ │ │ ├── 1105.json │ │ │ │ ├── 1107.json │ │ │ │ ├── 1109.json │ │ │ │ ├── 1111.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1121.json │ │ │ │ ├── 1122.json │ │ │ │ ├── 1123.json │ │ │ │ ├── 1124.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1126.json │ │ │ │ ├── 1128.json │ │ │ │ ├── 1130.json │ │ │ │ ├── 1131.json │ │ │ │ ├── 1132.json │ │ │ │ ├── 1136.json │ │ │ │ ├── 1137.json │ │ │ │ ├── 114.json │ │ │ │ ├── 1145.json │ │ │ │ ├── 1146.json │ │ │ │ ├── 1148.json │ │ │ │ ├── 1151.json │ │ │ │ ├── 1153.json │ │ │ │ ├── 1155.json │ │ │ │ ├── 1157.json │ │ │ │ ├── 1166.json │ │ │ │ ├── 1168.json │ │ │ │ ├── 1169.json │ │ │ │ ├── 117.json │ │ │ │ ├── 1170.json │ │ │ │ ├── 1171.json │ │ │ │ ├── 1176.json │ │ │ │ ├── 1178.json │ │ │ │ ├── 1179.json │ │ │ │ ├── 1181.json │ │ │ │ ├── 1182.json │ │ │ │ ├── 1185.json │ │ │ │ ├── 1187.json │ │ │ │ ├── 1189.json │ │ │ │ ├── 1192.json │ │ │ │ ├── 1194.json │ │ │ │ ├── 1195.json │ │ │ │ ├── 1197.json │ │ │ │ ├── 1198.json │ │ │ │ ├── 1199.json │ │ │ │ ├── 1203.json │ │ │ │ ├── 1208.json │ │ │ │ ├── 121.json │ │ │ │ ├── 1210.json │ │ │ │ ├── 1217.json │ │ │ │ ├── 1218.json │ │ │ │ ├── 122.json │ │ │ │ ├── 1220.json │ │ │ │ ├── 1227.json │ │ │ │ ├── 123.json │ │ │ │ ├── 1230.json │ │ │ │ ├── 1231.json │ │ │ │ ├── 1232.json │ │ │ │ ├── 1238.json │ │ │ │ ├── 1239.json │ │ │ │ ├── 1240.json │ │ │ │ ├── 1241.json │ │ │ │ ├── 1243.json │ │ │ │ ├── 1245.json │ │ │ │ ├── 1247.json │ │ │ │ ├── 1252.json │ │ │ │ ├── 1253.json │ │ │ │ ├── 1256.json │ │ │ │ ├── 1260.json │ │ │ │ ├── 1269.json │ │ │ │ ├── 127.json │ │ │ │ ├── 1270.json │ │ │ │ ├── 1272.json │ │ │ │ ├── 1275.json │ │ │ │ ├── 1279.json │ │ │ │ ├── 128.json │ │ │ │ ├── 1282.json │ │ │ │ ├── 1283.json │ │ │ │ ├── 1284.json │ │ │ │ ├── 1288.json │ │ │ │ ├── 1289.json │ │ │ │ ├── 1290.json │ │ │ │ ├── 1291.json │ │ │ │ ├── 1295.json │ │ │ │ ├── 1297.json │ │ │ │ ├── 13.json │ │ │ │ ├── 1300.json │ │ │ │ ├── 1301.json │ │ │ │ ├── 1303.json │ │ │ │ ├── 1306.json │ │ │ │ ├── 131.json │ │ │ │ ├── 1312.json │ │ │ │ ├── 1318.json │ │ │ │ ├── 1321.json │ │ │ │ ├── 1323.json │ │ │ │ ├── 1326.json │ │ │ │ ├── 1328.json │ │ │ │ ├── 1332.json │ │ │ │ ├── 1335.json │ │ │ │ ├── 1339.json │ │ │ │ ├── 134.json │ │ │ │ ├── 1342.json │ │ │ │ ├── 1347.json │ │ │ │ ├── 1348.json │ │ │ │ ├── 135.json │ │ │ │ ├── 1350.json │ │ │ │ ├── 1352.json │ │ │ │ ├── 1353.json │ │ │ │ ├── 1354.json │ │ │ │ ├── 1355.json │ │ │ │ ├── 1356.json │ │ │ │ ├── 1360.json │ │ │ │ ├── 1363.json │ │ │ │ ├── 1364.json │ │ │ │ ├── 1365.json │ │ │ │ ├── 137.json │ │ │ │ ├── 1372.json │ │ │ │ ├── 1374.json │ │ │ │ ├── 1375.json │ │ │ │ ├── 1379.json │ │ │ │ ├── 1385.json │ │ │ │ ├── 1386.json │ │ │ │ ├── 1388.json │ │ │ │ ├── 1389.json │ │ │ │ ├── 139.json │ │ │ │ ├── 1390.json │ │ │ │ ├── 1391.json │ │ │ │ ├── 1392.json │ │ │ │ ├── 1397.json │ │ │ │ ├── 1399.json │ │ │ │ ├── 14.json │ │ │ │ ├── 1400.json │ │ │ │ ├── 1401.json │ │ │ │ ├── 1403.json │ │ │ │ ├── 1405.json │ │ │ │ ├── 1407.json │ │ │ │ ├── 1408.json │ │ │ │ ├── 141.json │ │ │ │ ├── 1410.json │ │ │ │ ├── 1411.json │ │ │ │ ├── 1416.json │ │ │ │ ├── 1417.json │ │ │ │ ├── 1419.json │ │ │ │ ├── 142.json │ │ │ │ ├── 1421.json │ │ │ │ ├── 1422.json │ │ │ │ ├── 1423.json │ │ │ │ ├── 143.json │ │ │ │ ├── 1430.json │ │ │ │ ├── 1433.json │ │ │ │ ├── 1436.json │ │ │ │ ├── 1437.json │ │ │ │ ├── 1438.json │ │ │ │ ├── 1440.json │ │ │ │ ├── 1442.json │ │ │ │ ├── 1445.json │ │ │ │ ├── 1446.json │ │ │ │ ├── 1447.json │ │ │ │ ├── 1448.json │ │ │ │ ├── 1449.json │ │ │ │ ├── 145.json │ │ │ │ ├── 1451.json │ │ │ │ ├── 1453.json │ │ │ │ ├── 1454.json │ │ │ │ ├── 1455.json │ │ │ │ ├── 1456.json │ │ │ │ ├── 1457.json │ │ │ │ ├── 1458.json │ │ │ │ ├── 1460.json │ │ │ │ ├── 1461.json │ │ │ │ ├── 1462.json │ │ │ │ ├── 1467.json │ │ │ │ ├── 147.json │ │ │ │ ├── 1470.json │ │ │ │ ├── 1474.json │ │ │ │ ├── 1475.json │ │ │ │ ├── 1477.json │ │ │ │ ├── 1479.json │ │ │ │ ├── 1480.json │ │ │ │ ├── 1484.json │ │ │ │ ├── 1485.json │ │ │ │ ├── 1487.json │ │ │ │ ├── 149.json │ │ │ │ ├── 1492.json │ │ │ │ ├── 1496.json │ │ │ │ ├── 1497.json │ │ │ │ ├── 1499.json │ │ │ │ ├── 15.json │ │ │ │ ├── 150.json │ │ │ │ ├── 1502.json │ │ │ │ ├── 1503.json │ │ │ │ ├── 1506.json │ │ │ │ ├── 1507.json │ │ │ │ ├── 1508.json │ │ │ │ ├── 151.json │ │ │ │ ├── 1510.json │ │ │ │ ├── 1511.json │ │ │ │ ├── 1512.json │ │ │ │ ├── 1517.json │ │ │ │ ├── 1519.json │ │ │ │ ├── 1520.json │ │ │ │ ├── 1522.json │ │ │ │ ├── 1523.json │ │ │ │ ├── 1524.json │ │ │ │ ├── 1526.json │ │ │ │ ├── 154.json │ │ │ │ ├── 1542.json │ │ │ │ ├── 1543.json │ │ │ │ ├── 1544.json │ │ │ │ ├── 1548.json │ │ │ │ ├── 155.json │ │ │ │ ├── 1550.json │ │ │ │ ├── 1551.json │ │ │ │ ├── 1552.json │ │ │ │ ├── 1553.json │ │ │ │ ├── 1555.json │ │ │ │ ├── 1558.json │ │ │ │ ├── 1560.json │ │ │ │ ├── 1561.json │ │ │ │ ├── 1562.json │ │ │ │ ├── 1566.json │ │ │ │ ├── 157.json │ │ │ │ ├── 1570.json │ │ │ │ ├── 1571.json │ │ │ │ ├── 1572.json │ │ │ │ ├── 1576.json │ │ │ │ ├── 1577.json │ │ │ │ ├── 158.json │ │ │ │ ├── 1580.json │ │ │ │ ├── 1582.json │ │ │ │ ├── 1586.json │ │ │ │ ├── 1587.json │ │ │ │ ├── 1588.json │ │ │ │ ├── 1591.json │ │ │ │ ├── 1592.json │ │ │ │ ├── 1593.json │ │ │ │ ├── 1597.json │ │ │ │ ├── 1598.json │ │ │ │ ├── 16.json │ │ │ │ ├── 160.json │ │ │ │ ├── 1600.json │ │ │ │ ├── 1602.json │ │ │ │ ├── 1606.json │ │ │ │ ├── 1607.json │ │ │ │ ├── 1608.json │ │ │ │ ├── 161.json │ │ │ │ ├── 1612.json │ │ │ │ ├── 1615.json │ │ │ │ ├── 1616.json │ │ │ │ ├── 1617.json │ │ │ │ ├── 162.json │ │ │ │ ├── 1620.json │ │ │ │ ├── 1622.json │ │ │ │ ├── 1625.json │ │ │ │ ├── 1626.json │ │ │ │ ├── 1628.json │ │ │ │ ├── 163.json │ │ │ │ ├── 1631.json │ │ │ │ ├── 1634.json │ │ │ │ ├── 1638.json │ │ │ │ ├── 1640.json │ │ │ │ ├── 1642.json │ │ │ │ ├── 1645.json │ │ │ │ ├── 1646.json │ │ │ │ ├── 165.json │ │ │ │ ├── 1650.json │ │ │ │ ├── 1651.json │ │ │ │ ├── 1656.json │ │ │ │ ├── 1657.json │ │ │ │ ├── 1663.json │ │ │ │ ├── 1665.json │ │ │ │ ├── 1669.json │ │ │ │ ├── 167.json │ │ │ │ ├── 1678.json │ │ │ │ ├── 1679.json │ │ │ │ ├── 1680.json │ │ │ │ ├── 169.json │ │ │ │ ├── 1697.json │ │ │ │ ├── 17.json │ │ │ │ ├── 1702.json │ │ │ │ ├── 1703.json │ │ │ │ ├── 1705.json │ │ │ │ ├── 1706.json │ │ │ │ ├── 1707.json │ │ │ │ ├── 1714.json │ │ │ │ ├── 1715.json │ │ │ │ ├── 1716.json │ │ │ │ ├── 1717.json │ │ │ │ ├── 1723.json │ │ │ │ ├── 1727.json │ │ │ │ ├── 1729.json │ │ │ │ ├── 1730.json │ │ │ │ ├── 1732.json │ │ │ │ ├── 1734.json │ │ │ │ ├── 1737.json │ │ │ │ ├── 1739.json │ │ │ │ ├── 174.json │ │ │ │ ├── 1741.json │ │ │ │ ├── 1743.json │ │ │ │ ├── 1746.json │ │ │ │ ├── 1747.json │ │ │ │ ├── 1748.json │ │ │ │ ├── 1749.json │ │ │ │ ├── 1750.json │ │ │ │ ├── 1755.json │ │ │ │ ├── 1757.json │ │ │ │ ├── 1758.json │ │ │ │ ├── 1761.json │ │ │ │ ├── 1762.json │ │ │ │ ├── 1764.json │ │ │ │ ├── 1770.json │ │ │ │ ├── 1772.json │ │ │ │ ├── 1773.json │ │ │ │ ├── 1775.json │ │ │ │ ├── 1776.json │ │ │ │ ├── 1778.json │ │ │ │ ├── 1779.json │ │ │ │ ├── 1781.json │ │ │ │ ├── 1782.json │ │ │ │ ├── 1784.json │ │ │ │ ├── 1786.json │ │ │ │ ├── 1788.json │ │ │ │ ├── 1790.json │ │ │ │ ├── 1791.json │ │ │ │ ├── 1792.json │ │ │ │ ├── 1793.json │ │ │ │ ├── 1797.json │ │ │ │ ├── 1799.json │ │ │ │ ├── 180.json │ │ │ │ ├── 1800.json │ │ │ │ ├── 1801.json │ │ │ │ ├── 1803.json │ │ │ │ ├── 1805.json │ │ │ │ ├── 1806.json │ │ │ │ ├── 1807.json │ │ │ │ ├── 1808.json │ │ │ │ ├── 181.json │ │ │ │ ├── 1811.json │ │ │ │ ├── 1812.json │ │ │ │ ├── 1813.json │ │ │ │ ├── 1814.json │ │ │ │ ├── 182.json │ │ │ │ ├── 1820.json │ │ │ │ ├── 1823.json │ │ │ │ ├── 1824.json │ │ │ │ ├── 1827.json │ │ │ │ ├── 1829.json │ │ │ │ ├── 183.json │ │ │ │ ├── 1834.json │ │ │ │ ├── 1836.json │ │ │ │ ├── 1837.json │ │ │ │ ├── 1838.json │ │ │ │ ├── 1839.json │ │ │ │ ├── 1840.json │ │ │ │ ├── 1842.json │ │ │ │ ├── 1845.json │ │ │ │ ├── 1846.json │ │ │ │ ├── 1849.json │ │ │ │ ├── 1850.json │ │ │ │ ├── 1854.json │ │ │ │ ├── 1855.json │ │ │ │ ├── 1856.json │ │ │ │ ├── 1857.json │ │ │ │ ├── 1859.json │ │ │ │ ├── 186.json │ │ │ │ ├── 1865.json │ │ │ │ ├── 187.json │ │ │ │ ├── 1870.json │ │ │ │ ├── 1873.json │ │ │ │ ├── 1874.json │ │ │ │ ├── 1876.json │ │ │ │ ├── 1877.json │ │ │ │ ├── 1880.json │ │ │ │ ├── 1885.json │ │ │ │ ├── 1886.json │ │ │ │ ├── 1890.json │ │ │ │ ├── 1891.json │ │ │ │ ├── 1893.json │ │ │ │ ├── 1895.json │ │ │ │ ├── 1897.json │ │ │ │ ├── 1898.json │ │ │ │ ├── 1899.json │ │ │ │ ├── 190.json │ │ │ │ ├── 1900.json │ │ │ │ ├── 1902.json │ │ │ │ ├── 1907.json │ │ │ │ ├── 1909.json │ │ │ │ ├── 1924.json │ │ │ │ ├── 1928.json │ │ │ │ ├── 193.json │ │ │ │ ├── 1930.json │ │ │ │ ├── 1932.json │ │ │ │ ├── 1934.json │ │ │ │ ├── 1937.json │ │ │ │ ├── 194.json │ │ │ │ ├── 1940.json │ │ │ │ ├── 1945.json │ │ │ │ ├── 1948.json │ │ │ │ ├── 1950.json │ │ │ │ ├── 1951.json │ │ │ │ ├── 1952.json │ │ │ │ ├── 1956.json │ │ │ │ ├── 1959.json │ │ │ │ ├── 196.json │ │ │ │ ├── 1961.json │ │ │ │ ├── 1965.json │ │ │ │ ├── 1967.json │ │ │ │ ├── 1969.json │ │ │ │ ├── 1973.json │ │ │ │ ├── 1974.json │ │ │ │ ├── 1975.json │ │ │ │ ├── 1977.json │ │ │ │ ├── 1980.json │ │ │ │ ├── 1981.json │ │ │ │ ├── 1982.json │ │ │ │ ├── 1985.json │ │ │ │ ├── 1986.json │ │ │ │ ├── 1987.json │ │ │ │ ├── 199.json │ │ │ │ ├── 1990.json │ │ │ │ ├── 1992.json │ │ │ │ ├── 1993.json │ │ │ │ ├── 1994.json │ │ │ │ ├── 1995.json │ │ │ │ ├── 1998.json │ │ │ │ ├── 1999.json │ │ │ │ ├── 2.json │ │ │ │ ├── 2002.json │ │ │ │ ├── 2003.json │ │ │ │ ├── 2007.json │ │ │ │ ├── 2010.json │ │ │ │ ├── 2011.json │ │ │ │ ├── 2013.json │ │ │ │ ├── 2015.json │ │ │ │ ├── 2017.json │ │ │ │ ├── 2018.json │ │ │ │ ├── 2019.json │ │ │ │ ├── 2020.json │ │ │ │ ├── 2021.json │ │ │ │ ├── 2022.json │ │ │ │ ├── 2024.json │ │ │ │ ├── 2027.json │ │ │ │ ├── 2029.json │ │ │ │ ├── 2030.json │ │ │ │ ├── 2035.json │ │ │ │ ├── 2037.json │ │ │ │ ├── 2039.json │ │ │ │ ├── 2040.json │ │ │ │ ├── 2046.json │ │ │ │ ├── 2047.json │ │ │ │ ├── 2048.json │ │ │ │ ├── 2058.json │ │ │ │ ├── 2059.json │ │ │ │ ├── 206.json │ │ │ │ ├── 2064.json │ │ │ │ ├── 2065.json │ │ │ │ ├── 2066.json │ │ │ │ ├── 2068.json │ │ │ │ ├── 207.json │ │ │ │ ├── 2070.json │ │ │ │ ├── 2073.json │ │ │ │ ├── 2074.json │ │ │ │ ├── 2078.json │ │ │ │ ├── 208.json │ │ │ │ ├── 2081.json │ │ │ │ ├── 2082.json │ │ │ │ ├── 2084.json │ │ │ │ ├── 2089.json │ │ │ │ ├── 2093.json │ │ │ │ ├── 2094.json │ │ │ │ ├── 2095.json │ │ │ │ ├── 2096.json │ │ │ │ ├── 2097.json │ │ │ │ ├── 2098.json │ │ │ │ ├── 2103.json │ │ │ │ ├── 2109.json │ │ │ │ ├── 2111.json │ │ │ │ ├── 2113.json │ │ │ │ ├── 2114.json │ │ │ │ ├── 2115.json │ │ │ │ ├── 2116.json │ │ │ │ ├── 2121.json │ │ │ │ ├── 2123.json │ │ │ │ ├── 2124.json │ │ │ │ ├── 2126.json │ │ │ │ ├── 2130.json │ │ │ │ ├── 2131.json │ │ │ │ ├── 2132.json │ │ │ │ ├── 2139.json │ │ │ │ ├── 2141.json │ │ │ │ ├── 2142.json │ │ │ │ ├── 2144.json │ │ │ │ ├── 2146.json │ │ │ │ ├── 2152.json │ │ │ │ ├── 2153.json │ │ │ │ ├── 2157.json │ │ │ │ ├── 2158.json │ │ │ │ ├── 2160.json │ │ │ │ ├── 2164.json │ │ │ │ ├── 2166.json │ │ │ │ ├── 2167.json │ │ │ │ ├── 2169.json │ │ │ │ ├── 2171.json │ │ │ │ ├── 2172.json │ │ │ │ ├── 218.json │ │ │ │ ├── 2187.json │ │ │ │ ├── 2188.json │ │ │ │ ├── 2189.json │ │ │ │ ├── 2191.json │ │ │ │ ├── 2192.json │ │ │ │ ├── 2193.json │ │ │ │ ├── 2196.json │ │ │ │ ├── 22.json │ │ │ │ ├── 222.json │ │ │ │ ├── 225.json │ │ │ │ ├── 226.json │ │ │ │ ├── 227.json │ │ │ │ ├── 23.json │ │ │ │ ├── 232.json │ │ │ │ ├── 237.json │ │ │ │ ├── 24.json │ │ │ │ ├── 240.json │ │ │ │ ├── 242.json │ │ │ │ ├── 24256.json │ │ │ │ ├── 243.json │ │ │ │ ├── 244.json │ │ │ │ ├── 246.json │ │ │ │ ├── 25.json │ │ │ │ ├── 251.json │ │ │ │ ├── 253.json │ │ │ │ ├── 254.json │ │ │ │ ├── 255.json │ │ │ │ ├── 259.json │ │ │ │ ├── 260.json │ │ │ │ ├── 261.json │ │ │ │ ├── 262.json │ │ │ │ ├── 265.json │ │ │ │ ├── 27.json │ │ │ │ ├── 272.json │ │ │ │ ├── 273.json │ │ │ │ ├── 275.json │ │ │ │ ├── 278.json │ │ │ │ ├── 279.json │ │ │ │ ├── 288.json │ │ │ │ ├── 289.json │ │ │ │ ├── 295.json │ │ │ │ ├── 3.json │ │ │ │ ├── 30.json │ │ │ │ ├── 300.json │ │ │ │ ├── 302.json │ │ │ │ ├── 304.json │ │ │ │ ├── 305.json │ │ │ │ ├── 313.json │ │ │ │ ├── 317.json │ │ │ │ ├── 321.json │ │ │ │ ├── 322.json │ │ │ │ ├── 325.json │ │ │ │ ├── 326.json │ │ │ │ ├── 327.json │ │ │ │ ├── 330.json │ │ │ │ ├── 331.json │ │ │ │ ├── 334.json │ │ │ │ ├── 336.json │ │ │ │ ├── 337.json │ │ │ │ ├── 340.json │ │ │ │ ├── 341.json │ │ │ │ ├── 342.json │ │ │ │ ├── 343.json │ │ │ │ ├── 344.json │ │ │ │ ├── 345.json │ │ │ │ ├── 347.json │ │ │ │ ├── 348.json │ │ │ │ ├── 35.json │ │ │ │ ├── 352.json │ │ │ │ ├── 354.json │ │ │ │ ├── 355.json │ │ │ │ ├── 356.json │ │ │ │ ├── 359.json │ │ │ │ ├── 362.json │ │ │ │ ├── 363.json │ │ │ │ ├── 364.json │ │ │ │ ├── 365.json │ │ │ │ ├── 366.json │ │ │ │ ├── 368.json │ │ │ │ ├── 37.json │ │ │ │ ├── 374.json │ │ │ │ ├── 376.json │ │ │ │ ├── 377.json │ │ │ │ ├── 378.json │ │ │ │ ├── 379.json │ │ │ │ ├── 38.json │ │ │ │ ├── 385.json │ │ │ │ ├── 386.json │ │ │ │ ├── 388.json │ │ │ │ ├── 39.json │ │ │ │ ├── 392.json │ │ │ │ ├── 398.json │ │ │ │ ├── 4.json │ │ │ │ ├── 40.json │ │ │ │ ├── 401.json │ │ │ │ ├── 404.json │ │ │ │ ├── 405.json │ │ │ │ ├── 406.json │ │ │ │ ├── 41.json │ │ │ │ ├── 412.json │ │ │ │ ├── 416.json │ │ │ │ ├── 42.json │ │ │ │ ├── 420.json │ │ │ │ ├── 421.json │ │ │ │ ├── 422.json │ │ │ │ ├── 428.json │ │ │ │ ├── 429.json │ │ │ │ ├── 430.json │ │ │ │ ├── 431.json │ │ │ │ ├── 437.json │ │ │ │ ├── 44.json │ │ │ │ ├── 441.json │ │ │ │ ├── 442.json │ │ │ │ ├── 444.json │ │ │ │ ├── 446.json │ │ │ │ ├── 459.json │ │ │ │ ├── 461.json │ │ │ │ ├── 463.json │ │ │ │ ├── 465.json │ │ │ │ ├── 466.json │ │ │ │ ├── 467.json │ │ │ │ ├── 468.json │ │ │ │ ├── 47.json │ │ │ │ ├── 470.json │ │ │ │ ├── 472.json │ │ │ │ ├── 478.json │ │ │ │ ├── 48.json │ │ │ │ ├── 487.json │ │ │ │ ├── 488.json │ │ │ │ ├── 489.json │ │ │ │ ├── 492.json │ │ │ │ ├── 493.json │ │ │ │ ├── 494.json │ │ │ │ ├── 495.json │ │ │ │ ├── 496.json │ │ │ │ ├── 497.json │ │ │ │ ├── 498.json │ │ │ │ ├── 5.json │ │ │ │ ├── 50.json │ │ │ │ ├── 500.json │ │ │ │ ├── 507.json │ │ │ │ ├── 508.json │ │ │ │ ├── 509.json │ │ │ │ ├── 51.json │ │ │ │ ├── 515.json │ │ │ │ ├── 519.json │ │ │ │ ├── 520.json │ │ │ │ ├── 522.json │ │ │ │ ├── 526.json │ │ │ │ ├── 527.json │ │ │ │ ├── 533.json │ │ │ │ ├── 535.json │ │ │ │ ├── 536.json │ │ │ │ ├── 547.json │ │ │ │ ├── 55.json │ │ │ │ ├── 551.json │ │ │ │ ├── 555.json │ │ │ │ ├── 558.json │ │ │ │ ├── 56.json │ │ │ │ ├── 562.json │ │ │ │ ├── 568.json │ │ │ │ ├── 570.json │ │ │ │ ├── 572.json │ │ │ │ ├── 575.json │ │ │ │ ├── 577.json │ │ │ │ ├── 578.json │ │ │ │ ├── 58.json │ │ │ │ ├── 580.json │ │ │ │ ├── 581.json │ │ │ │ ├── 582.json │ │ │ │ ├── 586.json │ │ │ │ ├── 588.json │ │ │ │ ├── 589.json │ │ │ │ ├── 590.json │ │ │ │ ├── 591.json │ │ │ │ ├── 593.json │ │ │ │ ├── 598.json │ │ │ │ ├── 6.json │ │ │ │ ├── 60.json │ │ │ │ ├── 601.json │ │ │ │ ├── 604.json │ │ │ │ ├── 605.json │ │ │ │ ├── 607.json │ │ │ │ ├── 609.json │ │ │ │ ├── 61.json │ │ │ │ ├── 611.json │ │ │ │ ├── 612.json │ │ │ │ ├── 613.json │ │ │ │ ├── 614.json │ │ │ │ ├── 623.json │ │ │ │ ├── 628.json │ │ │ │ ├── 632.json │ │ │ │ ├── 636.json │ │ │ │ ├── 637.json │ │ │ │ ├── 64.json │ │ │ │ ├── 641.json │ │ │ │ ├── 643.json │ │ │ │ ├── 644.json │ │ │ │ ├── 645.json │ │ │ │ ├── 648.json │ │ │ │ ├── 657.json │ │ │ │ ├── 66.json │ │ │ │ ├── 662.json │ │ │ │ ├── 664.json │ │ │ │ ├── 666.json │ │ │ │ ├── 668.json │ │ │ │ ├── 673.json │ │ │ │ ├── 677.json │ │ │ │ ├── 68.json │ │ │ │ ├── 682.json │ │ │ │ ├── 685.json │ │ │ │ ├── 686.json │ │ │ │ ├── 687.json │ │ │ │ ├── 690.json │ │ │ │ ├── 692.json │ │ │ │ ├── 693.json │ │ │ │ ├── 694.json │ │ │ │ ├── 7.json │ │ │ │ ├── 702.json │ │ │ │ ├── 703.json │ │ │ │ ├── 706.json │ │ │ │ ├── 708.json │ │ │ │ ├── 709.json │ │ │ │ ├── 712.json │ │ │ │ ├── 713.json │ │ │ │ ├── 714.json │ │ │ │ ├── 715.json │ │ │ │ ├── 716.json │ │ │ │ ├── 718.json │ │ │ │ ├── 722.json │ │ │ │ ├── 723.json │ │ │ │ ├── 725.json │ │ │ │ ├── 728.json │ │ │ │ ├── 729.json │ │ │ │ ├── 734.json │ │ │ │ ├── 735.json │ │ │ │ ├── 736.json │ │ │ │ ├── 738.json │ │ │ │ ├── 739.json │ │ │ │ ├── 74.json │ │ │ │ ├── 741.json │ │ │ │ ├── 745.json │ │ │ │ ├── 747.json │ │ │ │ ├── 752.json │ │ │ │ ├── 754.json │ │ │ │ ├── 757.json │ │ │ │ ├── 76.json │ │ │ │ ├── 763.json │ │ │ │ ├── 766.json │ │ │ │ ├── 771.json │ │ │ │ ├── 773.json │ │ │ │ ├── 774.json │ │ │ │ ├── 776.json │ │ │ │ ├── 779.json │ │ │ │ ├── 78.json │ │ │ │ ├── 786.json │ │ │ │ ├── 790.json │ │ │ │ ├── 793.json │ │ │ │ ├── 795.json │ │ │ │ ├── 8.json │ │ │ │ ├── 80.json │ │ │ │ ├── 800.json │ │ │ │ ├── 803.json │ │ │ │ ├── 807.json │ │ │ │ ├── 808.json │ │ │ │ ├── 812.json │ │ │ │ ├── 817.json │ │ │ │ ├── 82.json │ │ │ │ ├── 822.json │ │ │ │ ├── 827.json │ │ │ │ ├── 828.json │ │ │ │ ├── 829.json │ │ │ │ ├── 834.json │ │ │ │ ├── 835.json │ │ │ │ ├── 836.json │ │ │ │ ├── 838.json │ │ │ │ ├── 840.json │ │ │ │ ├── 841.json │ │ │ │ ├── 847.json │ │ │ │ ├── 85.json │ │ │ │ ├── 851.json │ │ │ │ ├── 858.json │ │ │ │ ├── 859.json │ │ │ │ ├── 860.json │ │ │ │ ├── 861.json │ │ │ │ ├── 863.json │ │ │ │ ├── 864.json │ │ │ │ ├── 867.json │ │ │ │ ├── 869.json │ │ │ │ ├── 871.json │ │ │ │ ├── 872.json │ │ │ │ ├── 875.json │ │ │ │ ├── 878.json │ │ │ │ ├── 884.json │ │ │ │ ├── 885.json │ │ │ │ ├── 889.json │ │ │ │ ├── 891.json │ │ │ │ ├── 894.json │ │ │ │ ├── 897.json │ │ │ │ ├── 898.json │ │ │ │ ├── 90.json │ │ │ │ ├── 904.json │ │ │ │ ├── 906.json │ │ │ │ ├── 907.json │ │ │ │ ├── 908.json │ │ │ │ ├── 910.json │ │ │ │ ├── 911.json │ │ │ │ ├── 913.json │ │ │ │ ├── 915.json │ │ │ │ ├── 916.json │ │ │ │ ├── 922.json │ │ │ │ ├── 924.json │ │ │ │ ├── 928.json │ │ │ │ ├── 93.json │ │ │ │ ├── 930.json │ │ │ │ ├── 933.json │ │ │ │ ├── 934.json │ │ │ │ ├── 935.json │ │ │ │ ├── 936.json │ │ │ │ ├── 941.json │ │ │ │ ├── 945.json │ │ │ │ ├── 946.json │ │ │ │ ├── 95.json │ │ │ │ ├── 951.json │ │ │ │ ├── 955.json │ │ │ │ ├── 956.json │ │ │ │ ├── 960.json │ │ │ │ ├── 962.json │ │ │ │ ├── 964.json │ │ │ │ ├── 965.json │ │ │ │ ├── 966.json │ │ │ │ ├── 967.json │ │ │ │ ├── 968.json │ │ │ │ ├── 969.json │ │ │ │ ├── 970.json │ │ │ │ ├── 971.json │ │ │ │ ├── 972.json │ │ │ │ ├── 976.json │ │ │ │ ├── 977.json │ │ │ │ ├── 983.json │ │ │ │ ├── 984.json │ │ │ │ ├── 986.json │ │ │ │ ├── 987.json │ │ │ │ ├── 991.json │ │ │ │ ├── 992.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ ├── 998.json │ │ │ │ └── 999.json │ │ │ ├── number_theory │ │ │ │ ├── 0.json │ │ │ │ ├── 1.json │ │ │ │ ├── 100.json │ │ │ │ ├── 1000.json │ │ │ │ ├── 1002.json │ │ │ │ ├── 1004.json │ │ │ │ ├── 1005.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 101.json │ │ │ │ ├── 1018.json │ │ │ │ ├── 1019.json │ │ │ │ ├── 102.json │ │ │ │ ├── 1022.json │ │ │ │ ├── 1024.json │ │ │ │ ├── 103.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 1036.json │ │ │ │ ├── 1038.json │ │ │ │ ├── 1043.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1046.json │ │ │ │ ├── 1052.json │ │ │ │ ├── 1055.json │ │ │ │ ├── 1056.json │ │ │ │ ├── 1060.json │ │ │ │ ├── 1061.json │ │ │ │ ├── 1064.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1067.json │ │ │ │ ├── 1072.json │ │ │ │ ├── 1077.json │ │ │ │ ├── 1081.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 1084.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1090.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1096.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 110.json │ │ │ │ ├── 1101.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1104.json │ │ │ │ ├── 1105.json │ │ │ │ ├── 1109.json │ │ │ │ ├── 1111.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1117.json │ │ │ │ ├── 1118.json │ │ │ │ ├── 1119.json │ │ │ │ ├── 1120.json │ │ │ │ ├── 1121.json │ │ │ │ ├── 1122.json │ │ │ │ ├── 1123.json │ │ │ │ ├── 1124.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1128.json │ │ │ │ ├── 1129.json │ │ │ │ ├── 1133.json │ │ │ │ ├── 1134.json │ │ │ │ ├── 1136.json │ │ │ │ ├── 114.json │ │ │ │ ├── 1140.json │ │ │ │ ├── 1142.json │ │ │ │ ├── 1144.json │ │ │ │ ├── 1145.json │ │ │ │ ├── 1146.json │ │ │ │ ├── 1147.json │ │ │ │ ├── 1155.json │ │ │ │ ├── 1158.json │ │ │ │ ├── 1160.json │ │ │ │ ├── 1161.json │ │ │ │ ├── 1162.json │ │ │ │ ├── 1165.json │ │ │ │ ├── 1168.json │ │ │ │ ├── 117.json │ │ │ │ ├── 1171.json │ │ │ │ ├── 1172.json │ │ │ │ ├── 1174.json │ │ │ │ ├── 1175.json │ │ │ │ ├── 1176.json │ │ │ │ ├── 1178.json │ │ │ │ ├── 1179.json │ │ │ │ ├── 1181.json │ │ │ │ ├── 1183.json │ │ │ │ ├── 1185.json │ │ │ │ ├── 1186.json │ │ │ │ ├── 1191.json │ │ │ │ ├── 1193.json │ │ │ │ ├── 1194.json │ │ │ │ ├── 1199.json │ │ │ │ ├── 12.json │ │ │ │ ├── 1201.json │ │ │ │ ├── 1202.json │ │ │ │ ├── 1203.json │ │ │ │ ├── 1207.json │ │ │ │ ├── 1208.json │ │ │ │ ├── 1215.json │ │ │ │ ├── 1217.json │ │ │ │ ├── 1218.json │ │ │ │ ├── 122.json │ │ │ │ ├── 1222.json │ │ │ │ ├── 1226.json │ │ │ │ ├── 1227.json │ │ │ │ ├── 1229.json │ │ │ │ ├── 1231.json │ │ │ │ ├── 1233.json │ │ │ │ ├── 1238.json │ │ │ │ ├── 1239.json │ │ │ │ ├── 1240.json │ │ │ │ ├── 1241.json │ │ │ │ ├── 1243.json │ │ │ │ ├── 1248.json │ │ │ │ ├── 1252.json │ │ │ │ ├── 1254.json │ │ │ │ ├── 1256.json │ │ │ │ ├── 1257.json │ │ │ │ ├── 126.json │ │ │ │ ├── 1260.json │ │ │ │ ├── 1261.json │ │ │ │ ├── 127.json │ │ │ │ ├── 1273.json │ │ │ │ ├── 1274.json │ │ │ │ ├── 1275.json │ │ │ │ ├── 1276.json │ │ │ │ ├── 1278.json │ │ │ │ ├── 1279.json │ │ │ │ ├── 128.json │ │ │ │ ├── 1281.json │ │ │ │ ├── 1282.json │ │ │ │ ├── 1283.json │ │ │ │ ├── 1284.json │ │ │ │ ├── 1287.json │ │ │ │ ├── 1288.json │ │ │ │ ├── 1289.json │ │ │ │ ├── 1291.json │ │ │ │ ├── 1292.json │ │ │ │ ├── 13.json │ │ │ │ ├── 132.json │ │ │ │ ├── 133.json │ │ │ │ ├── 135.json │ │ │ │ ├── 136.json │ │ │ │ ├── 137.json │ │ │ │ ├── 138.json │ │ │ │ ├── 139.json │ │ │ │ ├── 14.json │ │ │ │ ├── 148.json │ │ │ │ ├── 149.json │ │ │ │ ├── 150.json │ │ │ │ ├── 154.json │ │ │ │ ├── 155.json │ │ │ │ ├── 156.json │ │ │ │ ├── 159.json │ │ │ │ ├── 161.json │ │ │ │ ├── 162.json │ │ │ │ ├── 168.json │ │ │ │ ├── 169.json │ │ │ │ ├── 170.json │ │ │ │ ├── 173.json │ │ │ │ ├── 175.json │ │ │ │ ├── 182.json │ │ │ │ ├── 183.json │ │ │ │ ├── 185.json │ │ │ │ ├── 186.json │ │ │ │ ├── 187.json │ │ │ │ ├── 188.json │ │ │ │ ├── 198.json │ │ │ │ ├── 2.json │ │ │ │ ├── 20.json │ │ │ │ ├── 200.json │ │ │ │ ├── 202.json │ │ │ │ ├── 203.json │ │ │ │ ├── 207.json │ │ │ │ ├── 209.json │ │ │ │ ├── 211.json │ │ │ │ ├── 212.json │ │ │ │ ├── 219.json │ │ │ │ ├── 22.json │ │ │ │ ├── 221.json │ │ │ │ ├── 222.json │ │ │ │ ├── 224.json │ │ │ │ ├── 226.json │ │ │ │ ├── 227.json │ │ │ │ ├── 229.json │ │ │ │ ├── 23.json │ │ │ │ ├── 232.json │ │ │ │ ├── 233.json │ │ │ │ ├── 234.json │ │ │ │ ├── 235.json │ │ │ │ ├── 236.json │ │ │ │ ├── 237.json │ │ │ │ ├── 239.json │ │ │ │ ├── 24.json │ │ │ │ ├── 244.json │ │ │ │ ├── 247.json │ │ │ │ ├── 252.json │ │ │ │ ├── 254.json │ │ │ │ ├── 255.json │ │ │ │ ├── 257.json │ │ │ │ ├── 261.json │ │ │ │ ├── 266.json │ │ │ │ ├── 269.json │ │ │ │ ├── 271.json │ │ │ │ ├── 274.json │ │ │ │ ├── 277.json │ │ │ │ ├── 280.json │ │ │ │ ├── 283.json │ │ │ │ ├── 284.json │ │ │ │ ├── 287.json │ │ │ │ ├── 288.json │ │ │ │ ├── 29.json │ │ │ │ ├── 291.json │ │ │ │ ├── 293.json │ │ │ │ ├── 296.json │ │ │ │ ├── 299.json │ │ │ │ ├── 3.json │ │ │ │ ├── 30.json │ │ │ │ ├── 301.json │ │ │ │ ├── 303.json │ │ │ │ ├── 311.json │ │ │ │ ├── 314.json │ │ │ │ ├── 317.json │ │ │ │ ├── 318.json │ │ │ │ ├── 32.json │ │ │ │ ├── 320.json │ │ │ │ ├── 321.json │ │ │ │ ├── 324.json │ │ │ │ ├── 326.json │ │ │ │ ├── 327.json │ │ │ │ ├── 328.json │ │ │ │ ├── 329.json │ │ │ │ ├── 33.json │ │ │ │ ├── 333.json │ │ │ │ ├── 335.json │ │ │ │ ├── 338.json │ │ │ │ ├── 34.json │ │ │ │ ├── 340.json │ │ │ │ ├── 341.json │ │ │ │ ├── 342.json │ │ │ │ ├── 343.json │ │ │ │ ├── 345.json │ │ │ │ ├── 346.json │ │ │ │ ├── 349.json │ │ │ │ ├── 35.json │ │ │ │ ├── 351.json │ │ │ │ ├── 353.json │ │ │ │ ├── 357.json │ │ │ │ ├── 359.json │ │ │ │ ├── 364.json │ │ │ │ ├── 366.json │ │ │ │ ├── 368.json │ │ │ │ ├── 37.json │ │ │ │ ├── 370.json │ │ │ │ ├── 373.json │ │ │ │ ├── 374.json │ │ │ │ ├── 38.json │ │ │ │ ├── 380.json │ │ │ │ ├── 382.json │ │ │ │ ├── 383.json │ │ │ │ ├── 390.json │ │ │ │ ├── 391.json │ │ │ │ ├── 397.json │ │ │ │ ├── 4.json │ │ │ │ ├── 40.json │ │ │ │ ├── 403.json │ │ │ │ ├── 404.json │ │ │ │ ├── 405.json │ │ │ │ ├── 407.json │ │ │ │ ├── 410.json │ │ │ │ ├── 412.json │ │ │ │ ├── 414.json │ │ │ │ ├── 417.json │ │ │ │ ├── 42.json │ │ │ │ ├── 423.json │ │ │ │ ├── 427.json │ │ │ │ ├── 43.json │ │ │ │ ├── 430.json │ │ │ │ ├── 435.json │ │ │ │ ├── 439.json │ │ │ │ ├── 440.json │ │ │ │ ├── 441.json │ │ │ │ ├── 444.json │ │ │ │ ├── 445.json │ │ │ │ ├── 447.json │ │ │ │ ├── 448.json │ │ │ │ ├── 45.json │ │ │ │ ├── 450.json │ │ │ │ ├── 451.json │ │ │ │ ├── 453.json │ │ │ │ ├── 456.json │ │ │ │ ├── 457.json │ │ │ │ ├── 458.json │ │ │ │ ├── 459.json │ │ │ │ ├── 46.json │ │ │ │ ├── 461.json │ │ │ │ ├── 466.json │ │ │ │ ├── 467.json │ │ │ │ ├── 47.json │ │ │ │ ├── 475.json │ │ │ │ ├── 48.json │ │ │ │ ├── 481.json │ │ │ │ ├── 483.json │ │ │ │ ├── 486.json │ │ │ │ ├── 488.json │ │ │ │ ├── 493.json │ │ │ │ ├── 494.json │ │ │ │ ├── 495.json │ │ │ │ ├── 496.json │ │ │ │ ├── 497.json │ │ │ │ ├── 5.json │ │ │ │ ├── 50.json │ │ │ │ ├── 501.json │ │ │ │ ├── 504.json │ │ │ │ ├── 505.json │ │ │ │ ├── 51.json │ │ │ │ ├── 511.json │ │ │ │ ├── 515.json │ │ │ │ ├── 516.json │ │ │ │ ├── 517.json │ │ │ │ ├── 520.json │ │ │ │ ├── 521.json │ │ │ │ ├── 523.json │ │ │ │ ├── 525.json │ │ │ │ ├── 530.json │ │ │ │ ├── 531.json │ │ │ │ ├── 532.json │ │ │ │ ├── 533.json │ │ │ │ ├── 536.json │ │ │ │ ├── 541.json │ │ │ │ ├── 542.json │ │ │ │ ├── 543.json │ │ │ │ ├── 545.json │ │ │ │ ├── 551.json │ │ │ │ ├── 552.json │ │ │ │ ├── 554.json │ │ │ │ ├── 558.json │ │ │ │ ├── 559.json │ │ │ │ ├── 562.json │ │ │ │ ├── 563.json │ │ │ │ ├── 566.json │ │ │ │ ├── 567.json │ │ │ │ ├── 569.json │ │ │ │ ├── 570.json │ │ │ │ ├── 572.json │ │ │ │ ├── 574.json │ │ │ │ ├── 575.json │ │ │ │ ├── 577.json │ │ │ │ ├── 580.json │ │ │ │ ├── 582.json │ │ │ │ ├── 583.json │ │ │ │ ├── 584.json │ │ │ │ ├── 585.json │ │ │ │ ├── 586.json │ │ │ │ ├── 59.json │ │ │ │ ├── 590.json │ │ │ │ ├── 598.json │ │ │ │ ├── 60.json │ │ │ │ ├── 600.json │ │ │ │ ├── 601.json │ │ │ │ ├── 606.json │ │ │ │ ├── 610.json │ │ │ │ ├── 611.json │ │ │ │ ├── 612.json │ │ │ │ ├── 613.json │ │ │ │ ├── 618.json │ │ │ │ ├── 619.json │ │ │ │ ├── 622.json │ │ │ │ ├── 626.json │ │ │ │ ├── 627.json │ │ │ │ ├── 629.json │ │ │ │ ├── 631.json │ │ │ │ ├── 634.json │ │ │ │ ├── 639.json │ │ │ │ ├── 64.json │ │ │ │ ├── 640.json │ │ │ │ ├── 642.json │ │ │ │ ├── 643.json │ │ │ │ ├── 645.json │ │ │ │ ├── 647.json │ │ │ │ ├── 65.json │ │ │ │ ├── 653.json │ │ │ │ ├── 657.json │ │ │ │ ├── 66.json │ │ │ │ ├── 660.json │ │ │ │ ├── 664.json │ │ │ │ ├── 665.json │ │ │ │ ├── 668.json │ │ │ │ ├── 669.json │ │ │ │ ├── 67.json │ │ │ │ ├── 671.json │ │ │ │ ├── 678.json │ │ │ │ ├── 679.json │ │ │ │ ├── 68.json │ │ │ │ ├── 682.json │ │ │ │ ├── 685.json │ │ │ │ ├── 686.json │ │ │ │ ├── 69.json │ │ │ │ ├── 690.json │ │ │ │ ├── 691.json │ │ │ │ ├── 692.json │ │ │ │ ├── 693.json │ │ │ │ ├── 694.json │ │ │ │ ├── 695.json │ │ │ │ ├── 696.json │ │ │ │ ├── 698.json │ │ │ │ ├── 699.json │ │ │ │ ├── 704.json │ │ │ │ ├── 709.json │ │ │ │ ├── 710.json │ │ │ │ ├── 711.json │ │ │ │ ├── 718.json │ │ │ │ ├── 72.json │ │ │ │ ├── 726.json │ │ │ │ ├── 728.json │ │ │ │ ├── 729.json │ │ │ │ ├── 73.json │ │ │ │ ├── 732.json │ │ │ │ ├── 733.json │ │ │ │ ├── 737.json │ │ │ │ ├── 739.json │ │ │ │ ├── 740.json │ │ │ │ ├── 742.json │ │ │ │ ├── 743.json │ │ │ │ ├── 744.json │ │ │ │ ├── 751.json │ │ │ │ ├── 753.json │ │ │ │ ├── 756.json │ │ │ │ ├── 757.json │ │ │ │ ├── 76.json │ │ │ │ ├── 764.json │ │ │ │ ├── 765.json │ │ │ │ ├── 769.json │ │ │ │ ├── 771.json │ │ │ │ ├── 772.json │ │ │ │ ├── 774.json │ │ │ │ ├── 780.json │ │ │ │ ├── 782.json │ │ │ │ ├── 783.json │ │ │ │ ├── 787.json │ │ │ │ ├── 805.json │ │ │ │ ├── 806.json │ │ │ │ ├── 807.json │ │ │ │ ├── 808.json │ │ │ │ ├── 81.json │ │ │ │ ├── 810.json │ │ │ │ ├── 814.json │ │ │ │ ├── 817.json │ │ │ │ ├── 818.json │ │ │ │ ├── 819.json │ │ │ │ ├── 820.json │ │ │ │ ├── 821.json │ │ │ │ ├── 822.json │ │ │ │ ├── 826.json │ │ │ │ ├── 827.json │ │ │ │ ├── 828.json │ │ │ │ ├── 829.json │ │ │ │ ├── 83.json │ │ │ │ ├── 832.json │ │ │ │ ├── 838.json │ │ │ │ ├── 84.json │ │ │ │ ├── 843.json │ │ │ │ ├── 846.json │ │ │ │ ├── 847.json │ │ │ │ ├── 848.json │ │ │ │ ├── 85.json │ │ │ │ ├── 850.json │ │ │ │ ├── 853.json │ │ │ │ ├── 854.json │ │ │ │ ├── 858.json │ │ │ │ ├── 86.json │ │ │ │ ├── 864.json │ │ │ │ ├── 867.json │ │ │ │ ├── 868.json │ │ │ │ ├── 869.json │ │ │ │ ├── 876.json │ │ │ │ ├── 878.json │ │ │ │ ├── 879.json │ │ │ │ ├── 880.json │ │ │ │ ├── 881.json │ │ │ │ ├── 884.json │ │ │ │ ├── 89.json │ │ │ │ ├── 892.json │ │ │ │ ├── 895.json │ │ │ │ ├── 896.json │ │ │ │ ├── 898.json │ │ │ │ ├── 900.json │ │ │ │ ├── 902.json │ │ │ │ ├── 905.json │ │ │ │ ├── 909.json │ │ │ │ ├── 910.json │ │ │ │ ├── 911.json │ │ │ │ ├── 913.json │ │ │ │ ├── 914.json │ │ │ │ ├── 919.json │ │ │ │ ├── 92.json │ │ │ │ ├── 921.json │ │ │ │ ├── 924.json │ │ │ │ ├── 925.json │ │ │ │ ├── 927.json │ │ │ │ ├── 928.json │ │ │ │ ├── 931.json │ │ │ │ ├── 936.json │ │ │ │ ├── 937.json │ │ │ │ ├── 942.json │ │ │ │ ├── 946.json │ │ │ │ ├── 947.json │ │ │ │ ├── 951.json │ │ │ │ ├── 954.json │ │ │ │ ├── 955.json │ │ │ │ ├── 957.json │ │ │ │ ├── 958.json │ │ │ │ ├── 960.json │ │ │ │ ├── 961.json │ │ │ │ ├── 964.json │ │ │ │ ├── 965.json │ │ │ │ ├── 967.json │ │ │ │ ├── 969.json │ │ │ │ ├── 970.json │ │ │ │ ├── 971.json │ │ │ │ ├── 975.json │ │ │ │ ├── 978.json │ │ │ │ ├── 980.json │ │ │ │ ├── 981.json │ │ │ │ ├── 985.json │ │ │ │ ├── 987.json │ │ │ │ ├── 989.json │ │ │ │ ├── 99.json │ │ │ │ ├── 990.json │ │ │ │ ├── 991.json │ │ │ │ ├── 992.json │ │ │ │ ├── 993.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ └── 999.json │ │ │ ├── prealgebra │ │ │ │ ├── 10.json │ │ │ │ ├── 1000.json │ │ │ │ ├── 1002.json │ │ │ │ ├── 1003.json │ │ │ │ ├── 1007.json │ │ │ │ ├── 1008.json │ │ │ │ ├── 1011.json │ │ │ │ ├── 1014.json │ │ │ │ ├── 1018.json │ │ │ │ ├── 1020.json │ │ │ │ ├── 1024.json │ │ │ │ ├── 1029.json │ │ │ │ ├── 1030.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1034.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 1036.json │ │ │ │ ├── 1037.json │ │ │ │ ├── 1040.json │ │ │ │ ├── 1042.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1047.json │ │ │ │ ├── 1048.json │ │ │ │ ├── 105.json │ │ │ │ ├── 1050.json │ │ │ │ ├── 1054.json │ │ │ │ ├── 1055.json │ │ │ │ ├── 1056.json │ │ │ │ ├── 1057.json │ │ │ │ ├── 1061.json │ │ │ │ ├── 1063.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1066.json │ │ │ │ ├── 1068.json │ │ │ │ ├── 1069.json │ │ │ │ ├── 1070.json │ │ │ │ ├── 1071.json │ │ │ │ ├── 1073.json │ │ │ │ ├── 1074.json │ │ │ │ ├── 1079.json │ │ │ │ ├── 1081.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 1083.json │ │ │ │ ├── 1084.json │ │ │ │ ├── 1088.json │ │ │ │ ├── 1090.json │ │ │ │ ├── 1091.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1095.json │ │ │ │ ├── 1096.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 1101.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1104.json │ │ │ │ ├── 1105.json │ │ │ │ ├── 1107.json │ │ │ │ ├── 1108.json │ │ │ │ ├── 1109.json │ │ │ │ ├── 1111.json │ │ │ │ ├── 1113.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1117.json │ │ │ │ ├── 1118.json │ │ │ │ ├── 1119.json │ │ │ │ ├── 1121.json │ │ │ │ ├── 1122.json │ │ │ │ ├── 1123.json │ │ │ │ ├── 1124.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1126.json │ │ │ │ ├── 1128.json │ │ │ │ ├── 1129.json │ │ │ │ ├── 113.json │ │ │ │ ├── 1130.json │ │ │ │ ├── 1131.json │ │ │ │ ├── 1132.json │ │ │ │ ├── 1133.json │ │ │ │ ├── 1134.json │ │ │ │ ├── 1135.json │ │ │ │ ├── 1136.json │ │ │ │ ├── 1137.json │ │ │ │ ├── 1139.json │ │ │ │ ├── 1141.json │ │ │ │ ├── 1142.json │ │ │ │ ├── 1143.json │ │ │ │ ├── 1144.json │ │ │ │ ├── 1145.json │ │ │ │ ├── 1146.json │ │ │ │ ├── 1147.json │ │ │ │ ├── 1148.json │ │ │ │ ├── 1151.json │ │ │ │ ├── 1153.json │ │ │ │ ├── 1154.json │ │ │ │ ├── 1155.json │ │ │ │ ├── 1157.json │ │ │ │ ├── 116.json │ │ │ │ ├── 1160.json │ │ │ │ ├── 1163.json │ │ │ │ ├── 1165.json │ │ │ │ ├── 1166.json │ │ │ │ ├── 1168.json │ │ │ │ ├── 1169.json │ │ │ │ ├── 1171.json │ │ │ │ ├── 1173.json │ │ │ │ ├── 1176.json │ │ │ │ ├── 1178.json │ │ │ │ ├── 1179.json │ │ │ │ ├── 1180.json │ │ │ │ ├── 1181.json │ │ │ │ ├── 1182.json │ │ │ │ ├── 1183.json │ │ │ │ ├── 1185.json │ │ │ │ ├── 1187.json │ │ │ │ ├── 1189.json │ │ │ │ ├── 1190.json │ │ │ │ ├── 1192.json │ │ │ │ ├── 1193.json │ │ │ │ ├── 1194.json │ │ │ │ ├── 1195.json │ │ │ │ ├── 1197.json │ │ │ │ ├── 1198.json │ │ │ │ ├── 1199.json │ │ │ │ ├── 1202.json │ │ │ │ ├── 1203.json │ │ │ │ ├── 1204.json │ │ │ │ ├── 1207.json │ │ │ │ ├── 1208.json │ │ │ │ ├── 1209.json │ │ │ │ ├── 1210.json │ │ │ │ ├── 1212.json │ │ │ │ ├── 1215.json │ │ │ │ ├── 1217.json │ │ │ │ ├── 1218.json │ │ │ │ ├── 1220.json │ │ │ │ ├── 1221.json │ │ │ │ ├── 1222.json │ │ │ │ ├── 1226.json │ │ │ │ ├── 1227.json │ │ │ │ ├── 1229.json │ │ │ │ ├── 1230.json │ │ │ │ ├── 1231.json │ │ │ │ ├── 1232.json │ │ │ │ ├── 1233.json │ │ │ │ ├── 1234.json │ │ │ │ ├── 1238.json │ │ │ │ ├── 1239.json │ │ │ │ ├── 1240.json │ │ │ │ ├── 1241.json │ │ │ │ ├── 1243.json │ │ │ │ ├── 1245.json │ │ │ │ ├── 1247.json │ │ │ │ ├── 1249.json │ │ │ │ ├── 1251.json │ │ │ │ ├── 1252.json │ │ │ │ ├── 1253.json │ │ │ │ ├── 1254.json │ │ │ │ ├── 1256.json │ │ │ │ ├── 1258.json │ │ │ │ ├── 126.json │ │ │ │ ├── 1260.json │ │ │ │ ├── 1262.json │ │ │ │ ├── 1266.json │ │ │ │ ├── 1269.json │ │ │ │ ├── 1270.json │ │ │ │ ├── 1272.json │ │ │ │ ├── 1275.json │ │ │ │ ├── 1277.json │ │ │ │ ├── 1279.json │ │ │ │ ├── 1282.json │ │ │ │ ├── 1283.json │ │ │ │ ├── 1284.json │ │ │ │ ├── 1286.json │ │ │ │ ├── 1287.json │ │ │ │ ├── 1288.json │ │ │ │ ├── 1289.json │ │ │ │ ├── 1290.json │ │ │ │ ├── 1291.json │ │ │ │ ├── 1292.json │ │ │ │ ├── 1294.json │ │ │ │ ├── 1295.json │ │ │ │ ├── 1297.json │ │ │ │ ├── 1298.json │ │ │ │ ├── 1299.json │ │ │ │ ├── 1300.json │ │ │ │ ├── 1301.json │ │ │ │ ├── 1302.json │ │ │ │ ├── 1303.json │ │ │ │ ├── 1306.json │ │ │ │ ├── 1310.json │ │ │ │ ├── 1312.json │ │ │ │ ├── 1315.json │ │ │ │ ├── 1317.json │ │ │ │ ├── 1318.json │ │ │ │ ├── 132.json │ │ │ │ ├── 1321.json │ │ │ │ ├── 1323.json │ │ │ │ ├── 1326.json │ │ │ │ ├── 1328.json │ │ │ │ ├── 1330.json │ │ │ │ ├── 1331.json │ │ │ │ ├── 1332.json │ │ │ │ ├── 1335.json │ │ │ │ ├── 1337.json │ │ │ │ ├── 1339.json │ │ │ │ ├── 1342.json │ │ │ │ ├── 1343.json │ │ │ │ ├── 1345.json │ │ │ │ ├── 1347.json │ │ │ │ ├── 1348.json │ │ │ │ ├── 1349.json │ │ │ │ ├── 135.json │ │ │ │ ├── 1350.json │ │ │ │ ├── 1351.json │ │ │ │ ├── 1352.json │ │ │ │ ├── 1353.json │ │ │ │ ├── 1354.json │ │ │ │ ├── 1355.json │ │ │ │ ├── 1356.json │ │ │ │ ├── 1360.json │ │ │ │ ├── 1362.json │ │ │ │ ├── 1363.json │ │ │ │ ├── 1364.json │ │ │ │ ├── 1365.json │ │ │ │ ├── 1368.json │ │ │ │ ├── 1372.json │ │ │ │ ├── 1373.json │ │ │ │ ├── 1374.json │ │ │ │ ├── 1375.json │ │ │ │ ├── 1376.json │ │ │ │ ├── 1379.json │ │ │ │ ├── 138.json │ │ │ │ ├── 1380.json │ │ │ │ ├── 1384.json │ │ │ │ ├── 1385.json │ │ │ │ ├── 1386.json │ │ │ │ ├── 1387.json │ │ │ │ ├── 1388.json │ │ │ │ ├── 1389.json │ │ │ │ ├── 1390.json │ │ │ │ ├── 1391.json │ │ │ │ ├── 1392.json │ │ │ │ ├── 1397.json │ │ │ │ ├── 1399.json │ │ │ │ ├── 1400.json │ │ │ │ ├── 1401.json │ │ │ │ ├── 1402.json │ │ │ │ ├── 1403.json │ │ │ │ ├── 1404.json │ │ │ │ ├── 1405.json │ │ │ │ ├── 1407.json │ │ │ │ ├── 1408.json │ │ │ │ ├── 1409.json │ │ │ │ ├── 1410.json │ │ │ │ ├── 1411.json │ │ │ │ ├── 1413.json │ │ │ │ ├── 1416.json │ │ │ │ ├── 1417.json │ │ │ │ ├── 1418.json │ │ │ │ ├── 1419.json │ │ │ │ ├── 1421.json │ │ │ │ ├── 1422.json │ │ │ │ ├── 1423.json │ │ │ │ ├── 1424.json │ │ │ │ ├── 1426.json │ │ │ │ ├── 1428.json │ │ │ │ ├── 1430.json │ │ │ │ ├── 1432.json │ │ │ │ ├── 1433.json │ │ │ │ ├── 1436.json │ │ │ │ ├── 1437.json │ │ │ │ ├── 1438.json │ │ │ │ ├── 1439.json │ │ │ │ ├── 144.json │ │ │ │ ├── 1440.json │ │ │ │ ├── 1441.json │ │ │ │ ├── 1442.json │ │ │ │ ├── 1443.json │ │ │ │ ├── 1444.json │ │ │ │ ├── 1445.json │ │ │ │ ├── 1446.json │ │ │ │ ├── 1447.json │ │ │ │ ├── 1448.json │ │ │ │ ├── 1449.json │ │ │ │ ├── 1451.json │ │ │ │ ├── 1452.json │ │ │ │ ├── 1453.json │ │ │ │ ├── 1454.json │ │ │ │ ├── 1455.json │ │ │ │ ├── 1456.json │ │ │ │ ├── 1457.json │ │ │ │ ├── 1458.json │ │ │ │ ├── 1459.json │ │ │ │ ├── 1460.json │ │ │ │ ├── 1462.json │ │ │ │ ├── 1463.json │ │ │ │ ├── 1465.json │ │ │ │ ├── 1466.json │ │ │ │ ├── 1467.json │ │ │ │ ├── 1474.json │ │ │ │ ├── 1475.json │ │ │ │ ├── 1477.json │ │ │ │ ├── 1479.json │ │ │ │ ├── 1480.json │ │ │ │ ├── 1482.json │ │ │ │ ├── 1483.json │ │ │ │ ├── 1484.json │ │ │ │ ├── 1485.json │ │ │ │ ├── 1486.json │ │ │ │ ├── 1487.json │ │ │ │ ├── 1488.json │ │ │ │ ├── 1491.json │ │ │ │ ├── 1492.json │ │ │ │ ├── 1494.json │ │ │ │ ├── 1495.json │ │ │ │ ├── 1496.json │ │ │ │ ├── 1497.json │ │ │ │ ├── 1499.json │ │ │ │ ├── 1502.json │ │ │ │ ├── 1503.json │ │ │ │ ├── 1505.json │ │ │ │ ├── 1506.json │ │ │ │ ├── 1507.json │ │ │ │ ├── 1508.json │ │ │ │ ├── 1510.json │ │ │ │ ├── 1511.json │ │ │ │ ├── 1512.json │ │ │ │ ├── 1517.json │ │ │ │ ├── 1519.json │ │ │ │ ├── 1520.json │ │ │ │ ├── 1521.json │ │ │ │ ├── 1522.json │ │ │ │ ├── 1523.json │ │ │ │ ├── 1524.json │ │ │ │ ├── 1526.json │ │ │ │ ├── 1529.json │ │ │ │ ├── 153.json │ │ │ │ ├── 1530.json │ │ │ │ ├── 1531.json │ │ │ │ ├── 1534.json │ │ │ │ ├── 1536.json │ │ │ │ ├── 1539.json │ │ │ │ ├── 154.json │ │ │ │ ├── 1541.json │ │ │ │ ├── 1542.json │ │ │ │ ├── 1543.json │ │ │ │ ├── 1544.json │ │ │ │ ├── 1545.json │ │ │ │ ├── 1547.json │ │ │ │ ├── 1548.json │ │ │ │ ├── 1550.json │ │ │ │ ├── 1551.json │ │ │ │ ├── 1552.json │ │ │ │ ├── 1553.json │ │ │ │ ├── 1555.json │ │ │ │ ├── 1558.json │ │ │ │ ├── 1559.json │ │ │ │ ├── 1560.json │ │ │ │ ├── 1562.json │ │ │ │ ├── 1564.json │ │ │ │ ├── 1566.json │ │ │ │ ├── 1568.json │ │ │ │ ├── 1570.json │ │ │ │ ├── 1571.json │ │ │ │ ├── 1572.json │ │ │ │ ├── 1574.json │ │ │ │ ├── 1576.json │ │ │ │ ├── 1577.json │ │ │ │ ├── 1578.json │ │ │ │ ├── 1579.json │ │ │ │ ├── 1580.json │ │ │ │ ├── 1582.json │ │ │ │ ├── 1586.json │ │ │ │ ├── 1587.json │ │ │ │ ├── 159.json │ │ │ │ ├── 1591.json │ │ │ │ ├── 1592.json │ │ │ │ ├── 1594.json │ │ │ │ ├── 1595.json │ │ │ │ ├── 1596.json │ │ │ │ ├── 1597.json │ │ │ │ ├── 1599.json │ │ │ │ ├── 1600.json │ │ │ │ ├── 1602.json │ │ │ │ ├── 1605.json │ │ │ │ ├── 1606.json │ │ │ │ ├── 1607.json │ │ │ │ ├── 1608.json │ │ │ │ ├── 1609.json │ │ │ │ ├── 1611.json │ │ │ │ ├── 1612.json │ │ │ │ ├── 1615.json │ │ │ │ ├── 1616.json │ │ │ │ ├── 1617.json │ │ │ │ ├── 1620.json │ │ │ │ ├── 1622.json │ │ │ │ ├── 1624.json │ │ │ │ ├── 1625.json │ │ │ │ ├── 1626.json │ │ │ │ ├── 1631.json │ │ │ │ ├── 1634.json │ │ │ │ ├── 1638.json │ │ │ │ ├── 1639.json │ │ │ │ ├── 1640.json │ │ │ │ ├── 1641.json │ │ │ │ ├── 1642.json │ │ │ │ ├── 1645.json │ │ │ │ ├── 1646.json │ │ │ │ ├── 1648.json │ │ │ │ ├── 1650.json │ │ │ │ ├── 1651.json │ │ │ │ ├── 1652.json │ │ │ │ ├── 1655.json │ │ │ │ ├── 1657.json │ │ │ │ ├── 1658.json │ │ │ │ ├── 1663.json │ │ │ │ ├── 1665.json │ │ │ │ ├── 1667.json │ │ │ │ ├── 1669.json │ │ │ │ ├── 1670.json │ │ │ │ ├── 1678.json │ │ │ │ ├── 1679.json │ │ │ │ ├── 1680.json │ │ │ │ ├── 1684.json │ │ │ │ ├── 1686.json │ │ │ │ ├── 1687.json │ │ │ │ ├── 1695.json │ │ │ │ ├── 1697.json │ │ │ │ ├── 1698.json │ │ │ │ ├── 1699.json │ │ │ │ ├── 1700.json │ │ │ │ ├── 1702.json │ │ │ │ ├── 1703.json │ │ │ │ ├── 1705.json │ │ │ │ ├── 1707.json │ │ │ │ ├── 171.json │ │ │ │ ├── 1712.json │ │ │ │ ├── 1714.json │ │ │ │ ├── 1715.json │ │ │ │ ├── 1716.json │ │ │ │ ├── 1717.json │ │ │ │ ├── 1718.json │ │ │ │ ├── 1723.json │ │ │ │ ├── 1725.json │ │ │ │ ├── 1727.json │ │ │ │ ├── 1728.json │ │ │ │ ├── 1729.json │ │ │ │ ├── 1730.json │ │ │ │ ├── 1732.json │ │ │ │ ├── 1733.json │ │ │ │ ├── 1734.json │ │ │ │ ├── 1736.json │ │ │ │ ├── 1737.json │ │ │ │ ├── 1739.json │ │ │ │ ├── 1741.json │ │ │ │ ├── 1742.json │ │ │ │ ├── 1743.json │ │ │ │ ├── 1745.json │ │ │ │ ├── 1746.json │ │ │ │ ├── 1747.json │ │ │ │ ├── 1748.json │ │ │ │ ├── 1749.json │ │ │ │ ├── 1750.json │ │ │ │ ├── 1754.json │ │ │ │ ├── 1755.json │ │ │ │ ├── 1757.json │ │ │ │ ├── 1758.json │ │ │ │ ├── 176.json │ │ │ │ ├── 1761.json │ │ │ │ ├── 1762.json │ │ │ │ ├── 1764.json │ │ │ │ ├── 1765.json │ │ │ │ ├── 1767.json │ │ │ │ ├── 177.json │ │ │ │ ├── 1770.json │ │ │ │ ├── 1772.json │ │ │ │ ├── 1773.json │ │ │ │ ├── 1775.json │ │ │ │ ├── 1776.json │ │ │ │ ├── 1777.json │ │ │ │ ├── 1778.json │ │ │ │ ├── 1779.json │ │ │ │ ├── 1781.json │ │ │ │ ├── 1782.json │ │ │ │ ├── 1784.json │ │ │ │ ├── 1785.json │ │ │ │ ├── 1786.json │ │ │ │ ├── 1787.json │ │ │ │ ├── 1788.json │ │ │ │ ├── 1789.json │ │ │ │ ├── 1790.json │ │ │ │ ├── 1791.json │ │ │ │ ├── 1792.json │ │ │ │ ├── 1793.json │ │ │ │ ├── 1794.json │ │ │ │ ├── 1796.json │ │ │ │ ├── 1797.json │ │ │ │ ├── 1799.json │ │ │ │ ├── 1800.json │ │ │ │ ├── 1801.json │ │ │ │ ├── 1803.json │ │ │ │ ├── 1804.json │ │ │ │ ├── 1805.json │ │ │ │ ├── 1807.json │ │ │ │ ├── 1808.json │ │ │ │ ├── 1809.json │ │ │ │ ├── 1811.json │ │ │ │ ├── 1812.json │ │ │ │ ├── 1813.json │ │ │ │ ├── 1814.json │ │ │ │ ├── 1820.json │ │ │ │ ├── 1823.json │ │ │ │ ├── 1824.json │ │ │ │ ├── 1827.json │ │ │ │ ├── 1828.json │ │ │ │ ├── 1829.json │ │ │ │ ├── 1833.json │ │ │ │ ├── 1834.json │ │ │ │ ├── 1836.json │ │ │ │ ├── 1837.json │ │ │ │ ├── 1839.json │ │ │ │ ├── 1840.json │ │ │ │ ├── 1842.json │ │ │ │ ├── 1843.json │ │ │ │ ├── 1845.json │ │ │ │ ├── 1846.json │ │ │ │ ├── 1847.json │ │ │ │ ├── 1848.json │ │ │ │ ├── 1849.json │ │ │ │ ├── 1850.json │ │ │ │ ├── 1852.json │ │ │ │ ├── 1854.json │ │ │ │ ├── 1855.json │ │ │ │ ├── 1857.json │ │ │ │ ├── 1858.json │ │ │ │ ├── 1859.json │ │ │ │ ├── 1860.json │ │ │ │ ├── 1861.json │ │ │ │ ├── 1863.json │ │ │ │ ├── 1864.json │ │ │ │ ├── 1865.json │ │ │ │ ├── 1868.json │ │ │ │ ├── 1870.json │ │ │ │ ├── 1873.json │ │ │ │ ├── 1874.json │ │ │ │ ├── 1876.json │ │ │ │ ├── 1877.json │ │ │ │ ├── 1879.json │ │ │ │ ├── 1880.json │ │ │ │ ├── 1885.json │ │ │ │ ├── 1890.json │ │ │ │ ├── 1891.json │ │ │ │ ├── 1892.json │ │ │ │ ├── 1893.json │ │ │ │ ├── 1894.json │ │ │ │ ├── 1895.json │ │ │ │ ├── 1897.json │ │ │ │ ├── 1898.json │ │ │ │ ├── 1899.json │ │ │ │ ├── 1900.json │ │ │ │ ├── 1902.json │ │ │ │ ├── 1904.json │ │ │ │ ├── 1907.json │ │ │ │ ├── 1908.json │ │ │ │ ├── 1909.json │ │ │ │ ├── 1910.json │ │ │ │ ├── 1914.json │ │ │ │ ├── 1918.json │ │ │ │ ├── 192.json │ │ │ │ ├── 1920.json │ │ │ │ ├── 1922.json │ │ │ │ ├── 1924.json │ │ │ │ ├── 1928.json │ │ │ │ ├── 1930.json │ │ │ │ ├── 1932.json │ │ │ │ ├── 1933.json │ │ │ │ ├── 1934.json │ │ │ │ ├── 1935.json │ │ │ │ ├── 1936.json │ │ │ │ ├── 1937.json │ │ │ │ ├── 1940.json │ │ │ │ ├── 1945.json │ │ │ │ ├── 1947.json │ │ │ │ ├── 1948.json │ │ │ │ ├── 195.json │ │ │ │ ├── 1951.json │ │ │ │ ├── 1952.json │ │ │ │ ├── 1953.json │ │ │ │ ├── 1956.json │ │ │ │ ├── 1959.json │ │ │ │ ├── 1961.json │ │ │ │ ├── 1965.json │ │ │ │ ├── 1969.json │ │ │ │ ├── 1970.json │ │ │ │ ├── 1973.json │ │ │ │ ├── 1976.json │ │ │ │ ├── 1977.json │ │ │ │ ├── 1980.json │ │ │ │ ├── 1982.json │ │ │ │ ├── 1986.json │ │ │ │ ├── 1987.json │ │ │ │ ├── 1988.json │ │ │ │ ├── 1990.json │ │ │ │ ├── 1991.json │ │ │ │ ├── 1992.json │ │ │ │ ├── 1994.json │ │ │ │ ├── 1995.json │ │ │ │ ├── 1997.json │ │ │ │ ├── 1998.json │ │ │ │ ├── 1999.json │ │ │ │ ├── 2001.json │ │ │ │ ├── 2002.json │ │ │ │ ├── 2003.json │ │ │ │ ├── 2005.json │ │ │ │ ├── 2007.json │ │ │ │ ├── 2009.json │ │ │ │ ├── 2010.json │ │ │ │ ├── 2011.json │ │ │ │ ├── 2013.json │ │ │ │ ├── 2014.json │ │ │ │ ├── 2015.json │ │ │ │ ├── 2017.json │ │ │ │ ├── 2018.json │ │ │ │ ├── 2019.json │ │ │ │ ├── 2020.json │ │ │ │ ├── 2021.json │ │ │ │ ├── 2022.json │ │ │ │ ├── 2023.json │ │ │ │ ├── 2024.json │ │ │ │ ├── 2027.json │ │ │ │ ├── 2029.json │ │ │ │ ├── 2030.json │ │ │ │ ├── 2031.json │ │ │ │ ├── 2034.json │ │ │ │ ├── 2035.json │ │ │ │ ├── 2037.json │ │ │ │ ├── 2038.json │ │ │ │ ├── 2039.json │ │ │ │ ├── 2040.json │ │ │ │ ├── 2042.json │ │ │ │ ├── 2045.json │ │ │ │ ├── 2046.json │ │ │ │ ├── 2047.json │ │ │ │ ├── 2048.json │ │ │ │ ├── 2049.json │ │ │ │ ├── 2051.json │ │ │ │ ├── 2053.json │ │ │ │ ├── 2054.json │ │ │ │ ├── 2057.json │ │ │ │ ├── 2058.json │ │ │ │ ├── 2059.json │ │ │ │ ├── 2061.json │ │ │ │ ├── 2063.json │ │ │ │ ├── 2064.json │ │ │ │ ├── 2065.json │ │ │ │ ├── 2066.json │ │ │ │ ├── 2068.json │ │ │ │ ├── 2070.json │ │ │ │ ├── 2072.json │ │ │ │ ├── 2073.json │ │ │ │ ├── 2074.json │ │ │ │ ├── 2075.json │ │ │ │ ├── 2078.json │ │ │ │ ├── 2081.json │ │ │ │ ├── 2082.json │ │ │ │ ├── 2084.json │ │ │ │ ├── 2086.json │ │ │ │ ├── 2088.json │ │ │ │ ├── 2089.json │ │ │ │ ├── 211.json │ │ │ │ ├── 221.json │ │ │ │ ├── 224.json │ │ │ │ ├── 230.json │ │ │ │ ├── 238.json │ │ │ │ ├── 247.json │ │ │ │ ├── 25.json │ │ │ │ ├── 252.json │ │ │ │ ├── 258.json │ │ │ │ ├── 260.json │ │ │ │ ├── 271.json │ │ │ │ ├── 28.json │ │ │ │ ├── 29.json │ │ │ │ ├── 293.json │ │ │ │ ├── 298.json │ │ │ │ ├── 305.json │ │ │ │ ├── 307.json │ │ │ │ ├── 339.json │ │ │ │ ├── 354.json │ │ │ │ ├── 356.json │ │ │ │ ├── 363.json │ │ │ │ ├── 364.json │ │ │ │ ├── 375.json │ │ │ │ ├── 378.json │ │ │ │ ├── 379.json │ │ │ │ ├── 380.json │ │ │ │ ├── 387.json │ │ │ │ ├── 390.json │ │ │ │ ├── 393.json │ │ │ │ ├── 394.json │ │ │ │ ├── 402.json │ │ │ │ ├── 407.json │ │ │ │ ├── 412.json │ │ │ │ ├── 429.json │ │ │ │ ├── 432.json │ │ │ │ ├── 438.json │ │ │ │ ├── 439.json │ │ │ │ ├── 442.json │ │ │ │ ├── 447.json │ │ │ │ ├── 45.json │ │ │ │ ├── 458.json │ │ │ │ ├── 465.json │ │ │ │ ├── 468.json │ │ │ │ ├── 470.json │ │ │ │ ├── 488.json │ │ │ │ ├── 493.json │ │ │ │ ├── 501.json │ │ │ │ ├── 505.json │ │ │ │ ├── 517.json │ │ │ │ ├── 52.json │ │ │ │ ├── 520.json │ │ │ │ ├── 527.json │ │ │ │ ├── 53.json │ │ │ │ ├── 530.json │ │ │ │ ├── 55.json │ │ │ │ ├── 554.json │ │ │ │ ├── 557.json │ │ │ │ ├── 567.json │ │ │ │ ├── 571.json │ │ │ │ ├── 572.json │ │ │ │ ├── 575.json │ │ │ │ ├── 579.json │ │ │ │ ├── 582.json │ │ │ │ ├── 583.json │ │ │ │ ├── 584.json │ │ │ │ ├── 588.json │ │ │ │ ├── 591.json │ │ │ │ ├── 595.json │ │ │ │ ├── 598.json │ │ │ │ ├── 616.json │ │ │ │ ├── 631.json │ │ │ │ ├── 633.json │ │ │ │ ├── 634.json │ │ │ │ ├── 639.json │ │ │ │ ├── 641.json │ │ │ │ ├── 642.json │ │ │ │ ├── 646.json │ │ │ │ ├── 65.json │ │ │ │ ├── 651.json │ │ │ │ ├── 660.json │ │ │ │ ├── 684.json │ │ │ │ ├── 69.json │ │ │ │ ├── 692.json │ │ │ │ ├── 7.json │ │ │ │ ├── 70.json │ │ │ │ ├── 735.json │ │ │ │ ├── 740.json │ │ │ │ ├── 75.json │ │ │ │ ├── 754.json │ │ │ │ ├── 759.json │ │ │ │ ├── 768.json │ │ │ │ ├── 789.json │ │ │ │ ├── 794.json │ │ │ │ ├── 795.json │ │ │ │ ├── 797.json │ │ │ │ ├── 8.json │ │ │ │ ├── 805.json │ │ │ │ ├── 807.json │ │ │ │ ├── 808.json │ │ │ │ ├── 809.json │ │ │ │ ├── 812.json │ │ │ │ ├── 82.json │ │ │ │ ├── 825.json │ │ │ │ ├── 826.json │ │ │ │ ├── 836.json │ │ │ │ ├── 838.json │ │ │ │ ├── 84.json │ │ │ │ ├── 840.json │ │ │ │ ├── 841.json │ │ │ │ ├── 842.json │ │ │ │ ├── 844.json │ │ │ │ ├── 845.json │ │ │ │ ├── 846.json │ │ │ │ ├── 847.json │ │ │ │ ├── 849.json │ │ │ │ ├── 850.json │ │ │ │ ├── 851.json │ │ │ │ ├── 853.json │ │ │ │ ├── 855.json │ │ │ │ ├── 856.json │ │ │ │ ├── 857.json │ │ │ │ ├── 858.json │ │ │ │ ├── 859.json │ │ │ │ ├── 861.json │ │ │ │ ├── 862.json │ │ │ │ ├── 864.json │ │ │ │ ├── 865.json │ │ │ │ ├── 866.json │ │ │ │ ├── 874.json │ │ │ │ ├── 876.json │ │ │ │ ├── 877.json │ │ │ │ ├── 878.json │ │ │ │ ├── 879.json │ │ │ │ ├── 880.json │ │ │ │ ├── 881.json │ │ │ │ ├── 882.json │ │ │ │ ├── 884.json │ │ │ │ ├── 885.json │ │ │ │ ├── 890.json │ │ │ │ ├── 896.json │ │ │ │ ├── 9.json │ │ │ │ ├── 900.json │ │ │ │ ├── 901.json │ │ │ │ ├── 902.json │ │ │ │ ├── 903.json │ │ │ │ ├── 904.json │ │ │ │ ├── 907.json │ │ │ │ ├── 908.json │ │ │ │ ├── 914.json │ │ │ │ ├── 915.json │ │ │ │ ├── 918.json │ │ │ │ ├── 92.json │ │ │ │ ├── 924.json │ │ │ │ ├── 926.json │ │ │ │ ├── 927.json │ │ │ │ ├── 928.json │ │ │ │ ├── 93.json │ │ │ │ ├── 930.json │ │ │ │ ├── 931.json │ │ │ │ ├── 932.json │ │ │ │ ├── 933.json │ │ │ │ ├── 936.json │ │ │ │ ├── 937.json │ │ │ │ ├── 942.json │ │ │ │ ├── 945.json │ │ │ │ ├── 946.json │ │ │ │ ├── 948.json │ │ │ │ ├── 951.json │ │ │ │ ├── 953.json │ │ │ │ ├── 954.json │ │ │ │ ├── 956.json │ │ │ │ ├── 957.json │ │ │ │ ├── 960.json │ │ │ │ ├── 962.json │ │ │ │ ├── 964.json │ │ │ │ ├── 965.json │ │ │ │ ├── 966.json │ │ │ │ ├── 967.json │ │ │ │ ├── 968.json │ │ │ │ ├── 969.json │ │ │ │ ├── 970.json │ │ │ │ ├── 971.json │ │ │ │ ├── 972.json │ │ │ │ ├── 973.json │ │ │ │ ├── 976.json │ │ │ │ ├── 977.json │ │ │ │ ├── 980.json │ │ │ │ ├── 982.json │ │ │ │ ├── 987.json │ │ │ │ ├── 99.json │ │ │ │ ├── 990.json │ │ │ │ ├── 991.json │ │ │ │ ├── 992.json │ │ │ │ ├── 993.json │ │ │ │ ├── 994.json │ │ │ │ ├── 996.json │ │ │ │ ├── 998.json │ │ │ │ └── 999.json │ │ │ └── precalculus │ │ │ │ ├── 0.json │ │ │ │ ├── 1.json │ │ │ │ ├── 100.json │ │ │ │ ├── 1000.json │ │ │ │ ├── 1002.json │ │ │ │ ├── 1004.json │ │ │ │ ├── 1005.json │ │ │ │ ├── 1009.json │ │ │ │ ├── 101.json │ │ │ │ ├── 1018.json │ │ │ │ ├── 1019.json │ │ │ │ ├── 102.json │ │ │ │ ├── 1022.json │ │ │ │ ├── 1024.json │ │ │ │ ├── 103.json │ │ │ │ ├── 1032.json │ │ │ │ ├── 1033.json │ │ │ │ ├── 1035.json │ │ │ │ ├── 1036.json │ │ │ │ ├── 1038.json │ │ │ │ ├── 1043.json │ │ │ │ ├── 1044.json │ │ │ │ ├── 1046.json │ │ │ │ ├── 1052.json │ │ │ │ ├── 1055.json │ │ │ │ ├── 1056.json │ │ │ │ ├── 1060.json │ │ │ │ ├── 1064.json │ │ │ │ ├── 1065.json │ │ │ │ ├── 1067.json │ │ │ │ ├── 1070.json │ │ │ │ ├── 1077.json │ │ │ │ ├── 1081.json │ │ │ │ ├── 1082.json │ │ │ │ ├── 109.json │ │ │ │ ├── 1090.json │ │ │ │ ├── 1092.json │ │ │ │ ├── 1093.json │ │ │ │ ├── 1096.json │ │ │ │ ├── 1097.json │ │ │ │ ├── 1098.json │ │ │ │ ├── 110.json │ │ │ │ ├── 1101.json │ │ │ │ ├── 1102.json │ │ │ │ ├── 1103.json │ │ │ │ ├── 1104.json │ │ │ │ ├── 1105.json │ │ │ │ ├── 1109.json │ │ │ │ ├── 1111.json │ │ │ │ ├── 1114.json │ │ │ │ ├── 1115.json │ │ │ │ ├── 1117.json │ │ │ │ ├── 1119.json │ │ │ │ ├── 1120.json │ │ │ │ ├── 1121.json │ │ │ │ ├── 1122.json │ │ │ │ ├── 1123.json │ │ │ │ ├── 1124.json │ │ │ │ ├── 1125.json │ │ │ │ ├── 1128.json │ │ │ │ ├── 1129.json │ │ │ │ ├── 1133.json │ │ │ │ ├── 1134.json │ │ │ │ ├── 1136.json │ │ │ │ ├── 114.json │ │ │ │ ├── 1140.json │ │ │ │ ├── 1142.json │ │ │ │ ├── 1144.json │ │ │ │ ├── 1145.json │ │ │ │ ├── 1146.json │ │ │ │ ├── 1147.json │ │ │ │ ├── 1148.json │ │ │ │ ├── 1155.json │ │ │ │ ├── 1158.json │ │ │ │ ├── 1160.json │ │ │ │ ├── 1161.json │ │ │ │ ├── 1162.json │ │ │ │ ├── 1165.json │ │ │ │ ├── 1168.json │ │ │ │ ├── 117.json │ │ │ │ ├── 1171.json │ │ │ │ ├── 1172.json │ │ │ │ ├── 1174.json │ │ │ │ ├── 1175.json │ │ │ │ ├── 1176.json │ │ │ │ ├── 1179.json │ │ │ │ ├── 1181.json │ │ │ │ ├── 1183.json │ │ │ │ ├── 1185.json │ │ │ │ ├── 1186.json │ │ │ │ ├── 1191.json │ │ │ │ ├── 1193.json │ │ │ │ ├── 1194.json │ │ │ │ ├── 1199.json │ │ │ │ ├── 12.json │ │ │ │ ├── 1201.json │ │ │ │ ├── 1202.json │ │ │ │ ├── 1203.json │ │ │ │ ├── 1207.json │ │ │ │ ├── 1208.json │ │ │ │ ├── 1215.json │ │ │ │ ├── 1218.json │ │ │ │ ├── 122.json │ │ │ │ ├── 1222.json │ │ │ │ ├── 1226.json │ │ │ │ ├── 1227.json │ │ │ │ ├── 1229.json │ │ │ │ ├── 1231.json │ │ │ │ ├── 1233.json │ │ │ │ ├── 1238.json │ │ │ │ ├── 1239.json │ │ │ │ ├── 1240.json │ │ │ │ ├── 1241.json │ │ │ │ ├── 1243.json │ │ │ │ ├── 1248.json │ │ │ │ ├── 1252.json │ │ │ │ ├── 1254.json │ │ │ │ ├── 1256.json │ │ │ │ ├── 1257.json │ │ │ │ ├── 126.json │ │ │ │ ├── 1260.json │ │ │ │ ├── 1261.json │ │ │ │ ├── 127.json │ │ │ │ ├── 1273.json │ │ │ │ ├── 1274.json │ │ │ │ ├── 1275.json │ │ │ │ ├── 1276.json │ │ │ │ ├── 1278.json │ │ │ │ ├── 1279.json │ │ │ │ ├── 128.json │ │ │ │ ├── 1281.json │ │ │ │ ├── 1282.json │ │ │ │ ├── 1283.json │ │ │ │ ├── 1284.json │ │ │ │ ├── 1287.json │ │ │ │ ├── 1288.json │ │ │ │ ├── 1289.json │ │ │ │ ├── 1291.json │ │ │ │ ├── 1292.json │ │ │ │ ├── 1294.json │ │ │ │ ├── 1295.json │ │ │ │ ├── 1298.json │ │ │ │ ├── 130.json │ │ │ │ ├── 1300.json │ │ │ │ ├── 1301.json │ │ │ │ ├── 1302.json │ │ │ │ ├── 1303.json │ │ │ │ ├── 1304.json │ │ │ │ ├── 1312.json │ │ │ │ ├── 1313.json │ │ │ │ ├── 133.json │ │ │ │ ├── 137.json │ │ │ │ ├── 138.json │ │ │ │ ├── 139.json │ │ │ │ ├── 141.json │ │ │ │ ├── 144.json │ │ │ │ ├── 145.json │ │ │ │ ├── 150.json │ │ │ │ ├── 151.json │ │ │ │ ├── 153.json │ │ │ │ ├── 156.json │ │ │ │ ├── 158.json │ │ │ │ ├── 165.json │ │ │ │ ├── 168.json │ │ │ │ ├── 17.json │ │ │ │ ├── 170.json │ │ │ │ ├── 182.json │ │ │ │ ├── 183.json │ │ │ │ ├── 184.json │ │ │ │ ├── 186.json │ │ │ │ ├── 187.json │ │ │ │ ├── 19.json │ │ │ │ ├── 190.json │ │ │ │ ├── 192.json │ │ │ │ ├── 195.json │ │ │ │ ├── 196.json │ │ │ │ ├── 201.json │ │ │ │ ├── 202.json │ │ │ │ ├── 204.json │ │ │ │ ├── 205.json │ │ │ │ ├── 207.json │ │ │ │ ├── 209.json │ │ │ │ ├── 21.json │ │ │ │ ├── 211.json │ │ │ │ ├── 212.json │ │ │ │ ├── 215.json │ │ │ │ ├── 216.json │ │ │ │ ├── 217.json │ │ │ │ ├── 218.json │ │ │ │ ├── 219.json │ │ │ │ ├── 22.json │ │ │ │ ├── 221.json │ │ │ │ ├── 222.json │ │ │ │ ├── 227.json │ │ │ │ ├── 23.json │ │ │ │ ├── 235.json │ │ │ │ ├── 237.json │ │ │ │ ├── 238.json │ │ │ │ ├── 24.json │ │ │ │ ├── 24169.json │ │ │ │ ├── 24191.json │ │ │ │ ├── 24260.json │ │ │ │ ├── 24307.json │ │ │ │ ├── 24313.json │ │ │ │ ├── 24348.json │ │ │ │ ├── 244.json │ │ │ │ ├── 249.json │ │ │ │ ├── 251.json │ │ │ │ ├── 254.json │ │ │ │ ├── 255.json │ │ │ │ ├── 257.json │ │ │ │ ├── 26.json │ │ │ │ ├── 263.json │ │ │ │ ├── 266.json │ │ │ │ ├── 267.json │ │ │ │ ├── 27.json │ │ │ │ ├── 270.json │ │ │ │ ├── 272.json │ │ │ │ ├── 274.json │ │ │ │ ├── 276.json │ │ │ │ ├── 279.json │ │ │ │ ├── 281.json │ │ │ │ ├── 282.json │ │ │ │ ├── 283.json │ │ │ │ ├── 285.json │ │ │ │ ├── 287.json │ │ │ │ ├── 295.json │ │ │ │ ├── 297.json │ │ │ │ ├── 30.json │ │ │ │ ├── 300.json │ │ │ │ ├── 302.json │ │ │ │ ├── 303.json │ │ │ │ ├── 304.json │ │ │ │ ├── 307.json │ │ │ │ ├── 309.json │ │ │ │ ├── 31.json │ │ │ │ ├── 310.json │ │ │ │ ├── 311.json │ │ │ │ ├── 312.json │ │ │ │ ├── 316.json │ │ │ │ ├── 318.json │ │ │ │ ├── 320.json │ │ │ │ ├── 322.json │ │ │ │ ├── 323.json │ │ │ │ ├── 324.json │ │ │ │ ├── 325.json │ │ │ │ ├── 326.json │ │ │ │ ├── 328.json │ │ │ │ ├── 329.json │ │ │ │ ├── 331.json │ │ │ │ ├── 332.json │ │ │ │ ├── 334.json │ │ │ │ ├── 34.json │ │ │ │ ├── 341.json │ │ │ │ ├── 347.json │ │ │ │ ├── 349.json │ │ │ │ ├── 35.json │ │ │ │ ├── 350.json │ │ │ │ ├── 352.json │ │ │ │ ├── 356.json │ │ │ │ ├── 357.json │ │ │ │ ├── 362.json │ │ │ │ ├── 365.json │ │ │ │ ├── 366.json │ │ │ │ ├── 369.json │ │ │ │ ├── 373.json │ │ │ │ ├── 374.json │ │ │ │ ├── 375.json │ │ │ │ ├── 38.json │ │ │ │ ├── 382.json │ │ │ │ ├── 383.json │ │ │ │ ├── 388.json │ │ │ │ ├── 389.json │ │ │ │ ├── 390.json │ │ │ │ ├── 394.json │ │ │ │ ├── 395.json │ │ │ │ ├── 396.json │ │ │ │ ├── 398.json │ │ │ │ ├── 399.json │ │ │ │ ├── 40.json │ │ │ │ ├── 402.json │ │ │ │ ├── 406.json │ │ │ │ ├── 412.json │ │ │ │ ├── 413.json │ │ │ │ ├── 418.json │ │ │ │ ├── 419.json │ │ │ │ ├── 423.json │ │ │ │ ├── 424.json │ │ │ │ ├── 427.json │ │ │ │ ├── 428.json │ │ │ │ ├── 43.json │ │ │ │ ├── 430.json │ │ │ │ ├── 432.json │ │ │ │ ├── 433.json │ │ │ │ ├── 436.json │ │ │ │ ├── 438.json │ │ │ │ ├── 439.json │ │ │ │ ├── 44.json │ │ │ │ ├── 440.json │ │ │ │ ├── 441.json │ │ │ │ ├── 442.json │ │ │ │ ├── 444.json │ │ │ │ ├── 449.json │ │ │ │ ├── 45.json │ │ │ │ ├── 452.json │ │ │ │ ├── 458.json │ │ │ │ ├── 462.json │ │ │ │ ├── 464.json │ │ │ │ ├── 466.json │ │ │ │ ├── 469.json │ │ │ │ ├── 470.json │ │ │ │ ├── 477.json │ │ │ │ ├── 478.json │ │ │ │ ├── 479.json │ │ │ │ ├── 48.json │ │ │ │ ├── 482.json │ │ │ │ ├── 483.json │ │ │ │ ├── 485.json │ │ │ │ ├── 488.json │ │ │ │ ├── 489.json │ │ │ │ ├── 493.json │ │ │ │ ├── 495.json │ │ │ │ ├── 499.json │ │ │ │ ├── 5.json │ │ │ │ ├── 50.json │ │ │ │ ├── 503.json │ │ │ │ ├── 504.json │ │ │ │ ├── 505.json │ │ │ │ ├── 506.json │ │ │ │ ├── 508.json │ │ │ │ ├── 513.json │ │ │ │ ├── 514.json │ │ │ │ ├── 515.json │ │ │ │ ├── 516.json │ │ │ │ ├── 519.json │ │ │ │ ├── 525.json │ │ │ │ ├── 526.json │ │ │ │ ├── 528.json │ │ │ │ ├── 534.json │ │ │ │ ├── 535.json │ │ │ │ ├── 537.json │ │ │ │ ├── 540.json │ │ │ │ ├── 541.json │ │ │ │ ├── 544.json │ │ │ │ ├── 545.json │ │ │ │ ├── 55.json │ │ │ │ ├── 551.json │ │ │ │ ├── 553.json │ │ │ │ ├── 555.json │ │ │ │ ├── 558.json │ │ │ │ ├── 56.json │ │ │ │ ├── 563.json │ │ │ │ ├── 565.json │ │ │ │ ├── 566.json │ │ │ │ ├── 569.json │ │ │ │ ├── 572.json │ │ │ │ ├── 573.json │ │ │ │ ├── 577.json │ │ │ │ ├── 580.json │ │ │ │ ├── 584.json │ │ │ │ ├── 585.json │ │ │ │ ├── 587.json │ │ │ │ ├── 588.json │ │ │ │ ├── 589.json │ │ │ │ ├── 59.json │ │ │ │ ├── 594.json │ │ │ │ ├── 595.json │ │ │ │ ├── 596.json │ │ │ │ ├── 597.json │ │ │ │ ├── 601.json │ │ │ │ ├── 602.json │ │ │ │ ├── 605.json │ │ │ │ ├── 609.json │ │ │ │ ├── 61.json │ │ │ │ ├── 612.json │ │ │ │ ├── 616.json │ │ │ │ ├── 617.json │ │ │ │ ├── 620.json │ │ │ │ ├── 621.json │ │ │ │ ├── 623.json │ │ │ │ ├── 625.json │ │ │ │ ├── 626.json │ │ │ │ ├── 628.json │ │ │ │ ├── 63.json │ │ │ │ ├── 632.json │ │ │ │ ├── 633.json │ │ │ │ ├── 636.json │ │ │ │ ├── 642.json │ │ │ │ ├── 643.json │ │ │ │ ├── 644.json │ │ │ │ ├── 648.json │ │ │ │ ├── 649.json │ │ │ │ ├── 650.json │ │ │ │ ├── 651.json │ │ │ │ ├── 652.json │ │ │ │ ├── 654.json │ │ │ │ ├── 659.json │ │ │ │ ├── 661.json │ │ │ │ ├── 662.json │ │ │ │ ├── 668.json │ │ │ │ ├── 669.json │ │ │ │ ├── 67.json │ │ │ │ ├── 672.json │ │ │ │ ├── 675.json │ │ │ │ ├── 676.json │ │ │ │ ├── 677.json │ │ │ │ ├── 679.json │ │ │ │ ├── 681.json │ │ │ │ ├── 683.json │ │ │ │ ├── 684.json │ │ │ │ ├── 688.json │ │ │ │ ├── 692.json │ │ │ │ ├── 695.json │ │ │ │ ├── 696.json │ │ │ │ ├── 697.json │ │ │ │ ├── 700.json │ │ │ │ ├── 702.json │ │ │ │ ├── 703.json │ │ │ │ ├── 704.json │ │ │ │ ├── 710.json │ │ │ │ ├── 711.json │ │ │ │ ├── 712.json │ │ │ │ ├── 716.json │ │ │ │ ├── 717.json │ │ │ │ ├── 724.json │ │ │ │ ├── 725.json │ │ │ │ ├── 726.json │ │ │ │ ├── 732.json │ │ │ │ ├── 735.json │ │ │ │ ├── 739.json │ │ │ │ ├── 74.json │ │ │ │ ├── 742.json │ │ │ │ ├── 744.json │ │ │ │ ├── 746.json │ │ │ │ ├── 747.json │ │ │ │ ├── 751.json │ │ │ │ ├── 752.json │ │ │ │ ├── 755.json │ │ │ │ ├── 757.json │ │ │ │ ├── 760.json │ │ │ │ ├── 761.json │ │ │ │ ├── 763.json │ │ │ │ ├── 768.json │ │ │ │ ├── 77.json │ │ │ │ ├── 770.json │ │ │ │ ├── 773.json │ │ │ │ ├── 779.json │ │ │ │ ├── 78.json │ │ │ │ ├── 782.json │ │ │ │ ├── 783.json │ │ │ │ ├── 789.json │ │ │ │ ├── 791.json │ │ │ │ ├── 794.json │ │ │ │ ├── 798.json │ │ │ │ ├── 80.json │ │ │ │ ├── 801.json │ │ │ │ ├── 802.json │ │ │ │ ├── 803.json │ │ │ │ ├── 804.json │ │ │ │ ├── 805.json │ │ │ │ ├── 807.json │ │ │ │ ├── 808.json │ │ │ │ ├── 809.json │ │ │ │ ├── 81.json │ │ │ │ ├── 810.json │ │ │ │ ├── 811.json │ │ │ │ ├── 812.json │ │ │ │ ├── 814.json │ │ │ │ ├── 815.json │ │ │ │ ├── 818.json │ │ │ │ ├── 819.json │ │ │ │ ├── 820.json │ │ │ │ ├── 826.json │ │ │ │ ├── 827.json │ │ │ │ ├── 829.json │ │ │ │ ├── 83.json │ │ │ │ ├── 833.json │ │ │ │ ├── 836.json │ │ │ │ ├── 840.json │ │ │ │ ├── 842.json │ │ │ │ ├── 843.json │ │ │ │ ├── 844.json │ │ │ │ ├── 847.json │ │ │ │ ├── 850.json │ │ │ │ ├── 855.json │ │ │ │ ├── 857.json │ │ │ │ ├── 861.json │ │ │ │ ├── 864.json │ │ │ │ ├── 866.json │ │ │ │ ├── 870.json │ │ │ │ ├── 873.json │ │ │ │ ├── 878.json │ │ │ │ ├── 880.json │ │ │ │ ├── 881.json │ │ │ │ ├── 89.json │ │ │ │ ├── 892.json │ │ │ │ ├── 893.json │ │ │ │ ├── 894.json │ │ │ │ ├── 895.json │ │ │ │ ├── 90.json │ │ │ │ ├── 901.json │ │ │ │ ├── 902.json │ │ │ │ ├── 903.json │ │ │ │ ├── 904.json │ │ │ │ ├── 91.json │ │ │ │ ├── 910.json │ │ │ │ ├── 912.json │ │ │ │ ├── 913.json │ │ │ │ ├── 917.json │ │ │ │ ├── 919.json │ │ │ │ ├── 920.json │ │ │ │ ├── 923.json │ │ │ │ ├── 924.json │ │ │ │ ├── 925.json │ │ │ │ ├── 926.json │ │ │ │ ├── 927.json │ │ │ │ ├── 929.json │ │ │ │ ├── 930.json │ │ │ │ ├── 935.json │ │ │ │ ├── 944.json │ │ │ │ ├── 945.json │ │ │ │ ├── 954.json │ │ │ │ ├── 956.json │ │ │ │ ├── 958.json │ │ │ │ ├── 96.json │ │ │ │ ├── 963.json │ │ │ │ ├── 964.json │ │ │ │ ├── 968.json │ │ │ │ ├── 97.json │ │ │ │ ├── 970.json │ │ │ │ ├── 974.json │ │ │ │ ├── 976.json │ │ │ │ ├── 977.json │ │ │ │ ├── 98.json │ │ │ │ ├── 980.json │ │ │ │ ├── 984.json │ │ │ │ ├── 986.json │ │ │ │ ├── 988.json │ │ │ │ ├── 989.json │ │ │ │ ├── 990.json │ │ │ │ ├── 991.json │ │ │ │ ├── 992.json │ │ │ │ ├── 993.json │ │ │ │ ├── 995.json │ │ │ │ ├── 998.json │ │ │ │ └── 999.json │ │ └── train │ │ │ ├── algebra │ │ │ ├── 0.json │ │ │ ├── 100.json │ │ │ ├── 1000.json │ │ │ ├── 1003.json │ │ │ ├── 1005.json │ │ │ ├── 1006.json │ │ │ ├── 1007.json │ │ │ ├── 1008.json │ │ │ ├── 1010.json │ │ │ ├── 1011.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1015.json │ │ │ ├── 1016.json │ │ │ ├── 1018.json │ │ │ ├── 102.json │ │ │ ├── 1021.json │ │ │ ├── 1024.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 1029.json │ │ │ ├── 103.json │ │ │ ├── 1030.json │ │ │ ├── 1033.json │ │ │ ├── 1036.json │ │ │ ├── 1037.json │ │ │ ├── 1038.json │ │ │ ├── 1039.json │ │ │ ├── 1040.json │ │ │ ├── 1041.json │ │ │ ├── 1045.json │ │ │ ├── 1046.json │ │ │ ├── 1047.json │ │ │ ├── 1048.json │ │ │ ├── 105.json │ │ │ ├── 1052.json │ │ │ ├── 1053.json │ │ │ ├── 1054.json │ │ │ ├── 1055.json │ │ │ ├── 1056.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 106.json │ │ │ ├── 1061.json │ │ │ ├── 1062.json │ │ │ ├── 1064.json │ │ │ ├── 1066.json │ │ │ ├── 1067.json │ │ │ ├── 1068.json │ │ │ ├── 1073.json │ │ │ ├── 1074.json │ │ │ ├── 1076.json │ │ │ ├── 1077.json │ │ │ ├── 1079.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1081.json │ │ │ ├── 1083.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1087.json │ │ │ ├── 1090.json │ │ │ ├── 1091.json │ │ │ ├── 1093.json │ │ │ ├── 1094.json │ │ │ ├── 1096.json │ │ │ ├── 1099.json │ │ │ ├── 1100.json │ │ │ ├── 1101.json │ │ │ ├── 1104.json │ │ │ ├── 1105.json │ │ │ ├── 1106.json │ │ │ ├── 1109.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 1117.json │ │ │ ├── 1118.json │ │ │ ├── 1119.json │ │ │ ├── 112.json │ │ │ ├── 1120.json │ │ │ ├── 1121.json │ │ │ ├── 1122.json │ │ │ ├── 1124.json │ │ │ ├── 1126.json │ │ │ ├── 1127.json │ │ │ ├── 1130.json │ │ │ ├── 1131.json │ │ │ ├── 1132.json │ │ │ ├── 1134.json │ │ │ ├── 1136.json │ │ │ ├── 1137.json │ │ │ ├── 1139.json │ │ │ ├── 1140.json │ │ │ ├── 1141.json │ │ │ ├── 1146.json │ │ │ ├── 1148.json │ │ │ ├── 115.json │ │ │ ├── 1150.json │ │ │ ├── 1152.json │ │ │ ├── 1153.json │ │ │ ├── 1154.json │ │ │ ├── 1155.json │ │ │ ├── 1156.json │ │ │ ├── 1158.json │ │ │ ├── 1159.json │ │ │ ├── 1161.json │ │ │ ├── 1162.json │ │ │ ├── 1163.json │ │ │ ├── 1167.json │ │ │ ├── 117.json │ │ │ ├── 1171.json │ │ │ ├── 1172.json │ │ │ ├── 1173.json │ │ │ ├── 1174.json │ │ │ ├── 1175.json │ │ │ ├── 1176.json │ │ │ ├── 1177.json │ │ │ ├── 1178.json │ │ │ ├── 118.json │ │ │ ├── 1183.json │ │ │ ├── 1186.json │ │ │ ├── 1188.json │ │ │ ├── 1189.json │ │ │ ├── 1191.json │ │ │ ├── 1192.json │ │ │ ├── 1193.json │ │ │ ├── 1194.json │ │ │ ├── 1196.json │ │ │ ├── 1198.json │ │ │ ├── 12.json │ │ │ ├── 120.json │ │ │ ├── 1200.json │ │ │ ├── 1201.json │ │ │ ├── 1202.json │ │ │ ├── 1204.json │ │ │ ├── 1205.json │ │ │ ├── 1207.json │ │ │ ├── 121.json │ │ │ ├── 1211.json │ │ │ ├── 1215.json │ │ │ ├── 1216.json │ │ │ ├── 1217.json │ │ │ ├── 1218.json │ │ │ ├── 1219.json │ │ │ ├── 122.json │ │ │ ├── 1222.json │ │ │ ├── 1223.json │ │ │ ├── 1224.json │ │ │ ├── 1225.json │ │ │ ├── 1228.json │ │ │ ├── 1229.json │ │ │ ├── 1230.json │ │ │ ├── 1232.json │ │ │ ├── 1235.json │ │ │ ├── 1236.json │ │ │ ├── 1237.json │ │ │ ├── 124.json │ │ │ ├── 1240.json │ │ │ ├── 1242.json │ │ │ ├── 1243.json │ │ │ ├── 1244.json │ │ │ ├── 1245.json │ │ │ ├── 1247.json │ │ │ ├── 1254.json │ │ │ ├── 1256.json │ │ │ ├── 1257.json │ │ │ ├── 1258.json │ │ │ ├── 1262.json │ │ │ ├── 1267.json │ │ │ ├── 1269.json │ │ │ ├── 127.json │ │ │ ├── 1273.json │ │ │ ├── 1274.json │ │ │ ├── 1276.json │ │ │ ├── 1277.json │ │ │ ├── 1279.json │ │ │ ├── 128.json │ │ │ ├── 1280.json │ │ │ ├── 1284.json │ │ │ ├── 1285.json │ │ │ ├── 1290.json │ │ │ ├── 1292.json │ │ │ ├── 1296.json │ │ │ ├── 1297.json │ │ │ ├── 1298.json │ │ │ ├── 1299.json │ │ │ ├── 130.json │ │ │ ├── 1300.json │ │ │ ├── 1301.json │ │ │ ├── 1304.json │ │ │ ├── 1305.json │ │ │ ├── 1307.json │ │ │ ├── 1308.json │ │ │ ├── 1309.json │ │ │ ├── 1311.json │ │ │ ├── 1313.json │ │ │ ├── 1314.json │ │ │ ├── 1315.json │ │ │ ├── 1319.json │ │ │ ├── 1320.json │ │ │ ├── 1321.json │ │ │ ├── 1322.json │ │ │ ├── 1323.json │ │ │ ├── 1324.json │ │ │ ├── 1325.json │ │ │ ├── 1326.json │ │ │ ├── 1327.json │ │ │ ├── 1328.json │ │ │ ├── 133.json │ │ │ ├── 1330.json │ │ │ ├── 1333.json │ │ │ ├── 1334.json │ │ │ ├── 1335.json │ │ │ ├── 1336.json │ │ │ ├── 1337.json │ │ │ ├── 134.json │ │ │ ├── 1344.json │ │ │ ├── 1346.json │ │ │ ├── 1347.json │ │ │ ├── 1348.json │ │ │ ├── 1350.json │ │ │ ├── 1351.json │ │ │ ├── 1352.json │ │ │ ├── 1353.json │ │ │ ├── 1356.json │ │ │ ├── 1357.json │ │ │ ├── 1358.json │ │ │ ├── 136.json │ │ │ ├── 1361.json │ │ │ ├── 1363.json │ │ │ ├── 1364.json │ │ │ ├── 1365.json │ │ │ ├── 1367.json │ │ │ ├── 1369.json │ │ │ ├── 1370.json │ │ │ ├── 1371.json │ │ │ ├── 1378.json │ │ │ ├── 1379.json │ │ │ ├── 1381.json │ │ │ ├── 1382.json │ │ │ ├── 1383.json │ │ │ ├── 1384.json │ │ │ ├── 1385.json │ │ │ ├── 1386.json │ │ │ ├── 1388.json │ │ │ ├── 1389.json │ │ │ ├── 1391.json │ │ │ ├── 1393.json │ │ │ ├── 1394.json │ │ │ ├── 1395.json │ │ │ ├── 1397.json │ │ │ ├── 1399.json │ │ │ ├── 14.json │ │ │ ├── 1400.json │ │ │ ├── 1402.json │ │ │ ├── 1403.json │ │ │ ├── 1404.json │ │ │ ├── 1405.json │ │ │ ├── 1406.json │ │ │ ├── 1407.json │ │ │ ├── 1409.json │ │ │ ├── 1410.json │ │ │ ├── 1412.json │ │ │ ├── 1413.json │ │ │ ├── 1414.json │ │ │ ├── 1415.json │ │ │ ├── 1417.json │ │ │ ├── 1420.json │ │ │ ├── 1421.json │ │ │ ├── 1426.json │ │ │ ├── 1427.json │ │ │ ├── 1429.json │ │ │ ├── 1430.json │ │ │ ├── 1431.json │ │ │ ├── 1432.json │ │ │ ├── 1433.json │ │ │ ├── 1435.json │ │ │ ├── 1436.json │ │ │ ├── 1437.json │ │ │ ├── 1440.json │ │ │ ├── 1444.json │ │ │ ├── 1446.json │ │ │ ├── 1449.json │ │ │ ├── 145.json │ │ │ ├── 1450.json │ │ │ ├── 1451.json │ │ │ ├── 1452.json │ │ │ ├── 1453.json │ │ │ ├── 1454.json │ │ │ ├── 1455.json │ │ │ ├── 1456.json │ │ │ ├── 146.json │ │ │ ├── 1460.json │ │ │ ├── 1465.json │ │ │ ├── 1469.json │ │ │ ├── 147.json │ │ │ ├── 1471.json │ │ │ ├── 1472.json │ │ │ ├── 1473.json │ │ │ ├── 1474.json │ │ │ ├── 1475.json │ │ │ ├── 1476.json │ │ │ ├── 1477.json │ │ │ ├── 1478.json │ │ │ ├── 1479.json │ │ │ ├── 1481.json │ │ │ ├── 1482.json │ │ │ ├── 1483.json │ │ │ ├── 1484.json │ │ │ ├── 1487.json │ │ │ ├── 1489.json │ │ │ ├── 1491.json │ │ │ ├── 1492.json │ │ │ ├── 1495.json │ │ │ ├── 1496.json │ │ │ ├── 1497.json │ │ │ ├── 1499.json │ │ │ ├── 150.json │ │ │ ├── 1501.json │ │ │ ├── 1502.json │ │ │ ├── 1503.json │ │ │ ├── 1504.json │ │ │ ├── 1505.json │ │ │ ├── 1508.json │ │ │ ├── 1509.json │ │ │ ├── 1510.json │ │ │ ├── 1512.json │ │ │ ├── 1513.json │ │ │ ├── 1515.json │ │ │ ├── 1516.json │ │ │ ├── 1517.json │ │ │ ├── 1518.json │ │ │ ├── 152.json │ │ │ ├── 1520.json │ │ │ ├── 1521.json │ │ │ ├── 1522.json │ │ │ ├── 1523.json │ │ │ ├── 1525.json │ │ │ ├── 1526.json │ │ │ ├── 1530.json │ │ │ ├── 1531.json │ │ │ ├── 1532.json │ │ │ ├── 1533.json │ │ │ ├── 1536.json │ │ │ ├── 1537.json │ │ │ ├── 1539.json │ │ │ ├── 154.json │ │ │ ├── 1542.json │ │ │ ├── 1544.json │ │ │ ├── 1546.json │ │ │ ├── 1550.json │ │ │ ├── 1551.json │ │ │ ├── 1552.json │ │ │ ├── 1554.json │ │ │ ├── 1555.json │ │ │ ├── 1556.json │ │ │ ├── 1559.json │ │ │ ├── 1562.json │ │ │ ├── 1563.json │ │ │ ├── 1565.json │ │ │ ├── 1566.json │ │ │ ├── 1567.json │ │ │ ├── 157.json │ │ │ ├── 1571.json │ │ │ ├── 1572.json │ │ │ ├── 1573.json │ │ │ ├── 1574.json │ │ │ ├── 1575.json │ │ │ ├── 1576.json │ │ │ ├── 1577.json │ │ │ ├── 1579.json │ │ │ ├── 1583.json │ │ │ ├── 1587.json │ │ │ ├── 1589.json │ │ │ ├── 1590.json │ │ │ ├── 1595.json │ │ │ ├── 1599.json │ │ │ ├── 16.json │ │ │ ├── 1601.json │ │ │ ├── 1603.json │ │ │ ├── 1607.json │ │ │ ├── 1608.json │ │ │ ├── 1612.json │ │ │ ├── 1613.json │ │ │ ├── 1614.json │ │ │ ├── 1615.json │ │ │ ├── 1617.json │ │ │ ├── 1618.json │ │ │ ├── 1619.json │ │ │ ├── 162.json │ │ │ ├── 1620.json │ │ │ ├── 1622.json │ │ │ ├── 1625.json │ │ │ ├── 1626.json │ │ │ ├── 1627.json │ │ │ ├── 1629.json │ │ │ ├── 163.json │ │ │ ├── 1630.json │ │ │ ├── 1631.json │ │ │ ├── 1632.json │ │ │ ├── 1635.json │ │ │ ├── 1636.json │ │ │ ├── 1637.json │ │ │ ├── 1638.json │ │ │ ├── 164.json │ │ │ ├── 1640.json │ │ │ ├── 1641.json │ │ │ ├── 1642.json │ │ │ ├── 1643.json │ │ │ ├── 1644.json │ │ │ ├── 1645.json │ │ │ ├── 1648.json │ │ │ ├── 1649.json │ │ │ ├── 165.json │ │ │ ├── 1651.json │ │ │ ├── 1652.json │ │ │ ├── 1653.json │ │ │ ├── 1654.json │ │ │ ├── 1655.json │ │ │ ├── 1657.json │ │ │ ├── 1658.json │ │ │ ├── 166.json │ │ │ ├── 1660.json │ │ │ ├── 1661.json │ │ │ ├── 1662.json │ │ │ ├── 1663.json │ │ │ ├── 1665.json │ │ │ ├── 1666.json │ │ │ ├── 1667.json │ │ │ ├── 1669.json │ │ │ ├── 167.json │ │ │ ├── 1670.json │ │ │ ├── 1671.json │ │ │ ├── 1672.json │ │ │ ├── 1673.json │ │ │ ├── 1675.json │ │ │ ├── 1676.json │ │ │ ├── 1677.json │ │ │ ├── 1679.json │ │ │ ├── 168.json │ │ │ ├── 1681.json │ │ │ ├── 1682.json │ │ │ ├── 1684.json │ │ │ ├── 1685.json │ │ │ ├── 1686.json │ │ │ ├── 1687.json │ │ │ ├── 1688.json │ │ │ ├── 169.json │ │ │ ├── 1690.json │ │ │ ├── 1691.json │ │ │ ├── 1692.json │ │ │ ├── 1694.json │ │ │ ├── 1695.json │ │ │ ├── 1696.json │ │ │ ├── 1697.json │ │ │ ├── 1700.json │ │ │ ├── 1705.json │ │ │ ├── 1708.json │ │ │ ├── 1710.json │ │ │ ├── 1711.json │ │ │ ├── 1712.json │ │ │ ├── 1715.json │ │ │ ├── 1716.json │ │ │ ├── 1717.json │ │ │ ├── 1718.json │ │ │ ├── 1719.json │ │ │ ├── 172.json │ │ │ ├── 1720.json │ │ │ ├── 1721.json │ │ │ ├── 1722.json │ │ │ ├── 1723.json │ │ │ ├── 1725.json │ │ │ ├── 1726.json │ │ │ ├── 1727.json │ │ │ ├── 1728.json │ │ │ ├── 173.json │ │ │ ├── 1734.json │ │ │ ├── 1735.json │ │ │ ├── 1737.json │ │ │ ├── 1738.json │ │ │ ├── 1740.json │ │ │ ├── 1741.json │ │ │ ├── 1743.json │ │ │ ├── 1744.json │ │ │ ├── 1745.json │ │ │ ├── 1746.json │ │ │ ├── 1747.json │ │ │ ├── 1749.json │ │ │ ├── 1751.json │ │ │ ├── 1752.json │ │ │ ├── 1754.json │ │ │ ├── 1756.json │ │ │ ├── 1758.json │ │ │ ├── 1759.json │ │ │ ├── 1761.json │ │ │ ├── 1764.json │ │ │ ├── 1765.json │ │ │ ├── 1766.json │ │ │ ├── 1767.json │ │ │ ├── 1768.json │ │ │ ├── 1769.json │ │ │ ├── 177.json │ │ │ ├── 1771.json │ │ │ ├── 1773.json │ │ │ ├── 1775.json │ │ │ ├── 1777.json │ │ │ ├── 1780.json │ │ │ ├── 1782.json │ │ │ ├── 1783.json │ │ │ ├── 1785.json │ │ │ ├── 179.json │ │ │ ├── 1790.json │ │ │ ├── 1793.json │ │ │ ├── 1795.json │ │ │ ├── 1797.json │ │ │ ├── 1799.json │ │ │ ├── 18.json │ │ │ ├── 1801.json │ │ │ ├── 1802.json │ │ │ ├── 1808.json │ │ │ ├── 1813.json │ │ │ ├── 1816.json │ │ │ ├── 1817.json │ │ │ ├── 1819.json │ │ │ ├── 1821.json │ │ │ ├── 1822.json │ │ │ ├── 1823.json │ │ │ ├── 1825.json │ │ │ ├── 1827.json │ │ │ ├── 1829.json │ │ │ ├── 1830.json │ │ │ ├── 1831.json │ │ │ ├── 1832.json │ │ │ ├── 1833.json │ │ │ ├── 1835.json │ │ │ ├── 1839.json │ │ │ ├── 1840.json │ │ │ ├── 1843.json │ │ │ ├── 1844.json │ │ │ ├── 1847.json │ │ │ ├── 1851.json │ │ │ ├── 1852.json │ │ │ ├── 1853.json │ │ │ ├── 1854.json │ │ │ ├── 1857.json │ │ │ ├── 1858.json │ │ │ ├── 1859.json │ │ │ ├── 186.json │ │ │ ├── 1860.json │ │ │ ├── 1866.json │ │ │ ├── 1867.json │ │ │ ├── 1868.json │ │ │ ├── 1871.json │ │ │ ├── 1872.json │ │ │ ├── 1873.json │ │ │ ├── 1874.json │ │ │ ├── 1876.json │ │ │ ├── 1877.json │ │ │ ├── 1879.json │ │ │ ├── 1881.json │ │ │ ├── 1882.json │ │ │ ├── 1883.json │ │ │ ├── 1885.json │ │ │ ├── 1887.json │ │ │ ├── 1889.json │ │ │ ├── 189.json │ │ │ ├── 1892.json │ │ │ ├── 1896.json │ │ │ ├── 19.json │ │ │ ├── 1901.json │ │ │ ├── 1903.json │ │ │ ├── 1906.json │ │ │ ├── 191.json │ │ │ ├── 1913.json │ │ │ ├── 1917.json │ │ │ ├── 1920.json │ │ │ ├── 1921.json │ │ │ ├── 1922.json │ │ │ ├── 1925.json │ │ │ ├── 1926.json │ │ │ ├── 1927.json │ │ │ ├── 193.json │ │ │ ├── 1930.json │ │ │ ├── 1931.json │ │ │ ├── 1932.json │ │ │ ├── 1935.json │ │ │ ├── 1938.json │ │ │ ├── 1939.json │ │ │ ├── 194.json │ │ │ ├── 1940.json │ │ │ ├── 1941.json │ │ │ ├── 1943.json │ │ │ ├── 1944.json │ │ │ ├── 1945.json │ │ │ ├── 1947.json │ │ │ ├── 1948.json │ │ │ ├── 1949.json │ │ │ ├── 195.json │ │ │ ├── 1951.json │ │ │ ├── 1952.json │ │ │ ├── 1955.json │ │ │ ├── 1956.json │ │ │ ├── 1958.json │ │ │ ├── 1959.json │ │ │ ├── 1961.json │ │ │ ├── 1962.json │ │ │ ├── 1964.json │ │ │ ├── 1965.json │ │ │ ├── 1966.json │ │ │ ├── 197.json │ │ │ ├── 1970.json │ │ │ ├── 1972.json │ │ │ ├── 1978.json │ │ │ ├── 1979.json │ │ │ ├── 198.json │ │ │ ├── 1980.json │ │ │ ├── 1983.json │ │ │ ├── 1984.json │ │ │ ├── 1986.json │ │ │ ├── 1987.json │ │ │ ├── 1989.json │ │ │ ├── 199.json │ │ │ ├── 1990.json │ │ │ ├── 1992.json │ │ │ ├── 1995.json │ │ │ ├── 1998.json │ │ │ ├── 20.json │ │ │ ├── 200.json │ │ │ ├── 2001.json │ │ │ ├── 2003.json │ │ │ ├── 2005.json │ │ │ ├── 2006.json │ │ │ ├── 2007.json │ │ │ ├── 201.json │ │ │ ├── 2011.json │ │ │ ├── 2013.json │ │ │ ├── 2018.json │ │ │ ├── 202.json │ │ │ ├── 2020.json │ │ │ ├── 2027.json │ │ │ ├── 2029.json │ │ │ ├── 203.json │ │ │ ├── 2030.json │ │ │ ├── 2031.json │ │ │ ├── 2032.json │ │ │ ├── 2033.json │ │ │ ├── 2034.json │ │ │ ├── 2035.json │ │ │ ├── 2037.json │ │ │ ├── 2038.json │ │ │ ├── 2039.json │ │ │ ├── 204.json │ │ │ ├── 2041.json │ │ │ ├── 2042.json │ │ │ ├── 2044.json │ │ │ ├── 2047.json │ │ │ ├── 205.json │ │ │ ├── 2052.json │ │ │ ├── 2053.json │ │ │ ├── 2054.json │ │ │ ├── 2056.json │ │ │ ├── 2057.json │ │ │ ├── 2059.json │ │ │ ├── 2060.json │ │ │ ├── 2061.json │ │ │ ├── 2062.json │ │ │ ├── 2063.json │ │ │ ├── 2065.json │ │ │ ├── 2067.json │ │ │ ├── 2068.json │ │ │ ├── 2069.json │ │ │ ├── 207.json │ │ │ ├── 2070.json │ │ │ ├── 2071.json │ │ │ ├── 2073.json │ │ │ ├── 2075.json │ │ │ ├── 2077.json │ │ │ ├── 2079.json │ │ │ ├── 2081.json │ │ │ ├── 2083.json │ │ │ ├── 2086.json │ │ │ ├── 2087.json │ │ │ ├── 2089.json │ │ │ ├── 2090.json │ │ │ ├── 2093.json │ │ │ ├── 2095.json │ │ │ ├── 2096.json │ │ │ ├── 2097.json │ │ │ ├── 210.json │ │ │ ├── 2103.json │ │ │ ├── 2105.json │ │ │ ├── 2107.json │ │ │ ├── 2108.json │ │ │ ├── 2110.json │ │ │ ├── 2113.json │ │ │ ├── 2114.json │ │ │ ├── 2115.json │ │ │ ├── 2116.json │ │ │ ├── 2118.json │ │ │ ├── 212.json │ │ │ ├── 2121.json │ │ │ ├── 2123.json │ │ │ ├── 2124.json │ │ │ ├── 2125.json │ │ │ ├── 2128.json │ │ │ ├── 2129.json │ │ │ ├── 213.json │ │ │ ├── 2131.json │ │ │ ├── 2132.json │ │ │ ├── 2134.json │ │ │ ├── 2136.json │ │ │ ├── 2138.json │ │ │ ├── 2139.json │ │ │ ├── 2140.json │ │ │ ├── 2142.json │ │ │ ├── 2143.json │ │ │ ├── 2148.json │ │ │ ├── 2149.json │ │ │ ├── 2151.json │ │ │ ├── 2156.json │ │ │ ├── 2158.json │ │ │ ├── 216.json │ │ │ ├── 2161.json │ │ │ ├── 2162.json │ │ │ ├── 2164.json │ │ │ ├── 2166.json │ │ │ ├── 2169.json │ │ │ ├── 217.json │ │ │ ├── 2170.json │ │ │ ├── 2171.json │ │ │ ├── 2172.json │ │ │ ├── 2174.json │ │ │ ├── 2175.json │ │ │ ├── 2177.json │ │ │ ├── 2178.json │ │ │ ├── 2179.json │ │ │ ├── 218.json │ │ │ ├── 2180.json │ │ │ ├── 2181.json │ │ │ ├── 2182.json │ │ │ ├── 2183.json │ │ │ ├── 2184.json │ │ │ ├── 2187.json │ │ │ ├── 2188.json │ │ │ ├── 2189.json │ │ │ ├── 219.json │ │ │ ├── 2190.json │ │ │ ├── 2194.json │ │ │ ├── 2197.json │ │ │ ├── 2198.json │ │ │ ├── 2200.json │ │ │ ├── 2202.json │ │ │ ├── 2204.json │ │ │ ├── 2205.json │ │ │ ├── 2206.json │ │ │ ├── 2208.json │ │ │ ├── 221.json │ │ │ ├── 2210.json │ │ │ ├── 2211.json │ │ │ ├── 2212.json │ │ │ ├── 2219.json │ │ │ ├── 222.json │ │ │ ├── 2222.json │ │ │ ├── 2223.json │ │ │ ├── 2224.json │ │ │ ├── 2225.json │ │ │ ├── 2228.json │ │ │ ├── 2229.json │ │ │ ├── 223.json │ │ │ ├── 2230.json │ │ │ ├── 2231.json │ │ │ ├── 2233.json │ │ │ ├── 2234.json │ │ │ ├── 2239.json │ │ │ ├── 2242.json │ │ │ ├── 2244.json │ │ │ ├── 2245.json │ │ │ ├── 2247.json │ │ │ ├── 2249.json │ │ │ ├── 225.json │ │ │ ├── 2250.json │ │ │ ├── 2256.json │ │ │ ├── 2258.json │ │ │ ├── 226.json │ │ │ ├── 2260.json │ │ │ ├── 2262.json │ │ │ ├── 2263.json │ │ │ ├── 2266.json │ │ │ ├── 2269.json │ │ │ ├── 227.json │ │ │ ├── 2270.json │ │ │ ├── 2272.json │ │ │ ├── 2273.json │ │ │ ├── 2275.json │ │ │ ├── 2279.json │ │ │ ├── 228.json │ │ │ ├── 2280.json │ │ │ ├── 2281.json │ │ │ ├── 2282.json │ │ │ ├── 2286.json │ │ │ ├── 2289.json │ │ │ ├── 229.json │ │ │ ├── 2290.json │ │ │ ├── 2291.json │ │ │ ├── 2296.json │ │ │ ├── 2297.json │ │ │ ├── 2299.json │ │ │ ├── 23.json │ │ │ ├── 2301.json │ │ │ ├── 2302.json │ │ │ ├── 2304.json │ │ │ ├── 2306.json │ │ │ ├── 2308.json │ │ │ ├── 2309.json │ │ │ ├── 231.json │ │ │ ├── 2310.json │ │ │ ├── 2311.json │ │ │ ├── 2312.json │ │ │ ├── 2313.json │ │ │ ├── 2314.json │ │ │ ├── 2315.json │ │ │ ├── 2317.json │ │ │ ├── 2319.json │ │ │ ├── 232.json │ │ │ ├── 2322.json │ │ │ ├── 2323.json │ │ │ ├── 2324.json │ │ │ ├── 2325.json │ │ │ ├── 2326.json │ │ │ ├── 2327.json │ │ │ ├── 233.json │ │ │ ├── 2334.json │ │ │ ├── 2336.json │ │ │ ├── 2337.json │ │ │ ├── 2338.json │ │ │ ├── 2339.json │ │ │ ├── 2340.json │ │ │ ├── 2343.json │ │ │ ├── 2344.json │ │ │ ├── 2345.json │ │ │ ├── 2346.json │ │ │ ├── 2347.json │ │ │ ├── 2348.json │ │ │ ├── 2349.json │ │ │ ├── 235.json │ │ │ ├── 2350.json │ │ │ ├── 2352.json │ │ │ ├── 2353.json │ │ │ ├── 2354.json │ │ │ ├── 2355.json │ │ │ ├── 2356.json │ │ │ ├── 2360.json │ │ │ ├── 2364.json │ │ │ ├── 2365.json │ │ │ ├── 2366.json │ │ │ ├── 2367.json │ │ │ ├── 2368.json │ │ │ ├── 2369.json │ │ │ ├── 237.json │ │ │ ├── 2371.json │ │ │ ├── 2372.json │ │ │ ├── 2375.json │ │ │ ├── 2377.json │ │ │ ├── 2379.json │ │ │ ├── 238.json │ │ │ ├── 2380.json │ │ │ ├── 2382.json │ │ │ ├── 2383.json │ │ │ ├── 2384.json │ │ │ ├── 2385.json │ │ │ ├── 2386.json │ │ │ ├── 2387.json │ │ │ ├── 2388.json │ │ │ ├── 2389.json │ │ │ ├── 239.json │ │ │ ├── 2390.json │ │ │ ├── 23905.json │ │ │ ├── 23928.json │ │ │ ├── 2394.json │ │ │ ├── 23952.json │ │ │ ├── 23953.json │ │ │ ├── 2396.json │ │ │ ├── 23993.json │ │ │ ├── 2400.json │ │ │ ├── 24005.json │ │ │ ├── 2401.json │ │ │ ├── 24014.json │ │ │ ├── 2402.json │ │ │ ├── 24022.json │ │ │ ├── 24038.json │ │ │ ├── 2405.json │ │ │ ├── 2406.json │ │ │ ├── 24061.json │ │ │ ├── 24077.json │ │ │ ├── 24079.json │ │ │ ├── 2408.json │ │ │ ├── 241.json │ │ │ ├── 2410.json │ │ │ ├── 24106.json │ │ │ ├── 2411.json │ │ │ ├── 24113.json │ │ │ ├── 24118.json │ │ │ ├── 24123.json │ │ │ ├── 2413.json │ │ │ ├── 24139.json │ │ │ ├── 2414.json │ │ │ ├── 2415.json │ │ │ ├── 2418.json │ │ │ ├── 2419.json │ │ │ ├── 242.json │ │ │ ├── 2420.json │ │ │ ├── 2422.json │ │ │ ├── 2423.json │ │ │ ├── 2424.json │ │ │ ├── 2425.json │ │ │ ├── 2426.json │ │ │ ├── 2428.json │ │ │ ├── 2429.json │ │ │ ├── 243.json │ │ │ ├── 2431.json │ │ │ ├── 2432.json │ │ │ ├── 2434.json │ │ │ ├── 2436.json │ │ │ ├── 24377.json │ │ │ ├── 2439.json │ │ │ ├── 244.json │ │ │ ├── 2440.json │ │ │ ├── 24402.json │ │ │ ├── 24403.json │ │ │ ├── 2441.json │ │ │ ├── 24411.json │ │ │ ├── 24417.json │ │ │ ├── 2442.json │ │ │ ├── 2443.json │ │ │ ├── 2444.json │ │ │ ├── 2445.json │ │ │ ├── 24453.json │ │ │ ├── 2446.json │ │ │ ├── 2447.json │ │ │ ├── 2448.json │ │ │ ├── 2449.json │ │ │ ├── 2450.json │ │ │ ├── 24503.json │ │ │ ├── 2451.json │ │ │ ├── 2452.json │ │ │ ├── 24524.json │ │ │ ├── 2454.json │ │ │ ├── 24548.json │ │ │ ├── 2455.json │ │ │ ├── 24553.json │ │ │ ├── 24565.json │ │ │ ├── 2460.json │ │ │ ├── 24607.json │ │ │ ├── 2461.json │ │ │ ├── 2462.json │ │ │ ├── 24621.json │ │ │ ├── 24629.json │ │ │ ├── 2463.json │ │ │ ├── 24632.json │ │ │ ├── 2464.json │ │ │ ├── 2466.json │ │ │ ├── 24673.json │ │ │ ├── 24677.json │ │ │ ├── 24678.json │ │ │ ├── 2468.json │ │ │ ├── 24685.json │ │ │ ├── 2472.json │ │ │ ├── 2473.json │ │ │ ├── 24731.json │ │ │ ├── 24737.json │ │ │ ├── 2474.json │ │ │ ├── 24753.json │ │ │ ├── 24756.json │ │ │ ├── 24771.json │ │ │ ├── 2478.json │ │ │ ├── 2479.json │ │ │ ├── 2483.json │ │ │ ├── 2484.json │ │ │ ├── 24842.json │ │ │ ├── 2485.json │ │ │ ├── 24858.json │ │ │ ├── 2487.json │ │ │ ├── 2488.json │ │ │ ├── 24884.json │ │ │ ├── 24888.json │ │ │ ├── 249.json │ │ │ ├── 2490.json │ │ │ ├── 2491.json │ │ │ ├── 24917.json │ │ │ ├── 2492.json │ │ │ ├── 2494.json │ │ │ ├── 24942.json │ │ │ ├── 24945.json │ │ │ ├── 24954.json │ │ │ ├── 24958.json │ │ │ ├── 24959.json │ │ │ ├── 24964.json │ │ │ ├── 2497.json │ │ │ ├── 24973.json │ │ │ ├── 24993.json │ │ │ ├── 25.json │ │ │ ├── 2500.json │ │ │ ├── 25002.json │ │ │ ├── 2501.json │ │ │ ├── 25015.json │ │ │ ├── 25020.json │ │ │ ├── 2503.json │ │ │ ├── 25039.json │ │ │ ├── 2504.json │ │ │ ├── 25040.json │ │ │ ├── 2505.json │ │ │ ├── 25051.json │ │ │ ├── 2506.json │ │ │ ├── 2507.json │ │ │ ├── 25070.json │ │ │ ├── 2508.json │ │ │ ├── 2509.json │ │ │ ├── 25090.json │ │ │ ├── 25098.json │ │ │ ├── 2510.json │ │ │ ├── 25115.json │ │ │ ├── 2513.json │ │ │ ├── 2514.json │ │ │ ├── 2516.json │ │ │ ├── 25179.json │ │ │ ├── 2519.json │ │ │ ├── 25190.json │ │ │ ├── 25192.json │ │ │ ├── 252.json │ │ │ ├── 25200.json │ │ │ ├── 2521.json │ │ │ ├── 25219.json │ │ │ ├── 2522.json │ │ │ ├── 25220.json │ │ │ ├── 2523.json │ │ │ ├── 2524.json │ │ │ ├── 25244.json │ │ │ ├── 25249.json │ │ │ ├── 25250.json │ │ │ ├── 25257.json │ │ │ ├── 2526.json │ │ │ ├── 25266.json │ │ │ ├── 25272.json │ │ │ ├── 2528.json │ │ │ ├── 25284.json │ │ │ ├── 25287.json │ │ │ ├── 2529.json │ │ │ ├── 25295.json │ │ │ ├── 253.json │ │ │ ├── 2532.json │ │ │ ├── 25326.json │ │ │ ├── 2533.json │ │ │ ├── 25337.json │ │ │ ├── 2534.json │ │ │ ├── 25348.json │ │ │ ├── 2535.json │ │ │ ├── 2537.json │ │ │ ├── 25370.json │ │ │ ├── 2538.json │ │ │ ├── 254.json │ │ │ ├── 2540.json │ │ │ ├── 25404.json │ │ │ ├── 25423.json │ │ │ ├── 25426.json │ │ │ ├── 25448.json │ │ │ ├── 2545.json │ │ │ ├── 2547.json │ │ │ ├── 25473.json │ │ │ ├── 25474.json │ │ │ ├── 25480.json │ │ │ ├── 25487.json │ │ │ ├── 255.json │ │ │ ├── 2550.json │ │ │ ├── 25516.json │ │ │ ├── 256.json │ │ │ ├── 2560.json │ │ │ ├── 2561.json │ │ │ ├── 2562.json │ │ │ ├── 2563.json │ │ │ ├── 2564.json │ │ │ ├── 2567.json │ │ │ ├── 2568.json │ │ │ ├── 2569.json │ │ │ ├── 257.json │ │ │ ├── 2571.json │ │ │ ├── 2573.json │ │ │ ├── 2575.json │ │ │ ├── 258.json │ │ │ ├── 2580.json │ │ │ ├── 2581.json │ │ │ ├── 25835.json │ │ │ ├── 25846.json │ │ │ ├── 2585.json │ │ │ ├── 25852.json │ │ │ ├── 2586.json │ │ │ ├── 2589.json │ │ │ ├── 259.json │ │ │ ├── 2591.json │ │ │ ├── 2594.json │ │ │ ├── 2595.json │ │ │ ├── 2597.json │ │ │ ├── 2598.json │ │ │ ├── 2599.json │ │ │ ├── 2600.json │ │ │ ├── 2601.json │ │ │ ├── 2607.json │ │ │ ├── 2608.json │ │ │ ├── 2609.json │ │ │ ├── 261.json │ │ │ ├── 2610.json │ │ │ ├── 2611.json │ │ │ ├── 2613.json │ │ │ ├── 2614.json │ │ │ ├── 2615.json │ │ │ ├── 2616.json │ │ │ ├── 2617.json │ │ │ ├── 262.json │ │ │ ├── 2622.json │ │ │ ├── 2624.json │ │ │ ├── 2625.json │ │ │ ├── 2627.json │ │ │ ├── 2630.json │ │ │ ├── 2632.json │ │ │ ├── 2633.json │ │ │ ├── 2634.json │ │ │ ├── 2635.json │ │ │ ├── 2636.json │ │ │ ├── 2638.json │ │ │ ├── 2639.json │ │ │ ├── 264.json │ │ │ ├── 2640.json │ │ │ ├── 2643.json │ │ │ ├── 2644.json │ │ │ ├── 2645.json │ │ │ ├── 2646.json │ │ │ ├── 2647.json │ │ │ ├── 2648.json │ │ │ ├── 2650.json │ │ │ ├── 2652.json │ │ │ ├── 2654.json │ │ │ ├── 2655.json │ │ │ ├── 2656.json │ │ │ ├── 2658.json │ │ │ ├── 2660.json │ │ │ ├── 2661.json │ │ │ ├── 2663.json │ │ │ ├── 2665.json │ │ │ ├── 2666.json │ │ │ ├── 2667.json │ │ │ ├── 2668.json │ │ │ ├── 2669.json │ │ │ ├── 2673.json │ │ │ ├── 2676.json │ │ │ ├── 2678.json │ │ │ ├── 2679.json │ │ │ ├── 268.json │ │ │ ├── 2681.json │ │ │ ├── 2682.json │ │ │ ├── 2684.json │ │ │ ├── 2686.json │ │ │ ├── 2689.json │ │ │ ├── 2690.json │ │ │ ├── 2692.json │ │ │ ├── 2697.json │ │ │ ├── 2698.json │ │ │ ├── 2699.json │ │ │ ├── 27.json │ │ │ ├── 2703.json │ │ │ ├── 2704.json │ │ │ ├── 2705.json │ │ │ ├── 2707.json │ │ │ ├── 2709.json │ │ │ ├── 2713.json │ │ │ ├── 2716.json │ │ │ ├── 2717.json │ │ │ ├── 2718.json │ │ │ ├── 272.json │ │ │ ├── 2721.json │ │ │ ├── 2722.json │ │ │ ├── 2724.json │ │ │ ├── 2725.json │ │ │ ├── 2726.json │ │ │ ├── 2727.json │ │ │ ├── 2729.json │ │ │ ├── 273.json │ │ │ ├── 2730.json │ │ │ ├── 2733.json │ │ │ ├── 2734.json │ │ │ ├── 2737.json │ │ │ ├── 2739.json │ │ │ ├── 274.json │ │ │ ├── 2746.json │ │ │ ├── 2747.json │ │ │ ├── 2749.json │ │ │ ├── 2750.json │ │ │ ├── 2751.json │ │ │ ├── 2752.json │ │ │ ├── 2754.json │ │ │ ├── 2757.json │ │ │ ├── 2758.json │ │ │ ├── 2760.json │ │ │ ├── 2761.json │ │ │ ├── 2763.json │ │ │ ├── 2764.json │ │ │ ├── 2765.json │ │ │ ├── 2766.json │ │ │ ├── 2767.json │ │ │ ├── 2769.json │ │ │ ├── 277.json │ │ │ ├── 2770.json │ │ │ ├── 2771.json │ │ │ ├── 2773.json │ │ │ ├── 2774.json │ │ │ ├── 2775.json │ │ │ ├── 2776.json │ │ │ ├── 2777.json │ │ │ ├── 2778.json │ │ │ ├── 278.json │ │ │ ├── 2781.json │ │ │ ├── 2782.json │ │ │ ├── 2785.json │ │ │ ├── 2786.json │ │ │ ├── 2790.json │ │ │ ├── 2791.json │ │ │ ├── 2793.json │ │ │ ├── 2794.json │ │ │ ├── 2795.json │ │ │ ├── 2797.json │ │ │ ├── 2799.json │ │ │ ├── 2800.json │ │ │ ├── 2801.json │ │ │ ├── 2802.json │ │ │ ├── 2803.json │ │ │ ├── 2806.json │ │ │ ├── 2808.json │ │ │ ├── 2809.json │ │ │ ├── 281.json │ │ │ ├── 2811.json │ │ │ ├── 2812.json │ │ │ ├── 2813.json │ │ │ ├── 2816.json │ │ │ ├── 2819.json │ │ │ ├── 2820.json │ │ │ ├── 2821.json │ │ │ ├── 2824.json │ │ │ ├── 2825.json │ │ │ ├── 2826.json │ │ │ ├── 2828.json │ │ │ ├── 2829.json │ │ │ ├── 283.json │ │ │ ├── 2830.json │ │ │ ├── 2832.json │ │ │ ├── 2833.json │ │ │ ├── 2834.json │ │ │ ├── 2835.json │ │ │ ├── 2836.json │ │ │ ├── 2837.json │ │ │ ├── 2839.json │ │ │ ├── 284.json │ │ │ ├── 285.json │ │ │ ├── 286.json │ │ │ ├── 287.json │ │ │ ├── 29.json │ │ │ ├── 290.json │ │ │ ├── 292.json │ │ │ ├── 294.json │ │ │ ├── 295.json │ │ │ ├── 298.json │ │ │ ├── 299.json │ │ │ ├── 3.json │ │ │ ├── 30.json │ │ │ ├── 300.json │ │ │ ├── 301.json │ │ │ ├── 303.json │ │ │ ├── 306.json │ │ │ ├── 308.json │ │ │ ├── 309.json │ │ │ ├── 310.json │ │ │ ├── 312.json │ │ │ ├── 315.json │ │ │ ├── 316.json │ │ │ ├── 317.json │ │ │ ├── 319.json │ │ │ ├── 321.json │ │ │ ├── 322.json │ │ │ ├── 324.json │ │ │ ├── 325.json │ │ │ ├── 328.json │ │ │ ├── 330.json │ │ │ ├── 331.json │ │ │ ├── 333.json │ │ │ ├── 334.json │ │ │ ├── 335.json │ │ │ ├── 336.json │ │ │ ├── 339.json │ │ │ ├── 34.json │ │ │ ├── 340.json │ │ │ ├── 341.json │ │ │ ├── 343.json │ │ │ ├── 344.json │ │ │ ├── 345.json │ │ │ ├── 348.json │ │ │ ├── 349.json │ │ │ ├── 350.json │ │ │ ├── 352.json │ │ │ ├── 353.json │ │ │ ├── 355.json │ │ │ ├── 356.json │ │ │ ├── 357.json │ │ │ ├── 358.json │ │ │ ├── 36.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 363.json │ │ │ ├── 365.json │ │ │ ├── 367.json │ │ │ ├── 368.json │ │ │ ├── 369.json │ │ │ ├── 370.json │ │ │ ├── 371.json │ │ │ ├── 372.json │ │ │ ├── 373.json │ │ │ ├── 374.json │ │ │ ├── 375.json │ │ │ ├── 376.json │ │ │ ├── 377.json │ │ │ ├── 378.json │ │ │ ├── 379.json │ │ │ ├── 38.json │ │ │ ├── 380.json │ │ │ ├── 381.json │ │ │ ├── 382.json │ │ │ ├── 383.json │ │ │ ├── 384.json │ │ │ ├── 385.json │ │ │ ├── 386.json │ │ │ ├── 387.json │ │ │ ├── 389.json │ │ │ ├── 39.json │ │ │ ├── 390.json │ │ │ ├── 391.json │ │ │ ├── 394.json │ │ │ ├── 396.json │ │ │ ├── 397.json │ │ │ ├── 399.json │ │ │ ├── 4.json │ │ │ ├── 401.json │ │ │ ├── 402.json │ │ │ ├── 403.json │ │ │ ├── 404.json │ │ │ ├── 406.json │ │ │ ├── 407.json │ │ │ ├── 408.json │ │ │ ├── 409.json │ │ │ ├── 41.json │ │ │ ├── 411.json │ │ │ ├── 415.json │ │ │ ├── 417.json │ │ │ ├── 418.json │ │ │ ├── 42.json │ │ │ ├── 420.json │ │ │ ├── 423.json │ │ │ ├── 428.json │ │ │ ├── 431.json │ │ │ ├── 434.json │ │ │ ├── 436.json │ │ │ ├── 439.json │ │ │ ├── 443.json │ │ │ ├── 444.json │ │ │ ├── 447.json │ │ │ ├── 448.json │ │ │ ├── 45.json │ │ │ ├── 450.json │ │ │ ├── 454.json │ │ │ ├── 456.json │ │ │ ├── 457.json │ │ │ ├── 458.json │ │ │ ├── 46.json │ │ │ ├── 460.json │ │ │ ├── 461.json │ │ │ ├── 463.json │ │ │ ├── 464.json │ │ │ ├── 465.json │ │ │ ├── 466.json │ │ │ ├── 467.json │ │ │ ├── 47.json │ │ │ ├── 472.json │ │ │ ├── 473.json │ │ │ ├── 474.json │ │ │ ├── 475.json │ │ │ ├── 477.json │ │ │ ├── 479.json │ │ │ ├── 481.json │ │ │ ├── 483.json │ │ │ ├── 485.json │ │ │ ├── 488.json │ │ │ ├── 49.json │ │ │ ├── 490.json │ │ │ ├── 492.json │ │ │ ├── 494.json │ │ │ ├── 495.json │ │ │ ├── 497.json │ │ │ ├── 5.json │ │ │ ├── 50.json │ │ │ ├── 501.json │ │ │ ├── 503.json │ │ │ ├── 504.json │ │ │ ├── 505.json │ │ │ ├── 507.json │ │ │ ├── 508.json │ │ │ ├── 515.json │ │ │ ├── 516.json │ │ │ ├── 517.json │ │ │ ├── 519.json │ │ │ ├── 52.json │ │ │ ├── 520.json │ │ │ ├── 521.json │ │ │ ├── 525.json │ │ │ ├── 527.json │ │ │ ├── 53.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 534.json │ │ │ ├── 535.json │ │ │ ├── 538.json │ │ │ ├── 54.json │ │ │ ├── 541.json │ │ │ ├── 544.json │ │ │ ├── 545.json │ │ │ ├── 546.json │ │ │ ├── 549.json │ │ │ ├── 550.json │ │ │ ├── 551.json │ │ │ ├── 553.json │ │ │ ├── 555.json │ │ │ ├── 556.json │ │ │ ├── 557.json │ │ │ ├── 56.json │ │ │ ├── 561.json │ │ │ ├── 562.json │ │ │ ├── 563.json │ │ │ ├── 564.json │ │ │ ├── 565.json │ │ │ ├── 566.json │ │ │ ├── 569.json │ │ │ ├── 57.json │ │ │ ├── 572.json │ │ │ ├── 573.json │ │ │ ├── 574.json │ │ │ ├── 575.json │ │ │ ├── 576.json │ │ │ ├── 579.json │ │ │ ├── 58.json │ │ │ ├── 580.json │ │ │ ├── 582.json │ │ │ ├── 584.json │ │ │ ├── 586.json │ │ │ ├── 587.json │ │ │ ├── 588.json │ │ │ ├── 589.json │ │ │ ├── 590.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 595.json │ │ │ ├── 599.json │ │ │ ├── 60.json │ │ │ ├── 600.json │ │ │ ├── 601.json │ │ │ ├── 602.json │ │ │ ├── 603.json │ │ │ ├── 604.json │ │ │ ├── 605.json │ │ │ ├── 606.json │ │ │ ├── 607.json │ │ │ ├── 609.json │ │ │ ├── 61.json │ │ │ ├── 612.json │ │ │ ├── 617.json │ │ │ ├── 62.json │ │ │ ├── 620.json │ │ │ ├── 622.json │ │ │ ├── 624.json │ │ │ ├── 625.json │ │ │ ├── 626.json │ │ │ ├── 627.json │ │ │ ├── 629.json │ │ │ ├── 63.json │ │ │ ├── 630.json │ │ │ ├── 631.json │ │ │ ├── 633.json │ │ │ ├── 635.json │ │ │ ├── 637.json │ │ │ ├── 64.json │ │ │ ├── 641.json │ │ │ ├── 642.json │ │ │ ├── 643.json │ │ │ ├── 644.json │ │ │ ├── 645.json │ │ │ ├── 646.json │ │ │ ├── 647.json │ │ │ ├── 648.json │ │ │ ├── 65.json │ │ │ ├── 652.json │ │ │ ├── 653.json │ │ │ ├── 654.json │ │ │ ├── 655.json │ │ │ ├── 656.json │ │ │ ├── 658.json │ │ │ ├── 659.json │ │ │ ├── 66.json │ │ │ ├── 660.json │ │ │ ├── 663.json │ │ │ ├── 664.json │ │ │ ├── 665.json │ │ │ ├── 666.json │ │ │ ├── 667.json │ │ │ ├── 670.json │ │ │ ├── 671.json │ │ │ ├── 673.json │ │ │ ├── 674.json │ │ │ ├── 675.json │ │ │ ├── 676.json │ │ │ ├── 677.json │ │ │ ├── 678.json │ │ │ ├── 68.json │ │ │ ├── 681.json │ │ │ ├── 682.json │ │ │ ├── 683.json │ │ │ ├── 684.json │ │ │ ├── 685.json │ │ │ ├── 687.json │ │ │ ├── 690.json │ │ │ ├── 691.json │ │ │ ├── 692.json │ │ │ ├── 693.json │ │ │ ├── 695.json │ │ │ ├── 696.json │ │ │ ├── 697.json │ │ │ ├── 698.json │ │ │ ├── 699.json │ │ │ ├── 7.json │ │ │ ├── 70.json │ │ │ ├── 700.json │ │ │ ├── 703.json │ │ │ ├── 705.json │ │ │ ├── 707.json │ │ │ ├── 708.json │ │ │ ├── 709.json │ │ │ ├── 71.json │ │ │ ├── 711.json │ │ │ ├── 712.json │ │ │ ├── 714.json │ │ │ ├── 715.json │ │ │ ├── 717.json │ │ │ ├── 719.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 721.json │ │ │ ├── 723.json │ │ │ ├── 727.json │ │ │ ├── 728.json │ │ │ ├── 729.json │ │ │ ├── 730.json │ │ │ ├── 732.json │ │ │ ├── 734.json │ │ │ ├── 735.json │ │ │ ├── 736.json │ │ │ ├── 737.json │ │ │ ├── 738.json │ │ │ ├── 739.json │ │ │ ├── 74.json │ │ │ ├── 740.json │ │ │ ├── 741.json │ │ │ ├── 742.json │ │ │ ├── 743.json │ │ │ ├── 745.json │ │ │ ├── 746.json │ │ │ ├── 75.json │ │ │ ├── 751.json │ │ │ ├── 754.json │ │ │ ├── 757.json │ │ │ ├── 758.json │ │ │ ├── 759.json │ │ │ ├── 760.json │ │ │ ├── 761.json │ │ │ ├── 763.json │ │ │ ├── 764.json │ │ │ ├── 765.json │ │ │ ├── 766.json │ │ │ ├── 767.json │ │ │ ├── 768.json │ │ │ ├── 770.json │ │ │ ├── 772.json │ │ │ ├── 773.json │ │ │ ├── 774.json │ │ │ ├── 775.json │ │ │ ├── 777.json │ │ │ ├── 778.json │ │ │ ├── 78.json │ │ │ ├── 781.json │ │ │ ├── 782.json │ │ │ ├── 787.json │ │ │ ├── 788.json │ │ │ ├── 789.json │ │ │ ├── 79.json │ │ │ ├── 790.json │ │ │ ├── 792.json │ │ │ ├── 796.json │ │ │ ├── 798.json │ │ │ ├── 8.json │ │ │ ├── 800.json │ │ │ ├── 802.json │ │ │ ├── 804.json │ │ │ ├── 806.json │ │ │ ├── 807.json │ │ │ ├── 808.json │ │ │ ├── 809.json │ │ │ ├── 81.json │ │ │ ├── 810.json │ │ │ ├── 811.json │ │ │ ├── 813.json │ │ │ ├── 815.json │ │ │ ├── 819.json │ │ │ ├── 820.json │ │ │ ├── 822.json │ │ │ ├── 823.json │ │ │ ├── 826.json │ │ │ ├── 828.json │ │ │ ├── 83.json │ │ │ ├── 830.json │ │ │ ├── 832.json │ │ │ ├── 833.json │ │ │ ├── 835.json │ │ │ ├── 836.json │ │ │ ├── 837.json │ │ │ ├── 839.json │ │ │ ├── 84.json │ │ │ ├── 844.json │ │ │ ├── 845.json │ │ │ ├── 847.json │ │ │ ├── 848.json │ │ │ ├── 85.json │ │ │ ├── 854.json │ │ │ ├── 855.json │ │ │ ├── 856.json │ │ │ ├── 857.json │ │ │ ├── 86.json │ │ │ ├── 860.json │ │ │ ├── 861.json │ │ │ ├── 863.json │ │ │ ├── 866.json │ │ │ ├── 867.json │ │ │ ├── 868.json │ │ │ ├── 87.json │ │ │ ├── 871.json │ │ │ ├── 874.json │ │ │ ├── 875.json │ │ │ ├── 877.json │ │ │ ├── 878.json │ │ │ ├── 879.json │ │ │ ├── 88.json │ │ │ ├── 881.json │ │ │ ├── 884.json │ │ │ ├── 885.json │ │ │ ├── 886.json │ │ │ ├── 888.json │ │ │ ├── 890.json │ │ │ ├── 891.json │ │ │ ├── 894.json │ │ │ ├── 895.json │ │ │ ├── 896.json │ │ │ ├── 897.json │ │ │ ├── 898.json │ │ │ ├── 899.json │ │ │ ├── 9.json │ │ │ ├── 90.json │ │ │ ├── 900.json │ │ │ ├── 903.json │ │ │ ├── 906.json │ │ │ ├── 908.json │ │ │ ├── 909.json │ │ │ ├── 91.json │ │ │ ├── 910.json │ │ │ ├── 912.json │ │ │ ├── 914.json │ │ │ ├── 915.json │ │ │ ├── 918.json │ │ │ ├── 92.json │ │ │ ├── 920.json │ │ │ ├── 924.json │ │ │ ├── 925.json │ │ │ ├── 926.json │ │ │ ├── 927.json │ │ │ ├── 929.json │ │ │ ├── 93.json │ │ │ ├── 930.json │ │ │ ├── 931.json │ │ │ ├── 932.json │ │ │ ├── 933.json │ │ │ ├── 934.json │ │ │ ├── 936.json │ │ │ ├── 939.json │ │ │ ├── 94.json │ │ │ ├── 940.json │ │ │ ├── 941.json │ │ │ ├── 942.json │ │ │ ├── 943.json │ │ │ ├── 946.json │ │ │ ├── 947.json │ │ │ ├── 948.json │ │ │ ├── 949.json │ │ │ ├── 95.json │ │ │ ├── 950.json │ │ │ ├── 951.json │ │ │ ├── 954.json │ │ │ ├── 956.json │ │ │ ├── 957.json │ │ │ ├── 959.json │ │ │ ├── 960.json │ │ │ ├── 961.json │ │ │ ├── 963.json │ │ │ ├── 964.json │ │ │ ├── 965.json │ │ │ ├── 966.json │ │ │ ├── 97.json │ │ │ ├── 970.json │ │ │ ├── 971.json │ │ │ ├── 973.json │ │ │ ├── 974.json │ │ │ ├── 976.json │ │ │ ├── 98.json │ │ │ ├── 980.json │ │ │ ├── 982.json │ │ │ ├── 984.json │ │ │ ├── 985.json │ │ │ ├── 987.json │ │ │ ├── 99.json │ │ │ ├── 991.json │ │ │ ├── 992.json │ │ │ ├── 995.json │ │ │ ├── 997.json │ │ │ └── 999.json │ │ │ ├── counting_and_probability │ │ │ ├── 1.json │ │ │ ├── 1000.json │ │ │ ├── 1001.json │ │ │ ├── 1002.json │ │ │ ├── 1006.json │ │ │ ├── 1008.json │ │ │ ├── 101.json │ │ │ ├── 1011.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1015.json │ │ │ ├── 1017.json │ │ │ ├── 1018.json │ │ │ ├── 1019.json │ │ │ ├── 1020.json │ │ │ ├── 1021.json │ │ │ ├── 1022.json │ │ │ ├── 1023.json │ │ │ ├── 1024.json │ │ │ ├── 1025.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 1029.json │ │ │ ├── 1030.json │ │ │ ├── 1031.json │ │ │ ├── 1032.json │ │ │ ├── 1034.json │ │ │ ├── 1036.json │ │ │ ├── 1037.json │ │ │ ├── 1039.json │ │ │ ├── 104.json │ │ │ ├── 1040.json │ │ │ ├── 1041.json │ │ │ ├── 1042.json │ │ │ ├── 1045.json │ │ │ ├── 1048.json │ │ │ ├── 1049.json │ │ │ ├── 1054.json │ │ │ ├── 1055.json │ │ │ ├── 1057.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 1061.json │ │ │ ├── 1063.json │ │ │ ├── 1066.json │ │ │ ├── 1068.json │ │ │ ├── 1069.json │ │ │ ├── 1070.json │ │ │ ├── 1073.json │ │ │ ├── 1074.json │ │ │ ├── 1075.json │ │ │ ├── 1078.json │ │ │ ├── 1079.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1089.json │ │ │ ├── 1090.json │ │ │ ├── 1091.json │ │ │ ├── 1094.json │ │ │ ├── 1097.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 1100.json │ │ │ ├── 1101.json │ │ │ ├── 1104.json │ │ │ ├── 1105.json │ │ │ ├── 1106.json │ │ │ ├── 1109.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1111.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 112.json │ │ │ ├── 1121.json │ │ │ ├── 1122.json │ │ │ ├── 113.json │ │ │ ├── 114.json │ │ │ ├── 117.json │ │ │ ├── 118.json │ │ │ ├── 12.json │ │ │ ├── 120.json │ │ │ ├── 121.json │ │ │ ├── 122.json │ │ │ ├── 125.json │ │ │ ├── 126.json │ │ │ ├── 127.json │ │ │ ├── 129.json │ │ │ ├── 131.json │ │ │ ├── 133.json │ │ │ ├── 135.json │ │ │ ├── 138.json │ │ │ ├── 141.json │ │ │ ├── 142.json │ │ │ ├── 143.json │ │ │ ├── 144.json │ │ │ ├── 145.json │ │ │ ├── 146.json │ │ │ ├── 147.json │ │ │ ├── 149.json │ │ │ ├── 15.json │ │ │ ├── 153.json │ │ │ ├── 154.json │ │ │ ├── 157.json │ │ │ ├── 160.json │ │ │ ├── 161.json │ │ │ ├── 163.json │ │ │ ├── 165.json │ │ │ ├── 167.json │ │ │ ├── 168.json │ │ │ ├── 169.json │ │ │ ├── 17.json │ │ │ ├── 171.json │ │ │ ├── 174.json │ │ │ ├── 177.json │ │ │ ├── 178.json │ │ │ ├── 179.json │ │ │ ├── 18.json │ │ │ ├── 180.json │ │ │ ├── 183.json │ │ │ ├── 186.json │ │ │ ├── 187.json │ │ │ ├── 189.json │ │ │ ├── 191.json │ │ │ ├── 192.json │ │ │ ├── 194.json │ │ │ ├── 196.json │ │ │ ├── 197.json │ │ │ ├── 198.json │ │ │ ├── 20.json │ │ │ ├── 200.json │ │ │ ├── 201.json │ │ │ ├── 202.json │ │ │ ├── 204.json │ │ │ ├── 21.json │ │ │ ├── 211.json │ │ │ ├── 213.json │ │ │ ├── 218.json │ │ │ ├── 22.json │ │ │ ├── 220.json │ │ │ ├── 221.json │ │ │ ├── 222.json │ │ │ ├── 223.json │ │ │ ├── 224.json │ │ │ ├── 225.json │ │ │ ├── 226.json │ │ │ ├── 227.json │ │ │ ├── 232.json │ │ │ ├── 234.json │ │ │ ├── 235.json │ │ │ ├── 236.json │ │ │ ├── 237.json │ │ │ ├── 239.json │ │ │ ├── 24.json │ │ │ ├── 240.json │ │ │ ├── 241.json │ │ │ ├── 243.json │ │ │ ├── 245.json │ │ │ ├── 246.json │ │ │ ├── 248.json │ │ │ ├── 249.json │ │ │ ├── 251.json │ │ │ ├── 252.json │ │ │ ├── 253.json │ │ │ ├── 254.json │ │ │ ├── 255.json │ │ │ ├── 256.json │ │ │ ├── 257.json │ │ │ ├── 259.json │ │ │ ├── 26.json │ │ │ ├── 261.json │ │ │ ├── 265.json │ │ │ ├── 267.json │ │ │ ├── 268.json │ │ │ ├── 269.json │ │ │ ├── 272.json │ │ │ ├── 273.json │ │ │ ├── 276.json │ │ │ ├── 278.json │ │ │ ├── 28.json │ │ │ ├── 280.json │ │ │ ├── 283.json │ │ │ ├── 284.json │ │ │ ├── 285.json │ │ │ ├── 287.json │ │ │ ├── 29.json │ │ │ ├── 290.json │ │ │ ├── 291.json │ │ │ ├── 293.json │ │ │ ├── 296.json │ │ │ ├── 297.json │ │ │ ├── 298.json │ │ │ ├── 299.json │ │ │ ├── 301.json │ │ │ ├── 304.json │ │ │ ├── 305.json │ │ │ ├── 306.json │ │ │ ├── 307.json │ │ │ ├── 308.json │ │ │ ├── 31.json │ │ │ ├── 310.json │ │ │ ├── 311.json │ │ │ ├── 312.json │ │ │ ├── 314.json │ │ │ ├── 315.json │ │ │ ├── 316.json │ │ │ ├── 318.json │ │ │ ├── 319.json │ │ │ ├── 32.json │ │ │ ├── 320.json │ │ │ ├── 322.json │ │ │ ├── 324.json │ │ │ ├── 325.json │ │ │ ├── 326.json │ │ │ ├── 327.json │ │ │ ├── 329.json │ │ │ ├── 33.json │ │ │ ├── 332.json │ │ │ ├── 333.json │ │ │ ├── 334.json │ │ │ ├── 335.json │ │ │ ├── 336.json │ │ │ ├── 338.json │ │ │ ├── 340.json │ │ │ ├── 343.json │ │ │ ├── 344.json │ │ │ ├── 345.json │ │ │ ├── 346.json │ │ │ ├── 348.json │ │ │ ├── 349.json │ │ │ ├── 35.json │ │ │ ├── 350.json │ │ │ ├── 351.json │ │ │ ├── 353.json │ │ │ ├── 356.json │ │ │ ├── 358.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 363.json │ │ │ ├── 364.json │ │ │ ├── 365.json │ │ │ ├── 369.json │ │ │ ├── 37.json │ │ │ ├── 370.json │ │ │ ├── 371.json │ │ │ ├── 372.json │ │ │ ├── 373.json │ │ │ ├── 375.json │ │ │ ├── 376.json │ │ │ ├── 379.json │ │ │ ├── 380.json │ │ │ ├── 382.json │ │ │ ├── 383.json │ │ │ ├── 386.json │ │ │ ├── 387.json │ │ │ ├── 388.json │ │ │ ├── 39.json │ │ │ ├── 393.json │ │ │ ├── 397.json │ │ │ ├── 398.json │ │ │ ├── 399.json │ │ │ ├── 40.json │ │ │ ├── 401.json │ │ │ ├── 402.json │ │ │ ├── 404.json │ │ │ ├── 408.json │ │ │ ├── 410.json │ │ │ ├── 411.json │ │ │ ├── 412.json │ │ │ ├── 414.json │ │ │ ├── 415.json │ │ │ ├── 417.json │ │ │ ├── 42.json │ │ │ ├── 420.json │ │ │ ├── 421.json │ │ │ ├── 422.json │ │ │ ├── 424.json │ │ │ ├── 426.json │ │ │ ├── 428.json │ │ │ ├── 429.json │ │ │ ├── 43.json │ │ │ ├── 431.json │ │ │ ├── 432.json │ │ │ ├── 433.json │ │ │ ├── 434.json │ │ │ ├── 437.json │ │ │ ├── 44.json │ │ │ ├── 440.json │ │ │ ├── 441.json │ │ │ ├── 443.json │ │ │ ├── 444.json │ │ │ ├── 445.json │ │ │ ├── 446.json │ │ │ ├── 447.json │ │ │ ├── 448.json │ │ │ ├── 45.json │ │ │ ├── 451.json │ │ │ ├── 452.json │ │ │ ├── 457.json │ │ │ ├── 458.json │ │ │ ├── 459.json │ │ │ ├── 46.json │ │ │ ├── 460.json │ │ │ ├── 462.json │ │ │ ├── 463.json │ │ │ ├── 465.json │ │ │ ├── 466.json │ │ │ ├── 467.json │ │ │ ├── 468.json │ │ │ ├── 469.json │ │ │ ├── 470.json │ │ │ ├── 471.json │ │ │ ├── 473.json │ │ │ ├── 478.json │ │ │ ├── 480.json │ │ │ ├── 484.json │ │ │ ├── 487.json │ │ │ ├── 49.json │ │ │ ├── 491.json │ │ │ ├── 492.json │ │ │ ├── 493.json │ │ │ ├── 5.json │ │ │ ├── 500.json │ │ │ ├── 5000.json │ │ │ ├── 5001.json │ │ │ ├── 5002.json │ │ │ ├── 5003.json │ │ │ ├── 5004.json │ │ │ ├── 5005.json │ │ │ ├── 5006.json │ │ │ ├── 5007.json │ │ │ ├── 5008.json │ │ │ ├── 5009.json │ │ │ ├── 501.json │ │ │ ├── 5010.json │ │ │ ├── 5011.json │ │ │ ├── 5012.json │ │ │ ├── 5014.json │ │ │ ├── 5015.json │ │ │ ├── 5016.json │ │ │ ├── 5017.json │ │ │ ├── 5018.json │ │ │ ├── 5019.json │ │ │ ├── 502.json │ │ │ ├── 5021.json │ │ │ ├── 5022.json │ │ │ ├── 5023.json │ │ │ ├── 5024.json │ │ │ ├── 5026.json │ │ │ ├── 5027.json │ │ │ ├── 5028.json │ │ │ ├── 5029.json │ │ │ ├── 5030.json │ │ │ ├── 5031.json │ │ │ ├── 5032.json │ │ │ ├── 5033.json │ │ │ ├── 5034.json │ │ │ ├── 5035.json │ │ │ ├── 5036.json │ │ │ ├── 5037.json │ │ │ ├── 5038.json │ │ │ ├── 5039.json │ │ │ ├── 5040.json │ │ │ ├── 5041.json │ │ │ ├── 5042.json │ │ │ ├── 5043.json │ │ │ ├── 5044.json │ │ │ ├── 5045.json │ │ │ ├── 5046.json │ │ │ ├── 5047.json │ │ │ ├── 5048.json │ │ │ ├── 5049.json │ │ │ ├── 505.json │ │ │ ├── 5050.json │ │ │ ├── 5051.json │ │ │ ├── 5052.json │ │ │ ├── 5053.json │ │ │ ├── 5054.json │ │ │ ├── 5056.json │ │ │ ├── 5057.json │ │ │ ├── 5058.json │ │ │ ├── 5060.json │ │ │ ├── 5061.json │ │ │ ├── 5062.json │ │ │ ├── 5063.json │ │ │ ├── 5064.json │ │ │ ├── 5065.json │ │ │ ├── 5068.json │ │ │ ├── 5069.json │ │ │ ├── 507.json │ │ │ ├── 5071.json │ │ │ ├── 5074.json │ │ │ ├── 5075.json │ │ │ ├── 5077.json │ │ │ ├── 5078.json │ │ │ ├── 5079.json │ │ │ ├── 5081.json │ │ │ ├── 5082.json │ │ │ ├── 5083.json │ │ │ ├── 5084.json │ │ │ ├── 5085.json │ │ │ ├── 5086.json │ │ │ ├── 5087.json │ │ │ ├── 5088.json │ │ │ ├── 5089.json │ │ │ ├── 509.json │ │ │ ├── 5090.json │ │ │ ├── 5091.json │ │ │ ├── 5092.json │ │ │ ├── 5093.json │ │ │ ├── 5094.json │ │ │ ├── 5095.json │ │ │ ├── 5096.json │ │ │ ├── 5097.json │ │ │ ├── 5098.json │ │ │ ├── 5099.json │ │ │ ├── 510.json │ │ │ ├── 5100.json │ │ │ ├── 5101.json │ │ │ ├── 5102.json │ │ │ ├── 5103.json │ │ │ ├── 5104.json │ │ │ ├── 5106.json │ │ │ ├── 5107.json │ │ │ ├── 5108.json │ │ │ ├── 5109.json │ │ │ ├── 511.json │ │ │ ├── 5110.json │ │ │ ├── 5111.json │ │ │ ├── 5113.json │ │ │ ├── 5114.json │ │ │ ├── 5115.json │ │ │ ├── 5116.json │ │ │ ├── 5117.json │ │ │ ├── 5118.json │ │ │ ├── 5119.json │ │ │ ├── 5120.json │ │ │ ├── 5121.json │ │ │ ├── 5122.json │ │ │ ├── 5123.json │ │ │ ├── 5124.json │ │ │ ├── 5125.json │ │ │ ├── 5126.json │ │ │ ├── 5127.json │ │ │ ├── 5128.json │ │ │ ├── 5129.json │ │ │ ├── 5130.json │ │ │ ├── 5131.json │ │ │ ├── 5132.json │ │ │ ├── 5133.json │ │ │ ├── 5134.json │ │ │ ├── 514.json │ │ │ ├── 515.json │ │ │ ├── 516.json │ │ │ ├── 517.json │ │ │ ├── 518.json │ │ │ ├── 52.json │ │ │ ├── 522.json │ │ │ ├── 523.json │ │ │ ├── 527.json │ │ │ ├── 529.json │ │ │ ├── 530.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 533.json │ │ │ ├── 534.json │ │ │ ├── 538.json │ │ │ ├── 539.json │ │ │ ├── 540.json │ │ │ ├── 541.json │ │ │ ├── 542.json │ │ │ ├── 543.json │ │ │ ├── 544.json │ │ │ ├── 546.json │ │ │ ├── 548.json │ │ │ ├── 55.json │ │ │ ├── 550.json │ │ │ ├── 552.json │ │ │ ├── 553.json │ │ │ ├── 554.json │ │ │ ├── 555.json │ │ │ ├── 556.json │ │ │ ├── 557.json │ │ │ ├── 558.json │ │ │ ├── 561.json │ │ │ ├── 562.json │ │ │ ├── 563.json │ │ │ ├── 565.json │ │ │ ├── 566.json │ │ │ ├── 567.json │ │ │ ├── 569.json │ │ │ ├── 570.json │ │ │ ├── 571.json │ │ │ ├── 573.json │ │ │ ├── 574.json │ │ │ ├── 576.json │ │ │ ├── 578.json │ │ │ ├── 580.json │ │ │ ├── 581.json │ │ │ ├── 584.json │ │ │ ├── 585.json │ │ │ ├── 588.json │ │ │ ├── 59.json │ │ │ ├── 591.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 597.json │ │ │ ├── 599.json │ │ │ ├── 60.json │ │ │ ├── 600.json │ │ │ ├── 601.json │ │ │ ├── 603.json │ │ │ ├── 605.json │ │ │ ├── 607.json │ │ │ ├── 609.json │ │ │ ├── 610.json │ │ │ ├── 611.json │ │ │ ├── 612.json │ │ │ ├── 613.json │ │ │ ├── 615.json │ │ │ ├── 617.json │ │ │ ├── 618.json │ │ │ ├── 619.json │ │ │ ├── 62.json │ │ │ ├── 622.json │ │ │ ├── 625.json │ │ │ ├── 626.json │ │ │ ├── 627.json │ │ │ ├── 629.json │ │ │ ├── 630.json │ │ │ ├── 631.json │ │ │ ├── 632.json │ │ │ ├── 633.json │ │ │ ├── 634.json │ │ │ ├── 637.json │ │ │ ├── 638.json │ │ │ ├── 639.json │ │ │ ├── 640.json │ │ │ ├── 641.json │ │ │ ├── 643.json │ │ │ ├── 644.json │ │ │ ├── 646.json │ │ │ ├── 647.json │ │ │ ├── 649.json │ │ │ ├── 651.json │ │ │ ├── 656.json │ │ │ ├── 657.json │ │ │ ├── 658.json │ │ │ ├── 664.json │ │ │ ├── 665.json │ │ │ ├── 667.json │ │ │ ├── 668.json │ │ │ ├── 669.json │ │ │ ├── 67.json │ │ │ ├── 672.json │ │ │ ├── 673.json │ │ │ ├── 674.json │ │ │ ├── 675.json │ │ │ ├── 676.json │ │ │ ├── 679.json │ │ │ ├── 680.json │ │ │ ├── 681.json │ │ │ ├── 683.json │ │ │ ├── 687.json │ │ │ ├── 69.json │ │ │ ├── 691.json │ │ │ ├── 692.json │ │ │ ├── 693.json │ │ │ ├── 696.json │ │ │ ├── 698.json │ │ │ ├── 699.json │ │ │ ├── 70.json │ │ │ ├── 700.json │ │ │ ├── 701.json │ │ │ ├── 702.json │ │ │ ├── 703.json │ │ │ ├── 706.json │ │ │ ├── 707.json │ │ │ ├── 708.json │ │ │ ├── 709.json │ │ │ ├── 711.json │ │ │ ├── 712.json │ │ │ ├── 713.json │ │ │ ├── 715.json │ │ │ ├── 716.json │ │ │ ├── 718.json │ │ │ ├── 719.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 722.json │ │ │ ├── 724.json │ │ │ ├── 728.json │ │ │ ├── 729.json │ │ │ ├── 73.json │ │ │ ├── 730.json │ │ │ ├── 733.json │ │ │ ├── 734.json │ │ │ ├── 736.json │ │ │ ├── 738.json │ │ │ ├── 739.json │ │ │ ├── 740.json │ │ │ ├── 741.json │ │ │ ├── 743.json │ │ │ ├── 744.json │ │ │ ├── 746.json │ │ │ ├── 749.json │ │ │ ├── 75.json │ │ │ ├── 750.json │ │ │ ├── 751.json │ │ │ ├── 752.json │ │ │ ├── 753.json │ │ │ ├── 756.json │ │ │ ├── 757.json │ │ │ ├── 758.json │ │ │ ├── 76.json │ │ │ ├── 760.json │ │ │ ├── 764.json │ │ │ ├── 768.json │ │ │ ├── 769.json │ │ │ ├── 77.json │ │ │ ├── 772.json │ │ │ ├── 773.json │ │ │ ├── 774.json │ │ │ ├── 775.json │ │ │ ├── 779.json │ │ │ ├── 782.json │ │ │ ├── 783.json │ │ │ ├── 784.json │ │ │ ├── 786.json │ │ │ ├── 787.json │ │ │ ├── 791.json │ │ │ ├── 793.json │ │ │ ├── 794.json │ │ │ ├── 797.json │ │ │ ├── 799.json │ │ │ ├── 8.json │ │ │ ├── 800.json │ │ │ ├── 801.json │ │ │ ├── 802.json │ │ │ ├── 806.json │ │ │ ├── 807.json │ │ │ ├── 808.json │ │ │ ├── 809.json │ │ │ ├── 81.json │ │ │ ├── 810.json │ │ │ ├── 811.json │ │ │ ├── 812.json │ │ │ ├── 814.json │ │ │ ├── 817.json │ │ │ ├── 818.json │ │ │ ├── 819.json │ │ │ ├── 82.json │ │ │ ├── 820.json │ │ │ ├── 821.json │ │ │ ├── 822.json │ │ │ ├── 824.json │ │ │ ├── 826.json │ │ │ ├── 827.json │ │ │ ├── 828.json │ │ │ ├── 83.json │ │ │ ├── 830.json │ │ │ ├── 831.json │ │ │ ├── 832.json │ │ │ ├── 835.json │ │ │ ├── 836.json │ │ │ ├── 837.json │ │ │ ├── 839.json │ │ │ ├── 840.json │ │ │ ├── 841.json │ │ │ ├── 842.json │ │ │ ├── 843.json │ │ │ ├── 845.json │ │ │ ├── 847.json │ │ │ ├── 848.json │ │ │ ├── 85.json │ │ │ ├── 851.json │ │ │ ├── 854.json │ │ │ ├── 856.json │ │ │ ├── 858.json │ │ │ ├── 859.json │ │ │ ├── 864.json │ │ │ ├── 866.json │ │ │ ├── 868.json │ │ │ ├── 869.json │ │ │ ├── 87.json │ │ │ ├── 871.json │ │ │ ├── 872.json │ │ │ ├── 873.json │ │ │ ├── 874.json │ │ │ ├── 877.json │ │ │ ├── 879.json │ │ │ ├── 88.json │ │ │ ├── 881.json │ │ │ ├── 882.json │ │ │ ├── 885.json │ │ │ ├── 887.json │ │ │ ├── 888.json │ │ │ ├── 89.json │ │ │ ├── 890.json │ │ │ ├── 891.json │ │ │ ├── 892.json │ │ │ ├── 893.json │ │ │ ├── 895.json │ │ │ ├── 896.json │ │ │ ├── 897.json │ │ │ ├── 899.json │ │ │ ├── 9.json │ │ │ ├── 90.json │ │ │ ├── 902.json │ │ │ ├── 905.json │ │ │ ├── 906.json │ │ │ ├── 907.json │ │ │ ├── 91.json │ │ │ ├── 910.json │ │ │ ├── 911.json │ │ │ ├── 912.json │ │ │ ├── 914.json │ │ │ ├── 915.json │ │ │ ├── 917.json │ │ │ ├── 918.json │ │ │ ├── 92.json │ │ │ ├── 920.json │ │ │ ├── 921.json │ │ │ ├── 923.json │ │ │ ├── 925.json │ │ │ ├── 926.json │ │ │ ├── 927.json │ │ │ ├── 928.json │ │ │ ├── 929.json │ │ │ ├── 931.json │ │ │ ├── 932.json │ │ │ ├── 937.json │ │ │ ├── 94.json │ │ │ ├── 941.json │ │ │ ├── 942.json │ │ │ ├── 943.json │ │ │ ├── 944.json │ │ │ ├── 945.json │ │ │ ├── 947.json │ │ │ ├── 948.json │ │ │ ├── 949.json │ │ │ ├── 953.json │ │ │ ├── 954.json │ │ │ ├── 955.json │ │ │ ├── 957.json │ │ │ ├── 958.json │ │ │ ├── 959.json │ │ │ ├── 96.json │ │ │ ├── 961.json │ │ │ ├── 963.json │ │ │ ├── 966.json │ │ │ ├── 968.json │ │ │ ├── 97.json │ │ │ ├── 971.json │ │ │ ├── 975.json │ │ │ ├── 978.json │ │ │ ├── 979.json │ │ │ ├── 98.json │ │ │ ├── 981.json │ │ │ ├── 983.json │ │ │ ├── 984.json │ │ │ ├── 985.json │ │ │ ├── 986.json │ │ │ ├── 988.json │ │ │ ├── 989.json │ │ │ ├── 99.json │ │ │ ├── 992.json │ │ │ ├── 995.json │ │ │ └── 999.json │ │ │ ├── geometry │ │ │ ├── 1.json │ │ │ ├── 1000.json │ │ │ ├── 1001.json │ │ │ ├── 1006.json │ │ │ ├── 1007.json │ │ │ ├── 1008.json │ │ │ ├── 101.json │ │ │ ├── 1011.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1015.json │ │ │ ├── 1017.json │ │ │ ├── 1019.json │ │ │ ├── 1020.json │ │ │ ├── 1021.json │ │ │ ├── 1022.json │ │ │ ├── 1023.json │ │ │ ├── 1024.json │ │ │ ├── 1025.json │ │ │ ├── 1028.json │ │ │ ├── 1029.json │ │ │ ├── 1030.json │ │ │ ├── 1031.json │ │ │ ├── 1034.json │ │ │ ├── 1037.json │ │ │ ├── 1039.json │ │ │ ├── 104.json │ │ │ ├── 1040.json │ │ │ ├── 1041.json │ │ │ ├── 1042.json │ │ │ ├── 1045.json │ │ │ ├── 1048.json │ │ │ ├── 1049.json │ │ │ ├── 1054.json │ │ │ ├── 1055.json │ │ │ ├── 1057.json │ │ │ ├── 1058.json │ │ │ ├── 1061.json │ │ │ ├── 1063.json │ │ │ ├── 1066.json │ │ │ ├── 1068.json │ │ │ ├── 1069.json │ │ │ ├── 1070.json │ │ │ ├── 1073.json │ │ │ ├── 1074.json │ │ │ ├── 1075.json │ │ │ ├── 1078.json │ │ │ ├── 1079.json │ │ │ ├── 108.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1089.json │ │ │ ├── 1090.json │ │ │ ├── 1091.json │ │ │ ├── 1094.json │ │ │ ├── 1095.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 1100.json │ │ │ ├── 1101.json │ │ │ ├── 1102.json │ │ │ ├── 1104.json │ │ │ ├── 1105.json │ │ │ ├── 1106.json │ │ │ ├── 1109.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1111.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 112.json │ │ │ ├── 1121.json │ │ │ ├── 1122.json │ │ │ ├── 1123.json │ │ │ ├── 1124.json │ │ │ ├── 1127.json │ │ │ ├── 1128.json │ │ │ ├── 113.json │ │ │ ├── 1130.json │ │ │ ├── 1131.json │ │ │ ├── 1132.json │ │ │ ├── 1135.json │ │ │ ├── 1136.json │ │ │ ├── 1137.json │ │ │ ├── 1139.json │ │ │ ├── 1141.json │ │ │ ├── 1143.json │ │ │ ├── 1145.json │ │ │ ├── 117.json │ │ │ ├── 120.json │ │ │ ├── 121.json │ │ │ ├── 123.json │ │ │ ├── 124.json │ │ │ ├── 125.json │ │ │ ├── 126.json │ │ │ ├── 128.json │ │ │ ├── 130.json │ │ │ ├── 132.json │ │ │ ├── 133.json │ │ │ ├── 136.json │ │ │ ├── 14.json │ │ │ ├── 140.json │ │ │ ├── 142.json │ │ │ ├── 144.json │ │ │ ├── 146.json │ │ │ ├── 147.json │ │ │ ├── 148.json │ │ │ ├── 149.json │ │ │ ├── 153.json │ │ │ ├── 156.json │ │ │ ├── 157.json │ │ │ ├── 158.json │ │ │ ├── 159.json │ │ │ ├── 16.json │ │ │ ├── 165.json │ │ │ ├── 166.json │ │ │ ├── 168.json │ │ │ ├── 170.json │ │ │ ├── 173.json │ │ │ ├── 175.json │ │ │ ├── 176.json │ │ │ ├── 18.json │ │ │ ├── 180.json │ │ │ ├── 181.json │ │ │ ├── 182.json │ │ │ ├── 184.json │ │ │ ├── 19.json │ │ │ ├── 191.json │ │ │ ├── 193.json │ │ │ ├── 198.json │ │ │ ├── 2.json │ │ │ ├── 20.json │ │ │ ├── 200.json │ │ │ ├── 201.json │ │ │ ├── 202.json │ │ │ ├── 203.json │ │ │ ├── 204.json │ │ │ ├── 205.json │ │ │ ├── 206.json │ │ │ ├── 209.json │ │ │ ├── 211.json │ │ │ ├── 213.json │ │ │ ├── 214.json │ │ │ ├── 215.json │ │ │ ├── 216.json │ │ │ ├── 218.json │ │ │ ├── 219.json │ │ │ ├── 22.json │ │ │ ├── 220.json │ │ │ ├── 222.json │ │ │ ├── 224.json │ │ │ ├── 225.json │ │ │ ├── 228.json │ │ │ ├── 230.json │ │ │ ├── 231.json │ │ │ ├── 232.json │ │ │ ├── 233.json │ │ │ ├── 234.json │ │ │ ├── 235.json │ │ │ ├── 236.json │ │ │ ├── 237.json │ │ │ ├── 238.json │ │ │ ├── 239.json │ │ │ ├── 240.json │ │ │ ├── 241.json │ │ │ ├── 244.json │ │ │ ├── 246.json │ │ │ ├── 247.json │ │ │ ├── 25000.json │ │ │ ├── 25086.json │ │ │ ├── 25087.json │ │ │ ├── 251.json │ │ │ ├── 252.json │ │ │ ├── 25205.json │ │ │ ├── 25349.json │ │ │ ├── 25484.json │ │ │ ├── 255.json │ │ │ ├── 25569.json │ │ │ ├── 25610.json │ │ │ ├── 257.json │ │ │ ├── 26.json │ │ │ ├── 262.json │ │ │ ├── 263.json │ │ │ ├── 264.json │ │ │ ├── 269.json │ │ │ ├── 270.json │ │ │ ├── 272.json │ │ │ ├── 275.json │ │ │ ├── 276.json │ │ │ ├── 277.json │ │ │ ├── 278.json │ │ │ ├── 280.json │ │ │ ├── 281.json │ │ │ ├── 284.json │ │ │ ├── 285.json │ │ │ ├── 286.json │ │ │ ├── 287.json │ │ │ ├── 288.json │ │ │ ├── 290.json │ │ │ ├── 291.json │ │ │ ├── 292.json │ │ │ ├── 294.json │ │ │ ├── 295.json │ │ │ ├── 298.json │ │ │ ├── 299.json │ │ │ ├── 3.json │ │ │ ├── 30.json │ │ │ ├── 301.json │ │ │ ├── 303.json │ │ │ ├── 304.json │ │ │ ├── 305.json │ │ │ ├── 306.json │ │ │ ├── 308.json │ │ │ ├── 309.json │ │ │ ├── 31.json │ │ │ ├── 311.json │ │ │ ├── 312.json │ │ │ ├── 313.json │ │ │ ├── 314.json │ │ │ ├── 315.json │ │ │ ├── 317.json │ │ │ ├── 32.json │ │ │ ├── 321.json │ │ │ ├── 322.json │ │ │ ├── 323.json │ │ │ ├── 324.json │ │ │ ├── 325.json │ │ │ ├── 327.json │ │ │ ├── 328.json │ │ │ ├── 329.json │ │ │ ├── 330.json │ │ │ ├── 332.json │ │ │ ├── 335.json │ │ │ ├── 337.json │ │ │ ├── 34.json │ │ │ ├── 340.json │ │ │ ├── 342.json │ │ │ ├── 343.json │ │ │ ├── 344.json │ │ │ ├── 348.json │ │ │ ├── 349.json │ │ │ ├── 35.json │ │ │ ├── 350.json │ │ │ ├── 351.json │ │ │ ├── 352.json │ │ │ ├── 354.json │ │ │ ├── 355.json │ │ │ ├── 358.json │ │ │ ├── 36.json │ │ │ ├── 361.json │ │ │ ├── 362.json │ │ │ ├── 365.json │ │ │ ├── 366.json │ │ │ ├── 367.json │ │ │ ├── 368.json │ │ │ ├── 369.json │ │ │ ├── 372.json │ │ │ ├── 376.json │ │ │ ├── 377.json │ │ │ ├── 378.json │ │ │ ├── 38.json │ │ │ ├── 381.json │ │ │ ├── 382.json │ │ │ ├── 384.json │ │ │ ├── 385.json │ │ │ ├── 388.json │ │ │ ├── 390.json │ │ │ ├── 392.json │ │ │ ├── 394.json │ │ │ ├── 395.json │ │ │ ├── 397.json │ │ │ ├── 399.json │ │ │ ├── 4.json │ │ │ ├── 400.json │ │ │ ├── 401.json │ │ │ ├── 403.json │ │ │ ├── 405.json │ │ │ ├── 407.json │ │ │ ├── 408.json │ │ │ ├── 409.json │ │ │ ├── 410.json │ │ │ ├── 411.json │ │ │ ├── 412.json │ │ │ ├── 413.json │ │ │ ├── 416.json │ │ │ ├── 419.json │ │ │ ├── 42.json │ │ │ ├── 420.json │ │ │ ├── 422.json │ │ │ ├── 423.json │ │ │ ├── 424.json │ │ │ ├── 425.json │ │ │ ├── 426.json │ │ │ ├── 427.json │ │ │ ├── 428.json │ │ │ ├── 429.json │ │ │ ├── 430.json │ │ │ ├── 431.json │ │ │ ├── 436.json │ │ │ ├── 437.json │ │ │ ├── 439.json │ │ │ ├── 44.json │ │ │ ├── 441.json │ │ │ ├── 442.json │ │ │ ├── 444.json │ │ │ ├── 445.json │ │ │ ├── 446.json │ │ │ ├── 447.json │ │ │ ├── 448.json │ │ │ ├── 45.json │ │ │ ├── 450.json │ │ │ ├── 457.json │ │ │ ├── 46.json │ │ │ ├── 463.json │ │ │ ├── 466.json │ │ │ ├── 469.json │ │ │ ├── 470.json │ │ │ ├── 471.json │ │ │ ├── 472.json │ │ │ ├── 479.json │ │ │ ├── 480.json │ │ │ ├── 481.json │ │ │ ├── 482.json │ │ │ ├── 485.json │ │ │ ├── 487.json │ │ │ ├── 489.json │ │ │ ├── 490.json │ │ │ ├── 491.json │ │ │ ├── 494.json │ │ │ ├── 495.json │ │ │ ├── 496.json │ │ │ ├── 497.json │ │ │ ├── 498.json │ │ │ ├── 5.json │ │ │ ├── 501.json │ │ │ ├── 502.json │ │ │ ├── 506.json │ │ │ ├── 51.json │ │ │ ├── 510.json │ │ │ ├── 511.json │ │ │ ├── 512.json │ │ │ ├── 513.json │ │ │ ├── 516.json │ │ │ ├── 518.json │ │ │ ├── 52.json │ │ │ ├── 520.json │ │ │ ├── 521.json │ │ │ ├── 522.json │ │ │ ├── 523.json │ │ │ ├── 525.json │ │ │ ├── 527.json │ │ │ ├── 529.json │ │ │ ├── 53.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 533.json │ │ │ ├── 534.json │ │ │ ├── 535.json │ │ │ ├── 536.json │ │ │ ├── 537.json │ │ │ ├── 540.json │ │ │ ├── 541.json │ │ │ ├── 542.json │ │ │ ├── 543.json │ │ │ ├── 544.json │ │ │ ├── 545.json │ │ │ ├── 546.json │ │ │ ├── 548.json │ │ │ ├── 55.json │ │ │ ├── 550.json │ │ │ ├── 552.json │ │ │ ├── 553.json │ │ │ ├── 555.json │ │ │ ├── 557.json │ │ │ ├── 558.json │ │ │ ├── 559.json │ │ │ ├── 56.json │ │ │ ├── 560.json │ │ │ ├── 563.json │ │ │ ├── 564.json │ │ │ ├── 567.json │ │ │ ├── 569.json │ │ │ ├── 570.json │ │ │ ├── 571.json │ │ │ ├── 572.json │ │ │ ├── 576.json │ │ │ ├── 578.json │ │ │ ├── 58.json │ │ │ ├── 580.json │ │ │ ├── 583.json │ │ │ ├── 585.json │ │ │ ├── 587.json │ │ │ ├── 589.json │ │ │ ├── 590.json │ │ │ ├── 591.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 595.json │ │ │ ├── 596.json │ │ │ ├── 597.json │ │ │ ├── 598.json │ │ │ ├── 599.json │ │ │ ├── 6.json │ │ │ ├── 6000.json │ │ │ ├── 6001.json │ │ │ ├── 6002.json │ │ │ ├── 6003.json │ │ │ ├── 6004.json │ │ │ ├── 6005.json │ │ │ ├── 6006.json │ │ │ ├── 6008.json │ │ │ ├── 6009.json │ │ │ ├── 601.json │ │ │ ├── 6010.json │ │ │ ├── 6011.json │ │ │ ├── 6012.json │ │ │ ├── 6013.json │ │ │ ├── 6014.json │ │ │ ├── 6015.json │ │ │ ├── 6016.json │ │ │ ├── 6017.json │ │ │ ├── 6018.json │ │ │ ├── 6019.json │ │ │ ├── 6022.json │ │ │ ├── 6023.json │ │ │ ├── 6024.json │ │ │ ├── 6025.json │ │ │ ├── 6026.json │ │ │ ├── 6027.json │ │ │ ├── 6028.json │ │ │ ├── 6029.json │ │ │ ├── 6030.json │ │ │ ├── 6031.json │ │ │ ├── 6032.json │ │ │ ├── 6033.json │ │ │ ├── 6034.json │ │ │ ├── 6035.json │ │ │ ├── 6039.json │ │ │ ├── 604.json │ │ │ ├── 6040.json │ │ │ ├── 6041.json │ │ │ ├── 6042.json │ │ │ ├── 6044.json │ │ │ ├── 6046.json │ │ │ ├── 6047.json │ │ │ ├── 6048.json │ │ │ ├── 6049.json │ │ │ ├── 605.json │ │ │ ├── 6051.json │ │ │ ├── 6052.json │ │ │ ├── 6053.json │ │ │ ├── 6054.json │ │ │ ├── 6055.json │ │ │ ├── 6056.json │ │ │ ├── 6057.json │ │ │ ├── 6059.json │ │ │ ├── 606.json │ │ │ ├── 6060.json │ │ │ ├── 6061.json │ │ │ ├── 6062.json │ │ │ ├── 6063.json │ │ │ ├── 6064.json │ │ │ ├── 6065.json │ │ │ ├── 6066.json │ │ │ ├── 6067.json │ │ │ ├── 6068.json │ │ │ ├── 6069.json │ │ │ ├── 607.json │ │ │ ├── 6070.json │ │ │ ├── 6071.json │ │ │ ├── 6072.json │ │ │ ├── 6073.json │ │ │ ├── 6074.json │ │ │ ├── 6075.json │ │ │ ├── 6076.json │ │ │ ├── 6077.json │ │ │ ├── 6078.json │ │ │ ├── 6079.json │ │ │ ├── 608.json │ │ │ ├── 6080.json │ │ │ ├── 6081.json │ │ │ ├── 6082.json │ │ │ ├── 6083.json │ │ │ ├── 6084.json │ │ │ ├── 6085.json │ │ │ ├── 6086.json │ │ │ ├── 6087.json │ │ │ ├── 6088.json │ │ │ ├── 6089.json │ │ │ ├── 6090.json │ │ │ ├── 6091.json │ │ │ ├── 6092.json │ │ │ ├── 6093.json │ │ │ ├── 6094.json │ │ │ ├── 6095.json │ │ │ ├── 6097.json │ │ │ ├── 6098.json │ │ │ ├── 6099.json │ │ │ ├── 61.json │ │ │ ├── 610.json │ │ │ ├── 6100.json │ │ │ ├── 6101.json │ │ │ ├── 6103.json │ │ │ ├── 6104.json │ │ │ ├── 6105.json │ │ │ ├── 6106.json │ │ │ ├── 6107.json │ │ │ ├── 6108.json │ │ │ ├── 6109.json │ │ │ ├── 611.json │ │ │ ├── 6110.json │ │ │ ├── 6111.json │ │ │ ├── 6112.json │ │ │ ├── 6113.json │ │ │ ├── 6114.json │ │ │ ├── 6115.json │ │ │ ├── 6116.json │ │ │ ├── 6117.json │ │ │ ├── 6118.json │ │ │ ├── 6119.json │ │ │ ├── 612.json │ │ │ ├── 6120.json │ │ │ ├── 6121.json │ │ │ ├── 6122.json │ │ │ ├── 6123.json │ │ │ ├── 6124.json │ │ │ ├── 6125.json │ │ │ ├── 6127.json │ │ │ ├── 6128.json │ │ │ ├── 6129.json │ │ │ ├── 613.json │ │ │ ├── 6130.json │ │ │ ├── 6131.json │ │ │ ├── 6132.json │ │ │ ├── 6133.json │ │ │ ├── 6136.json │ │ │ ├── 6137.json │ │ │ ├── 6138.json │ │ │ ├── 6139.json │ │ │ ├── 614.json │ │ │ ├── 6140.json │ │ │ ├── 6141.json │ │ │ ├── 6142.json │ │ │ ├── 6144.json │ │ │ ├── 6145.json │ │ │ ├── 6146.json │ │ │ ├── 6147.json │ │ │ ├── 6148.json │ │ │ ├── 6149.json │ │ │ ├── 6150.json │ │ │ ├── 6151.json │ │ │ ├── 6152.json │ │ │ ├── 6153.json │ │ │ ├── 6154.json │ │ │ ├── 6155.json │ │ │ ├── 6156.json │ │ │ ├── 6157.json │ │ │ ├── 6158.json │ │ │ ├── 6159.json │ │ │ ├── 616.json │ │ │ ├── 6160.json │ │ │ ├── 6161.json │ │ │ ├── 6162.json │ │ │ ├── 6163.json │ │ │ ├── 6164.json │ │ │ ├── 6165.json │ │ │ ├── 6166.json │ │ │ ├── 6168.json │ │ │ ├── 617.json │ │ │ ├── 6170.json │ │ │ ├── 6171.json │ │ │ ├── 6172.json │ │ │ ├── 6173.json │ │ │ ├── 6174.json │ │ │ ├── 6175.json │ │ │ ├── 6176.json │ │ │ ├── 6177.json │ │ │ ├── 6178.json │ │ │ ├── 618.json │ │ │ ├── 6180.json │ │ │ ├── 6181.json │ │ │ ├── 6185.json │ │ │ ├── 6188.json │ │ │ ├── 6189.json │ │ │ ├── 6190.json │ │ │ ├── 6191.json │ │ │ ├── 6192.json │ │ │ ├── 6193.json │ │ │ ├── 6194.json │ │ │ ├── 6195.json │ │ │ ├── 6196.json │ │ │ ├── 6197.json │ │ │ ├── 6198.json │ │ │ ├── 6199.json │ │ │ ├── 62.json │ │ │ ├── 620.json │ │ │ ├── 6200.json │ │ │ ├── 6201.json │ │ │ ├── 6202.json │ │ │ ├── 6203.json │ │ │ ├── 6204.json │ │ │ ├── 6206.json │ │ │ ├── 6207.json │ │ │ ├── 6208.json │ │ │ ├── 6209.json │ │ │ ├── 6210.json │ │ │ ├── 6211.json │ │ │ ├── 6212.json │ │ │ ├── 6213.json │ │ │ ├── 6214.json │ │ │ ├── 6215.json │ │ │ ├── 6216.json │ │ │ ├── 6217.json │ │ │ ├── 6218.json │ │ │ ├── 6219.json │ │ │ ├── 622.json │ │ │ ├── 6220.json │ │ │ ├── 6221.json │ │ │ ├── 6222.json │ │ │ ├── 6223.json │ │ │ ├── 6224.json │ │ │ ├── 6225.json │ │ │ ├── 6226.json │ │ │ ├── 6227.json │ │ │ ├── 6228.json │ │ │ ├── 6229.json │ │ │ ├── 623.json │ │ │ ├── 6230.json │ │ │ ├── 6231.json │ │ │ ├── 6232.json │ │ │ ├── 6233.json │ │ │ ├── 6234.json │ │ │ ├── 6235.json │ │ │ ├── 6236.json │ │ │ ├── 6237.json │ │ │ ├── 6238.json │ │ │ ├── 625.json │ │ │ ├── 626.json │ │ │ ├── 63.json │ │ │ ├── 631.json │ │ │ ├── 632.json │ │ │ ├── 636.json │ │ │ ├── 637.json │ │ │ ├── 643.json │ │ │ ├── 644.json │ │ │ ├── 646.json │ │ │ ├── 647.json │ │ │ ├── 648.json │ │ │ ├── 649.json │ │ │ ├── 650.json │ │ │ ├── 651.json │ │ │ ├── 652.json │ │ │ ├── 653.json │ │ │ ├── 654.json │ │ │ ├── 655.json │ │ │ ├── 657.json │ │ │ ├── 659.json │ │ │ ├── 660.json │ │ │ ├── 662.json │ │ │ ├── 664.json │ │ │ ├── 666.json │ │ │ ├── 669.json │ │ │ ├── 671.json │ │ │ ├── 672.json │ │ │ ├── 674.json │ │ │ ├── 675.json │ │ │ ├── 676.json │ │ │ ├── 678.json │ │ │ ├── 679.json │ │ │ ├── 680.json │ │ │ ├── 681.json │ │ │ ├── 682.json │ │ │ ├── 683.json │ │ │ ├── 687.json │ │ │ ├── 688.json │ │ │ ├── 689.json │ │ │ ├── 691.json │ │ │ ├── 692.json │ │ │ ├── 694.json │ │ │ ├── 695.json │ │ │ ├── 696.json │ │ │ ├── 698.json │ │ │ ├── 7.json │ │ │ ├── 70.json │ │ │ ├── 700.json │ │ │ ├── 701.json │ │ │ ├── 703.json │ │ │ ├── 705.json │ │ │ ├── 708.json │ │ │ ├── 709.json │ │ │ ├── 71.json │ │ │ ├── 714.json │ │ │ ├── 715.json │ │ │ ├── 716.json │ │ │ ├── 718.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 721.json │ │ │ ├── 723.json │ │ │ ├── 724.json │ │ │ ├── 725.json │ │ │ ├── 726.json │ │ │ ├── 727.json │ │ │ ├── 728.json │ │ │ ├── 729.json │ │ │ ├── 730.json │ │ │ ├── 731.json │ │ │ ├── 732.json │ │ │ ├── 735.json │ │ │ ├── 736.json │ │ │ ├── 737.json │ │ │ ├── 739.json │ │ │ ├── 74.json │ │ │ ├── 741.json │ │ │ ├── 744.json │ │ │ ├── 747.json │ │ │ ├── 748.json │ │ │ ├── 749.json │ │ │ ├── 75.json │ │ │ ├── 750.json │ │ │ ├── 752.json │ │ │ ├── 753.json │ │ │ ├── 754.json │ │ │ ├── 755.json │ │ │ ├── 758.json │ │ │ ├── 759.json │ │ │ ├── 760.json │ │ │ ├── 762.json │ │ │ ├── 765.json │ │ │ ├── 767.json │ │ │ ├── 768.json │ │ │ ├── 77.json │ │ │ ├── 770.json │ │ │ ├── 774.json │ │ │ ├── 776.json │ │ │ ├── 778.json │ │ │ ├── 779.json │ │ │ ├── 78.json │ │ │ ├── 783.json │ │ │ ├── 784.json │ │ │ ├── 785.json │ │ │ ├── 786.json │ │ │ ├── 789.json │ │ │ ├── 79.json │ │ │ ├── 791.json │ │ │ ├── 793.json │ │ │ ├── 794.json │ │ │ ├── 796.json │ │ │ ├── 798.json │ │ │ ├── 799.json │ │ │ ├── 804.json │ │ │ ├── 805.json │ │ │ ├── 806.json │ │ │ ├── 807.json │ │ │ ├── 809.json │ │ │ ├── 810.json │ │ │ ├── 811.json │ │ │ ├── 814.json │ │ │ ├── 815.json │ │ │ ├── 816.json │ │ │ ├── 82.json │ │ │ ├── 820.json │ │ │ ├── 821.json │ │ │ ├── 822.json │ │ │ ├── 824.json │ │ │ ├── 825.json │ │ │ ├── 828.json │ │ │ ├── 829.json │ │ │ ├── 830.json │ │ │ ├── 831.json │ │ │ ├── 832.json │ │ │ ├── 833.json │ │ │ ├── 834.json │ │ │ ├── 835.json │ │ │ ├── 836.json │ │ │ ├── 838.json │ │ │ ├── 839.json │ │ │ ├── 840.json │ │ │ ├── 841.json │ │ │ ├── 842.json │ │ │ ├── 844.json │ │ │ ├── 845.json │ │ │ ├── 847.json │ │ │ ├── 848.json │ │ │ ├── 849.json │ │ │ ├── 85.json │ │ │ ├── 850.json │ │ │ ├── 851.json │ │ │ ├── 854.json │ │ │ ├── 858.json │ │ │ ├── 86.json │ │ │ ├── 860.json │ │ │ ├── 861.json │ │ │ ├── 863.json │ │ │ ├── 864.json │ │ │ ├── 868.json │ │ │ ├── 870.json │ │ │ ├── 872.json │ │ │ ├── 873.json │ │ │ ├── 874.json │ │ │ ├── 875.json │ │ │ ├── 878.json │ │ │ ├── 881.json │ │ │ ├── 883.json │ │ │ ├── 884.json │ │ │ ├── 885.json │ │ │ ├── 886.json │ │ │ ├── 887.json │ │ │ ├── 889.json │ │ │ ├── 89.json │ │ │ ├── 891.json │ │ │ ├── 892.json │ │ │ ├── 893.json │ │ │ ├── 894.json │ │ │ ├── 896.json │ │ │ ├── 897.json │ │ │ ├── 9.json │ │ │ ├── 900.json │ │ │ ├── 904.json │ │ │ ├── 907.json │ │ │ ├── 908.json │ │ │ ├── 909.json │ │ │ ├── 910.json │ │ │ ├── 914.json │ │ │ ├── 915.json │ │ │ ├── 918.json │ │ │ ├── 919.json │ │ │ ├── 920.json │ │ │ ├── 923.json │ │ │ ├── 924.json │ │ │ ├── 925.json │ │ │ ├── 926.json │ │ │ ├── 929.json │ │ │ ├── 93.json │ │ │ ├── 934.json │ │ │ ├── 937.json │ │ │ ├── 938.json │ │ │ ├── 939.json │ │ │ ├── 94.json │ │ │ ├── 940.json │ │ │ ├── 941.json │ │ │ ├── 944.json │ │ │ ├── 945.json │ │ │ ├── 946.json │ │ │ ├── 948.json │ │ │ ├── 950.json │ │ │ ├── 951.json │ │ │ ├── 954.json │ │ │ ├── 955.json │ │ │ ├── 957.json │ │ │ ├── 959.json │ │ │ ├── 960.json │ │ │ ├── 964.json │ │ │ ├── 966.json │ │ │ ├── 968.json │ │ │ ├── 97.json │ │ │ ├── 973.json │ │ │ ├── 976.json │ │ │ ├── 977.json │ │ │ ├── 978.json │ │ │ ├── 98.json │ │ │ ├── 980.json │ │ │ ├── 983.json │ │ │ ├── 984.json │ │ │ ├── 985.json │ │ │ ├── 987.json │ │ │ ├── 988.json │ │ │ ├── 989.json │ │ │ ├── 991.json │ │ │ └── 995.json │ │ │ ├── intermediate_algebra │ │ │ ├── 1.json │ │ │ ├── 1001.json │ │ │ ├── 1002.json │ │ │ ├── 1004.json │ │ │ ├── 1005.json │ │ │ ├── 1006.json │ │ │ ├── 1010.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1016.json │ │ │ ├── 1017.json │ │ │ ├── 1018.json │ │ │ ├── 1019.json │ │ │ ├── 1021.json │ │ │ ├── 1023.json │ │ │ ├── 1025.json │ │ │ ├── 1026.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 103.json │ │ │ ├── 1030.json │ │ │ ├── 1031.json │ │ │ ├── 1035.json │ │ │ ├── 1038.json │ │ │ ├── 1039.json │ │ │ ├── 1041.json │ │ │ ├── 1043.json │ │ │ ├── 1045.json │ │ │ ├── 1046.json │ │ │ ├── 1049.json │ │ │ ├── 1051.json │ │ │ ├── 1052.json │ │ │ ├── 1053.json │ │ │ ├── 1056.json │ │ │ ├── 1057.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 106.json │ │ │ ├── 1060.json │ │ │ ├── 1061.json │ │ │ ├── 1062.json │ │ │ ├── 1064.json │ │ │ ├── 1065.json │ │ │ ├── 1066.json │ │ │ ├── 1067.json │ │ │ ├── 107.json │ │ │ ├── 1072.json │ │ │ ├── 1075.json │ │ │ ├── 1076.json │ │ │ ├── 1077.json │ │ │ ├── 1078.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1081.json │ │ │ ├── 1083.json │ │ │ ├── 1084.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1087.json │ │ │ ├── 1088.json │ │ │ ├── 1089.json │ │ │ ├── 1092.json │ │ │ ├── 1094.json │ │ │ ├── 1096.json │ │ │ ├── 1098.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 110.json │ │ │ ├── 1100.json │ │ │ ├── 1103.json │ │ │ ├── 1106.json │ │ │ ├── 1108.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1112.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 1117.json │ │ │ ├── 1118.json │ │ │ ├── 1119.json │ │ │ ├── 112.json │ │ │ ├── 1120.json │ │ │ ├── 1127.json │ │ │ ├── 1129.json │ │ │ ├── 113.json │ │ │ ├── 1133.json │ │ │ ├── 1134.json │ │ │ ├── 1135.json │ │ │ ├── 1138.json │ │ │ ├── 1139.json │ │ │ ├── 1140.json │ │ │ ├── 1141.json │ │ │ ├── 1142.json │ │ │ ├── 1143.json │ │ │ ├── 1144.json │ │ │ ├── 1147.json │ │ │ ├── 1149.json │ │ │ ├── 115.json │ │ │ ├── 1150.json │ │ │ ├── 1152.json │ │ │ ├── 1154.json │ │ │ ├── 1156.json │ │ │ ├── 1158.json │ │ │ ├── 1159.json │ │ │ ├── 116.json │ │ │ ├── 1160.json │ │ │ ├── 1161.json │ │ │ ├── 1162.json │ │ │ ├── 1163.json │ │ │ ├── 1164.json │ │ │ ├── 1165.json │ │ │ ├── 1167.json │ │ │ ├── 1172.json │ │ │ ├── 1173.json │ │ │ ├── 1174.json │ │ │ ├── 1175.json │ │ │ ├── 1177.json │ │ │ ├── 118.json │ │ │ ├── 1180.json │ │ │ ├── 1183.json │ │ │ ├── 1184.json │ │ │ ├── 1186.json │ │ │ ├── 1188.json │ │ │ ├── 119.json │ │ │ ├── 1190.json │ │ │ ├── 1191.json │ │ │ ├── 1193.json │ │ │ ├── 1196.json │ │ │ ├── 12.json │ │ │ ├── 120.json │ │ │ ├── 1200.json │ │ │ ├── 1201.json │ │ │ ├── 1202.json │ │ │ ├── 1204.json │ │ │ ├── 1205.json │ │ │ ├── 1206.json │ │ │ ├── 1207.json │ │ │ ├── 1209.json │ │ │ ├── 1211.json │ │ │ ├── 1212.json │ │ │ ├── 1213.json │ │ │ ├── 1214.json │ │ │ ├── 1215.json │ │ │ ├── 1216.json │ │ │ ├── 1219.json │ │ │ ├── 1221.json │ │ │ ├── 1222.json │ │ │ ├── 1223.json │ │ │ ├── 1224.json │ │ │ ├── 1225.json │ │ │ ├── 1226.json │ │ │ ├── 1228.json │ │ │ ├── 1229.json │ │ │ ├── 1233.json │ │ │ ├── 1234.json │ │ │ ├── 1235.json │ │ │ ├── 1236.json │ │ │ ├── 1237.json │ │ │ ├── 124.json │ │ │ ├── 1242.json │ │ │ ├── 1244.json │ │ │ ├── 1246.json │ │ │ ├── 1248.json │ │ │ ├── 1249.json │ │ │ ├── 125.json │ │ │ ├── 1250.json │ │ │ ├── 1251.json │ │ │ ├── 1254.json │ │ │ ├── 1255.json │ │ │ ├── 1257.json │ │ │ ├── 1258.json │ │ │ ├── 1259.json │ │ │ ├── 126.json │ │ │ ├── 1261.json │ │ │ ├── 1262.json │ │ │ ├── 1263.json │ │ │ ├── 1264.json │ │ │ ├── 1265.json │ │ │ ├── 1266.json │ │ │ ├── 1267.json │ │ │ ├── 1268.json │ │ │ ├── 1271.json │ │ │ ├── 1273.json │ │ │ ├── 1274.json │ │ │ ├── 1276.json │ │ │ ├── 1277.json │ │ │ ├── 1278.json │ │ │ ├── 1280.json │ │ │ ├── 1281.json │ │ │ ├── 1285.json │ │ │ ├── 1286.json │ │ │ ├── 1287.json │ │ │ ├── 129.json │ │ │ ├── 1292.json │ │ │ ├── 1293.json │ │ │ ├── 1294.json │ │ │ ├── 1296.json │ │ │ ├── 1298.json │ │ │ ├── 1299.json │ │ │ ├── 130.json │ │ │ ├── 1302.json │ │ │ ├── 1304.json │ │ │ ├── 1305.json │ │ │ ├── 1307.json │ │ │ ├── 1308.json │ │ │ ├── 1309.json │ │ │ ├── 1310.json │ │ │ ├── 1311.json │ │ │ ├── 1313.json │ │ │ ├── 1314.json │ │ │ ├── 1315.json │ │ │ ├── 1316.json │ │ │ ├── 1317.json │ │ │ ├── 1319.json │ │ │ ├── 132.json │ │ │ ├── 1320.json │ │ │ ├── 1322.json │ │ │ ├── 1324.json │ │ │ ├── 1325.json │ │ │ ├── 1327.json │ │ │ ├── 1329.json │ │ │ ├── 133.json │ │ │ ├── 1330.json │ │ │ ├── 1333.json │ │ │ ├── 1334.json │ │ │ ├── 1336.json │ │ │ ├── 1337.json │ │ │ ├── 1338.json │ │ │ ├── 1340.json │ │ │ ├── 1341.json │ │ │ ├── 1343.json │ │ │ ├── 1344.json │ │ │ ├── 1345.json │ │ │ ├── 1346.json │ │ │ ├── 1349.json │ │ │ ├── 1351.json │ │ │ ├── 1357.json │ │ │ ├── 1358.json │ │ │ ├── 1359.json │ │ │ ├── 136.json │ │ │ ├── 1361.json │ │ │ ├── 1362.json │ │ │ ├── 1366.json │ │ │ ├── 1367.json │ │ │ ├── 1368.json │ │ │ ├── 1369.json │ │ │ ├── 1370.json │ │ │ ├── 1371.json │ │ │ ├── 1373.json │ │ │ ├── 1376.json │ │ │ ├── 1377.json │ │ │ ├── 1378.json │ │ │ ├── 138.json │ │ │ ├── 1380.json │ │ │ ├── 1381.json │ │ │ ├── 1382.json │ │ │ ├── 1383.json │ │ │ ├── 1384.json │ │ │ ├── 1387.json │ │ │ ├── 1393.json │ │ │ ├── 1394.json │ │ │ ├── 1395.json │ │ │ ├── 1396.json │ │ │ ├── 1398.json │ │ │ ├── 140.json │ │ │ ├── 1402.json │ │ │ ├── 1404.json │ │ │ ├── 1406.json │ │ │ ├── 1409.json │ │ │ ├── 1412.json │ │ │ ├── 1413.json │ │ │ ├── 1414.json │ │ │ ├── 1415.json │ │ │ ├── 1418.json │ │ │ ├── 1420.json │ │ │ ├── 1424.json │ │ │ ├── 1425.json │ │ │ ├── 1426.json │ │ │ ├── 1427.json │ │ │ ├── 1428.json │ │ │ ├── 1429.json │ │ │ ├── 1431.json │ │ │ ├── 1432.json │ │ │ ├── 1434.json │ │ │ ├── 1435.json │ │ │ ├── 1439.json │ │ │ ├── 144.json │ │ │ ├── 1441.json │ │ │ ├── 1443.json │ │ │ ├── 1444.json │ │ │ ├── 1450.json │ │ │ ├── 1452.json │ │ │ ├── 1459.json │ │ │ ├── 146.json │ │ │ ├── 1463.json │ │ │ ├── 1464.json │ │ │ ├── 1465.json │ │ │ ├── 1466.json │ │ │ ├── 1468.json │ │ │ ├── 1469.json │ │ │ ├── 1471.json │ │ │ ├── 1472.json │ │ │ ├── 1473.json │ │ │ ├── 1476.json │ │ │ ├── 1478.json │ │ │ ├── 148.json │ │ │ ├── 1481.json │ │ │ ├── 1482.json │ │ │ ├── 1483.json │ │ │ ├── 1486.json │ │ │ ├── 1488.json │ │ │ ├── 1489.json │ │ │ ├── 1490.json │ │ │ ├── 1491.json │ │ │ ├── 1493.json │ │ │ ├── 1494.json │ │ │ ├── 1495.json │ │ │ ├── 1498.json │ │ │ ├── 1500.json │ │ │ ├── 1501.json │ │ │ ├── 1504.json │ │ │ ├── 1505.json │ │ │ ├── 1509.json │ │ │ ├── 1513.json │ │ │ ├── 1514.json │ │ │ ├── 1515.json │ │ │ ├── 1516.json │ │ │ ├── 1518.json │ │ │ ├── 152.json │ │ │ ├── 1521.json │ │ │ ├── 1525.json │ │ │ ├── 1527.json │ │ │ ├── 1528.json │ │ │ ├── 1529.json │ │ │ ├── 1530.json │ │ │ ├── 1531.json │ │ │ ├── 1532.json │ │ │ ├── 1533.json │ │ │ ├── 1534.json │ │ │ ├── 1535.json │ │ │ ├── 1536.json │ │ │ ├── 1537.json │ │ │ ├── 1538.json │ │ │ ├── 1539.json │ │ │ ├── 1540.json │ │ │ ├── 1541.json │ │ │ ├── 1545.json │ │ │ ├── 1546.json │ │ │ ├── 1547.json │ │ │ ├── 1549.json │ │ │ ├── 1554.json │ │ │ ├── 1556.json │ │ │ ├── 1557.json │ │ │ ├── 1559.json │ │ │ ├── 156.json │ │ │ ├── 1563.json │ │ │ ├── 1564.json │ │ │ ├── 1565.json │ │ │ ├── 1567.json │ │ │ ├── 1569.json │ │ │ ├── 1573.json │ │ │ ├── 1574.json │ │ │ ├── 1575.json │ │ │ ├── 1578.json │ │ │ ├── 1579.json │ │ │ ├── 1581.json │ │ │ ├── 1583.json │ │ │ ├── 1584.json │ │ │ ├── 1585.json │ │ │ ├── 1589.json │ │ │ ├── 159.json │ │ │ ├── 1590.json │ │ │ ├── 1594.json │ │ │ ├── 1595.json │ │ │ ├── 1596.json │ │ │ ├── 1599.json │ │ │ ├── 1601.json │ │ │ ├── 1603.json │ │ │ ├── 1604.json │ │ │ ├── 1605.json │ │ │ ├── 1609.json │ │ │ ├── 1610.json │ │ │ ├── 1611.json │ │ │ ├── 1613.json │ │ │ ├── 1614.json │ │ │ ├── 1618.json │ │ │ ├── 1619.json │ │ │ ├── 1621.json │ │ │ ├── 1623.json │ │ │ ├── 1624.json │ │ │ ├── 1627.json │ │ │ ├── 1629.json │ │ │ ├── 1630.json │ │ │ ├── 1632.json │ │ │ ├── 1633.json │ │ │ ├── 1635.json │ │ │ ├── 1636.json │ │ │ ├── 1637.json │ │ │ ├── 1639.json │ │ │ ├── 164.json │ │ │ ├── 1641.json │ │ │ ├── 1643.json │ │ │ ├── 1644.json │ │ │ ├── 1647.json │ │ │ ├── 1648.json │ │ │ ├── 1649.json │ │ │ ├── 1652.json │ │ │ ├── 1653.json │ │ │ ├── 1654.json │ │ │ ├── 1655.json │ │ │ ├── 1658.json │ │ │ ├── 1659.json │ │ │ ├── 166.json │ │ │ ├── 1660.json │ │ │ ├── 1661.json │ │ │ ├── 1662.json │ │ │ ├── 1664.json │ │ │ ├── 1666.json │ │ │ ├── 1667.json │ │ │ ├── 1668.json │ │ │ ├── 1670.json │ │ │ ├── 1671.json │ │ │ ├── 1672.json │ │ │ ├── 1673.json │ │ │ ├── 1674.json │ │ │ ├── 1675.json │ │ │ ├── 1676.json │ │ │ ├── 1677.json │ │ │ ├── 168.json │ │ │ ├── 1681.json │ │ │ ├── 1682.json │ │ │ ├── 1683.json │ │ │ ├── 1684.json │ │ │ ├── 1685.json │ │ │ ├── 1686.json │ │ │ ├── 1687.json │ │ │ ├── 1688.json │ │ │ ├── 1689.json │ │ │ ├── 1690.json │ │ │ ├── 1691.json │ │ │ ├── 1692.json │ │ │ ├── 1693.json │ │ │ ├── 1694.json │ │ │ ├── 1695.json │ │ │ ├── 1696.json │ │ │ ├── 1698.json │ │ │ ├── 1699.json │ │ │ ├── 170.json │ │ │ ├── 1700.json │ │ │ ├── 1701.json │ │ │ ├── 1704.json │ │ │ ├── 1708.json │ │ │ ├── 1709.json │ │ │ ├── 171.json │ │ │ ├── 1710.json │ │ │ ├── 1711.json │ │ │ ├── 1712.json │ │ │ ├── 1713.json │ │ │ ├── 1718.json │ │ │ ├── 1719.json │ │ │ ├── 172.json │ │ │ ├── 1720.json │ │ │ ├── 1721.json │ │ │ ├── 1722.json │ │ │ ├── 1724.json │ │ │ ├── 1725.json │ │ │ ├── 1726.json │ │ │ ├── 1728.json │ │ │ ├── 173.json │ │ │ ├── 1731.json │ │ │ ├── 1733.json │ │ │ ├── 1735.json │ │ │ ├── 1736.json │ │ │ ├── 1738.json │ │ │ ├── 1740.json │ │ │ ├── 1742.json │ │ │ ├── 1744.json │ │ │ ├── 1745.json │ │ │ ├── 175.json │ │ │ ├── 1751.json │ │ │ ├── 1752.json │ │ │ ├── 1753.json │ │ │ ├── 1754.json │ │ │ ├── 1756.json │ │ │ ├── 1759.json │ │ │ ├── 176.json │ │ │ ├── 1760.json │ │ │ ├── 1763.json │ │ │ ├── 1765.json │ │ │ ├── 1766.json │ │ │ ├── 1767.json │ │ │ ├── 1768.json │ │ │ ├── 1769.json │ │ │ ├── 177.json │ │ │ ├── 1771.json │ │ │ ├── 1774.json │ │ │ ├── 1777.json │ │ │ ├── 178.json │ │ │ ├── 1780.json │ │ │ ├── 1783.json │ │ │ ├── 1785.json │ │ │ ├── 1787.json │ │ │ ├── 1789.json │ │ │ ├── 179.json │ │ │ ├── 1795.json │ │ │ ├── 1796.json │ │ │ ├── 1798.json │ │ │ ├── 18.json │ │ │ ├── 1802.json │ │ │ ├── 1804.json │ │ │ ├── 1809.json │ │ │ ├── 1810.json │ │ │ ├── 1815.json │ │ │ ├── 1816.json │ │ │ ├── 1817.json │ │ │ ├── 1818.json │ │ │ ├── 1819.json │ │ │ ├── 1821.json │ │ │ ├── 1822.json │ │ │ ├── 1825.json │ │ │ ├── 1826.json │ │ │ ├── 1828.json │ │ │ ├── 1830.json │ │ │ ├── 1831.json │ │ │ ├── 1832.json │ │ │ ├── 1833.json │ │ │ ├── 1835.json │ │ │ ├── 184.json │ │ │ ├── 1841.json │ │ │ ├── 1843.json │ │ │ ├── 1844.json │ │ │ ├── 1847.json │ │ │ ├── 1848.json │ │ │ ├── 185.json │ │ │ ├── 1851.json │ │ │ ├── 1852.json │ │ │ ├── 1853.json │ │ │ ├── 1858.json │ │ │ ├── 1860.json │ │ │ ├── 1861.json │ │ │ ├── 1862.json │ │ │ ├── 1863.json │ │ │ ├── 1864.json │ │ │ ├── 1866.json │ │ │ ├── 1867.json │ │ │ ├── 1868.json │ │ │ ├── 1871.json │ │ │ ├── 1872.json │ │ │ ├── 1875.json │ │ │ ├── 1878.json │ │ │ ├── 1879.json │ │ │ ├── 188.json │ │ │ ├── 1881.json │ │ │ ├── 1882.json │ │ │ ├── 1883.json │ │ │ ├── 1884.json │ │ │ ├── 1887.json │ │ │ ├── 1888.json │ │ │ ├── 1889.json │ │ │ ├── 189.json │ │ │ ├── 1892.json │ │ │ ├── 1894.json │ │ │ ├── 1896.json │ │ │ ├── 19.json │ │ │ ├── 1901.json │ │ │ ├── 1903.json │ │ │ ├── 1904.json │ │ │ ├── 1905.json │ │ │ ├── 1906.json │ │ │ ├── 1908.json │ │ │ ├── 191.json │ │ │ ├── 1910.json │ │ │ ├── 1911.json │ │ │ ├── 1912.json │ │ │ ├── 1913.json │ │ │ ├── 1914.json │ │ │ ├── 1915.json │ │ │ ├── 1916.json │ │ │ ├── 1917.json │ │ │ ├── 1918.json │ │ │ ├── 1919.json │ │ │ ├── 192.json │ │ │ ├── 1920.json │ │ │ ├── 1921.json │ │ │ ├── 1922.json │ │ │ ├── 1923.json │ │ │ ├── 1925.json │ │ │ ├── 1926.json │ │ │ ├── 1927.json │ │ │ ├── 1929.json │ │ │ ├── 1931.json │ │ │ ├── 1933.json │ │ │ ├── 1935.json │ │ │ ├── 1936.json │ │ │ ├── 1938.json │ │ │ ├── 1939.json │ │ │ ├── 1941.json │ │ │ ├── 1942.json │ │ │ ├── 1943.json │ │ │ ├── 1944.json │ │ │ ├── 1946.json │ │ │ ├── 1947.json │ │ │ ├── 1949.json │ │ │ ├── 195.json │ │ │ ├── 1953.json │ │ │ ├── 1954.json │ │ │ ├── 1955.json │ │ │ ├── 1957.json │ │ │ ├── 1958.json │ │ │ ├── 1960.json │ │ │ ├── 1962.json │ │ │ ├── 1963.json │ │ │ ├── 1964.json │ │ │ ├── 1966.json │ │ │ ├── 1968.json │ │ │ ├── 197.json │ │ │ ├── 1970.json │ │ │ ├── 1971.json │ │ │ ├── 1972.json │ │ │ ├── 1976.json │ │ │ ├── 1978.json │ │ │ ├── 1979.json │ │ │ ├── 198.json │ │ │ ├── 1983.json │ │ │ ├── 1984.json │ │ │ ├── 1988.json │ │ │ ├── 1989.json │ │ │ ├── 1991.json │ │ │ ├── 1996.json │ │ │ ├── 1997.json │ │ │ ├── 20.json │ │ │ ├── 2000.json │ │ │ ├── 2001.json │ │ │ ├── 2004.json │ │ │ ├── 2005.json │ │ │ ├── 2006.json │ │ │ ├── 2008.json │ │ │ ├── 2009.json │ │ │ ├── 2012.json │ │ │ ├── 2014.json │ │ │ ├── 2016.json │ │ │ ├── 202.json │ │ │ ├── 2023.json │ │ │ ├── 2025.json │ │ │ ├── 2026.json │ │ │ ├── 2028.json │ │ │ ├── 203.json │ │ │ ├── 2031.json │ │ │ ├── 2032.json │ │ │ ├── 2033.json │ │ │ ├── 2034.json │ │ │ ├── 2036.json │ │ │ ├── 2038.json │ │ │ ├── 204.json │ │ │ ├── 2041.json │ │ │ ├── 2042.json │ │ │ ├── 2043.json │ │ │ ├── 2044.json │ │ │ ├── 2045.json │ │ │ ├── 2049.json │ │ │ ├── 205.json │ │ │ ├── 2050.json │ │ │ ├── 2051.json │ │ │ ├── 2052.json │ │ │ ├── 2053.json │ │ │ ├── 2054.json │ │ │ ├── 2055.json │ │ │ ├── 2056.json │ │ │ ├── 2057.json │ │ │ ├── 2060.json │ │ │ ├── 2061.json │ │ │ ├── 2062.json │ │ │ ├── 2063.json │ │ │ ├── 2067.json │ │ │ ├── 2069.json │ │ │ ├── 2071.json │ │ │ ├── 2072.json │ │ │ ├── 2075.json │ │ │ ├── 2076.json │ │ │ ├── 2077.json │ │ │ ├── 2079.json │ │ │ ├── 2080.json │ │ │ ├── 2083.json │ │ │ ├── 2085.json │ │ │ ├── 2086.json │ │ │ ├── 2087.json │ │ │ ├── 2088.json │ │ │ ├── 2090.json │ │ │ ├── 2091.json │ │ │ ├── 2092.json │ │ │ ├── 2099.json │ │ │ ├── 21.json │ │ │ ├── 210.json │ │ │ ├── 2100.json │ │ │ ├── 2101.json │ │ │ ├── 2102.json │ │ │ ├── 2104.json │ │ │ ├── 2105.json │ │ │ ├── 2106.json │ │ │ ├── 2107.json │ │ │ ├── 2108.json │ │ │ ├── 211.json │ │ │ ├── 2110.json │ │ │ ├── 2112.json │ │ │ ├── 2117.json │ │ │ ├── 2118.json │ │ │ ├── 2119.json │ │ │ ├── 212.json │ │ │ ├── 2120.json │ │ │ ├── 2122.json │ │ │ ├── 2125.json │ │ │ ├── 2127.json │ │ │ ├── 2128.json │ │ │ ├── 2129.json │ │ │ ├── 213.json │ │ │ ├── 2133.json │ │ │ ├── 2134.json │ │ │ ├── 2135.json │ │ │ ├── 2136.json │ │ │ ├── 2137.json │ │ │ ├── 2138.json │ │ │ ├── 214.json │ │ │ ├── 2140.json │ │ │ ├── 2143.json │ │ │ ├── 2145.json │ │ │ ├── 2147.json │ │ │ ├── 2148.json │ │ │ ├── 2149.json │ │ │ ├── 215.json │ │ │ ├── 2150.json │ │ │ ├── 2154.json │ │ │ ├── 2155.json │ │ │ ├── 2156.json │ │ │ ├── 2159.json │ │ │ ├── 216.json │ │ │ ├── 2161.json │ │ │ ├── 2162.json │ │ │ ├── 2163.json │ │ │ ├── 2165.json │ │ │ ├── 2168.json │ │ │ ├── 217.json │ │ │ ├── 2170.json │ │ │ ├── 2173.json │ │ │ ├── 2174.json │ │ │ ├── 2175.json │ │ │ ├── 2176.json │ │ │ ├── 2177.json │ │ │ ├── 2178.json │ │ │ ├── 2179.json │ │ │ ├── 2180.json │ │ │ ├── 2181.json │ │ │ ├── 2183.json │ │ │ ├── 2184.json │ │ │ ├── 2185.json │ │ │ ├── 2186.json │ │ │ ├── 219.json │ │ │ ├── 2190.json │ │ │ ├── 2194.json │ │ │ ├── 220.json │ │ │ ├── 221.json │ │ │ ├── 223.json │ │ │ ├── 224.json │ │ │ ├── 228.json │ │ │ ├── 229.json │ │ │ ├── 230.json │ │ │ ├── 231.json │ │ │ ├── 233.json │ │ │ ├── 234.json │ │ │ ├── 235.json │ │ │ ├── 236.json │ │ │ ├── 238.json │ │ │ ├── 239.json │ │ │ ├── 241.json │ │ │ ├── 245.json │ │ │ ├── 247.json │ │ │ ├── 248.json │ │ │ ├── 249.json │ │ │ ├── 250.json │ │ │ ├── 252.json │ │ │ ├── 256.json │ │ │ ├── 257.json │ │ │ ├── 258.json │ │ │ ├── 26.json │ │ │ ├── 263.json │ │ │ ├── 264.json │ │ │ ├── 266.json │ │ │ ├── 267.json │ │ │ ├── 268.json │ │ │ ├── 269.json │ │ │ ├── 270.json │ │ │ ├── 271.json │ │ │ ├── 274.json │ │ │ ├── 276.json │ │ │ ├── 277.json │ │ │ ├── 28.json │ │ │ ├── 280.json │ │ │ ├── 281.json │ │ │ ├── 282.json │ │ │ ├── 283.json │ │ │ ├── 284.json │ │ │ ├── 285.json │ │ │ ├── 286.json │ │ │ ├── 287.json │ │ │ ├── 29.json │ │ │ ├── 290.json │ │ │ ├── 291.json │ │ │ ├── 293.json │ │ │ ├── 294.json │ │ │ ├── 296.json │ │ │ ├── 297.json │ │ │ ├── 298.json │ │ │ ├── 299.json │ │ │ ├── 301.json │ │ │ ├── 303.json │ │ │ ├── 306.json │ │ │ ├── 307.json │ │ │ ├── 308.json │ │ │ ├── 309.json │ │ │ ├── 31.json │ │ │ ├── 310.json │ │ │ ├── 311.json │ │ │ ├── 312.json │ │ │ ├── 314.json │ │ │ ├── 315.json │ │ │ ├── 316.json │ │ │ ├── 318.json │ │ │ ├── 319.json │ │ │ ├── 32.json │ │ │ ├── 320.json │ │ │ ├── 323.json │ │ │ ├── 324.json │ │ │ ├── 328.json │ │ │ ├── 329.json │ │ │ ├── 33.json │ │ │ ├── 332.json │ │ │ ├── 333.json │ │ │ ├── 335.json │ │ │ ├── 338.json │ │ │ ├── 339.json │ │ │ ├── 34.json │ │ │ ├── 346.json │ │ │ ├── 349.json │ │ │ ├── 350.json │ │ │ ├── 351.json │ │ │ ├── 353.json │ │ │ ├── 357.json │ │ │ ├── 358.json │ │ │ ├── 36.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 367.json │ │ │ ├── 369.json │ │ │ ├── 370.json │ │ │ ├── 371.json │ │ │ ├── 372.json │ │ │ ├── 373.json │ │ │ ├── 375.json │ │ │ ├── 380.json │ │ │ ├── 381.json │ │ │ ├── 382.json │ │ │ ├── 383.json │ │ │ ├── 384.json │ │ │ ├── 387.json │ │ │ ├── 390.json │ │ │ ├── 391.json │ │ │ ├── 393.json │ │ │ ├── 394.json │ │ │ ├── 395.json │ │ │ ├── 396.json │ │ │ ├── 397.json │ │ │ ├── 399.json │ │ │ ├── 400.json │ │ │ ├── 403.json │ │ │ ├── 407.json │ │ │ ├── 409.json │ │ │ ├── 410.json │ │ │ ├── 411.json │ │ │ ├── 413.json │ │ │ ├── 414.json │ │ │ ├── 415.json │ │ │ ├── 417.json │ │ │ ├── 418.json │ │ │ ├── 419.json │ │ │ ├── 423.json │ │ │ ├── 424.json │ │ │ ├── 425.json │ │ │ ├── 426.json │ │ │ ├── 427.json │ │ │ ├── 43.json │ │ │ ├── 432.json │ │ │ ├── 433.json │ │ │ ├── 435.json │ │ │ ├── 436.json │ │ │ ├── 438.json │ │ │ ├── 439.json │ │ │ ├── 440.json │ │ │ ├── 443.json │ │ │ ├── 445.json │ │ │ ├── 447.json │ │ │ ├── 448.json │ │ │ ├── 449.json │ │ │ ├── 45.json │ │ │ ├── 450.json │ │ │ ├── 451.json │ │ │ ├── 452.json │ │ │ ├── 453.json │ │ │ ├── 454.json │ │ │ ├── 455.json │ │ │ ├── 456.json │ │ │ ├── 457.json │ │ │ ├── 458.json │ │ │ ├── 46.json │ │ │ ├── 460.json │ │ │ ├── 462.json │ │ │ ├── 464.json │ │ │ ├── 471.json │ │ │ ├── 473.json │ │ │ ├── 474.json │ │ │ ├── 475.json │ │ │ ├── 476.json │ │ │ ├── 477.json │ │ │ ├── 479.json │ │ │ ├── 480.json │ │ │ ├── 482.json │ │ │ ├── 483.json │ │ │ ├── 484.json │ │ │ ├── 485.json │ │ │ ├── 486.json │ │ │ ├── 49.json │ │ │ ├── 490.json │ │ │ ├── 491.json │ │ │ ├── 499.json │ │ │ ├── 501.json │ │ │ ├── 502.json │ │ │ ├── 503.json │ │ │ ├── 504.json │ │ │ ├── 505.json │ │ │ ├── 506.json │ │ │ ├── 510.json │ │ │ ├── 511.json │ │ │ ├── 512.json │ │ │ ├── 513.json │ │ │ ├── 514.json │ │ │ ├── 516.json │ │ │ ├── 517.json │ │ │ ├── 518.json │ │ │ ├── 52.json │ │ │ ├── 521.json │ │ │ ├── 523.json │ │ │ ├── 524.json │ │ │ ├── 525.json │ │ │ ├── 528.json │ │ │ ├── 529.json │ │ │ ├── 53.json │ │ │ ├── 530.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 534.json │ │ │ ├── 537.json │ │ │ ├── 538.json │ │ │ ├── 539.json │ │ │ ├── 54.json │ │ │ ├── 540.json │ │ │ ├── 541.json │ │ │ ├── 542.json │ │ │ ├── 543.json │ │ │ ├── 544.json │ │ │ ├── 545.json │ │ │ ├── 546.json │ │ │ ├── 548.json │ │ │ ├── 549.json │ │ │ ├── 550.json │ │ │ ├── 552.json │ │ │ ├── 553.json │ │ │ ├── 554.json │ │ │ ├── 556.json │ │ │ ├── 557.json │ │ │ ├── 559.json │ │ │ ├── 560.json │ │ │ ├── 561.json │ │ │ ├── 563.json │ │ │ ├── 564.json │ │ │ ├── 565.json │ │ │ ├── 566.json │ │ │ ├── 567.json │ │ │ ├── 569.json │ │ │ ├── 57.json │ │ │ ├── 571.json │ │ │ ├── 573.json │ │ │ ├── 574.json │ │ │ ├── 576.json │ │ │ ├── 579.json │ │ │ ├── 583.json │ │ │ ├── 584.json │ │ │ ├── 585.json │ │ │ ├── 587.json │ │ │ ├── 59.json │ │ │ ├── 592.json │ │ │ ├── 594.json │ │ │ ├── 595.json │ │ │ ├── 596.json │ │ │ ├── 597.json │ │ │ ├── 599.json │ │ │ ├── 600.json │ │ │ ├── 602.json │ │ │ ├── 603.json │ │ │ ├── 606.json │ │ │ ├── 608.json │ │ │ ├── 610.json │ │ │ ├── 615.json │ │ │ ├── 616.json │ │ │ ├── 617.json │ │ │ ├── 618.json │ │ │ ├── 619.json │ │ │ ├── 62.json │ │ │ ├── 620.json │ │ │ ├── 621.json │ │ │ ├── 622.json │ │ │ ├── 624.json │ │ │ ├── 625.json │ │ │ ├── 626.json │ │ │ ├── 627.json │ │ │ ├── 629.json │ │ │ ├── 63.json │ │ │ ├── 630.json │ │ │ ├── 631.json │ │ │ ├── 633.json │ │ │ ├── 634.json │ │ │ ├── 635.json │ │ │ ├── 638.json │ │ │ ├── 639.json │ │ │ ├── 640.json │ │ │ ├── 642.json │ │ │ ├── 646.json │ │ │ ├── 647.json │ │ │ ├── 649.json │ │ │ ├── 65.json │ │ │ ├── 650.json │ │ │ ├── 651.json │ │ │ ├── 652.json │ │ │ ├── 653.json │ │ │ ├── 654.json │ │ │ ├── 655.json │ │ │ ├── 656.json │ │ │ ├── 658.json │ │ │ ├── 659.json │ │ │ ├── 660.json │ │ │ ├── 661.json │ │ │ ├── 665.json │ │ │ ├── 667.json │ │ │ ├── 669.json │ │ │ ├── 67.json │ │ │ ├── 670.json │ │ │ ├── 671.json │ │ │ ├── 672.json │ │ │ ├── 674.json │ │ │ ├── 675.json │ │ │ ├── 678.json │ │ │ ├── 679.json │ │ │ ├── 680.json │ │ │ ├── 681.json │ │ │ ├── 683.json │ │ │ ├── 684.json │ │ │ ├── 688.json │ │ │ ├── 689.json │ │ │ ├── 69.json │ │ │ ├── 691.json │ │ │ ├── 695.json │ │ │ ├── 696.json │ │ │ ├── 697.json │ │ │ ├── 699.json │ │ │ ├── 70.json │ │ │ ├── 700.json │ │ │ ├── 701.json │ │ │ ├── 704.json │ │ │ ├── 705.json │ │ │ ├── 707.json │ │ │ ├── 71.json │ │ │ ├── 710.json │ │ │ ├── 717.json │ │ │ ├── 719.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 724.json │ │ │ ├── 726.json │ │ │ ├── 727.json │ │ │ ├── 73.json │ │ │ ├── 730.json │ │ │ ├── 731.json │ │ │ ├── 732.json │ │ │ ├── 733.json │ │ │ ├── 737.json │ │ │ ├── 740.json │ │ │ ├── 742.json │ │ │ ├── 743.json │ │ │ ├── 744.json │ │ │ ├── 746.json │ │ │ ├── 748.json │ │ │ ├── 749.json │ │ │ ├── 75.json │ │ │ ├── 750.json │ │ │ ├── 751.json │ │ │ ├── 753.json │ │ │ ├── 755.json │ │ │ ├── 756.json │ │ │ ├── 758.json │ │ │ ├── 759.json │ │ │ ├── 760.json │ │ │ ├── 761.json │ │ │ ├── 762.json │ │ │ ├── 764.json │ │ │ ├── 765.json │ │ │ ├── 767.json │ │ │ ├── 768.json │ │ │ ├── 769.json │ │ │ ├── 77.json │ │ │ ├── 770.json │ │ │ ├── 772.json │ │ │ ├── 775.json │ │ │ ├── 777.json │ │ │ ├── 778.json │ │ │ ├── 780.json │ │ │ ├── 781.json │ │ │ ├── 782.json │ │ │ ├── 783.json │ │ │ ├── 784.json │ │ │ ├── 785.json │ │ │ ├── 787.json │ │ │ ├── 789.json │ │ │ ├── 79.json │ │ │ ├── 791.json │ │ │ ├── 792.json │ │ │ ├── 794.json │ │ │ ├── 796.json │ │ │ ├── 797.json │ │ │ ├── 798.json │ │ │ ├── 799.json │ │ │ ├── 801.json │ │ │ ├── 802.json │ │ │ ├── 804.json │ │ │ ├── 805.json │ │ │ ├── 806.json │ │ │ ├── 809.json │ │ │ ├── 81.json │ │ │ ├── 810.json │ │ │ ├── 811.json │ │ │ ├── 813.json │ │ │ ├── 814.json │ │ │ ├── 815.json │ │ │ ├── 816.json │ │ │ ├── 818.json │ │ │ ├── 819.json │ │ │ ├── 820.json │ │ │ ├── 821.json │ │ │ ├── 824.json │ │ │ ├── 825.json │ │ │ ├── 826.json │ │ │ ├── 83.json │ │ │ ├── 830.json │ │ │ ├── 831.json │ │ │ ├── 832.json │ │ │ ├── 833.json │ │ │ ├── 837.json │ │ │ ├── 84.json │ │ │ ├── 842.json │ │ │ ├── 844.json │ │ │ ├── 845.json │ │ │ ├── 846.json │ │ │ ├── 848.json │ │ │ ├── 849.json │ │ │ ├── 850.json │ │ │ ├── 852.json │ │ │ ├── 853.json │ │ │ ├── 854.json │ │ │ ├── 855.json │ │ │ ├── 856.json │ │ │ ├── 857.json │ │ │ ├── 86.json │ │ │ ├── 862.json │ │ │ ├── 865.json │ │ │ ├── 866.json │ │ │ ├── 868.json │ │ │ ├── 87.json │ │ │ ├── 870.json │ │ │ ├── 873.json │ │ │ ├── 874.json │ │ │ ├── 877.json │ │ │ ├── 879.json │ │ │ ├── 88.json │ │ │ ├── 880.json │ │ │ ├── 881.json │ │ │ ├── 882.json │ │ │ ├── 883.json │ │ │ ├── 886.json │ │ │ ├── 887.json │ │ │ ├── 888.json │ │ │ ├── 89.json │ │ │ ├── 890.json │ │ │ ├── 892.json │ │ │ ├── 893.json │ │ │ ├── 895.json │ │ │ ├── 896.json │ │ │ ├── 899.json │ │ │ ├── 9.json │ │ │ ├── 900.json │ │ │ ├── 9000.json │ │ │ ├── 9001.json │ │ │ ├── 9002.json │ │ │ ├── 9003.json │ │ │ ├── 9004.json │ │ │ ├── 9005.json │ │ │ ├── 9006.json │ │ │ ├── 9007.json │ │ │ ├── 9008.json │ │ │ ├── 9009.json │ │ │ ├── 901.json │ │ │ ├── 9010.json │ │ │ ├── 9011.json │ │ │ ├── 9012.json │ │ │ ├── 9013.json │ │ │ ├── 9014.json │ │ │ ├── 9015.json │ │ │ ├── 9016.json │ │ │ ├── 9017.json │ │ │ ├── 9018.json │ │ │ ├── 9019.json │ │ │ ├── 902.json │ │ │ ├── 9020.json │ │ │ ├── 9021.json │ │ │ ├── 9022.json │ │ │ ├── 9023.json │ │ │ ├── 9024.json │ │ │ ├── 9025.json │ │ │ ├── 9026.json │ │ │ ├── 9027.json │ │ │ ├── 9028.json │ │ │ ├── 9029.json │ │ │ ├── 903.json │ │ │ ├── 905.json │ │ │ ├── 909.json │ │ │ ├── 91.json │ │ │ ├── 912.json │ │ │ ├── 914.json │ │ │ ├── 917.json │ │ │ ├── 918.json │ │ │ ├── 919.json │ │ │ ├── 92.json │ │ │ ├── 920.json │ │ │ ├── 921.json │ │ │ ├── 923.json │ │ │ ├── 925.json │ │ │ ├── 926.json │ │ │ ├── 927.json │ │ │ ├── 929.json │ │ │ ├── 931.json │ │ │ ├── 932.json │ │ │ ├── 937.json │ │ │ ├── 938.json │ │ │ ├── 939.json │ │ │ ├── 94.json │ │ │ ├── 940.json │ │ │ ├── 942.json │ │ │ ├── 943.json │ │ │ ├── 944.json │ │ │ ├── 947.json │ │ │ ├── 948.json │ │ │ ├── 949.json │ │ │ ├── 950.json │ │ │ ├── 952.json │ │ │ ├── 953.json │ │ │ ├── 954.json │ │ │ ├── 957.json │ │ │ ├── 958.json │ │ │ ├── 959.json │ │ │ ├── 96.json │ │ │ ├── 961.json │ │ │ ├── 963.json │ │ │ ├── 97.json │ │ │ ├── 973.json │ │ │ ├── 974.json │ │ │ ├── 975.json │ │ │ ├── 978.json │ │ │ ├── 979.json │ │ │ ├── 98.json │ │ │ ├── 980.json │ │ │ ├── 981.json │ │ │ ├── 982.json │ │ │ ├── 985.json │ │ │ ├── 988.json │ │ │ ├── 989.json │ │ │ ├── 99.json │ │ │ ├── 990.json │ │ │ ├── 993.json │ │ │ ├── 995.json │ │ │ └── 997.json │ │ │ ├── number_theory │ │ │ ├── 10.json │ │ │ ├── 1001.json │ │ │ ├── 1003.json │ │ │ ├── 1006.json │ │ │ ├── 1007.json │ │ │ ├── 1008.json │ │ │ ├── 1010.json │ │ │ ├── 1011.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1014.json │ │ │ ├── 1015.json │ │ │ ├── 1016.json │ │ │ ├── 1017.json │ │ │ ├── 1020.json │ │ │ ├── 1021.json │ │ │ ├── 1023.json │ │ │ ├── 1025.json │ │ │ ├── 1026.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 1029.json │ │ │ ├── 1030.json │ │ │ ├── 1031.json │ │ │ ├── 1034.json │ │ │ ├── 1037.json │ │ │ ├── 1039.json │ │ │ ├── 104.json │ │ │ ├── 1040.json │ │ │ ├── 1041.json │ │ │ ├── 1042.json │ │ │ ├── 1045.json │ │ │ ├── 1047.json │ │ │ ├── 1048.json │ │ │ ├── 1049.json │ │ │ ├── 105.json │ │ │ ├── 1050.json │ │ │ ├── 1051.json │ │ │ ├── 1053.json │ │ │ ├── 1054.json │ │ │ ├── 1057.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 106.json │ │ │ ├── 1062.json │ │ │ ├── 1063.json │ │ │ ├── 1066.json │ │ │ ├── 1068.json │ │ │ ├── 1069.json │ │ │ ├── 107.json │ │ │ ├── 1070.json │ │ │ ├── 1071.json │ │ │ ├── 1073.json │ │ │ ├── 1074.json │ │ │ ├── 1075.json │ │ │ ├── 1076.json │ │ │ ├── 1078.json │ │ │ ├── 1079.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1083.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1087.json │ │ │ ├── 1088.json │ │ │ ├── 1089.json │ │ │ ├── 1091.json │ │ │ ├── 1094.json │ │ │ ├── 1095.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 1100.json │ │ │ ├── 1106.json │ │ │ ├── 1107.json │ │ │ ├── 1108.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1112.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 112.json │ │ │ ├── 1126.json │ │ │ ├── 1127.json │ │ │ ├── 113.json │ │ │ ├── 1130.json │ │ │ ├── 1131.json │ │ │ ├── 1132.json │ │ │ ├── 1135.json │ │ │ ├── 1137.json │ │ │ ├── 1138.json │ │ │ ├── 1139.json │ │ │ ├── 1141.json │ │ │ ├── 1143.json │ │ │ ├── 1148.json │ │ │ ├── 1149.json │ │ │ ├── 115.json │ │ │ ├── 1150.json │ │ │ ├── 1151.json │ │ │ ├── 1152.json │ │ │ ├── 1153.json │ │ │ ├── 1154.json │ │ │ ├── 1156.json │ │ │ ├── 1157.json │ │ │ ├── 1159.json │ │ │ ├── 116.json │ │ │ ├── 1163.json │ │ │ ├── 1164.json │ │ │ ├── 1166.json │ │ │ ├── 1167.json │ │ │ ├── 1169.json │ │ │ ├── 1170.json │ │ │ ├── 1173.json │ │ │ ├── 1177.json │ │ │ ├── 118.json │ │ │ ├── 1180.json │ │ │ ├── 1182.json │ │ │ ├── 1184.json │ │ │ ├── 1187.json │ │ │ ├── 1188.json │ │ │ ├── 1189.json │ │ │ ├── 119.json │ │ │ ├── 1190.json │ │ │ ├── 1192.json │ │ │ ├── 1195.json │ │ │ ├── 1197.json │ │ │ ├── 1198.json │ │ │ ├── 120.json │ │ │ ├── 1200.json │ │ │ ├── 1204.json │ │ │ ├── 1205.json │ │ │ ├── 1206.json │ │ │ ├── 1209.json │ │ │ ├── 121.json │ │ │ ├── 1210.json │ │ │ ├── 1211.json │ │ │ ├── 1212.json │ │ │ ├── 1213.json │ │ │ ├── 1214.json │ │ │ ├── 1216.json │ │ │ ├── 1219.json │ │ │ ├── 1220.json │ │ │ ├── 1221.json │ │ │ ├── 1223.json │ │ │ ├── 1224.json │ │ │ ├── 1225.json │ │ │ ├── 1228.json │ │ │ ├── 123.json │ │ │ ├── 1230.json │ │ │ ├── 1232.json │ │ │ ├── 1234.json │ │ │ ├── 1235.json │ │ │ ├── 1236.json │ │ │ ├── 1237.json │ │ │ ├── 124.json │ │ │ ├── 1242.json │ │ │ ├── 1244.json │ │ │ ├── 1245.json │ │ │ ├── 1246.json │ │ │ ├── 1247.json │ │ │ ├── 1249.json │ │ │ ├── 125.json │ │ │ ├── 1250.json │ │ │ ├── 1251.json │ │ │ ├── 1253.json │ │ │ ├── 1255.json │ │ │ ├── 1258.json │ │ │ ├── 1259.json │ │ │ ├── 1262.json │ │ │ ├── 1263.json │ │ │ ├── 1264.json │ │ │ ├── 1265.json │ │ │ ├── 1266.json │ │ │ ├── 1267.json │ │ │ ├── 1268.json │ │ │ ├── 1269.json │ │ │ ├── 1270.json │ │ │ ├── 1271.json │ │ │ ├── 1272.json │ │ │ ├── 1277.json │ │ │ ├── 1280.json │ │ │ ├── 1285.json │ │ │ ├── 1286.json │ │ │ ├── 129.json │ │ │ ├── 1290.json │ │ │ ├── 1293.json │ │ │ ├── 1294.json │ │ │ ├── 130.json │ │ │ ├── 131.json │ │ │ ├── 134.json │ │ │ ├── 140.json │ │ │ ├── 141.json │ │ │ ├── 142.json │ │ │ ├── 143.json │ │ │ ├── 144.json │ │ │ ├── 145.json │ │ │ ├── 146.json │ │ │ ├── 147.json │ │ │ ├── 15.json │ │ │ ├── 151.json │ │ │ ├── 152.json │ │ │ ├── 153.json │ │ │ ├── 157.json │ │ │ ├── 158.json │ │ │ ├── 16.json │ │ │ ├── 160.json │ │ │ ├── 163.json │ │ │ ├── 164.json │ │ │ ├── 165.json │ │ │ ├── 166.json │ │ │ ├── 167.json │ │ │ ├── 17.json │ │ │ ├── 171.json │ │ │ ├── 172.json │ │ │ ├── 174.json │ │ │ ├── 176.json │ │ │ ├── 177.json │ │ │ ├── 178.json │ │ │ ├── 179.json │ │ │ ├── 18.json │ │ │ ├── 180.json │ │ │ ├── 181.json │ │ │ ├── 184.json │ │ │ ├── 189.json │ │ │ ├── 19.json │ │ │ ├── 190.json │ │ │ ├── 191.json │ │ │ ├── 192.json │ │ │ ├── 193.json │ │ │ ├── 194.json │ │ │ ├── 195.json │ │ │ ├── 196.json │ │ │ ├── 197.json │ │ │ ├── 199.json │ │ │ ├── 201.json │ │ │ ├── 204.json │ │ │ ├── 205.json │ │ │ ├── 208.json │ │ │ ├── 21.json │ │ │ ├── 210.json │ │ │ ├── 213.json │ │ │ ├── 214.json │ │ │ ├── 215.json │ │ │ ├── 216.json │ │ │ ├── 217.json │ │ │ ├── 218.json │ │ │ ├── 220.json │ │ │ ├── 223.json │ │ │ ├── 225.json │ │ │ ├── 228.json │ │ │ ├── 230.json │ │ │ ├── 231.json │ │ │ ├── 238.json │ │ │ ├── 240.json │ │ │ ├── 241.json │ │ │ ├── 242.json │ │ │ ├── 243.json │ │ │ ├── 245.json │ │ │ ├── 246.json │ │ │ ├── 24793.json │ │ │ ├── 248.json │ │ │ ├── 249.json │ │ │ ├── 25.json │ │ │ ├── 250.json │ │ │ ├── 25063.json │ │ │ ├── 251.json │ │ │ ├── 253.json │ │ │ ├── 256.json │ │ │ ├── 25601.json │ │ │ ├── 25764.json │ │ │ ├── 258.json │ │ │ ├── 25861.json │ │ │ ├── 259.json │ │ │ ├── 26.json │ │ │ ├── 260.json │ │ │ ├── 262.json │ │ │ ├── 263.json │ │ │ ├── 264.json │ │ │ ├── 265.json │ │ │ ├── 267.json │ │ │ ├── 268.json │ │ │ ├── 27.json │ │ │ ├── 270.json │ │ │ ├── 272.json │ │ │ ├── 273.json │ │ │ ├── 275.json │ │ │ ├── 276.json │ │ │ ├── 278.json │ │ │ ├── 279.json │ │ │ ├── 28.json │ │ │ ├── 281.json │ │ │ ├── 282.json │ │ │ ├── 285.json │ │ │ ├── 286.json │ │ │ ├── 289.json │ │ │ ├── 290.json │ │ │ ├── 292.json │ │ │ ├── 294.json │ │ │ ├── 295.json │ │ │ ├── 297.json │ │ │ ├── 298.json │ │ │ ├── 300.json │ │ │ ├── 302.json │ │ │ ├── 304.json │ │ │ ├── 305.json │ │ │ ├── 306.json │ │ │ ├── 307.json │ │ │ ├── 308.json │ │ │ ├── 309.json │ │ │ ├── 31.json │ │ │ ├── 310.json │ │ │ ├── 312.json │ │ │ ├── 313.json │ │ │ ├── 315.json │ │ │ ├── 316.json │ │ │ ├── 319.json │ │ │ ├── 322.json │ │ │ ├── 323.json │ │ │ ├── 325.json │ │ │ ├── 330.json │ │ │ ├── 331.json │ │ │ ├── 332.json │ │ │ ├── 334.json │ │ │ ├── 336.json │ │ │ ├── 337.json │ │ │ ├── 339.json │ │ │ ├── 344.json │ │ │ ├── 347.json │ │ │ ├── 348.json │ │ │ ├── 350.json │ │ │ ├── 352.json │ │ │ ├── 354.json │ │ │ ├── 355.json │ │ │ ├── 356.json │ │ │ ├── 358.json │ │ │ ├── 36.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 362.json │ │ │ ├── 363.json │ │ │ ├── 365.json │ │ │ ├── 367.json │ │ │ ├── 369.json │ │ │ ├── 371.json │ │ │ ├── 372.json │ │ │ ├── 375.json │ │ │ ├── 376.json │ │ │ ├── 378.json │ │ │ ├── 379.json │ │ │ ├── 381.json │ │ │ ├── 384.json │ │ │ ├── 385.json │ │ │ ├── 386.json │ │ │ ├── 387.json │ │ │ ├── 388.json │ │ │ ├── 389.json │ │ │ ├── 39.json │ │ │ ├── 392.json │ │ │ ├── 393.json │ │ │ ├── 395.json │ │ │ ├── 396.json │ │ │ ├── 398.json │ │ │ ├── 399.json │ │ │ ├── 400.json │ │ │ ├── 401.json │ │ │ ├── 402.json │ │ │ ├── 406.json │ │ │ ├── 408.json │ │ │ ├── 409.json │ │ │ ├── 41.json │ │ │ ├── 411.json │ │ │ ├── 413.json │ │ │ ├── 415.json │ │ │ ├── 416.json │ │ │ ├── 418.json │ │ │ ├── 419.json │ │ │ ├── 420.json │ │ │ ├── 421.json │ │ │ ├── 422.json │ │ │ ├── 424.json │ │ │ ├── 425.json │ │ │ ├── 426.json │ │ │ ├── 428.json │ │ │ ├── 429.json │ │ │ ├── 431.json │ │ │ ├── 432.json │ │ │ ├── 433.json │ │ │ ├── 434.json │ │ │ ├── 436.json │ │ │ ├── 438.json │ │ │ ├── 44.json │ │ │ ├── 442.json │ │ │ ├── 443.json │ │ │ ├── 446.json │ │ │ ├── 449.json │ │ │ ├── 454.json │ │ │ ├── 455.json │ │ │ ├── 460.json │ │ │ ├── 462.json │ │ │ ├── 463.json │ │ │ ├── 464.json │ │ │ ├── 465.json │ │ │ ├── 468.json │ │ │ ├── 469.json │ │ │ ├── 470.json │ │ │ ├── 472.json │ │ │ ├── 473.json │ │ │ ├── 474.json │ │ │ ├── 476.json │ │ │ ├── 477.json │ │ │ ├── 478.json │ │ │ ├── 479.json │ │ │ ├── 480.json │ │ │ ├── 482.json │ │ │ ├── 484.json │ │ │ ├── 485.json │ │ │ ├── 487.json │ │ │ ├── 489.json │ │ │ ├── 49.json │ │ │ ├── 490.json │ │ │ ├── 491.json │ │ │ ├── 492.json │ │ │ ├── 498.json │ │ │ ├── 499.json │ │ │ ├── 500.json │ │ │ ├── 502.json │ │ │ ├── 503.json │ │ │ ├── 506.json │ │ │ ├── 507.json │ │ │ ├── 508.json │ │ │ ├── 509.json │ │ │ ├── 510.json │ │ │ ├── 512.json │ │ │ ├── 513.json │ │ │ ├── 514.json │ │ │ ├── 518.json │ │ │ ├── 519.json │ │ │ ├── 52.json │ │ │ ├── 522.json │ │ │ ├── 524.json │ │ │ ├── 526.json │ │ │ ├── 527.json │ │ │ ├── 528.json │ │ │ ├── 529.json │ │ │ ├── 53.json │ │ │ ├── 534.json │ │ │ ├── 535.json │ │ │ ├── 537.json │ │ │ ├── 538.json │ │ │ ├── 539.json │ │ │ ├── 54.json │ │ │ ├── 540.json │ │ │ ├── 544.json │ │ │ ├── 546.json │ │ │ ├── 547.json │ │ │ ├── 548.json │ │ │ ├── 549.json │ │ │ ├── 550.json │ │ │ ├── 553.json │ │ │ ├── 555.json │ │ │ ├── 556.json │ │ │ ├── 557.json │ │ │ ├── 56.json │ │ │ ├── 560.json │ │ │ ├── 561.json │ │ │ ├── 564.json │ │ │ ├── 565.json │ │ │ ├── 568.json │ │ │ ├── 57.json │ │ │ ├── 571.json │ │ │ ├── 573.json │ │ │ ├── 576.json │ │ │ ├── 578.json │ │ │ ├── 579.json │ │ │ ├── 58.json │ │ │ ├── 581.json │ │ │ ├── 587.json │ │ │ ├── 588.json │ │ │ ├── 589.json │ │ │ ├── 591.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 594.json │ │ │ ├── 595.json │ │ │ ├── 596.json │ │ │ ├── 597.json │ │ │ ├── 599.json │ │ │ ├── 6.json │ │ │ ├── 602.json │ │ │ ├── 603.json │ │ │ ├── 604.json │ │ │ ├── 605.json │ │ │ ├── 607.json │ │ │ ├── 608.json │ │ │ ├── 609.json │ │ │ ├── 61.json │ │ │ ├── 614.json │ │ │ ├── 615.json │ │ │ ├── 616.json │ │ │ ├── 617.json │ │ │ ├── 62.json │ │ │ ├── 620.json │ │ │ ├── 621.json │ │ │ ├── 623.json │ │ │ ├── 624.json │ │ │ ├── 625.json │ │ │ ├── 628.json │ │ │ ├── 63.json │ │ │ ├── 630.json │ │ │ ├── 632.json │ │ │ ├── 633.json │ │ │ ├── 635.json │ │ │ ├── 636.json │ │ │ ├── 637.json │ │ │ ├── 638.json │ │ │ ├── 641.json │ │ │ ├── 644.json │ │ │ ├── 646.json │ │ │ ├── 648.json │ │ │ ├── 649.json │ │ │ ├── 650.json │ │ │ ├── 651.json │ │ │ ├── 652.json │ │ │ ├── 654.json │ │ │ ├── 655.json │ │ │ ├── 656.json │ │ │ ├── 658.json │ │ │ ├── 659.json │ │ │ ├── 661.json │ │ │ ├── 662.json │ │ │ ├── 663.json │ │ │ ├── 666.json │ │ │ ├── 667.json │ │ │ ├── 670.json │ │ │ ├── 672.json │ │ │ ├── 673.json │ │ │ ├── 675.json │ │ │ ├── 676.json │ │ │ ├── 677.json │ │ │ ├── 680.json │ │ │ ├── 681.json │ │ │ ├── 683.json │ │ │ ├── 684.json │ │ │ ├── 687.json │ │ │ ├── 688.json │ │ │ ├── 689.json │ │ │ ├── 697.json │ │ │ ├── 7.json │ │ │ ├── 70.json │ │ │ ├── 700.json │ │ │ ├── 7000.json │ │ │ ├── 7001.json │ │ │ ├── 7002.json │ │ │ ├── 7003.json │ │ │ ├── 7004.json │ │ │ ├── 7005.json │ │ │ ├── 7006.json │ │ │ ├── 7008.json │ │ │ ├── 7009.json │ │ │ ├── 701.json │ │ │ ├── 7010.json │ │ │ ├── 7011.json │ │ │ ├── 7012.json │ │ │ ├── 7013.json │ │ │ ├── 7014.json │ │ │ ├── 7015.json │ │ │ ├── 7016.json │ │ │ ├── 7017.json │ │ │ ├── 7018.json │ │ │ ├── 7019.json │ │ │ ├── 702.json │ │ │ ├── 7021.json │ │ │ ├── 7023.json │ │ │ ├── 7024.json │ │ │ ├── 7025.json │ │ │ ├── 7026.json │ │ │ ├── 7027.json │ │ │ ├── 7028.json │ │ │ ├── 7029.json │ │ │ ├── 703.json │ │ │ ├── 7030.json │ │ │ ├── 7031.json │ │ │ ├── 7032.json │ │ │ ├── 7033.json │ │ │ ├── 7034.json │ │ │ ├── 7035.json │ │ │ ├── 7036.json │ │ │ ├── 7037.json │ │ │ ├── 7038.json │ │ │ ├── 7039.json │ │ │ ├── 7040.json │ │ │ ├── 7041.json │ │ │ ├── 7043.json │ │ │ ├── 7044.json │ │ │ ├── 7045.json │ │ │ ├── 7046.json │ │ │ ├── 7047.json │ │ │ ├── 7048.json │ │ │ ├── 7049.json │ │ │ ├── 705.json │ │ │ ├── 7050.json │ │ │ ├── 7051.json │ │ │ ├── 7052.json │ │ │ ├── 7053.json │ │ │ ├── 7054.json │ │ │ ├── 7055.json │ │ │ ├── 7056.json │ │ │ ├── 7057.json │ │ │ ├── 7058.json │ │ │ ├── 706.json │ │ │ ├── 7060.json │ │ │ ├── 7061.json │ │ │ ├── 7062.json │ │ │ ├── 7063.json │ │ │ ├── 7064.json │ │ │ ├── 7065.json │ │ │ ├── 7066.json │ │ │ ├── 7069.json │ │ │ ├── 707.json │ │ │ ├── 7070.json │ │ │ ├── 7071.json │ │ │ ├── 7072.json │ │ │ ├── 7073.json │ │ │ ├── 7074.json │ │ │ ├── 7075.json │ │ │ ├── 7077.json │ │ │ ├── 7078.json │ │ │ ├── 708.json │ │ │ ├── 7081.json │ │ │ ├── 7082.json │ │ │ ├── 7083.json │ │ │ ├── 7084.json │ │ │ ├── 7086.json │ │ │ ├── 7087.json │ │ │ ├── 7088.json │ │ │ ├── 7089.json │ │ │ ├── 7090.json │ │ │ ├── 7091.json │ │ │ ├── 7092.json │ │ │ ├── 7093.json │ │ │ ├── 7094.json │ │ │ ├── 7095.json │ │ │ ├── 7096.json │ │ │ ├── 7097.json │ │ │ ├── 7098.json │ │ │ ├── 7099.json │ │ │ ├── 71.json │ │ │ ├── 7100.json │ │ │ ├── 7101.json │ │ │ ├── 7102.json │ │ │ ├── 7103.json │ │ │ ├── 7104.json │ │ │ ├── 7105.json │ │ │ ├── 7106.json │ │ │ ├── 7107.json │ │ │ ├── 7108.json │ │ │ ├── 7109.json │ │ │ ├── 7110.json │ │ │ ├── 7111.json │ │ │ ├── 7112.json │ │ │ ├── 7113.json │ │ │ ├── 7114.json │ │ │ ├── 7115.json │ │ │ ├── 7116.json │ │ │ ├── 7117.json │ │ │ ├── 7118.json │ │ │ ├── 7119.json │ │ │ ├── 712.json │ │ │ ├── 7120.json │ │ │ ├── 7121.json │ │ │ ├── 7122.json │ │ │ ├── 7123.json │ │ │ ├── 7124.json │ │ │ ├── 7125.json │ │ │ ├── 7126.json │ │ │ ├── 7127.json │ │ │ ├── 7128.json │ │ │ ├── 7129.json │ │ │ ├── 713.json │ │ │ ├── 714.json │ │ │ ├── 715.json │ │ │ ├── 716.json │ │ │ ├── 717.json │ │ │ ├── 719.json │ │ │ ├── 720.json │ │ │ ├── 721.json │ │ │ ├── 722.json │ │ │ ├── 723.json │ │ │ ├── 724.json │ │ │ ├── 725.json │ │ │ ├── 727.json │ │ │ ├── 730.json │ │ │ ├── 731.json │ │ │ ├── 734.json │ │ │ ├── 735.json │ │ │ ├── 736.json │ │ │ ├── 738.json │ │ │ ├── 74.json │ │ │ ├── 741.json │ │ │ ├── 745.json │ │ │ ├── 746.json │ │ │ ├── 747.json │ │ │ ├── 748.json │ │ │ ├── 749.json │ │ │ ├── 75.json │ │ │ ├── 750.json │ │ │ ├── 752.json │ │ │ ├── 754.json │ │ │ ├── 755.json │ │ │ ├── 758.json │ │ │ ├── 759.json │ │ │ ├── 760.json │ │ │ ├── 761.json │ │ │ ├── 762.json │ │ │ ├── 763.json │ │ │ ├── 766.json │ │ │ ├── 767.json │ │ │ ├── 768.json │ │ │ ├── 77.json │ │ │ ├── 770.json │ │ │ ├── 773.json │ │ │ ├── 775.json │ │ │ ├── 776.json │ │ │ ├── 777.json │ │ │ ├── 778.json │ │ │ ├── 779.json │ │ │ ├── 78.json │ │ │ ├── 781.json │ │ │ ├── 784.json │ │ │ ├── 785.json │ │ │ ├── 786.json │ │ │ ├── 788.json │ │ │ ├── 789.json │ │ │ ├── 79.json │ │ │ ├── 790.json │ │ │ ├── 791.json │ │ │ ├── 792.json │ │ │ ├── 793.json │ │ │ ├── 794.json │ │ │ ├── 795.json │ │ │ ├── 796.json │ │ │ ├── 797.json │ │ │ ├── 798.json │ │ │ ├── 799.json │ │ │ ├── 8.json │ │ │ ├── 80.json │ │ │ ├── 800.json │ │ │ ├── 801.json │ │ │ ├── 802.json │ │ │ ├── 803.json │ │ │ ├── 804.json │ │ │ ├── 809.json │ │ │ ├── 811.json │ │ │ ├── 812.json │ │ │ ├── 813.json │ │ │ ├── 815.json │ │ │ ├── 816.json │ │ │ ├── 82.json │ │ │ ├── 823.json │ │ │ ├── 824.json │ │ │ ├── 825.json │ │ │ ├── 830.json │ │ │ ├── 831.json │ │ │ ├── 833.json │ │ │ ├── 834.json │ │ │ ├── 835.json │ │ │ ├── 836.json │ │ │ ├── 837.json │ │ │ ├── 839.json │ │ │ ├── 840.json │ │ │ ├── 841.json │ │ │ ├── 842.json │ │ │ ├── 844.json │ │ │ ├── 845.json │ │ │ ├── 849.json │ │ │ ├── 851.json │ │ │ ├── 852.json │ │ │ ├── 855.json │ │ │ ├── 856.json │ │ │ ├── 857.json │ │ │ ├── 859.json │ │ │ ├── 860.json │ │ │ ├── 861.json │ │ │ ├── 862.json │ │ │ ├── 863.json │ │ │ ├── 865.json │ │ │ ├── 866.json │ │ │ ├── 87.json │ │ │ ├── 870.json │ │ │ ├── 871.json │ │ │ ├── 872.json │ │ │ ├── 873.json │ │ │ ├── 874.json │ │ │ ├── 875.json │ │ │ ├── 877.json │ │ │ ├── 88.json │ │ │ ├── 882.json │ │ │ ├── 883.json │ │ │ ├── 885.json │ │ │ ├── 886.json │ │ │ ├── 887.json │ │ │ ├── 888.json │ │ │ ├── 889.json │ │ │ ├── 890.json │ │ │ ├── 891.json │ │ │ ├── 893.json │ │ │ ├── 894.json │ │ │ ├── 897.json │ │ │ ├── 899.json │ │ │ ├── 9.json │ │ │ ├── 90.json │ │ │ ├── 901.json │ │ │ ├── 903.json │ │ │ ├── 904.json │ │ │ ├── 906.json │ │ │ ├── 907.json │ │ │ ├── 908.json │ │ │ ├── 91.json │ │ │ ├── 912.json │ │ │ ├── 915.json │ │ │ ├── 916.json │ │ │ ├── 917.json │ │ │ ├── 918.json │ │ │ ├── 920.json │ │ │ ├── 922.json │ │ │ ├── 923.json │ │ │ ├── 926.json │ │ │ ├── 929.json │ │ │ ├── 93.json │ │ │ ├── 930.json │ │ │ ├── 932.json │ │ │ ├── 933.json │ │ │ ├── 934.json │ │ │ ├── 935.json │ │ │ ├── 938.json │ │ │ ├── 939.json │ │ │ ├── 94.json │ │ │ ├── 940.json │ │ │ ├── 941.json │ │ │ ├── 943.json │ │ │ ├── 944.json │ │ │ ├── 945.json │ │ │ ├── 948.json │ │ │ ├── 949.json │ │ │ ├── 950.json │ │ │ ├── 952.json │ │ │ ├── 953.json │ │ │ ├── 956.json │ │ │ ├── 959.json │ │ │ ├── 96.json │ │ │ ├── 962.json │ │ │ ├── 963.json │ │ │ ├── 966.json │ │ │ ├── 968.json │ │ │ ├── 97.json │ │ │ ├── 972.json │ │ │ ├── 973.json │ │ │ ├── 974.json │ │ │ ├── 976.json │ │ │ ├── 977.json │ │ │ ├── 979.json │ │ │ ├── 98.json │ │ │ ├── 982.json │ │ │ ├── 983.json │ │ │ ├── 984.json │ │ │ ├── 986.json │ │ │ ├── 988.json │ │ │ ├── 995.json │ │ │ ├── 997.json │ │ │ └── 998.json │ │ │ ├── prealgebra │ │ │ ├── 0.json │ │ │ ├── 1.json │ │ │ ├── 100.json │ │ │ ├── 1004.json │ │ │ ├── 1005.json │ │ │ ├── 1006.json │ │ │ ├── 1009.json │ │ │ ├── 101.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1016.json │ │ │ ├── 1017.json │ │ │ ├── 1019.json │ │ │ ├── 102.json │ │ │ ├── 1021.json │ │ │ ├── 1025.json │ │ │ ├── 1026.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 103.json │ │ │ ├── 1031.json │ │ │ ├── 1038.json │ │ │ ├── 1039.json │ │ │ ├── 104.json │ │ │ ├── 1041.json │ │ │ ├── 1043.json │ │ │ ├── 1045.json │ │ │ ├── 1046.json │ │ │ ├── 1049.json │ │ │ ├── 1051.json │ │ │ ├── 1052.json │ │ │ ├── 1053.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 106.json │ │ │ ├── 1060.json │ │ │ ├── 1062.json │ │ │ ├── 1064.json │ │ │ ├── 1067.json │ │ │ ├── 107.json │ │ │ ├── 1072.json │ │ │ ├── 1075.json │ │ │ ├── 1076.json │ │ │ ├── 1077.json │ │ │ ├── 1078.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1087.json │ │ │ ├── 1089.json │ │ │ ├── 109.json │ │ │ ├── 1094.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 110.json │ │ │ ├── 1100.json │ │ │ ├── 1106.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1112.json │ │ │ ├── 1116.json │ │ │ ├── 112.json │ │ │ ├── 1120.json │ │ │ ├── 1127.json │ │ │ ├── 1138.json │ │ │ ├── 114.json │ │ │ ├── 1140.json │ │ │ ├── 1149.json │ │ │ ├── 115.json │ │ │ ├── 1150.json │ │ │ ├── 1152.json │ │ │ ├── 1156.json │ │ │ ├── 1158.json │ │ │ ├── 1159.json │ │ │ ├── 1161.json │ │ │ ├── 1162.json │ │ │ ├── 1164.json │ │ │ ├── 1167.json │ │ │ ├── 117.json │ │ │ ├── 1170.json │ │ │ ├── 1172.json │ │ │ ├── 1174.json │ │ │ ├── 1175.json │ │ │ ├── 1177.json │ │ │ ├── 118.json │ │ │ ├── 1184.json │ │ │ ├── 1186.json │ │ │ ├── 1188.json │ │ │ ├── 119.json │ │ │ ├── 1191.json │ │ │ ├── 1196.json │ │ │ ├── 12.json │ │ │ ├── 120.json │ │ │ ├── 1200.json │ │ │ ├── 1201.json │ │ │ ├── 1205.json │ │ │ ├── 1206.json │ │ │ ├── 121.json │ │ │ ├── 1211.json │ │ │ ├── 1213.json │ │ │ ├── 1214.json │ │ │ ├── 1216.json │ │ │ ├── 1219.json │ │ │ ├── 122.json │ │ │ ├── 1223.json │ │ │ ├── 1224.json │ │ │ ├── 1225.json │ │ │ ├── 1228.json │ │ │ ├── 123.json │ │ │ ├── 1235.json │ │ │ ├── 1236.json │ │ │ ├── 1237.json │ │ │ ├── 124.json │ │ │ ├── 1242.json │ │ │ ├── 1244.json │ │ │ ├── 1246.json │ │ │ ├── 1248.json │ │ │ ├── 125.json │ │ │ ├── 1250.json │ │ │ ├── 1255.json │ │ │ ├── 1257.json │ │ │ ├── 1259.json │ │ │ ├── 1261.json │ │ │ ├── 1263.json │ │ │ ├── 1264.json │ │ │ ├── 1265.json │ │ │ ├── 1267.json │ │ │ ├── 127.json │ │ │ ├── 1271.json │ │ │ ├── 1273.json │ │ │ ├── 1274.json │ │ │ ├── 1276.json │ │ │ ├── 1278.json │ │ │ ├── 128.json │ │ │ ├── 1280.json │ │ │ ├── 1281.json │ │ │ ├── 1285.json │ │ │ ├── 129.json │ │ │ ├── 1293.json │ │ │ ├── 1296.json │ │ │ ├── 13.json │ │ │ ├── 130.json │ │ │ ├── 1304.json │ │ │ ├── 1305.json │ │ │ ├── 1307.json │ │ │ ├── 1308.json │ │ │ ├── 1309.json │ │ │ ├── 131.json │ │ │ ├── 1311.json │ │ │ ├── 1313.json │ │ │ ├── 1314.json │ │ │ ├── 1316.json │ │ │ ├── 1319.json │ │ │ ├── 1320.json │ │ │ ├── 1322.json │ │ │ ├── 1324.json │ │ │ ├── 1325.json │ │ │ ├── 1327.json │ │ │ ├── 1329.json │ │ │ ├── 133.json │ │ │ ├── 1333.json │ │ │ ├── 1334.json │ │ │ ├── 1336.json │ │ │ ├── 1338.json │ │ │ ├── 134.json │ │ │ ├── 1340.json │ │ │ ├── 1341.json │ │ │ ├── 1344.json │ │ │ ├── 1346.json │ │ │ ├── 1357.json │ │ │ ├── 1358.json │ │ │ ├── 1359.json │ │ │ ├── 136.json │ │ │ ├── 1361.json │ │ │ ├── 1366.json │ │ │ ├── 1367.json │ │ │ ├── 1369.json │ │ │ ├── 137.json │ │ │ ├── 1370.json │ │ │ ├── 1371.json │ │ │ ├── 1377.json │ │ │ ├── 1378.json │ │ │ ├── 1381.json │ │ │ ├── 1382.json │ │ │ ├── 1383.json │ │ │ ├── 139.json │ │ │ ├── 1393.json │ │ │ ├── 1394.json │ │ │ ├── 1395.json │ │ │ ├── 1396.json │ │ │ ├── 1398.json │ │ │ ├── 14.json │ │ │ ├── 140.json │ │ │ ├── 1406.json │ │ │ ├── 141.json │ │ │ ├── 1412.json │ │ │ ├── 1414.json │ │ │ ├── 1415.json │ │ │ ├── 142.json │ │ │ ├── 1420.json │ │ │ ├── 1425.json │ │ │ ├── 1427.json │ │ │ ├── 1429.json │ │ │ ├── 143.json │ │ │ ├── 1431.json │ │ │ ├── 1434.json │ │ │ ├── 1435.json │ │ │ ├── 145.json │ │ │ ├── 1450.json │ │ │ ├── 146.json │ │ │ ├── 1461.json │ │ │ ├── 1464.json │ │ │ ├── 1468.json │ │ │ ├── 1469.json │ │ │ ├── 147.json │ │ │ ├── 1470.json │ │ │ ├── 1471.json │ │ │ ├── 1472.json │ │ │ ├── 1473.json │ │ │ ├── 1476.json │ │ │ ├── 1478.json │ │ │ ├── 148.json │ │ │ ├── 1481.json │ │ │ ├── 1489.json │ │ │ ├── 149.json │ │ │ ├── 1490.json │ │ │ ├── 1493.json │ │ │ ├── 1498.json │ │ │ ├── 15.json │ │ │ ├── 150.json │ │ │ ├── 1500.json │ │ │ ├── 1501.json │ │ │ ├── 1504.json │ │ │ ├── 1509.json │ │ │ ├── 151.json │ │ │ ├── 1513.json │ │ │ ├── 1514.json │ │ │ ├── 1515.json │ │ │ ├── 1516.json │ │ │ ├── 1518.json │ │ │ ├── 152.json │ │ │ ├── 1525.json │ │ │ ├── 1527.json │ │ │ ├── 1528.json │ │ │ ├── 1532.json │ │ │ ├── 1533.json │ │ │ ├── 1535.json │ │ │ ├── 1537.json │ │ │ ├── 1538.json │ │ │ ├── 1540.json │ │ │ ├── 1546.json │ │ │ ├── 1549.json │ │ │ ├── 155.json │ │ │ ├── 1554.json │ │ │ ├── 1556.json │ │ │ ├── 1557.json │ │ │ ├── 156.json │ │ │ ├── 1561.json │ │ │ ├── 1563.json │ │ │ ├── 1565.json │ │ │ ├── 1567.json │ │ │ ├── 1569.json │ │ │ ├── 157.json │ │ │ ├── 1573.json │ │ │ ├── 1575.json │ │ │ ├── 158.json │ │ │ ├── 1581.json │ │ │ ├── 1583.json │ │ │ ├── 1584.json │ │ │ ├── 1585.json │ │ │ ├── 1588.json │ │ │ ├── 1589.json │ │ │ ├── 1590.json │ │ │ ├── 1593.json │ │ │ ├── 1598.json │ │ │ ├── 16.json │ │ │ ├── 160.json │ │ │ ├── 1601.json │ │ │ ├── 1603.json │ │ │ ├── 1604.json │ │ │ ├── 161.json │ │ │ ├── 1610.json │ │ │ ├── 1613.json │ │ │ ├── 1614.json │ │ │ ├── 1618.json │ │ │ ├── 1619.json │ │ │ ├── 162.json │ │ │ ├── 1621.json │ │ │ ├── 1623.json │ │ │ ├── 1627.json │ │ │ ├── 1628.json │ │ │ ├── 1629.json │ │ │ ├── 163.json │ │ │ ├── 1630.json │ │ │ ├── 1632.json │ │ │ ├── 1633.json │ │ │ ├── 1635.json │ │ │ ├── 1636.json │ │ │ ├── 1637.json │ │ │ ├── 164.json │ │ │ ├── 1643.json │ │ │ ├── 1644.json │ │ │ ├── 1647.json │ │ │ ├── 1649.json │ │ │ ├── 165.json │ │ │ ├── 1653.json │ │ │ ├── 1654.json │ │ │ ├── 1656.json │ │ │ ├── 1659.json │ │ │ ├── 166.json │ │ │ ├── 1660.json │ │ │ ├── 1661.json │ │ │ ├── 1662.json │ │ │ ├── 1664.json │ │ │ ├── 1666.json │ │ │ ├── 1668.json │ │ │ ├── 167.json │ │ │ ├── 1671.json │ │ │ ├── 1672.json │ │ │ ├── 1673.json │ │ │ ├── 1674.json │ │ │ ├── 1675.json │ │ │ ├── 1676.json │ │ │ ├── 1677.json │ │ │ ├── 168.json │ │ │ ├── 1681.json │ │ │ ├── 1682.json │ │ │ ├── 1683.json │ │ │ ├── 1685.json │ │ │ ├── 1688.json │ │ │ ├── 1689.json │ │ │ ├── 169.json │ │ │ ├── 1690.json │ │ │ ├── 1691.json │ │ │ ├── 1692.json │ │ │ ├── 1693.json │ │ │ ├── 1694.json │ │ │ ├── 1696.json │ │ │ ├── 17.json │ │ │ ├── 170.json │ │ │ ├── 1701.json │ │ │ ├── 1704.json │ │ │ ├── 1706.json │ │ │ ├── 1708.json │ │ │ ├── 1709.json │ │ │ ├── 1710.json │ │ │ ├── 1711.json │ │ │ ├── 1713.json │ │ │ ├── 1719.json │ │ │ ├── 172.json │ │ │ ├── 1720.json │ │ │ ├── 1721.json │ │ │ ├── 1722.json │ │ │ ├── 1724.json │ │ │ ├── 1726.json │ │ │ ├── 173.json │ │ │ ├── 1731.json │ │ │ ├── 1735.json │ │ │ ├── 1738.json │ │ │ ├── 174.json │ │ │ ├── 1740.json │ │ │ ├── 1744.json │ │ │ ├── 175.json │ │ │ ├── 1751.json │ │ │ ├── 1752.json │ │ │ ├── 1753.json │ │ │ ├── 1756.json │ │ │ ├── 1759.json │ │ │ ├── 1760.json │ │ │ ├── 1763.json │ │ │ ├── 1766.json │ │ │ ├── 1768.json │ │ │ ├── 1769.json │ │ │ ├── 1771.json │ │ │ ├── 1774.json │ │ │ ├── 178.json │ │ │ ├── 1780.json │ │ │ ├── 1783.json │ │ │ ├── 179.json │ │ │ ├── 1795.json │ │ │ ├── 1798.json │ │ │ ├── 18.json │ │ │ ├── 180.json │ │ │ ├── 1802.json │ │ │ ├── 1806.json │ │ │ ├── 181.json │ │ │ ├── 1810.json │ │ │ ├── 1815.json │ │ │ ├── 1816.json │ │ │ ├── 1817.json │ │ │ ├── 1818.json │ │ │ ├── 1819.json │ │ │ ├── 182.json │ │ │ ├── 1821.json │ │ │ ├── 1822.json │ │ │ ├── 1825.json │ │ │ ├── 1826.json │ │ │ ├── 183.json │ │ │ ├── 1830.json │ │ │ ├── 1831.json │ │ │ ├── 1832.json │ │ │ ├── 1835.json │ │ │ ├── 1838.json │ │ │ ├── 184.json │ │ │ ├── 1841.json │ │ │ ├── 1844.json │ │ │ ├── 185.json │ │ │ ├── 1851.json │ │ │ ├── 1853.json │ │ │ ├── 1856.json │ │ │ ├── 186.json │ │ │ ├── 1862.json │ │ │ ├── 1866.json │ │ │ ├── 1867.json │ │ │ ├── 1869.json │ │ │ ├── 187.json │ │ │ ├── 1871.json │ │ │ ├── 1872.json │ │ │ ├── 1875.json │ │ │ ├── 1878.json │ │ │ ├── 188.json │ │ │ ├── 1881.json │ │ │ ├── 1882.json │ │ │ ├── 1883.json │ │ │ ├── 1884.json │ │ │ ├── 1886.json │ │ │ ├── 1887.json │ │ │ ├── 1888.json │ │ │ ├── 1889.json │ │ │ ├── 189.json │ │ │ ├── 1896.json │ │ │ ├── 19.json │ │ │ ├── 190.json │ │ │ ├── 1901.json │ │ │ ├── 1903.json │ │ │ ├── 1905.json │ │ │ ├── 1906.json │ │ │ ├── 191.json │ │ │ ├── 1911.json │ │ │ ├── 1912.json │ │ │ ├── 1913.json │ │ │ ├── 1915.json │ │ │ ├── 1916.json │ │ │ ├── 1917.json │ │ │ ├── 1919.json │ │ │ ├── 1921.json │ │ │ ├── 1923.json │ │ │ ├── 1925.json │ │ │ ├── 1926.json │ │ │ ├── 1927.json │ │ │ ├── 1929.json │ │ │ ├── 193.json │ │ │ ├── 1931.json │ │ │ ├── 1938.json │ │ │ ├── 1939.json │ │ │ ├── 194.json │ │ │ ├── 1941.json │ │ │ ├── 1942.json │ │ │ ├── 1943.json │ │ │ ├── 1944.json │ │ │ ├── 1946.json │ │ │ ├── 1949.json │ │ │ ├── 1954.json │ │ │ ├── 1955.json │ │ │ ├── 1957.json │ │ │ ├── 1958.json │ │ │ ├── 196.json │ │ │ ├── 1960.json │ │ │ ├── 1962.json │ │ │ ├── 1963.json │ │ │ ├── 1964.json │ │ │ ├── 1966.json │ │ │ ├── 1967.json │ │ │ ├── 1968.json │ │ │ ├── 197.json │ │ │ ├── 1971.json │ │ │ ├── 1972.json │ │ │ ├── 1974.json │ │ │ ├── 1975.json │ │ │ ├── 1978.json │ │ │ ├── 1979.json │ │ │ ├── 198.json │ │ │ ├── 1981.json │ │ │ ├── 1983.json │ │ │ ├── 1984.json │ │ │ ├── 1985.json │ │ │ ├── 1989.json │ │ │ ├── 199.json │ │ │ ├── 1993.json │ │ │ ├── 1996.json │ │ │ ├── 2.json │ │ │ ├── 20.json │ │ │ ├── 200.json │ │ │ ├── 2000.json │ │ │ ├── 2004.json │ │ │ ├── 2006.json │ │ │ ├── 2008.json │ │ │ ├── 201.json │ │ │ ├── 2012.json │ │ │ ├── 2016.json │ │ │ ├── 202.json │ │ │ ├── 2025.json │ │ │ ├── 2026.json │ │ │ ├── 2028.json │ │ │ ├── 203.json │ │ │ ├── 2032.json │ │ │ ├── 2033.json │ │ │ ├── 204.json │ │ │ ├── 2041.json │ │ │ ├── 2043.json │ │ │ ├── 2044.json │ │ │ ├── 205.json │ │ │ ├── 2050.json │ │ │ ├── 2052.json │ │ │ ├── 2055.json │ │ │ ├── 2056.json │ │ │ ├── 206.json │ │ │ ├── 2060.json │ │ │ ├── 2062.json │ │ │ ├── 2067.json │ │ │ ├── 2069.json │ │ │ ├── 207.json │ │ │ ├── 2071.json │ │ │ ├── 2076.json │ │ │ ├── 2077.json │ │ │ ├── 2079.json │ │ │ ├── 208.json │ │ │ ├── 2080.json │ │ │ ├── 2083.json │ │ │ ├── 2085.json │ │ │ ├── 2087.json │ │ │ ├── 209.json │ │ │ ├── 21.json │ │ │ ├── 210.json │ │ │ ├── 212.json │ │ │ ├── 213.json │ │ │ ├── 214.json │ │ │ ├── 215.json │ │ │ ├── 216.json │ │ │ ├── 217.json │ │ │ ├── 218.json │ │ │ ├── 219.json │ │ │ ├── 22.json │ │ │ ├── 220.json │ │ │ ├── 222.json │ │ │ ├── 223.json │ │ │ ├── 225.json │ │ │ ├── 226.json │ │ │ ├── 227.json │ │ │ ├── 228.json │ │ │ ├── 229.json │ │ │ ├── 23.json │ │ │ ├── 231.json │ │ │ ├── 232.json │ │ │ ├── 233.json │ │ │ ├── 234.json │ │ │ ├── 235.json │ │ │ ├── 236.json │ │ │ ├── 237.json │ │ │ ├── 239.json │ │ │ ├── 24.json │ │ │ ├── 240.json │ │ │ ├── 241.json │ │ │ ├── 242.json │ │ │ ├── 243.json │ │ │ ├── 244.json │ │ │ ├── 245.json │ │ │ ├── 246.json │ │ │ ├── 248.json │ │ │ ├── 249.json │ │ │ ├── 250.json │ │ │ ├── 251.json │ │ │ ├── 253.json │ │ │ ├── 254.json │ │ │ ├── 255.json │ │ │ ├── 256.json │ │ │ ├── 257.json │ │ │ ├── 259.json │ │ │ ├── 26.json │ │ │ ├── 261.json │ │ │ ├── 262.json │ │ │ ├── 263.json │ │ │ ├── 264.json │ │ │ ├── 265.json │ │ │ ├── 266.json │ │ │ ├── 267.json │ │ │ ├── 268.json │ │ │ ├── 269.json │ │ │ ├── 27.json │ │ │ ├── 270.json │ │ │ ├── 273.json │ │ │ ├── 274.json │ │ │ ├── 275.json │ │ │ ├── 276.json │ │ │ ├── 277.json │ │ │ ├── 278.json │ │ │ ├── 279.json │ │ │ ├── 280.json │ │ │ ├── 281.json │ │ │ ├── 282.json │ │ │ ├── 283.json │ │ │ ├── 284.json │ │ │ ├── 285.json │ │ │ ├── 286.json │ │ │ ├── 287.json │ │ │ ├── 288.json │ │ │ ├── 289.json │ │ │ ├── 290.json │ │ │ ├── 291.json │ │ │ ├── 292.json │ │ │ ├── 294.json │ │ │ ├── 295.json │ │ │ ├── 296.json │ │ │ ├── 297.json │ │ │ ├── 299.json │ │ │ ├── 3.json │ │ │ ├── 30.json │ │ │ ├── 300.json │ │ │ ├── 301.json │ │ │ ├── 302.json │ │ │ ├── 303.json │ │ │ ├── 306.json │ │ │ ├── 308.json │ │ │ ├── 309.json │ │ │ ├── 31.json │ │ │ ├── 310.json │ │ │ ├── 311.json │ │ │ ├── 312.json │ │ │ ├── 313.json │ │ │ ├── 314.json │ │ │ ├── 315.json │ │ │ ├── 316.json │ │ │ ├── 317.json │ │ │ ├── 318.json │ │ │ ├── 319.json │ │ │ ├── 32.json │ │ │ ├── 320.json │ │ │ ├── 321.json │ │ │ ├── 322.json │ │ │ ├── 323.json │ │ │ ├── 324.json │ │ │ ├── 325.json │ │ │ ├── 326.json │ │ │ ├── 327.json │ │ │ ├── 328.json │ │ │ ├── 329.json │ │ │ ├── 33.json │ │ │ ├── 330.json │ │ │ ├── 331.json │ │ │ ├── 332.json │ │ │ ├── 333.json │ │ │ ├── 334.json │ │ │ ├── 335.json │ │ │ ├── 336.json │ │ │ ├── 337.json │ │ │ ├── 338.json │ │ │ ├── 34.json │ │ │ ├── 340.json │ │ │ ├── 341.json │ │ │ ├── 342.json │ │ │ ├── 343.json │ │ │ ├── 344.json │ │ │ ├── 345.json │ │ │ ├── 346.json │ │ │ ├── 347.json │ │ │ ├── 348.json │ │ │ ├── 349.json │ │ │ ├── 35.json │ │ │ ├── 350.json │ │ │ ├── 351.json │ │ │ ├── 352.json │ │ │ ├── 353.json │ │ │ ├── 355.json │ │ │ ├── 357.json │ │ │ ├── 358.json │ │ │ ├── 359.json │ │ │ ├── 36.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 362.json │ │ │ ├── 365.json │ │ │ ├── 366.json │ │ │ ├── 367.json │ │ │ ├── 368.json │ │ │ ├── 369.json │ │ │ ├── 37.json │ │ │ ├── 370.json │ │ │ ├── 372.json │ │ │ ├── 373.json │ │ │ ├── 374.json │ │ │ ├── 376.json │ │ │ ├── 377.json │ │ │ ├── 38.json │ │ │ ├── 381.json │ │ │ ├── 382.json │ │ │ ├── 383.json │ │ │ ├── 384.json │ │ │ ├── 385.json │ │ │ ├── 386.json │ │ │ ├── 388.json │ │ │ ├── 389.json │ │ │ ├── 39.json │ │ │ ├── 391.json │ │ │ ├── 392.json │ │ │ ├── 395.json │ │ │ ├── 396.json │ │ │ ├── 397.json │ │ │ ├── 398.json │ │ │ ├── 399.json │ │ │ ├── 4.json │ │ │ ├── 40.json │ │ │ ├── 400.json │ │ │ ├── 401.json │ │ │ ├── 403.json │ │ │ ├── 404.json │ │ │ ├── 405.json │ │ │ ├── 406.json │ │ │ ├── 408.json │ │ │ ├── 409.json │ │ │ ├── 41.json │ │ │ ├── 410.json │ │ │ ├── 411.json │ │ │ ├── 413.json │ │ │ ├── 414.json │ │ │ ├── 415.json │ │ │ ├── 416.json │ │ │ ├── 417.json │ │ │ ├── 418.json │ │ │ ├── 419.json │ │ │ ├── 42.json │ │ │ ├── 420.json │ │ │ ├── 421.json │ │ │ ├── 422.json │ │ │ ├── 423.json │ │ │ ├── 424.json │ │ │ ├── 425.json │ │ │ ├── 426.json │ │ │ ├── 427.json │ │ │ ├── 428.json │ │ │ ├── 43.json │ │ │ ├── 430.json │ │ │ ├── 431.json │ │ │ ├── 433.json │ │ │ ├── 434.json │ │ │ ├── 435.json │ │ │ ├── 436.json │ │ │ ├── 437.json │ │ │ ├── 44.json │ │ │ ├── 440.json │ │ │ ├── 441.json │ │ │ ├── 443.json │ │ │ ├── 444.json │ │ │ ├── 445.json │ │ │ ├── 446.json │ │ │ ├── 448.json │ │ │ ├── 449.json │ │ │ ├── 450.json │ │ │ ├── 451.json │ │ │ ├── 452.json │ │ │ ├── 453.json │ │ │ ├── 454.json │ │ │ ├── 455.json │ │ │ ├── 456.json │ │ │ ├── 457.json │ │ │ ├── 459.json │ │ │ ├── 46.json │ │ │ ├── 460.json │ │ │ ├── 461.json │ │ │ ├── 462.json │ │ │ ├── 463.json │ │ │ ├── 464.json │ │ │ ├── 466.json │ │ │ ├── 467.json │ │ │ ├── 469.json │ │ │ ├── 47.json │ │ │ ├── 471.json │ │ │ ├── 472.json │ │ │ ├── 473.json │ │ │ ├── 474.json │ │ │ ├── 475.json │ │ │ ├── 476.json │ │ │ ├── 477.json │ │ │ ├── 478.json │ │ │ ├── 479.json │ │ │ ├── 48.json │ │ │ ├── 480.json │ │ │ ├── 481.json │ │ │ ├── 482.json │ │ │ ├── 483.json │ │ │ ├── 484.json │ │ │ ├── 485.json │ │ │ ├── 486.json │ │ │ ├── 487.json │ │ │ ├── 489.json │ │ │ ├── 49.json │ │ │ ├── 490.json │ │ │ ├── 491.json │ │ │ ├── 492.json │ │ │ ├── 495.json │ │ │ ├── 496.json │ │ │ ├── 497.json │ │ │ ├── 498.json │ │ │ ├── 499.json │ │ │ ├── 5.json │ │ │ ├── 50.json │ │ │ ├── 500.json │ │ │ ├── 502.json │ │ │ ├── 503.json │ │ │ ├── 504.json │ │ │ ├── 506.json │ │ │ ├── 507.json │ │ │ ├── 508.json │ │ │ ├── 509.json │ │ │ ├── 51.json │ │ │ ├── 510.json │ │ │ ├── 511.json │ │ │ ├── 512.json │ │ │ ├── 513.json │ │ │ ├── 514.json │ │ │ ├── 515.json │ │ │ ├── 516.json │ │ │ ├── 518.json │ │ │ ├── 519.json │ │ │ ├── 521.json │ │ │ ├── 522.json │ │ │ ├── 523.json │ │ │ ├── 524.json │ │ │ ├── 525.json │ │ │ ├── 526.json │ │ │ ├── 528.json │ │ │ ├── 529.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 533.json │ │ │ ├── 534.json │ │ │ ├── 535.json │ │ │ ├── 536.json │ │ │ ├── 537.json │ │ │ ├── 538.json │ │ │ ├── 539.json │ │ │ ├── 54.json │ │ │ ├── 540.json │ │ │ ├── 541.json │ │ │ ├── 542.json │ │ │ ├── 543.json │ │ │ ├── 544.json │ │ │ ├── 545.json │ │ │ ├── 546.json │ │ │ ├── 547.json │ │ │ ├── 548.json │ │ │ ├── 549.json │ │ │ ├── 550.json │ │ │ ├── 551.json │ │ │ ├── 552.json │ │ │ ├── 553.json │ │ │ ├── 555.json │ │ │ ├── 556.json │ │ │ ├── 558.json │ │ │ ├── 559.json │ │ │ ├── 56.json │ │ │ ├── 560.json │ │ │ ├── 561.json │ │ │ ├── 562.json │ │ │ ├── 563.json │ │ │ ├── 564.json │ │ │ ├── 565.json │ │ │ ├── 566.json │ │ │ ├── 568.json │ │ │ ├── 569.json │ │ │ ├── 57.json │ │ │ ├── 570.json │ │ │ ├── 573.json │ │ │ ├── 574.json │ │ │ ├── 576.json │ │ │ ├── 577.json │ │ │ ├── 578.json │ │ │ ├── 58.json │ │ │ ├── 580.json │ │ │ ├── 581.json │ │ │ ├── 585.json │ │ │ ├── 586.json │ │ │ ├── 587.json │ │ │ ├── 589.json │ │ │ ├── 59.json │ │ │ ├── 590.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 594.json │ │ │ ├── 596.json │ │ │ ├── 597.json │ │ │ ├── 599.json │ │ │ ├── 6.json │ │ │ ├── 60.json │ │ │ ├── 600.json │ │ │ ├── 601.json │ │ │ ├── 602.json │ │ │ ├── 603.json │ │ │ ├── 604.json │ │ │ ├── 605.json │ │ │ ├── 606.json │ │ │ ├── 607.json │ │ │ ├── 608.json │ │ │ ├── 609.json │ │ │ ├── 61.json │ │ │ ├── 610.json │ │ │ ├── 611.json │ │ │ ├── 612.json │ │ │ ├── 613.json │ │ │ ├── 614.json │ │ │ ├── 615.json │ │ │ ├── 617.json │ │ │ ├── 618.json │ │ │ ├── 619.json │ │ │ ├── 62.json │ │ │ ├── 620.json │ │ │ ├── 621.json │ │ │ ├── 622.json │ │ │ ├── 623.json │ │ │ ├── 624.json │ │ │ ├── 625.json │ │ │ ├── 626.json │ │ │ ├── 627.json │ │ │ ├── 628.json │ │ │ ├── 629.json │ │ │ ├── 63.json │ │ │ ├── 630.json │ │ │ ├── 632.json │ │ │ ├── 635.json │ │ │ ├── 636.json │ │ │ ├── 637.json │ │ │ ├── 638.json │ │ │ ├── 64.json │ │ │ ├── 640.json │ │ │ ├── 643.json │ │ │ ├── 644.json │ │ │ ├── 645.json │ │ │ ├── 647.json │ │ │ ├── 648.json │ │ │ ├── 649.json │ │ │ ├── 650.json │ │ │ ├── 652.json │ │ │ ├── 653.json │ │ │ ├── 654.json │ │ │ ├── 655.json │ │ │ ├── 656.json │ │ │ ├── 657.json │ │ │ ├── 658.json │ │ │ ├── 659.json │ │ │ ├── 66.json │ │ │ ├── 661.json │ │ │ ├── 662.json │ │ │ ├── 663.json │ │ │ ├── 664.json │ │ │ ├── 665.json │ │ │ ├── 666.json │ │ │ ├── 667.json │ │ │ ├── 668.json │ │ │ ├── 669.json │ │ │ ├── 67.json │ │ │ ├── 670.json │ │ │ ├── 671.json │ │ │ ├── 672.json │ │ │ ├── 673.json │ │ │ ├── 674.json │ │ │ ├── 675.json │ │ │ ├── 676.json │ │ │ ├── 677.json │ │ │ ├── 678.json │ │ │ ├── 679.json │ │ │ ├── 68.json │ │ │ ├── 680.json │ │ │ ├── 681.json │ │ │ ├── 682.json │ │ │ ├── 683.json │ │ │ ├── 685.json │ │ │ ├── 686.json │ │ │ ├── 687.json │ │ │ ├── 688.json │ │ │ ├── 689.json │ │ │ ├── 690.json │ │ │ ├── 691.json │ │ │ ├── 693.json │ │ │ ├── 694.json │ │ │ ├── 695.json │ │ │ ├── 696.json │ │ │ ├── 697.json │ │ │ ├── 698.json │ │ │ ├── 699.json │ │ │ ├── 700.json │ │ │ ├── 701.json │ │ │ ├── 702.json │ │ │ ├── 703.json │ │ │ ├── 704.json │ │ │ ├── 705.json │ │ │ ├── 706.json │ │ │ ├── 707.json │ │ │ ├── 708.json │ │ │ ├── 709.json │ │ │ ├── 71.json │ │ │ ├── 710.json │ │ │ ├── 711.json │ │ │ ├── 712.json │ │ │ ├── 713.json │ │ │ ├── 714.json │ │ │ ├── 715.json │ │ │ ├── 716.json │ │ │ ├── 717.json │ │ │ ├── 718.json │ │ │ ├── 719.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 721.json │ │ │ ├── 722.json │ │ │ ├── 723.json │ │ │ ├── 724.json │ │ │ ├── 725.json │ │ │ ├── 726.json │ │ │ ├── 727.json │ │ │ ├── 728.json │ │ │ ├── 729.json │ │ │ ├── 73.json │ │ │ ├── 730.json │ │ │ ├── 731.json │ │ │ ├── 732.json │ │ │ ├── 733.json │ │ │ ├── 734.json │ │ │ ├── 736.json │ │ │ ├── 737.json │ │ │ ├── 738.json │ │ │ ├── 739.json │ │ │ ├── 74.json │ │ │ ├── 741.json │ │ │ ├── 742.json │ │ │ ├── 743.json │ │ │ ├── 744.json │ │ │ ├── 745.json │ │ │ ├── 746.json │ │ │ ├── 747.json │ │ │ ├── 748.json │ │ │ ├── 749.json │ │ │ ├── 751.json │ │ │ ├── 752.json │ │ │ ├── 753.json │ │ │ ├── 755.json │ │ │ ├── 756.json │ │ │ ├── 757.json │ │ │ ├── 758.json │ │ │ ├── 76.json │ │ │ ├── 760.json │ │ │ ├── 761.json │ │ │ ├── 762.json │ │ │ ├── 763.json │ │ │ ├── 764.json │ │ │ ├── 765.json │ │ │ ├── 766.json │ │ │ ├── 767.json │ │ │ ├── 769.json │ │ │ ├── 77.json │ │ │ ├── 770.json │ │ │ ├── 771.json │ │ │ ├── 772.json │ │ │ ├── 773.json │ │ │ ├── 774.json │ │ │ ├── 775.json │ │ │ ├── 776.json │ │ │ ├── 777.json │ │ │ ├── 778.json │ │ │ ├── 78.json │ │ │ ├── 780.json │ │ │ ├── 781.json │ │ │ ├── 782.json │ │ │ ├── 783.json │ │ │ ├── 784.json │ │ │ ├── 785.json │ │ │ ├── 786.json │ │ │ ├── 787.json │ │ │ ├── 788.json │ │ │ ├── 79.json │ │ │ ├── 790.json │ │ │ ├── 791.json │ │ │ ├── 792.json │ │ │ ├── 793.json │ │ │ ├── 796.json │ │ │ ├── 798.json │ │ │ ├── 799.json │ │ │ ├── 80.json │ │ │ ├── 800.json │ │ │ ├── 801.json │ │ │ ├── 802.json │ │ │ ├── 803.json │ │ │ ├── 804.json │ │ │ ├── 806.json │ │ │ ├── 81.json │ │ │ ├── 810.json │ │ │ ├── 811.json │ │ │ ├── 813.json │ │ │ ├── 814.json │ │ │ ├── 815.json │ │ │ ├── 816.json │ │ │ ├── 817.json │ │ │ ├── 818.json │ │ │ ├── 819.json │ │ │ ├── 820.json │ │ │ ├── 821.json │ │ │ ├── 822.json │ │ │ ├── 823.json │ │ │ ├── 824.json │ │ │ ├── 827.json │ │ │ ├── 828.json │ │ │ ├── 829.json │ │ │ ├── 83.json │ │ │ ├── 831.json │ │ │ ├── 832.json │ │ │ ├── 833.json │ │ │ ├── 834.json │ │ │ ├── 835.json │ │ │ ├── 837.json │ │ │ ├── 839.json │ │ │ ├── 843.json │ │ │ ├── 848.json │ │ │ ├── 85.json │ │ │ ├── 852.json │ │ │ ├── 854.json │ │ │ ├── 86.json │ │ │ ├── 860.json │ │ │ ├── 863.json │ │ │ ├── 867.json │ │ │ ├── 868.json │ │ │ ├── 869.json │ │ │ ├── 87.json │ │ │ ├── 870.json │ │ │ ├── 871.json │ │ │ ├── 872.json │ │ │ ├── 873.json │ │ │ ├── 875.json │ │ │ ├── 88.json │ │ │ ├── 883.json │ │ │ ├── 886.json │ │ │ ├── 887.json │ │ │ ├── 888.json │ │ │ ├── 889.json │ │ │ ├── 89.json │ │ │ ├── 891.json │ │ │ ├── 892.json │ │ │ ├── 893.json │ │ │ ├── 894.json │ │ │ ├── 895.json │ │ │ ├── 897.json │ │ │ ├── 898.json │ │ │ ├── 899.json │ │ │ ├── 90.json │ │ │ ├── 905.json │ │ │ ├── 906.json │ │ │ ├── 909.json │ │ │ ├── 91.json │ │ │ ├── 910.json │ │ │ ├── 911.json │ │ │ ├── 912.json │ │ │ ├── 913.json │ │ │ ├── 916.json │ │ │ ├── 917.json │ │ │ ├── 919.json │ │ │ ├── 920.json │ │ │ ├── 921.json │ │ │ ├── 922.json │ │ │ ├── 923.json │ │ │ ├── 925.json │ │ │ ├── 929.json │ │ │ ├── 934.json │ │ │ ├── 935.json │ │ │ ├── 938.json │ │ │ ├── 939.json │ │ │ ├── 94.json │ │ │ ├── 940.json │ │ │ ├── 941.json │ │ │ ├── 943.json │ │ │ ├── 944.json │ │ │ ├── 947.json │ │ │ ├── 949.json │ │ │ ├── 95.json │ │ │ ├── 950.json │ │ │ ├── 952.json │ │ │ ├── 955.json │ │ │ ├── 958.json │ │ │ ├── 959.json │ │ │ ├── 96.json │ │ │ ├── 961.json │ │ │ ├── 963.json │ │ │ ├── 97.json │ │ │ ├── 974.json │ │ │ ├── 975.json │ │ │ ├── 978.json │ │ │ ├── 979.json │ │ │ ├── 98.json │ │ │ ├── 981.json │ │ │ ├── 983.json │ │ │ ├── 984.json │ │ │ ├── 985.json │ │ │ ├── 986.json │ │ │ ├── 988.json │ │ │ ├── 989.json │ │ │ ├── 995.json │ │ │ ├── 997.json │ │ │ └── 9999.json │ │ │ └── precalculus │ │ │ ├── 1001.json │ │ │ ├── 1003.json │ │ │ ├── 1006.json │ │ │ ├── 1007.json │ │ │ ├── 1008.json │ │ │ ├── 1010.json │ │ │ ├── 1011.json │ │ │ ├── 1012.json │ │ │ ├── 1013.json │ │ │ ├── 1015.json │ │ │ ├── 1016.json │ │ │ ├── 1017.json │ │ │ ├── 1020.json │ │ │ ├── 1021.json │ │ │ ├── 1023.json │ │ │ ├── 1025.json │ │ │ ├── 1026.json │ │ │ ├── 1027.json │ │ │ ├── 1028.json │ │ │ ├── 1029.json │ │ │ ├── 1030.json │ │ │ ├── 1031.json │ │ │ ├── 1034.json │ │ │ ├── 1037.json │ │ │ ├── 1039.json │ │ │ ├── 104.json │ │ │ ├── 1040.json │ │ │ ├── 1041.json │ │ │ ├── 1042.json │ │ │ ├── 1045.json │ │ │ ├── 1047.json │ │ │ ├── 1048.json │ │ │ ├── 1049.json │ │ │ ├── 1050.json │ │ │ ├── 1051.json │ │ │ ├── 1053.json │ │ │ ├── 1054.json │ │ │ ├── 1057.json │ │ │ ├── 1058.json │ │ │ ├── 1059.json │ │ │ ├── 106.json │ │ │ ├── 1062.json │ │ │ ├── 1063.json │ │ │ ├── 1066.json │ │ │ ├── 1068.json │ │ │ ├── 1069.json │ │ │ ├── 107.json │ │ │ ├── 1071.json │ │ │ ├── 1072.json │ │ │ ├── 1073.json │ │ │ ├── 1074.json │ │ │ ├── 1075.json │ │ │ ├── 1076.json │ │ │ ├── 1078.json │ │ │ ├── 1079.json │ │ │ ├── 108.json │ │ │ ├── 1080.json │ │ │ ├── 1083.json │ │ │ ├── 1085.json │ │ │ ├── 1086.json │ │ │ ├── 1087.json │ │ │ ├── 1088.json │ │ │ ├── 1089.json │ │ │ ├── 1091.json │ │ │ ├── 1094.json │ │ │ ├── 1095.json │ │ │ ├── 1099.json │ │ │ ├── 11.json │ │ │ ├── 1100.json │ │ │ ├── 1106.json │ │ │ ├── 1107.json │ │ │ ├── 1108.json │ │ │ ├── 111.json │ │ │ ├── 1110.json │ │ │ ├── 1112.json │ │ │ ├── 1113.json │ │ │ ├── 1116.json │ │ │ ├── 1118.json │ │ │ ├── 112.json │ │ │ ├── 1126.json │ │ │ ├── 1127.json │ │ │ ├── 113.json │ │ │ ├── 1130.json │ │ │ ├── 1131.json │ │ │ ├── 1135.json │ │ │ ├── 1137.json │ │ │ ├── 1139.json │ │ │ ├── 1141.json │ │ │ ├── 1143.json │ │ │ ├── 1149.json │ │ │ ├── 115.json │ │ │ ├── 1150.json │ │ │ ├── 1151.json │ │ │ ├── 1152.json │ │ │ ├── 1153.json │ │ │ ├── 1154.json │ │ │ ├── 1157.json │ │ │ ├── 1159.json │ │ │ ├── 116.json │ │ │ ├── 1163.json │ │ │ ├── 1164.json │ │ │ ├── 1166.json │ │ │ ├── 1167.json │ │ │ ├── 1169.json │ │ │ ├── 1170.json │ │ │ ├── 1173.json │ │ │ ├── 1177.json │ │ │ ├── 118.json │ │ │ ├── 1180.json │ │ │ ├── 1182.json │ │ │ ├── 1184.json │ │ │ ├── 1187.json │ │ │ ├── 1188.json │ │ │ ├── 1189.json │ │ │ ├── 119.json │ │ │ ├── 1190.json │ │ │ ├── 1192.json │ │ │ ├── 1195.json │ │ │ ├── 1196.json │ │ │ ├── 1197.json │ │ │ ├── 1198.json │ │ │ ├── 120.json │ │ │ ├── 1204.json │ │ │ ├── 1205.json │ │ │ ├── 1206.json │ │ │ ├── 1209.json │ │ │ ├── 121.json │ │ │ ├── 1210.json │ │ │ ├── 1211.json │ │ │ ├── 1212.json │ │ │ ├── 1213.json │ │ │ ├── 1214.json │ │ │ ├── 1217.json │ │ │ ├── 1219.json │ │ │ ├── 1220.json │ │ │ ├── 1221.json │ │ │ ├── 1223.json │ │ │ ├── 1224.json │ │ │ ├── 1225.json │ │ │ ├── 1228.json │ │ │ ├── 123.json │ │ │ ├── 1230.json │ │ │ ├── 1232.json │ │ │ ├── 1234.json │ │ │ ├── 1235.json │ │ │ ├── 1236.json │ │ │ ├── 1237.json │ │ │ ├── 124.json │ │ │ ├── 1242.json │ │ │ ├── 1244.json │ │ │ ├── 1245.json │ │ │ ├── 1246.json │ │ │ ├── 1247.json │ │ │ ├── 1249.json │ │ │ ├── 125.json │ │ │ ├── 1250.json │ │ │ ├── 1251.json │ │ │ ├── 1253.json │ │ │ ├── 1255.json │ │ │ ├── 1258.json │ │ │ ├── 1259.json │ │ │ ├── 1262.json │ │ │ ├── 1263.json │ │ │ ├── 1264.json │ │ │ ├── 1265.json │ │ │ ├── 1266.json │ │ │ ├── 1267.json │ │ │ ├── 1268.json │ │ │ ├── 1269.json │ │ │ ├── 1270.json │ │ │ ├── 1271.json │ │ │ ├── 1272.json │ │ │ ├── 1277.json │ │ │ ├── 1280.json │ │ │ ├── 1285.json │ │ │ ├── 1286.json │ │ │ ├── 129.json │ │ │ ├── 1290.json │ │ │ ├── 1293.json │ │ │ ├── 1296.json │ │ │ ├── 1297.json │ │ │ ├── 13.json │ │ │ ├── 1305.json │ │ │ ├── 1306.json │ │ │ ├── 1307.json │ │ │ ├── 1308.json │ │ │ ├── 1309.json │ │ │ ├── 131.json │ │ │ ├── 1310.json │ │ │ ├── 1311.json │ │ │ ├── 132.json │ │ │ ├── 134.json │ │ │ ├── 135.json │ │ │ ├── 136.json │ │ │ ├── 14.json │ │ │ ├── 140.json │ │ │ ├── 142.json │ │ │ ├── 143.json │ │ │ ├── 146.json │ │ │ ├── 147.json │ │ │ ├── 148.json │ │ │ ├── 149.json │ │ │ ├── 15.json │ │ │ ├── 152.json │ │ │ ├── 154.json │ │ │ ├── 155.json │ │ │ ├── 157.json │ │ │ ├── 159.json │ │ │ ├── 16.json │ │ │ ├── 160.json │ │ │ ├── 161.json │ │ │ ├── 162.json │ │ │ ├── 163.json │ │ │ ├── 164.json │ │ │ ├── 167.json │ │ │ ├── 171.json │ │ │ ├── 172.json │ │ │ ├── 173.json │ │ │ ├── 174.json │ │ │ ├── 175.json │ │ │ ├── 176.json │ │ │ ├── 177.json │ │ │ ├── 178.json │ │ │ ├── 179.json │ │ │ ├── 18.json │ │ │ ├── 180.json │ │ │ ├── 181.json │ │ │ ├── 185.json │ │ │ ├── 188.json │ │ │ ├── 189.json │ │ │ ├── 191.json │ │ │ ├── 193.json │ │ │ ├── 194.json │ │ │ ├── 197.json │ │ │ ├── 198.json │ │ │ ├── 199.json │ │ │ ├── 2.json │ │ │ ├── 20.json │ │ │ ├── 200.json │ │ │ ├── 203.json │ │ │ ├── 206.json │ │ │ ├── 208.json │ │ │ ├── 210.json │ │ │ ├── 213.json │ │ │ ├── 214.json │ │ │ ├── 220.json │ │ │ ├── 223.json │ │ │ ├── 224.json │ │ │ ├── 225.json │ │ │ ├── 226.json │ │ │ ├── 228.json │ │ │ ├── 229.json │ │ │ ├── 230.json │ │ │ ├── 231.json │ │ │ ├── 232.json │ │ │ ├── 233.json │ │ │ ├── 234.json │ │ │ ├── 236.json │ │ │ ├── 239.json │ │ │ ├── 240.json │ │ │ ├── 241.json │ │ │ ├── 242.json │ │ │ ├── 243.json │ │ │ ├── 245.json │ │ │ ├── 246.json │ │ │ ├── 247.json │ │ │ ├── 248.json │ │ │ ├── 25.json │ │ │ ├── 250.json │ │ │ ├── 252.json │ │ │ ├── 253.json │ │ │ ├── 256.json │ │ │ ├── 258.json │ │ │ ├── 260.json │ │ │ ├── 261.json │ │ │ ├── 262.json │ │ │ ├── 264.json │ │ │ ├── 265.json │ │ │ ├── 268.json │ │ │ ├── 269.json │ │ │ ├── 271.json │ │ │ ├── 273.json │ │ │ ├── 275.json │ │ │ ├── 277.json │ │ │ ├── 278.json │ │ │ ├── 28.json │ │ │ ├── 280.json │ │ │ ├── 284.json │ │ │ ├── 286.json │ │ │ ├── 288.json │ │ │ ├── 289.json │ │ │ ├── 29.json │ │ │ ├── 290.json │ │ │ ├── 291.json │ │ │ ├── 292.json │ │ │ ├── 293.json │ │ │ ├── 294.json │ │ │ ├── 296.json │ │ │ ├── 298.json │ │ │ ├── 299.json │ │ │ ├── 3.json │ │ │ ├── 301.json │ │ │ ├── 305.json │ │ │ ├── 306.json │ │ │ ├── 308.json │ │ │ ├── 313.json │ │ │ ├── 314.json │ │ │ ├── 315.json │ │ │ ├── 317.json │ │ │ ├── 319.json │ │ │ ├── 32.json │ │ │ ├── 321.json │ │ │ ├── 327.json │ │ │ ├── 33.json │ │ │ ├── 330.json │ │ │ ├── 333.json │ │ │ ├── 335.json │ │ │ ├── 336.json │ │ │ ├── 337.json │ │ │ ├── 338.json │ │ │ ├── 339.json │ │ │ ├── 340.json │ │ │ ├── 342.json │ │ │ ├── 343.json │ │ │ ├── 344.json │ │ │ ├── 345.json │ │ │ ├── 346.json │ │ │ ├── 348.json │ │ │ ├── 351.json │ │ │ ├── 353.json │ │ │ ├── 354.json │ │ │ ├── 355.json │ │ │ ├── 358.json │ │ │ ├── 359.json │ │ │ ├── 36.json │ │ │ ├── 360.json │ │ │ ├── 361.json │ │ │ ├── 363.json │ │ │ ├── 364.json │ │ │ ├── 367.json │ │ │ ├── 368.json │ │ │ ├── 37.json │ │ │ ├── 370.json │ │ │ ├── 371.json │ │ │ ├── 372.json │ │ │ ├── 376.json │ │ │ ├── 377.json │ │ │ ├── 378.json │ │ │ ├── 379.json │ │ │ ├── 380.json │ │ │ ├── 381.json │ │ │ ├── 384.json │ │ │ ├── 385.json │ │ │ ├── 386.json │ │ │ ├── 387.json │ │ │ ├── 39.json │ │ │ ├── 391.json │ │ │ ├── 392.json │ │ │ ├── 393.json │ │ │ ├── 397.json │ │ │ ├── 4.json │ │ │ ├── 400.json │ │ │ ├── 401.json │ │ │ ├── 403.json │ │ │ ├── 404.json │ │ │ ├── 405.json │ │ │ ├── 407.json │ │ │ ├── 408.json │ │ │ ├── 409.json │ │ │ ├── 41.json │ │ │ ├── 410.json │ │ │ ├── 411.json │ │ │ ├── 414.json │ │ │ ├── 415.json │ │ │ ├── 416.json │ │ │ ├── 417.json │ │ │ ├── 42.json │ │ │ ├── 420.json │ │ │ ├── 421.json │ │ │ ├── 422.json │ │ │ ├── 425.json │ │ │ ├── 429.json │ │ │ ├── 431.json │ │ │ ├── 434.json │ │ │ ├── 435.json │ │ │ ├── 437.json │ │ │ ├── 443.json │ │ │ ├── 445.json │ │ │ ├── 446.json │ │ │ ├── 447.json │ │ │ ├── 448.json │ │ │ ├── 450.json │ │ │ ├── 451.json │ │ │ ├── 453.json │ │ │ ├── 454.json │ │ │ ├── 455.json │ │ │ ├── 456.json │ │ │ ├── 457.json │ │ │ ├── 459.json │ │ │ ├── 46.json │ │ │ ├── 460.json │ │ │ ├── 461.json │ │ │ ├── 463.json │ │ │ ├── 465.json │ │ │ ├── 468.json │ │ │ ├── 47.json │ │ │ ├── 471.json │ │ │ ├── 472.json │ │ │ ├── 473.json │ │ │ ├── 474.json │ │ │ ├── 475.json │ │ │ ├── 476.json │ │ │ ├── 480.json │ │ │ ├── 481.json │ │ │ ├── 484.json │ │ │ ├── 486.json │ │ │ ├── 487.json │ │ │ ├── 49.json │ │ │ ├── 490.json │ │ │ ├── 491.json │ │ │ ├── 492.json │ │ │ ├── 494.json │ │ │ ├── 496.json │ │ │ ├── 497.json │ │ │ ├── 498.json │ │ │ ├── 500.json │ │ │ ├── 501.json │ │ │ ├── 502.json │ │ │ ├── 507.json │ │ │ ├── 509.json │ │ │ ├── 51.json │ │ │ ├── 510.json │ │ │ ├── 511.json │ │ │ ├── 512.json │ │ │ ├── 517.json │ │ │ ├── 518.json │ │ │ ├── 52.json │ │ │ ├── 520.json │ │ │ ├── 521.json │ │ │ ├── 522.json │ │ │ ├── 523.json │ │ │ ├── 524.json │ │ │ ├── 527.json │ │ │ ├── 529.json │ │ │ ├── 53.json │ │ │ ├── 530.json │ │ │ ├── 531.json │ │ │ ├── 532.json │ │ │ ├── 533.json │ │ │ ├── 536.json │ │ │ ├── 538.json │ │ │ ├── 539.json │ │ │ ├── 54.json │ │ │ ├── 542.json │ │ │ ├── 543.json │ │ │ ├── 546.json │ │ │ ├── 548.json │ │ │ ├── 550.json │ │ │ ├── 552.json │ │ │ ├── 554.json │ │ │ ├── 556.json │ │ │ ├── 557.json │ │ │ ├── 559.json │ │ │ ├── 560.json │ │ │ ├── 561.json │ │ │ ├── 562.json │ │ │ ├── 564.json │ │ │ ├── 567.json │ │ │ ├── 568.json │ │ │ ├── 57.json │ │ │ ├── 570.json │ │ │ ├── 571.json │ │ │ ├── 574.json │ │ │ ├── 575.json │ │ │ ├── 576.json │ │ │ ├── 578.json │ │ │ ├── 579.json │ │ │ ├── 58.json │ │ │ ├── 581.json │ │ │ ├── 583.json │ │ │ ├── 586.json │ │ │ ├── 590.json │ │ │ ├── 591.json │ │ │ ├── 592.json │ │ │ ├── 593.json │ │ │ ├── 598.json │ │ │ ├── 599.json │ │ │ ├── 6.json │ │ │ ├── 60.json │ │ │ ├── 600.json │ │ │ ├── 603.json │ │ │ ├── 604.json │ │ │ ├── 606.json │ │ │ ├── 607.json │ │ │ ├── 608.json │ │ │ ├── 610.json │ │ │ ├── 611.json │ │ │ ├── 613.json │ │ │ ├── 614.json │ │ │ ├── 615.json │ │ │ ├── 618.json │ │ │ ├── 619.json │ │ │ ├── 62.json │ │ │ ├── 622.json │ │ │ ├── 624.json │ │ │ ├── 627.json │ │ │ ├── 629.json │ │ │ ├── 630.json │ │ │ ├── 631.json │ │ │ ├── 634.json │ │ │ ├── 635.json │ │ │ ├── 637.json │ │ │ ├── 638.json │ │ │ ├── 639.json │ │ │ ├── 64.json │ │ │ ├── 640.json │ │ │ ├── 641.json │ │ │ ├── 645.json │ │ │ ├── 646.json │ │ │ ├── 647.json │ │ │ ├── 65.json │ │ │ ├── 653.json │ │ │ ├── 656.json │ │ │ ├── 657.json │ │ │ ├── 658.json │ │ │ ├── 66.json │ │ │ ├── 660.json │ │ │ ├── 663.json │ │ │ ├── 664.json │ │ │ ├── 665.json │ │ │ ├── 666.json │ │ │ ├── 667.json │ │ │ ├── 670.json │ │ │ ├── 671.json │ │ │ ├── 673.json │ │ │ ├── 674.json │ │ │ ├── 678.json │ │ │ ├── 68.json │ │ │ ├── 680.json │ │ │ ├── 682.json │ │ │ ├── 685.json │ │ │ ├── 687.json │ │ │ ├── 689.json │ │ │ ├── 69.json │ │ │ ├── 690.json │ │ │ ├── 691.json │ │ │ ├── 693.json │ │ │ ├── 694.json │ │ │ ├── 698.json │ │ │ ├── 699.json │ │ │ ├── 7.json │ │ │ ├── 70.json │ │ │ ├── 701.json │ │ │ ├── 705.json │ │ │ ├── 706.json │ │ │ ├── 707.json │ │ │ ├── 708.json │ │ │ ├── 709.json │ │ │ ├── 71.json │ │ │ ├── 713.json │ │ │ ├── 714.json │ │ │ ├── 715.json │ │ │ ├── 718.json │ │ │ ├── 719.json │ │ │ ├── 72.json │ │ │ ├── 720.json │ │ │ ├── 721.json │ │ │ ├── 722.json │ │ │ ├── 723.json │ │ │ ├── 727.json │ │ │ ├── 728.json │ │ │ ├── 729.json │ │ │ ├── 73.json │ │ │ ├── 730.json │ │ │ ├── 731.json │ │ │ ├── 733.json │ │ │ ├── 734.json │ │ │ ├── 737.json │ │ │ ├── 738.json │ │ │ ├── 740.json │ │ │ ├── 741.json │ │ │ ├── 743.json │ │ │ ├── 745.json │ │ │ ├── 748.json │ │ │ ├── 749.json │ │ │ ├── 75.json │ │ │ ├── 750.json │ │ │ ├── 753.json │ │ │ ├── 754.json │ │ │ ├── 756.json │ │ │ ├── 758.json │ │ │ ├── 759.json │ │ │ ├── 76.json │ │ │ ├── 762.json │ │ │ ├── 765.json │ │ │ ├── 767.json │ │ │ ├── 769.json │ │ │ ├── 771.json │ │ │ ├── 772.json │ │ │ ├── 774.json │ │ │ ├── 775.json │ │ │ ├── 776.json │ │ │ ├── 777.json │ │ │ ├── 780.json │ │ │ ├── 781.json │ │ │ ├── 784.json │ │ │ ├── 785.json │ │ │ ├── 786.json │ │ │ ├── 787.json │ │ │ ├── 788.json │ │ │ ├── 79.json │ │ │ ├── 790.json │ │ │ ├── 792.json │ │ │ ├── 793.json │ │ │ ├── 795.json │ │ │ ├── 796.json │ │ │ ├── 797.json │ │ │ ├── 799.json │ │ │ ├── 8.json │ │ │ ├── 800.json │ │ │ ├── 8003.json │ │ │ ├── 8004.json │ │ │ ├── 8007.json │ │ │ ├── 8008.json │ │ │ ├── 8013.json │ │ │ ├── 8014.json │ │ │ ├── 8016.json │ │ │ ├── 8017.json │ │ │ ├── 806.json │ │ │ ├── 813.json │ │ │ ├── 816.json │ │ │ ├── 817.json │ │ │ ├── 82.json │ │ │ ├── 821.json │ │ │ ├── 822.json │ │ │ ├── 823.json │ │ │ ├── 824.json │ │ │ ├── 825.json │ │ │ ├── 828.json │ │ │ ├── 830.json │ │ │ ├── 831.json │ │ │ ├── 832.json │ │ │ ├── 835.json │ │ │ ├── 837.json │ │ │ ├── 838.json │ │ │ ├── 839.json │ │ │ ├── 84.json │ │ │ ├── 841.json │ │ │ ├── 845.json │ │ │ ├── 846.json │ │ │ ├── 848.json │ │ │ ├── 849.json │ │ │ ├── 85.json │ │ │ ├── 852.json │ │ │ ├── 853.json │ │ │ ├── 854.json │ │ │ ├── 856.json │ │ │ ├── 858.json │ │ │ ├── 859.json │ │ │ ├── 86.json │ │ │ ├── 860.json │ │ │ ├── 862.json │ │ │ ├── 863.json │ │ │ ├── 865.json │ │ │ ├── 867.json │ │ │ ├── 868.json │ │ │ ├── 869.json │ │ │ ├── 87.json │ │ │ ├── 871.json │ │ │ ├── 872.json │ │ │ ├── 874.json │ │ │ ├── 875.json │ │ │ ├── 876.json │ │ │ ├── 879.json │ │ │ ├── 88.json │ │ │ ├── 882.json │ │ │ ├── 883.json │ │ │ ├── 884.json │ │ │ ├── 885.json │ │ │ ├── 886.json │ │ │ ├── 887.json │ │ │ ├── 888.json │ │ │ ├── 889.json │ │ │ ├── 890.json │ │ │ ├── 891.json │ │ │ ├── 896.json │ │ │ ├── 897.json │ │ │ ├── 898.json │ │ │ ├── 899.json │ │ │ ├── 9.json │ │ │ ├── 900.json │ │ │ ├── 905.json │ │ │ ├── 906.json │ │ │ ├── 907.json │ │ │ ├── 909.json │ │ │ ├── 911.json │ │ │ ├── 914.json │ │ │ ├── 915.json │ │ │ ├── 916.json │ │ │ ├── 918.json │ │ │ ├── 92.json │ │ │ ├── 922.json │ │ │ ├── 928.json │ │ │ ├── 93.json │ │ │ ├── 931.json │ │ │ ├── 932.json │ │ │ ├── 933.json │ │ │ ├── 934.json │ │ │ ├── 936.json │ │ │ ├── 937.json │ │ │ ├── 938.json │ │ │ ├── 939.json │ │ │ ├── 940.json │ │ │ ├── 941.json │ │ │ ├── 942.json │ │ │ ├── 943.json │ │ │ ├── 946.json │ │ │ ├── 947.json │ │ │ ├── 948.json │ │ │ ├── 949.json │ │ │ ├── 95.json │ │ │ ├── 950.json │ │ │ ├── 951.json │ │ │ ├── 952.json │ │ │ ├── 955.json │ │ │ ├── 957.json │ │ │ ├── 959.json │ │ │ ├── 960.json │ │ │ ├── 961.json │ │ │ ├── 962.json │ │ │ ├── 965.json │ │ │ ├── 969.json │ │ │ ├── 971.json │ │ │ ├── 972.json │ │ │ ├── 973.json │ │ │ ├── 975.json │ │ │ ├── 978.json │ │ │ ├── 979.json │ │ │ ├── 981.json │ │ │ ├── 982.json │ │ │ ├── 985.json │ │ │ ├── 987.json │ │ │ ├── 99.json │ │ │ ├── 994.json │ │ │ ├── 996.json │ │ │ └── 997.json │ │ ├── TruthfulQA │ │ ├── LICENSE │ │ ├── README.md │ │ ├── TruthfulQA.csv │ │ ├── data │ │ │ ├── eval_examples.csv │ │ │ ├── finetune_info.jsonl │ │ │ ├── finetune_truth.jsonl │ │ │ ├── ft_gpt_judge.py │ │ │ ├── mc_task.json │ │ │ └── v0 │ │ │ │ ├── TruthfulQA.csv │ │ │ │ ├── finetune_info.jsonl │ │ │ │ ├── finetune_truth.jsonl │ │ │ │ └── mc_task.json │ │ ├── requirements.txt │ │ ├── setup.py │ │ └── truthfulqa │ │ │ ├── __init__.py │ │ │ ├── configs.py │ │ │ ├── evaluate.py │ │ │ ├── metrics.py │ │ │ ├── models.py │ │ │ ├── presets.py │ │ │ └── utilities.py │ │ ├── alpaca_eval.json │ │ ├── arena-hard-v0.1.jsonl │ │ ├── eval_utility_dataset.py │ │ ├── gsm8k │ │ ├── test.json │ │ └── train.json │ │ ├── human-eval │ │ ├── .DS_Store │ │ ├── LICENSE │ │ ├── README.md │ │ ├── data │ │ │ ├── HumanEval.jsonl.gz │ │ │ ├── example_problem.jsonl │ │ │ ├── example_samples.jsonl │ │ │ └── example_samples.jsonl_results.jsonl │ │ ├── human_eval │ │ │ ├── __init__.py │ │ │ ├── data.py │ │ │ ├── evaluate_functional_correctness.py │ │ │ ├── evaluation.py │ │ │ └── execution.py │ │ ├── requirements.txt │ │ └── setup.py │ │ ├── mmlu │ │ ├── abstract_algebra │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── anatomy │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── astronomy │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── business_ethics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── clinical_knowledge │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_biology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_chemistry │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_computer_science │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_mathematics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_medicine │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── college_physics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── computer_security │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── conceptual_physics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── econometrics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── electrical_engineering │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── elementary_mathematics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── formal_logic │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── global_facts │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_biology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_chemistry │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_computer_science │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_european_history │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_geography │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_government_and_politics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_macroeconomics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_mathematics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_microeconomics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_physics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_psychology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_statistics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_us_history │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── high_school_world_history │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── human_aging │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── human_sexuality │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── international_law │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── jurisprudence │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── logical_fallacies │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── machine_learning │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── management │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── marketing │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── medical_genetics │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── miscellaneous │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── moral_disputes │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── moral_scenarios │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── nutrition │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── philosophy │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── prehistory │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── professional_accounting │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── professional_law │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── professional_medicine │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── professional_psychology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── public_relations │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── security_studies │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── sociology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── us_foreign_policy │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ ├── virology │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ └── world_religions │ │ │ ├── dev.jsonl │ │ │ ├── test.jsonl │ │ │ └── val.jsonl │ │ └── mt_bench │ │ ├── judge_prompts.jsonl │ │ ├── mt_bench_question.jsonl │ │ └── mt_bench_reference_answer_gpt-4.jsonl ├── inference │ ├── chat_vllm.py │ ├── safety_eval │ │ ├── chatgpt_judge.py │ │ ├── chatgpt_judge_wmdp.py │ │ ├── evaluator_vllm.py │ │ └── keyword_eval.py │ └── utility_eval │ │ ├── FastChat │ │ ├── .github │ │ │ ├── PULL_REQUEST_TEMPLATE.md │ │ │ └── workflows │ │ │ │ └── python-package.yml │ │ ├── .gitignore │ │ ├── .pylintrc │ │ ├── LICENSE │ │ ├── README.md │ │ ├── assets │ │ │ ├── demo_narrow.gif │ │ │ ├── qa_browser.png │ │ │ ├── screenshot_cli.png │ │ │ ├── screenshot_gui.png │ │ │ ├── server_arch.png │ │ │ └── vicuna_logo.jpeg │ │ ├── docker │ │ │ ├── Dockerfile │ │ │ └── docker-compose.yml │ │ ├── docs │ │ │ ├── arena.md │ │ │ ├── awq.md │ │ │ ├── commands │ │ │ │ ├── conv_release.md │ │ │ │ ├── data_cleaning.md │ │ │ │ ├── leaderboard.md │ │ │ │ ├── local_cluster.md │ │ │ │ ├── pypi.md │ │ │ │ └── webserver.md │ │ │ ├── dataset_release.md │ │ │ ├── exllama_v2.md │ │ │ ├── gptq.md │ │ │ ├── langchain_integration.md │ │ │ ├── lightllm_integration.md │ │ │ ├── mlx_integration.md │ │ │ ├── model_support.md │ │ │ ├── openai_api.md │ │ │ ├── server_arch.md │ │ │ ├── third_party_ui.md │ │ │ ├── training.md │ │ │ ├── vicuna_weights_version.md │ │ │ ├── vllm_integration.md │ │ │ └── xFasterTransformer.md │ │ ├── fastchat │ │ │ ├── __init__.py │ │ │ ├── constants.py │ │ │ ├── conversation.py │ │ │ ├── data │ │ │ │ ├── __init__.py │ │ │ │ ├── clean_sharegpt.py │ │ │ │ ├── convert_alpaca.py │ │ │ │ ├── extract_gpt4_only.py │ │ │ │ ├── extract_single_round.py │ │ │ │ ├── filter_wrong_format.py │ │ │ │ ├── get_stats.py │ │ │ │ ├── hardcoded_questions.py │ │ │ │ ├── inspect_data.py │ │ │ │ ├── merge.py │ │ │ │ ├── optional_clean.py │ │ │ │ ├── optional_replace.py │ │ │ │ ├── prepare_all.py │ │ │ │ ├── pretty_json.py │ │ │ │ ├── sample.py │ │ │ │ ├── split_long_conversation.py │ │ │ │ └── split_train_test.py │ │ │ ├── llm_judge │ │ │ │ ├── README.md │ │ │ │ ├── clean_judgment.py │ │ │ │ ├── common.py │ │ │ │ ├── compute_agreement.py │ │ │ │ ├── data │ │ │ │ │ ├── judge_prompts.jsonl │ │ │ │ │ ├── mt_bench │ │ │ │ │ │ ├── misc │ │ │ │ │ │ │ └── radar.png │ │ │ │ │ │ ├── question.jsonl │ │ │ │ │ │ └── reference_answer │ │ │ │ │ │ │ └── gpt-4.jsonl │ │ │ │ │ └── vicuna_bench │ │ │ │ │ │ ├── question.jsonl │ │ │ │ │ │ └── reference_answer │ │ │ │ │ │ └── gpt-4.jsonl │ │ │ │ ├── download_mt_bench_pregenerated.py │ │ │ │ ├── gen_api_answer.py │ │ │ │ ├── gen_judgment.py │ │ │ │ ├── gen_model_answer.py │ │ │ │ ├── qa_browser.py │ │ │ │ └── show_result.py │ │ │ ├── model │ │ │ │ ├── __init__.py │ │ │ │ ├── apply_delta.py │ │ │ │ ├── apply_lora.py │ │ │ │ ├── compression.py │ │ │ │ ├── convert_fp16.py │ │ │ │ ├── llama_condense_monkey_patch.py │ │ │ │ ├── make_delta.py │ │ │ │ ├── model_adapter.py │ │ │ │ ├── model_chatglm.py │ │ │ │ ├── model_cllm.py │ │ │ │ ├── model_codet5p.py │ │ │ │ ├── model_exllama.py │ │ │ │ ├── model_falcon.py │ │ │ │ ├── model_registry.py │ │ │ │ ├── model_xfastertransformer.py │ │ │ │ ├── model_yuan2.py │ │ │ │ ├── monkey_patch_non_inplace.py │ │ │ │ ├── rwkv_model.py │ │ │ │ └── upload_hub.py │ │ │ ├── modules │ │ │ │ ├── __init__.py │ │ │ │ ├── awq.py │ │ │ │ ├── exllama.py │ │ │ │ ├── gptq.py │ │ │ │ └── xfastertransformer.py │ │ │ ├── protocol │ │ │ │ ├── api_protocol.py │ │ │ │ └── openai_api_protocol.py │ │ │ ├── serve │ │ │ │ ├── __init__.py │ │ │ │ ├── api_provider.py │ │ │ │ ├── base_model_worker.py │ │ │ │ ├── call_monitor.py │ │ │ │ ├── cli.py │ │ │ │ ├── controller.py │ │ │ │ ├── example_images │ │ │ │ │ ├── distracted.jpg │ │ │ │ │ └── fridge.jpg │ │ │ │ ├── gateway │ │ │ │ │ ├── README.md │ │ │ │ │ └── nginx.conf │ │ │ │ ├── gradio_block_arena_anony.py │ │ │ │ ├── gradio_block_arena_named.py │ │ │ │ ├── gradio_block_arena_vision.py │ │ │ │ ├── gradio_block_arena_vision_anony.py │ │ │ │ ├── gradio_block_arena_vision_named.py │ │ │ │ ├── gradio_web_server.py │ │ │ │ ├── gradio_web_server_multi.py │ │ │ │ ├── huggingface_api.py │ │ │ │ ├── huggingface_api_worker.py │ │ │ │ ├── inference.py │ │ │ │ ├── launch_all_serve.py │ │ │ │ ├── lightllm_worker.py │ │ │ │ ├── mlx_worker.py │ │ │ │ ├── model_worker.py │ │ │ │ ├── monitor │ │ │ │ │ ├── basic_stats.py │ │ │ │ │ ├── clean_battle_data.py │ │ │ │ │ ├── clean_chat_data.py │ │ │ │ │ ├── code_tagger.py │ │ │ │ │ ├── criteria_labeling.py │ │ │ │ │ ├── dataset_release_scripts │ │ │ │ │ │ ├── arena_33k │ │ │ │ │ │ │ ├── count_unique_users.py │ │ │ │ │ │ │ ├── filter_bad_conv.py │ │ │ │ │ │ │ ├── merge_field.py │ │ │ │ │ │ │ ├── sample.py │ │ │ │ │ │ │ └── upload_hf_dataset.py │ │ │ │ │ │ └── lmsys_chat_1m │ │ │ │ │ │ │ ├── approve_all.py │ │ │ │ │ │ │ ├── compute_stats.py │ │ │ │ │ │ │ ├── filter_bad_conv.py │ │ │ │ │ │ │ ├── final_post_processing.py │ │ │ │ │ │ │ ├── instructions.md │ │ │ │ │ │ │ ├── merge_oai_tag.py │ │ │ │ │ │ │ ├── process_all.sh │ │ │ │ │ │ │ ├── sample.py │ │ │ │ │ │ │ └── upload_hf_dataset.py │ │ │ │ │ ├── deduplication.py │ │ │ │ │ ├── elo_analysis.py │ │ │ │ │ ├── inspect_conv.py │ │ │ │ │ ├── intersect_conv_file.py │ │ │ │ │ ├── leaderboard_csv_to_html.py │ │ │ │ │ ├── monitor.py │ │ │ │ │ ├── summarize_cluster.py │ │ │ │ │ ├── tag_openai_moderation.py │ │ │ │ │ ├── topic_clustering.py │ │ │ │ │ └── vote_time_stats │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ ├── analyze_data.py │ │ │ │ │ │ └── plot.py │ │ │ │ ├── multi_model_worker.py │ │ │ │ ├── openai_api_server.py │ │ │ │ ├── register_worker.py │ │ │ │ ├── remote_logger.py │ │ │ │ ├── sglang_worker.py │ │ │ │ ├── shutdown_serve.py │ │ │ │ ├── test_message.py │ │ │ │ ├── test_throughput.py │ │ │ │ ├── vision │ │ │ │ │ ├── create_vqa_examples_dir.py │ │ │ │ │ ├── create_vqa_examples_json.py │ │ │ │ │ └── image.py │ │ │ │ └── vllm_worker.py │ │ │ ├── train │ │ │ │ ├── llama2_flash_attn_monkey_patch.py │ │ │ │ ├── llama_flash_attn_monkey_patch.py │ │ │ │ ├── llama_xformers_attn_monkey_patch.py │ │ │ │ ├── train.py │ │ │ │ ├── train_baichuan.py │ │ │ │ ├── train_flant5.py │ │ │ │ ├── train_lora.py │ │ │ │ ├── train_lora_t5.py │ │ │ │ ├── train_mem.py │ │ │ │ ├── train_with_template.py │ │ │ │ ├── train_xformers.py │ │ │ │ └── train_yuan2.py │ │ │ └── utils.py │ │ ├── format.sh │ │ ├── playground │ │ │ ├── FastChat_API_GoogleColab.ipynb │ │ │ ├── deepspeed_config_s2.json │ │ │ ├── deepspeed_config_s3.json │ │ │ └── test_embedding │ │ │ │ ├── README.md │ │ │ │ ├── test_classification.py │ │ │ │ ├── test_semantic_search.py │ │ │ │ └── test_sentence_similarity.py │ │ ├── pyproject.toml │ │ ├── scripts │ │ │ ├── build-api.sh │ │ │ ├── test_readme_train.sh │ │ │ ├── train_lora.sh │ │ │ ├── train_vicuna_13b.sh │ │ │ ├── train_vicuna_7b.sh │ │ │ └── upload_pypi.sh │ │ └── tests │ │ │ ├── README.md │ │ │ ├── killall_python.sh │ │ │ ├── launch_openai_api_test_server.py │ │ │ ├── test_cli.py │ │ │ ├── test_cli_inputs.txt │ │ │ ├── test_image_utils.py │ │ │ ├── test_openai_api.py │ │ │ ├── test_openai_langchain.py │ │ │ └── test_openai_vision_api.py │ │ ├── alpaca_eval.py │ │ ├── arena_hard │ │ ├── .DS_Store │ │ ├── .gitmodules │ │ ├── LICENSE │ │ ├── README.md │ │ ├── config │ │ │ ├── api_config.yaml │ │ │ ├── gen_answer_config.yaml │ │ │ └── judge_config.yaml │ │ ├── gen_answer.py │ │ ├── gen_judgment.py │ │ ├── gen_judgment_orig.py │ │ ├── misc │ │ │ └── qa_browser.png │ │ ├── notebook │ │ │ ├── alpaca_2.0_lc_results.jsonl │ │ │ ├── alpaca_to_arena.json │ │ │ ├── arena_to_arena_hard.json │ │ │ ├── arena_to_mt_bench.json │ │ │ ├── benchmark_statistics.ipynb │ │ │ ├── bootstrap_stats_20k_votes.jsonl │ │ │ ├── bootstrap_stats_20k_votes_elo.jsonl │ │ │ ├── bootstrap_stats_alpaca.jsonl │ │ │ ├── bootstrap_stats_alpaca_LC.jsonl │ │ │ ├── bootstrap_stats_arena_hard.jsonl │ │ │ ├── bootstrap_stats_arena_hard_bt.jsonl │ │ │ ├── bootstrap_stats_arena_hard_distribution_elo.jsonl │ │ │ ├── bootstrap_stats_mt_bench.jsonl │ │ │ └── elo_results_20240329.pkl │ │ ├── qa_browser.py │ │ ├── requirements-optional.txt │ │ ├── requirements.txt │ │ ├── show_result.py │ │ └── utils.py │ │ ├── arena_hard_eval.py │ │ ├── bbh_eval.py │ │ ├── evaluator_vllm.py │ │ ├── gsm8k_eval.py │ │ ├── humaneval_eval.py │ │ ├── inference_vllm.py │ │ ├── lm-evaluation-harness │ │ ├── .DS_Store │ │ ├── .coveragerc │ │ ├── .flake8 │ │ ├── .github │ │ │ └── workflows │ │ │ │ ├── new_tasks.yml │ │ │ │ ├── publish.yml │ │ │ │ └── unit_tests.yml │ │ ├── .gitignore │ │ ├── .pre-commit-config.yaml │ │ ├── CITATION.bib │ │ ├── CODEOWNERS │ │ ├── LICENSE.md │ │ ├── README.md │ │ ├── docs │ │ │ ├── CONTRIBUTING.md │ │ │ ├── README.md │ │ │ ├── decontamination.md │ │ │ ├── img │ │ │ │ └── fewshot_example_gpt3.png │ │ │ ├── interface.md │ │ │ ├── model_guide.md │ │ │ ├── new_task_guide.md │ │ │ └── task_guide.md │ │ ├── examples │ │ │ ├── lm-eval-overview.ipynb │ │ │ ├── visualize-wandb.ipynb │ │ │ └── visualize-zeno.ipynb │ │ ├── ignore.txt │ │ ├── lm_eval │ │ │ ├── .DS_Store │ │ │ ├── __init__.py │ │ │ ├── __main__.py │ │ │ ├── api │ │ │ │ ├── __init__.py │ │ │ │ ├── filter.py │ │ │ │ ├── instance.py │ │ │ │ ├── metrics.py │ │ │ │ ├── model.py │ │ │ │ ├── registry.py │ │ │ │ ├── samplers.py │ │ │ │ └── task.py │ │ │ ├── caching │ │ │ │ └── cache.py │ │ │ ├── decontamination │ │ │ │ ├── __init__.py │ │ │ │ ├── archiver.py │ │ │ │ ├── decontaminate.py │ │ │ │ └── janitor.py │ │ │ ├── evaluator.py │ │ │ ├── evaluator_utils.py │ │ │ ├── filters │ │ │ │ ├── __init__.py │ │ │ │ ├── decontamination.py │ │ │ │ ├── extraction.py │ │ │ │ ├── selection.py │ │ │ │ └── transformation.py │ │ │ ├── loggers │ │ │ │ ├── __init__.py │ │ │ │ ├── evaluation_tracker.py │ │ │ │ ├── utils.py │ │ │ │ └── wandb_logger.py │ │ │ ├── models │ │ │ │ ├── __init__.py │ │ │ │ ├── anthropic_llms.py │ │ │ │ ├── dummy.py │ │ │ │ ├── gguf.py │ │ │ │ ├── huggingface.py │ │ │ │ ├── mamba_lm.py │ │ │ │ ├── nemo_lm.py │ │ │ │ ├── neuralmagic.py │ │ │ │ ├── neuron_optimum.py │ │ │ │ ├── openai_completions.py │ │ │ │ ├── optimum_lm.py │ │ │ │ ├── textsynth.py │ │ │ │ ├── utils.py │ │ │ │ └── vllm_causallms.py │ │ │ ├── prompts │ │ │ │ └── __init__.py │ │ │ ├── tasks │ │ │ │ ├── README.md │ │ │ │ ├── __init__.py │ │ │ │ ├── aclue │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── aclue_ancient_chinese_culture.yaml │ │ │ │ │ ├── aclue_ancient_literature.yaml │ │ │ │ │ ├── aclue_ancient_medical.yaml │ │ │ │ │ ├── aclue_ancient_phonetics.yaml │ │ │ │ │ ├── aclue_basic_ancient_chinese.yaml │ │ │ │ │ ├── aclue_couplet_prediction.yaml │ │ │ │ │ ├── aclue_homographic_character_resolution.yaml │ │ │ │ │ ├── aclue_named_entity_recognition.yaml │ │ │ │ │ ├── aclue_poetry_appreciate.yaml │ │ │ │ │ ├── aclue_poetry_context_prediction.yaml │ │ │ │ │ ├── aclue_poetry_quality_assessment.yaml │ │ │ │ │ ├── aclue_poetry_sentiment_analysis.yaml │ │ │ │ │ ├── aclue_polysemy_resolution.yaml │ │ │ │ │ ├── aclue_reading_comprehension.yaml │ │ │ │ │ └── aclue_sentence_segmentation.yaml │ │ │ │ ├── aexams │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── aexams_Biology.yaml │ │ │ │ │ ├── aexams_IslamicStudies.yaml │ │ │ │ │ ├── aexams_Physics.yaml │ │ │ │ │ ├── aexams_Science.yaml │ │ │ │ │ └── aexams_Social.yaml │ │ │ │ ├── agieval │ │ │ │ │ ├── README.md │ │ │ │ │ ├── aqua-rat.yaml │ │ │ │ │ ├── gaokao-biology.yaml │ │ │ │ │ ├── gaokao-chemistry.yaml │ │ │ │ │ ├── gaokao-chinese.yaml │ │ │ │ │ ├── gaokao-english.yaml │ │ │ │ │ ├── gaokao-geography.yaml │ │ │ │ │ ├── gaokao-history.yaml │ │ │ │ │ ├── gaokao-mathcloze.yaml │ │ │ │ │ ├── gaokao-mathqa.yaml │ │ │ │ │ ├── gaokao-physics.yaml │ │ │ │ │ ├── jec-qa-ca.yaml │ │ │ │ │ ├── jec-qa-kd.yaml │ │ │ │ │ ├── logiqa-en.yaml │ │ │ │ │ ├── logiqa-zh.yaml │ │ │ │ │ ├── lsat-ar.yaml │ │ │ │ │ ├── lsat-lr.yaml │ │ │ │ │ ├── lsat-rc.yaml │ │ │ │ │ ├── math.yaml │ │ │ │ │ ├── sat-en-without-passage.yaml │ │ │ │ │ ├── sat-en.yaml │ │ │ │ │ ├── sat-math.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── alghafa │ │ │ │ │ ├── copa_ar │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ └── copa_ar.yaml │ │ │ │ │ └── piqa_ar │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ └── piqa_ar.yaml │ │ │ │ ├── anli │ │ │ │ │ ├── README.md │ │ │ │ │ ├── anli_r1.yaml │ │ │ │ │ ├── anli_r2.yaml │ │ │ │ │ └── anli_r3.yaml │ │ │ │ ├── arabicmmlu │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── arabicmmlu.yaml │ │ │ │ │ ├── arabicmmlu_arabic_language_general.yaml │ │ │ │ │ ├── arabicmmlu_arabic_language_grammar.yaml │ │ │ │ │ ├── arabicmmlu_driving_test.yaml │ │ │ │ │ ├── arabicmmlu_general_knowledge.yaml │ │ │ │ │ ├── arabicmmlu_high_arabic_language.yaml │ │ │ │ │ ├── arabicmmlu_high_biology.yaml │ │ │ │ │ ├── arabicmmlu_high_civics.yaml │ │ │ │ │ ├── arabicmmlu_high_computer_science.yaml │ │ │ │ │ ├── arabicmmlu_high_economics.yaml │ │ │ │ │ ├── arabicmmlu_high_geography.yaml │ │ │ │ │ ├── arabicmmlu_high_history.yaml │ │ │ │ │ ├── arabicmmlu_high_islamic_studies.yaml │ │ │ │ │ ├── arabicmmlu_high_philosophy.yaml │ │ │ │ │ ├── arabicmmlu_high_physics.yaml │ │ │ │ │ ├── arabicmmlu_islamic_studies.yaml │ │ │ │ │ ├── arabicmmlu_middle_arabic_language.yaml │ │ │ │ │ ├── arabicmmlu_middle_civics.yaml │ │ │ │ │ ├── arabicmmlu_middle_computer_science.yaml │ │ │ │ │ ├── arabicmmlu_middle_economics.yaml │ │ │ │ │ ├── arabicmmlu_middle_general_knowledge.yaml │ │ │ │ │ ├── arabicmmlu_middle_geography.yaml │ │ │ │ │ ├── arabicmmlu_middle_history.yaml │ │ │ │ │ ├── arabicmmlu_middle_islamic_studies.yaml │ │ │ │ │ ├── arabicmmlu_middle_natural_science.yaml │ │ │ │ │ ├── arabicmmlu_middle_social_science.yaml │ │ │ │ │ ├── arabicmmlu_primary_arabic_language.yaml │ │ │ │ │ ├── arabicmmlu_primary_computer_science.yaml │ │ │ │ │ ├── arabicmmlu_primary_general_knowledge.yaml │ │ │ │ │ ├── arabicmmlu_primary_geography.yaml │ │ │ │ │ ├── arabicmmlu_primary_history.yaml │ │ │ │ │ ├── arabicmmlu_primary_islamic_studies.yaml │ │ │ │ │ ├── arabicmmlu_primary_math.yaml │ │ │ │ │ ├── arabicmmlu_primary_natural_science.yaml │ │ │ │ │ ├── arabicmmlu_primary_social_science.yaml │ │ │ │ │ ├── arabicmmlu_prof_law.yaml │ │ │ │ │ ├── arabicmmlu_univ_accounting.yaml │ │ │ │ │ ├── arabicmmlu_univ_computer_science.yaml │ │ │ │ │ ├── arabicmmlu_univ_economics.yaml │ │ │ │ │ ├── arabicmmlu_univ_management.yaml │ │ │ │ │ ├── arabicmmlu_univ_political_science.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── arc │ │ │ │ │ ├── README.md │ │ │ │ │ ├── arc_challenge.yaml │ │ │ │ │ └── arc_easy.yaml │ │ │ │ ├── arc_mt │ │ │ │ │ ├── README.md │ │ │ │ │ ├── arc_challenge_mt_da.yaml │ │ │ │ │ ├── arc_challenge_mt_de.yaml │ │ │ │ │ ├── arc_challenge_mt_el.yaml │ │ │ │ │ ├── arc_challenge_mt_es.yaml │ │ │ │ │ ├── arc_challenge_mt_fi.yaml │ │ │ │ │ ├── arc_challenge_mt_hu.yaml │ │ │ │ │ ├── arc_challenge_mt_is.yaml │ │ │ │ │ ├── arc_challenge_mt_it.yaml │ │ │ │ │ ├── arc_challenge_mt_nb.yaml │ │ │ │ │ ├── arc_challenge_mt_pl.yaml │ │ │ │ │ ├── arc_challenge_mt_pt.yaml │ │ │ │ │ └── arc_challenge_mt_sv.yaml │ │ │ │ ├── arithmetic │ │ │ │ │ ├── README.md │ │ │ │ │ ├── arithmetic_1dc.yaml │ │ │ │ │ ├── arithmetic_2da.yaml │ │ │ │ │ ├── arithmetic_2dm.yaml │ │ │ │ │ ├── arithmetic_2ds.yaml │ │ │ │ │ ├── arithmetic_3da.yaml │ │ │ │ │ ├── arithmetic_3ds.yaml │ │ │ │ │ ├── arithmetic_4da.yaml │ │ │ │ │ ├── arithmetic_4ds.yaml │ │ │ │ │ ├── arithmetic_5da.yaml │ │ │ │ │ └── arithmetic_5ds.yaml │ │ │ │ ├── asdiv │ │ │ │ │ ├── README.md │ │ │ │ │ └── default.yaml │ │ │ │ ├── babi │ │ │ │ │ ├── README.md │ │ │ │ │ └── babi.yaml │ │ │ │ ├── basqueglue │ │ │ │ │ ├── README.md │ │ │ │ │ ├── bec.yaml │ │ │ │ │ ├── bhtc.yaml │ │ │ │ │ ├── coref.yaml │ │ │ │ │ ├── qnli.yaml │ │ │ │ │ ├── utils.py │ │ │ │ │ ├── vaxx.yaml │ │ │ │ │ └── wic.yaml │ │ │ │ ├── bbh │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── cot_fewshot │ │ │ │ │ │ ├── _cot_fewshot_template_yaml │ │ │ │ │ │ ├── boolean_expressions.yaml │ │ │ │ │ │ ├── causal_judgement.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── formal_fallacies.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── logical_deduction_five_objects.yaml │ │ │ │ │ │ ├── logical_deduction_seven_objects.yaml │ │ │ │ │ │ ├── logical_deduction_three_objects.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── multistep_arithmetic_two.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_five_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_seven_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_three_objects.yaml │ │ │ │ │ │ ├── web_of_lies.yaml │ │ │ │ │ │ └── word_sorting.yaml │ │ │ │ │ ├── cot_zeroshot │ │ │ │ │ │ ├── _cot_zeroshot_template_yaml │ │ │ │ │ │ ├── boolean_expressions.yaml │ │ │ │ │ │ ├── causal_judgement.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── formal_fallacies.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── logical_deduction_five_objects.yaml │ │ │ │ │ │ ├── logical_deduction_seven_objects.yaml │ │ │ │ │ │ ├── logical_deduction_three_objects.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── multistep_arithmetic_two.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_five_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_seven_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_three_objects.yaml │ │ │ │ │ │ ├── utils.py │ │ │ │ │ │ ├── web_of_lies.yaml │ │ │ │ │ │ └── word_sorting.yaml │ │ │ │ │ ├── fewshot │ │ │ │ │ │ ├── _fewshot_template_yaml │ │ │ │ │ │ ├── boolean_expressions.yaml │ │ │ │ │ │ ├── causal_judgement.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── formal_fallacies.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── logical_deduction_five_objects.yaml │ │ │ │ │ │ ├── logical_deduction_seven_objects.yaml │ │ │ │ │ │ ├── logical_deduction_three_objects.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── multistep_arithmetic_two.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_five_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_seven_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_three_objects.yaml │ │ │ │ │ │ ├── web_of_lies.yaml │ │ │ │ │ │ └── word_sorting.yaml │ │ │ │ │ └── zeroshot │ │ │ │ │ │ ├── _zeroshot_template_yaml │ │ │ │ │ │ ├── boolean_expressions.yaml │ │ │ │ │ │ ├── causal_judgement.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── formal_fallacies.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── logical_deduction_five_objects.yaml │ │ │ │ │ │ ├── logical_deduction_seven_objects.yaml │ │ │ │ │ │ ├── logical_deduction_three_objects.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── multistep_arithmetic_two.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_five_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_seven_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_three_objects.yaml │ │ │ │ │ │ ├── utils.py │ │ │ │ │ │ ├── web_of_lies.yaml │ │ │ │ │ │ └── word_sorting.yaml │ │ │ │ ├── belebele │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── belebele_acm_Arab.yaml │ │ │ │ │ ├── belebele_afr_Latn.yaml │ │ │ │ │ ├── belebele_als_Latn.yaml │ │ │ │ │ ├── belebele_amh_Ethi.yaml │ │ │ │ │ ├── belebele_apc_Arab.yaml │ │ │ │ │ ├── belebele_arb_Arab.yaml │ │ │ │ │ ├── belebele_arb_Latn.yaml │ │ │ │ │ ├── belebele_ars_Arab.yaml │ │ │ │ │ ├── belebele_ary_Arab.yaml │ │ │ │ │ ├── belebele_arz_Arab.yaml │ │ │ │ │ ├── belebele_asm_Beng.yaml │ │ │ │ │ ├── belebele_azj_Latn.yaml │ │ │ │ │ ├── belebele_bam_Latn.yaml │ │ │ │ │ ├── belebele_ben_Beng.yaml │ │ │ │ │ ├── belebele_ben_Latn.yaml │ │ │ │ │ ├── belebele_bod_Tibt.yaml │ │ │ │ │ ├── belebele_bul_Cyrl.yaml │ │ │ │ │ ├── belebele_cat_Latn.yaml │ │ │ │ │ ├── belebele_ceb_Latn.yaml │ │ │ │ │ ├── belebele_ces_Latn.yaml │ │ │ │ │ ├── belebele_ckb_Arab.yaml │ │ │ │ │ ├── belebele_dan_Latn.yaml │ │ │ │ │ ├── belebele_deu_Latn.yaml │ │ │ │ │ ├── belebele_ell_Grek.yaml │ │ │ │ │ ├── belebele_eng_Latn.yaml │ │ │ │ │ ├── belebele_est_Latn.yaml │ │ │ │ │ ├── belebele_eus_Latn.yaml │ │ │ │ │ ├── belebele_fin_Latn.yaml │ │ │ │ │ ├── belebele_fra_Latn.yaml │ │ │ │ │ ├── belebele_fuv_Latn.yaml │ │ │ │ │ ├── belebele_gaz_Latn.yaml │ │ │ │ │ ├── belebele_grn_Latn.yaml │ │ │ │ │ ├── belebele_guj_Gujr.yaml │ │ │ │ │ ├── belebele_hat_Latn.yaml │ │ │ │ │ ├── belebele_hau_Latn.yaml │ │ │ │ │ ├── belebele_heb_Hebr.yaml │ │ │ │ │ ├── belebele_hin_Deva.yaml │ │ │ │ │ ├── belebele_hin_Latn.yaml │ │ │ │ │ ├── belebele_hrv_Latn.yaml │ │ │ │ │ ├── belebele_hun_Latn.yaml │ │ │ │ │ ├── belebele_hye_Armn.yaml │ │ │ │ │ ├── belebele_ibo_Latn.yaml │ │ │ │ │ ├── belebele_ilo_Latn.yaml │ │ │ │ │ ├── belebele_ind_Latn.yaml │ │ │ │ │ ├── belebele_isl_Latn.yaml │ │ │ │ │ ├── belebele_ita_Latn.yaml │ │ │ │ │ ├── belebele_jav_Latn.yaml │ │ │ │ │ ├── belebele_jpn_Jpan.yaml │ │ │ │ │ ├── belebele_kac_Latn.yaml │ │ │ │ │ ├── belebele_kan_Knda.yaml │ │ │ │ │ ├── belebele_kat_Geor.yaml │ │ │ │ │ ├── belebele_kaz_Cyrl.yaml │ │ │ │ │ ├── belebele_kea_Latn.yaml │ │ │ │ │ ├── belebele_khk_Cyrl.yaml │ │ │ │ │ ├── belebele_khm_Khmr.yaml │ │ │ │ │ ├── belebele_kin_Latn.yaml │ │ │ │ │ ├── belebele_kir_Cyrl.yaml │ │ │ │ │ ├── belebele_kor_Hang.yaml │ │ │ │ │ ├── belebele_lao_Laoo.yaml │ │ │ │ │ ├── belebele_lin_Latn.yaml │ │ │ │ │ ├── belebele_lit_Latn.yaml │ │ │ │ │ ├── belebele_lug_Latn.yaml │ │ │ │ │ ├── belebele_luo_Latn.yaml │ │ │ │ │ ├── belebele_lvs_Latn.yaml │ │ │ │ │ ├── belebele_mal_Mlym.yaml │ │ │ │ │ ├── belebele_mar_Deva.yaml │ │ │ │ │ ├── belebele_mkd_Cyrl.yaml │ │ │ │ │ ├── belebele_mlt_Latn.yaml │ │ │ │ │ ├── belebele_mri_Latn.yaml │ │ │ │ │ ├── belebele_mya_Mymr.yaml │ │ │ │ │ ├── belebele_nld_Latn.yaml │ │ │ │ │ ├── belebele_nob_Latn.yaml │ │ │ │ │ ├── belebele_npi_Deva.yaml │ │ │ │ │ ├── belebele_npi_Latn.yaml │ │ │ │ │ ├── belebele_nso_Latn.yaml │ │ │ │ │ ├── belebele_nya_Latn.yaml │ │ │ │ │ ├── belebele_ory_Orya.yaml │ │ │ │ │ ├── belebele_pan_Guru.yaml │ │ │ │ │ ├── belebele_pbt_Arab.yaml │ │ │ │ │ ├── belebele_pes_Arab.yaml │ │ │ │ │ ├── belebele_plt_Latn.yaml │ │ │ │ │ ├── belebele_pol_Latn.yaml │ │ │ │ │ ├── belebele_por_Latn.yaml │ │ │ │ │ ├── belebele_ron_Latn.yaml │ │ │ │ │ ├── belebele_rus_Cyrl.yaml │ │ │ │ │ ├── belebele_shn_Mymr.yaml │ │ │ │ │ ├── belebele_sin_Latn.yaml │ │ │ │ │ ├── belebele_sin_Sinh.yaml │ │ │ │ │ ├── belebele_slk_Latn.yaml │ │ │ │ │ ├── belebele_slv_Latn.yaml │ │ │ │ │ ├── belebele_sna_Latn.yaml │ │ │ │ │ ├── belebele_snd_Arab.yaml │ │ │ │ │ ├── belebele_som_Latn.yaml │ │ │ │ │ ├── belebele_sot_Latn.yaml │ │ │ │ │ ├── belebele_spa_Latn.yaml │ │ │ │ │ ├── belebele_srp_Cyrl.yaml │ │ │ │ │ ├── belebele_ssw_Latn.yaml │ │ │ │ │ ├── belebele_sun_Latn.yaml │ │ │ │ │ ├── belebele_swe_Latn.yaml │ │ │ │ │ ├── belebele_swh_Latn.yaml │ │ │ │ │ ├── belebele_tam_Taml.yaml │ │ │ │ │ ├── belebele_tel_Telu.yaml │ │ │ │ │ ├── belebele_tgk_Cyrl.yaml │ │ │ │ │ ├── belebele_tgl_Latn.yaml │ │ │ │ │ ├── belebele_tha_Thai.yaml │ │ │ │ │ ├── belebele_tir_Ethi.yaml │ │ │ │ │ ├── belebele_tsn_Latn.yaml │ │ │ │ │ ├── belebele_tso_Latn.yaml │ │ │ │ │ ├── belebele_tur_Latn.yaml │ │ │ │ │ ├── belebele_ukr_Cyrl.yaml │ │ │ │ │ ├── belebele_urd_Arab.yaml │ │ │ │ │ ├── belebele_urd_Latn.yaml │ │ │ │ │ ├── belebele_uzn_Latn.yaml │ │ │ │ │ ├── belebele_vie_Latn.yaml │ │ │ │ │ ├── belebele_war_Latn.yaml │ │ │ │ │ ├── belebele_wol_Latn.yaml │ │ │ │ │ ├── belebele_xho_Latn.yaml │ │ │ │ │ ├── belebele_yor_Latn.yaml │ │ │ │ │ ├── belebele_zho_Hans.yaml │ │ │ │ │ ├── belebele_zho_Hant.yaml │ │ │ │ │ ├── belebele_zsm_Latn.yaml │ │ │ │ │ └── belebele_zul_Latn.yaml │ │ │ │ ├── benchmarks │ │ │ │ │ ├── flan │ │ │ │ │ │ ├── _held_in_template_yaml │ │ │ │ │ │ ├── flan_held_in.yaml │ │ │ │ │ │ └── flan_held_out.yaml │ │ │ │ │ ├── minerva_math.yaml │ │ │ │ │ ├── multimedqa │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ └── multimedqa.yaml │ │ │ │ │ ├── openllm.yaml │ │ │ │ │ ├── pythia.yaml │ │ │ │ │ └── t0_eval.yaml │ │ │ │ ├── bertaqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _bertaqa_template │ │ │ │ │ ├── bertaqa_en.yaml │ │ │ │ │ ├── bertaqa_en_mt_gemma-7b.yaml │ │ │ │ │ ├── bertaqa_en_mt_hitz.yaml │ │ │ │ │ ├── bertaqa_en_mt_itzuli.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-13b-v1.1.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-13b-v1.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-70b-v1.1.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-70b-v1.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-7b-v1.1.yaml │ │ │ │ │ ├── bertaqa_en_mt_latxa-7b-v1.yaml │ │ │ │ │ ├── bertaqa_en_mt_llama-2-13b.yaml │ │ │ │ │ ├── bertaqa_en_mt_llama-2-70b.yaml │ │ │ │ │ ├── bertaqa_en_mt_llama-2-7b.yaml │ │ │ │ │ ├── bertaqa_en_mt_madlad.yaml │ │ │ │ │ ├── bertaqa_en_mt_nllb.yaml │ │ │ │ │ └── bertaqa_eu.yaml │ │ │ │ ├── bigbench │ │ │ │ │ ├── README.md │ │ │ │ │ ├── generate_tasks.py │ │ │ │ │ ├── generate_until │ │ │ │ │ │ ├── abstract_narrative_understanding.yaml │ │ │ │ │ │ ├── anachronisms.yaml │ │ │ │ │ │ ├── analogical_similarity.yaml │ │ │ │ │ │ ├── analytic_entailment.yaml │ │ │ │ │ │ ├── arithmetic.yaml │ │ │ │ │ │ ├── ascii_word_recognition.yaml │ │ │ │ │ │ ├── authorship_verification.yaml │ │ │ │ │ │ ├── auto_categorization.yaml │ │ │ │ │ │ ├── auto_debugging.yaml │ │ │ │ │ │ ├── bbq_lite_json.yaml │ │ │ │ │ │ ├── bridging_anaphora_resolution_barqa.yaml │ │ │ │ │ │ ├── causal_judgment.yaml │ │ │ │ │ │ ├── cause_and_effect.yaml │ │ │ │ │ │ ├── checkmate_in_one.yaml │ │ │ │ │ │ ├── chess_state_tracking.yaml │ │ │ │ │ │ ├── chinese_remainder_theorem.yaml │ │ │ │ │ │ ├── cifar10_classification.yaml │ │ │ │ │ │ ├── code_line_description.yaml │ │ │ │ │ │ ├── codenames.yaml │ │ │ │ │ │ ├── color.yaml │ │ │ │ │ │ ├── common_morpheme.yaml │ │ │ │ │ │ ├── conceptual_combinations.yaml │ │ │ │ │ │ ├── conlang_translation.yaml │ │ │ │ │ │ ├── contextual_parametric_knowledge_conflicts.yaml │ │ │ │ │ │ ├── crash_blossom.yaml │ │ │ │ │ │ ├── crass_ai.yaml │ │ │ │ │ │ ├── cryobiology_spanish.yaml │ │ │ │ │ │ ├── cryptonite.yaml │ │ │ │ │ │ ├── cs_algorithms.yaml │ │ │ │ │ │ ├── dark_humor_detection.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── discourse_marker_prediction.yaml │ │ │ │ │ │ ├── disfl_qa.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── elementary_math_qa.yaml │ │ │ │ │ │ ├── emoji_movie.yaml │ │ │ │ │ │ ├── emojis_emotion_prediction.yaml │ │ │ │ │ │ ├── empirical_judgments.yaml │ │ │ │ │ │ ├── english_proverbs.yaml │ │ │ │ │ │ ├── english_russian_proverbs.yaml │ │ │ │ │ │ ├── entailed_polarity.yaml │ │ │ │ │ │ ├── entailed_polarity_hindi.yaml │ │ │ │ │ │ ├── epistemic_reasoning.yaml │ │ │ │ │ │ ├── evaluating_information_essentiality.yaml │ │ │ │ │ │ ├── fact_checker.yaml │ │ │ │ │ │ ├── fantasy_reasoning.yaml │ │ │ │ │ │ ├── few_shot_nlg.yaml │ │ │ │ │ │ ├── figure_of_speech_detection.yaml │ │ │ │ │ │ ├── formal_fallacies_syllogisms_negation.yaml │ │ │ │ │ │ ├── gem.yaml │ │ │ │ │ │ ├── gender_inclusive_sentences_german.yaml │ │ │ │ │ │ ├── general_knowledge.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── goal_step_wikihow.yaml │ │ │ │ │ │ ├── gre_reading_comprehension.yaml │ │ │ │ │ │ ├── hhh_alignment.yaml │ │ │ │ │ │ ├── hindi_question_answering.yaml │ │ │ │ │ │ ├── hindu_knowledge.yaml │ │ │ │ │ │ ├── hinglish_toxicity.yaml │ │ │ │ │ │ ├── human_organs_senses.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── identify_math_theorems.yaml │ │ │ │ │ │ ├── identify_odd_metaphor.yaml │ │ │ │ │ │ ├── implicatures.yaml │ │ │ │ │ │ ├── implicit_relations.yaml │ │ │ │ │ │ ├── intent_recognition.yaml │ │ │ │ │ │ ├── international_phonetic_alphabet_nli.yaml │ │ │ │ │ │ ├── international_phonetic_alphabet_transliterate.yaml │ │ │ │ │ │ ├── intersect_geometry.yaml │ │ │ │ │ │ ├── irony_identification.yaml │ │ │ │ │ │ ├── kanji_ascii.yaml │ │ │ │ │ │ ├── kannada.yaml │ │ │ │ │ │ ├── key_value_maps.yaml │ │ │ │ │ │ ├── known_unknowns.yaml │ │ │ │ │ │ ├── language_games.yaml │ │ │ │ │ │ ├── language_identification.yaml │ │ │ │ │ │ ├── linguistic_mappings.yaml │ │ │ │ │ │ ├── linguistics_puzzles.yaml │ │ │ │ │ │ ├── list_functions.yaml │ │ │ │ │ │ ├── logic_grid_puzzle.yaml │ │ │ │ │ │ ├── logical_args.yaml │ │ │ │ │ │ ├── logical_deduction.yaml │ │ │ │ │ │ ├── logical_fallacy_detection.yaml │ │ │ │ │ │ ├── logical_sequence.yaml │ │ │ │ │ │ ├── mathematical_induction.yaml │ │ │ │ │ │ ├── matrixshapes.yaml │ │ │ │ │ │ ├── metaphor_boolean.yaml │ │ │ │ │ │ ├── metaphor_understanding.yaml │ │ │ │ │ │ ├── minute_mysteries_qa.yaml │ │ │ │ │ │ ├── misconceptions.yaml │ │ │ │ │ │ ├── misconceptions_russian.yaml │ │ │ │ │ │ ├── mnist_ascii.yaml │ │ │ │ │ │ ├── modified_arithmetic.yaml │ │ │ │ │ │ ├── moral_permissibility.yaml │ │ │ │ │ │ ├── movie_dialog_same_or_different.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── mult_data_wrangling.yaml │ │ │ │ │ │ ├── multiemo.yaml │ │ │ │ │ │ ├── natural_instructions.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── nonsense_words_grammar.yaml │ │ │ │ │ │ ├── novel_concepts.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── odd_one_out.yaml │ │ │ │ │ │ ├── operators.yaml │ │ │ │ │ │ ├── paragraph_segmentation.yaml │ │ │ │ │ │ ├── parsinlu_qa.yaml │ │ │ │ │ │ ├── parsinlu_reading_comprehension.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── periodic_elements.yaml │ │ │ │ │ │ ├── persian_idioms.yaml │ │ │ │ │ │ ├── phrase_relatedness.yaml │ │ │ │ │ │ ├── physical_intuition.yaml │ │ │ │ │ │ ├── physics.yaml │ │ │ │ │ │ ├── physics_questions.yaml │ │ │ │ │ │ ├── play_dialog_same_or_different.yaml │ │ │ │ │ │ ├── polish_sequence_labeling.yaml │ │ │ │ │ │ ├── presuppositions_as_nli.yaml │ │ │ │ │ │ ├── qa_wikidata.yaml │ │ │ │ │ │ ├── question_selection.yaml │ │ │ │ │ │ ├── real_or_fake_text.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── repeat_copy_logic.yaml │ │ │ │ │ │ ├── rephrase.yaml │ │ │ │ │ │ ├── riddle_sense.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── scientific_press_release.yaml │ │ │ │ │ │ ├── semantic_parsing_in_context_sparc.yaml │ │ │ │ │ │ ├── semantic_parsing_spider.yaml │ │ │ │ │ │ ├── sentence_ambiguity.yaml │ │ │ │ │ │ ├── similarities_abstraction.yaml │ │ │ │ │ │ ├── simp_turing_concept.yaml │ │ │ │ │ │ ├── simple_arithmetic_json.yaml │ │ │ │ │ │ ├── simple_arithmetic_json_multiple_choice.yaml │ │ │ │ │ │ ├── simple_arithmetic_json_subtasks.yaml │ │ │ │ │ │ ├── simple_arithmetic_multiple_targets_json.yaml │ │ │ │ │ │ ├── simple_ethical_questions.yaml │ │ │ │ │ │ ├── simple_text_editing.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── social_iqa.yaml │ │ │ │ │ │ ├── social_support.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── strange_stories.yaml │ │ │ │ │ │ ├── strategyqa.yaml │ │ │ │ │ │ ├── sufficient_information.yaml │ │ │ │ │ │ ├── suicide_risk.yaml │ │ │ │ │ │ ├── swahili_english_proverbs.yaml │ │ │ │ │ │ ├── swedish_to_german_proverbs.yaml │ │ │ │ │ │ ├── symbol_interpretation.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tense.yaml │ │ │ │ │ │ ├── timedial.yaml │ │ │ │ │ │ ├── topical_chat.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects.yaml │ │ │ │ │ │ ├── understanding_fables.yaml │ │ │ │ │ │ ├── undo_permutation.yaml │ │ │ │ │ │ ├── unit_conversion.yaml │ │ │ │ │ │ ├── unit_interpretation.yaml │ │ │ │ │ │ ├── unnatural_in_context_learning.yaml │ │ │ │ │ │ ├── vitaminc_fact_verification.yaml │ │ │ │ │ │ ├── what_is_the_tao.yaml │ │ │ │ │ │ ├── which_wiki_edit.yaml │ │ │ │ │ │ ├── winowhy.yaml │ │ │ │ │ │ ├── word_sorting.yaml │ │ │ │ │ │ └── word_unscrambling.yaml │ │ │ │ │ ├── generate_until_template_yaml │ │ │ │ │ ├── multiple_choice │ │ │ │ │ │ ├── abstract_narrative_understanding.yaml │ │ │ │ │ │ ├── anachronisms.yaml │ │ │ │ │ │ ├── analogical_similarity.yaml │ │ │ │ │ │ ├── analytic_entailment.yaml │ │ │ │ │ │ ├── arithmetic.yaml │ │ │ │ │ │ ├── authorship_verification.yaml │ │ │ │ │ │ ├── bbq_lite_json.yaml │ │ │ │ │ │ ├── causal_judgment.yaml │ │ │ │ │ │ ├── cause_and_effect.yaml │ │ │ │ │ │ ├── checkmate_in_one.yaml │ │ │ │ │ │ ├── cifar10_classification.yaml │ │ │ │ │ │ ├── code_line_description.yaml │ │ │ │ │ │ ├── color.yaml │ │ │ │ │ │ ├── common_morpheme.yaml │ │ │ │ │ │ ├── conceptual_combinations.yaml │ │ │ │ │ │ ├── contextual_parametric_knowledge_conflicts.yaml │ │ │ │ │ │ ├── crash_blossom.yaml │ │ │ │ │ │ ├── crass_ai.yaml │ │ │ │ │ │ ├── cryobiology_spanish.yaml │ │ │ │ │ │ ├── cs_algorithms.yaml │ │ │ │ │ │ ├── dark_humor_detection.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── discourse_marker_prediction.yaml │ │ │ │ │ │ ├── dyck_languages.yaml │ │ │ │ │ │ ├── elementary_math_qa.yaml │ │ │ │ │ │ ├── emoji_movie.yaml │ │ │ │ │ │ ├── emojis_emotion_prediction.yaml │ │ │ │ │ │ ├── empirical_judgments.yaml │ │ │ │ │ │ ├── english_proverbs.yaml │ │ │ │ │ │ ├── english_russian_proverbs.yaml │ │ │ │ │ │ ├── entailed_polarity.yaml │ │ │ │ │ │ ├── entailed_polarity_hindi.yaml │ │ │ │ │ │ ├── epistemic_reasoning.yaml │ │ │ │ │ │ ├── evaluating_information_essentiality.yaml │ │ │ │ │ │ ├── fact_checker.yaml │ │ │ │ │ │ ├── fantasy_reasoning.yaml │ │ │ │ │ │ ├── figure_of_speech_detection.yaml │ │ │ │ │ │ ├── formal_fallacies_syllogisms_negation.yaml │ │ │ │ │ │ ├── general_knowledge.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── goal_step_wikihow.yaml │ │ │ │ │ │ ├── gre_reading_comprehension.yaml │ │ │ │ │ │ ├── hhh_alignment.yaml │ │ │ │ │ │ ├── hindu_knowledge.yaml │ │ │ │ │ │ ├── hinglish_toxicity.yaml │ │ │ │ │ │ ├── human_organs_senses.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── identify_math_theorems.yaml │ │ │ │ │ │ ├── identify_odd_metaphor.yaml │ │ │ │ │ │ ├── implicatures.yaml │ │ │ │ │ │ ├── implicit_relations.yaml │ │ │ │ │ │ ├── intent_recognition.yaml │ │ │ │ │ │ ├── international_phonetic_alphabet_nli.yaml │ │ │ │ │ │ ├── intersect_geometry.yaml │ │ │ │ │ │ ├── irony_identification.yaml │ │ │ │ │ │ ├── kanji_ascii.yaml │ │ │ │ │ │ ├── kannada.yaml │ │ │ │ │ │ ├── key_value_maps.yaml │ │ │ │ │ │ ├── known_unknowns.yaml │ │ │ │ │ │ ├── language_identification.yaml │ │ │ │ │ │ ├── logic_grid_puzzle.yaml │ │ │ │ │ │ ├── logical_args.yaml │ │ │ │ │ │ ├── logical_deduction.yaml │ │ │ │ │ │ ├── logical_fallacy_detection.yaml │ │ │ │ │ │ ├── logical_sequence.yaml │ │ │ │ │ │ ├── mathematical_induction.yaml │ │ │ │ │ │ ├── metaphor_boolean.yaml │ │ │ │ │ │ ├── metaphor_understanding.yaml │ │ │ │ │ │ ├── misconceptions.yaml │ │ │ │ │ │ ├── misconceptions_russian.yaml │ │ │ │ │ │ ├── mnist_ascii.yaml │ │ │ │ │ │ ├── moral_permissibility.yaml │ │ │ │ │ │ ├── movie_dialog_same_or_different.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── multiemo.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── nonsense_words_grammar.yaml │ │ │ │ │ │ ├── novel_concepts.yaml │ │ │ │ │ │ ├── odd_one_out.yaml │ │ │ │ │ │ ├── parsinlu_qa.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── periodic_elements.yaml │ │ │ │ │ │ ├── persian_idioms.yaml │ │ │ │ │ │ ├── phrase_relatedness.yaml │ │ │ │ │ │ ├── physical_intuition.yaml │ │ │ │ │ │ ├── physics.yaml │ │ │ │ │ │ ├── play_dialog_same_or_different.yaml │ │ │ │ │ │ ├── presuppositions_as_nli.yaml │ │ │ │ │ │ ├── question_selection.yaml │ │ │ │ │ │ ├── real_or_fake_text.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── riddle_sense.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── sentence_ambiguity.yaml │ │ │ │ │ │ ├── similarities_abstraction.yaml │ │ │ │ │ │ ├── simple_ethical_questions.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── social_iqa.yaml │ │ │ │ │ │ ├── social_support.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── strange_stories.yaml │ │ │ │ │ │ ├── strategyqa.yaml │ │ │ │ │ │ ├── suicide_risk.yaml │ │ │ │ │ │ ├── swahili_english_proverbs.yaml │ │ │ │ │ │ ├── swedish_to_german_proverbs.yaml │ │ │ │ │ │ ├── symbol_interpretation.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── timedial.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects.yaml │ │ │ │ │ │ ├── understanding_fables.yaml │ │ │ │ │ │ ├── undo_permutation.yaml │ │ │ │ │ │ ├── unit_conversion.yaml │ │ │ │ │ │ ├── unit_interpretation.yaml │ │ │ │ │ │ ├── vitaminc_fact_verification.yaml │ │ │ │ │ │ ├── what_is_the_tao.yaml │ │ │ │ │ │ ├── which_wiki_edit.yaml │ │ │ │ │ │ └── winowhy.yaml │ │ │ │ │ ├── multiple_choice_template_a_yaml │ │ │ │ │ ├── multiple_choice_template_b_yaml │ │ │ │ │ └── push_bigbench_dataset.py │ │ │ │ ├── blimp │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _template_yaml │ │ │ │ │ ├── adjunct_island.yaml │ │ │ │ │ ├── anaphor_gender_agreement.yaml │ │ │ │ │ ├── anaphor_number_agreement.yaml │ │ │ │ │ ├── animate_subject_passive.yaml │ │ │ │ │ ├── animate_subject_trans.yaml │ │ │ │ │ ├── causative.yaml │ │ │ │ │ ├── complex_NP_island.yaml │ │ │ │ │ ├── coordinate_structure_constraint_complex_left_branch.yaml │ │ │ │ │ ├── coordinate_structure_constraint_object_extraction.yaml │ │ │ │ │ ├── determiner_noun_agreement_1.yaml │ │ │ │ │ ├── determiner_noun_agreement_2.yaml │ │ │ │ │ ├── determiner_noun_agreement_irregular_1.yaml │ │ │ │ │ ├── determiner_noun_agreement_irregular_2.yaml │ │ │ │ │ ├── determiner_noun_agreement_with_adj_2.yaml │ │ │ │ │ ├── determiner_noun_agreement_with_adj_irregular_1.yaml │ │ │ │ │ ├── determiner_noun_agreement_with_adj_irregular_2.yaml │ │ │ │ │ ├── determiner_noun_agreement_with_adjective_1.yaml │ │ │ │ │ ├── distractor_agreement_relational_noun.yaml │ │ │ │ │ ├── distractor_agreement_relative_clause.yaml │ │ │ │ │ ├── drop_argument.yaml │ │ │ │ │ ├── ellipsis_n_bar_1.yaml │ │ │ │ │ ├── ellipsis_n_bar_2.yaml │ │ │ │ │ ├── existential_there_object_raising.yaml │ │ │ │ │ ├── existential_there_quantifiers_1.yaml │ │ │ │ │ ├── existential_there_quantifiers_2.yaml │ │ │ │ │ ├── existential_there_subject_raising.yaml │ │ │ │ │ ├── expletive_it_object_raising.yaml │ │ │ │ │ ├── generate_configs.py │ │ │ │ │ ├── inchoative.yaml │ │ │ │ │ ├── intransitive.yaml │ │ │ │ │ ├── irregular_past_participle_adjectives.yaml │ │ │ │ │ ├── irregular_past_participle_verbs.yaml │ │ │ │ │ ├── irregular_plural_subject_verb_agreement_1.yaml │ │ │ │ │ ├── irregular_plural_subject_verb_agreement_2.yaml │ │ │ │ │ ├── left_branch_island_echo_question.yaml │ │ │ │ │ ├── left_branch_island_simple_question.yaml │ │ │ │ │ ├── matrix_question_npi_licensor_present.yaml │ │ │ │ │ ├── npi_present_1.yaml │ │ │ │ │ ├── npi_present_2.yaml │ │ │ │ │ ├── only_npi_licensor_present.yaml │ │ │ │ │ ├── only_npi_scope.yaml │ │ │ │ │ ├── passive_1.yaml │ │ │ │ │ ├── passive_2.yaml │ │ │ │ │ ├── principle_A_c_command.yaml │ │ │ │ │ ├── principle_A_case_1.yaml │ │ │ │ │ ├── principle_A_case_2.yaml │ │ │ │ │ ├── principle_A_domain_1.yaml │ │ │ │ │ ├── principle_A_domain_2.yaml │ │ │ │ │ ├── principle_A_domain_3.yaml │ │ │ │ │ ├── principle_A_reconstruction.yaml │ │ │ │ │ ├── regular_plural_subject_verb_agreement_1.yaml │ │ │ │ │ ├── regular_plural_subject_verb_agreement_2.yaml │ │ │ │ │ ├── sentential_negation_npi_licensor_present.yaml │ │ │ │ │ ├── sentential_negation_npi_scope.yaml │ │ │ │ │ ├── sentential_subject_island.yaml │ │ │ │ │ ├── superlative_quantifiers_1.yaml │ │ │ │ │ ├── superlative_quantifiers_2.yaml │ │ │ │ │ ├── tough_vs_raising_1.yaml │ │ │ │ │ ├── tough_vs_raising_2.yaml │ │ │ │ │ ├── transitive.yaml │ │ │ │ │ ├── wh_island.yaml │ │ │ │ │ ├── wh_questions_object_gap.yaml │ │ │ │ │ ├── wh_questions_subject_gap.yaml │ │ │ │ │ ├── wh_questions_subject_gap_long_distance.yaml │ │ │ │ │ ├── wh_vs_that_no_gap.yaml │ │ │ │ │ ├── wh_vs_that_no_gap_long_distance.yaml │ │ │ │ │ ├── wh_vs_that_with_gap.yaml │ │ │ │ │ └── wh_vs_that_with_gap_long_distance.yaml │ │ │ │ ├── ceval │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_ceval_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── ceval-valid_accountant.yaml │ │ │ │ │ ├── ceval-valid_advanced_mathematics.yaml │ │ │ │ │ ├── ceval-valid_art_studies.yaml │ │ │ │ │ ├── ceval-valid_basic_medicine.yaml │ │ │ │ │ ├── ceval-valid_business_administration.yaml │ │ │ │ │ ├── ceval-valid_chinese_language_and_literature.yaml │ │ │ │ │ ├── ceval-valid_civil_servant.yaml │ │ │ │ │ ├── ceval-valid_clinical_medicine.yaml │ │ │ │ │ ├── ceval-valid_college_chemistry.yaml │ │ │ │ │ ├── ceval-valid_college_economics.yaml │ │ │ │ │ ├── ceval-valid_college_physics.yaml │ │ │ │ │ ├── ceval-valid_college_programming.yaml │ │ │ │ │ ├── ceval-valid_computer_architecture.yaml │ │ │ │ │ ├── ceval-valid_computer_network.yaml │ │ │ │ │ ├── ceval-valid_discrete_mathematics.yaml │ │ │ │ │ ├── ceval-valid_education_science.yaml │ │ │ │ │ ├── ceval-valid_electrical_engineer.yaml │ │ │ │ │ ├── ceval-valid_environmental_impact_assessment_engineer.yaml │ │ │ │ │ ├── ceval-valid_fire_engineer.yaml │ │ │ │ │ ├── ceval-valid_high_school_biology.yaml │ │ │ │ │ ├── ceval-valid_high_school_chemistry.yaml │ │ │ │ │ ├── ceval-valid_high_school_chinese.yaml │ │ │ │ │ ├── ceval-valid_high_school_geography.yaml │ │ │ │ │ ├── ceval-valid_high_school_history.yaml │ │ │ │ │ ├── ceval-valid_high_school_mathematics.yaml │ │ │ │ │ ├── ceval-valid_high_school_physics.yaml │ │ │ │ │ ├── ceval-valid_high_school_politics.yaml │ │ │ │ │ ├── ceval-valid_ideological_and_moral_cultivation.yaml │ │ │ │ │ ├── ceval-valid_law.yaml │ │ │ │ │ ├── ceval-valid_legal_professional.yaml │ │ │ │ │ ├── ceval-valid_logic.yaml │ │ │ │ │ ├── ceval-valid_mao_zedong_thought.yaml │ │ │ │ │ ├── ceval-valid_marxism.yaml │ │ │ │ │ ├── ceval-valid_metrology_engineer.yaml │ │ │ │ │ ├── ceval-valid_middle_school_biology.yaml │ │ │ │ │ ├── ceval-valid_middle_school_chemistry.yaml │ │ │ │ │ ├── ceval-valid_middle_school_geography.yaml │ │ │ │ │ ├── ceval-valid_middle_school_history.yaml │ │ │ │ │ ├── ceval-valid_middle_school_mathematics.yaml │ │ │ │ │ ├── ceval-valid_middle_school_physics.yaml │ │ │ │ │ ├── ceval-valid_middle_school_politics.yaml │ │ │ │ │ ├── ceval-valid_modern_chinese_history.yaml │ │ │ │ │ ├── ceval-valid_operating_system.yaml │ │ │ │ │ ├── ceval-valid_physician.yaml │ │ │ │ │ ├── ceval-valid_plant_protection.yaml │ │ │ │ │ ├── ceval-valid_probability_and_statistics.yaml │ │ │ │ │ ├── ceval-valid_professional_tour_guide.yaml │ │ │ │ │ ├── ceval-valid_sports_science.yaml │ │ │ │ │ ├── ceval-valid_tax_accountant.yaml │ │ │ │ │ ├── ceval-valid_teacher_qualification.yaml │ │ │ │ │ ├── ceval-valid_urban_and_rural_planner.yaml │ │ │ │ │ └── ceval-valid_veterinary_medicine.yaml │ │ │ │ ├── cmmlu │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── cmmlu_default_agronomy.yaml │ │ │ │ │ ├── cmmlu_default_anatomy.yaml │ │ │ │ │ ├── cmmlu_default_ancient_chinese.yaml │ │ │ │ │ ├── cmmlu_default_arts.yaml │ │ │ │ │ ├── cmmlu_default_astronomy.yaml │ │ │ │ │ ├── cmmlu_default_business_ethics.yaml │ │ │ │ │ ├── cmmlu_default_chinese_civil_service_exam.yaml │ │ │ │ │ ├── cmmlu_default_chinese_driving_rule.yaml │ │ │ │ │ ├── cmmlu_default_chinese_food_culture.yaml │ │ │ │ │ ├── cmmlu_default_chinese_foreign_policy.yaml │ │ │ │ │ ├── cmmlu_default_chinese_history.yaml │ │ │ │ │ ├── cmmlu_default_chinese_literature.yaml │ │ │ │ │ ├── cmmlu_default_chinese_teacher_qualification.yaml │ │ │ │ │ ├── cmmlu_default_clinical_knowledge.yaml │ │ │ │ │ ├── cmmlu_default_college_actuarial_science.yaml │ │ │ │ │ ├── cmmlu_default_college_education.yaml │ │ │ │ │ ├── cmmlu_default_college_engineering_hydrology.yaml │ │ │ │ │ ├── cmmlu_default_college_law.yaml │ │ │ │ │ ├── cmmlu_default_college_mathematics.yaml │ │ │ │ │ ├── cmmlu_default_college_medical_statistics.yaml │ │ │ │ │ ├── cmmlu_default_college_medicine.yaml │ │ │ │ │ ├── cmmlu_default_computer_science.yaml │ │ │ │ │ ├── cmmlu_default_computer_security.yaml │ │ │ │ │ ├── cmmlu_default_conceptual_physics.yaml │ │ │ │ │ ├── cmmlu_default_construction_project_management.yaml │ │ │ │ │ ├── cmmlu_default_economics.yaml │ │ │ │ │ ├── cmmlu_default_education.yaml │ │ │ │ │ ├── cmmlu_default_electrical_engineering.yaml │ │ │ │ │ ├── cmmlu_default_elementary_chinese.yaml │ │ │ │ │ ├── cmmlu_default_elementary_commonsense.yaml │ │ │ │ │ ├── cmmlu_default_elementary_information_and_technology.yaml │ │ │ │ │ ├── cmmlu_default_elementary_mathematics.yaml │ │ │ │ │ ├── cmmlu_default_ethnology.yaml │ │ │ │ │ ├── cmmlu_default_food_science.yaml │ │ │ │ │ ├── cmmlu_default_genetics.yaml │ │ │ │ │ ├── cmmlu_default_global_facts.yaml │ │ │ │ │ ├── cmmlu_default_high_school_biology.yaml │ │ │ │ │ ├── cmmlu_default_high_school_chemistry.yaml │ │ │ │ │ ├── cmmlu_default_high_school_geography.yaml │ │ │ │ │ ├── cmmlu_default_high_school_mathematics.yaml │ │ │ │ │ ├── cmmlu_default_high_school_physics.yaml │ │ │ │ │ ├── cmmlu_default_high_school_politics.yaml │ │ │ │ │ ├── cmmlu_default_human_sexuality.yaml │ │ │ │ │ ├── cmmlu_default_international_law.yaml │ │ │ │ │ ├── cmmlu_default_journalism.yaml │ │ │ │ │ ├── cmmlu_default_jurisprudence.yaml │ │ │ │ │ ├── cmmlu_default_legal_and_moral_basis.yaml │ │ │ │ │ ├── cmmlu_default_logical.yaml │ │ │ │ │ ├── cmmlu_default_machine_learning.yaml │ │ │ │ │ ├── cmmlu_default_management.yaml │ │ │ │ │ ├── cmmlu_default_marketing.yaml │ │ │ │ │ ├── cmmlu_default_marxist_theory.yaml │ │ │ │ │ ├── cmmlu_default_modern_chinese.yaml │ │ │ │ │ ├── cmmlu_default_nutrition.yaml │ │ │ │ │ ├── cmmlu_default_philosophy.yaml │ │ │ │ │ ├── cmmlu_default_professional_accounting.yaml │ │ │ │ │ ├── cmmlu_default_professional_law.yaml │ │ │ │ │ ├── cmmlu_default_professional_medicine.yaml │ │ │ │ │ ├── cmmlu_default_professional_psychology.yaml │ │ │ │ │ ├── cmmlu_default_public_relations.yaml │ │ │ │ │ ├── cmmlu_default_security_study.yaml │ │ │ │ │ ├── cmmlu_default_sociology.yaml │ │ │ │ │ ├── cmmlu_default_sports_science.yaml │ │ │ │ │ ├── cmmlu_default_traditional_chinese_medicine.yaml │ │ │ │ │ ├── cmmlu_default_virology.yaml │ │ │ │ │ ├── cmmlu_default_world_history.yaml │ │ │ │ │ └── cmmlu_default_world_religions.yaml │ │ │ │ ├── code_x_glue │ │ │ │ │ └── code-text │ │ │ │ │ │ ├── bleu.py │ │ │ │ │ │ ├── go.yaml │ │ │ │ │ │ ├── java.yaml │ │ │ │ │ │ ├── javascript.yaml │ │ │ │ │ │ ├── php.yaml │ │ │ │ │ │ ├── python.yaml │ │ │ │ │ │ ├── ruby.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ ├── commonsense_qa │ │ │ │ │ ├── README.md │ │ │ │ │ └── default.yaml │ │ │ │ ├── copal_id │ │ │ │ │ ├── README.md │ │ │ │ │ ├── colloquial.yaml │ │ │ │ │ ├── standard.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── coqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── crows_pairs │ │ │ │ │ ├── README.md │ │ │ │ │ ├── crows_pairs_english.yaml │ │ │ │ │ ├── crows_pairs_english_age.yaml │ │ │ │ │ ├── crows_pairs_english_autre.yaml │ │ │ │ │ ├── crows_pairs_english_disability.yaml │ │ │ │ │ ├── crows_pairs_english_gender.yaml │ │ │ │ │ ├── crows_pairs_english_nationality.yaml │ │ │ │ │ ├── crows_pairs_english_physical_appearance.yaml │ │ │ │ │ ├── crows_pairs_english_race_color.yaml │ │ │ │ │ ├── crows_pairs_english_religion.yaml │ │ │ │ │ ├── crows_pairs_english_sexual_orientation.yaml │ │ │ │ │ ├── crows_pairs_english_socioeconomic.yaml │ │ │ │ │ ├── crows_pairs_french.yaml │ │ │ │ │ ├── crows_pairs_french_age.yaml │ │ │ │ │ ├── crows_pairs_french_autre.yaml │ │ │ │ │ ├── crows_pairs_french_disability.yaml │ │ │ │ │ ├── crows_pairs_french_gender.yaml │ │ │ │ │ ├── crows_pairs_french_nationality.yaml │ │ │ │ │ ├── crows_pairs_french_physical_appearance.yaml │ │ │ │ │ ├── crows_pairs_french_race_color.yaml │ │ │ │ │ ├── crows_pairs_french_religion.yaml │ │ │ │ │ ├── crows_pairs_french_sexual_orientation.yaml │ │ │ │ │ ├── crows_pairs_french_socioeconomic.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── csatqa │ │ │ │ │ ├── _default_csatqa_yaml │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── csatqa_gr.yaml │ │ │ │ │ ├── csatqa_li.yaml │ │ │ │ │ ├── csatqa_rch.yaml │ │ │ │ │ ├── csatqa_rcs.yaml │ │ │ │ │ ├── csatqa_rcss.yaml │ │ │ │ │ ├── csatqa_wr.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── drop │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── eq_bench │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── eus_exams │ │ │ │ │ ├── README.md │ │ │ │ │ ├── configs.py │ │ │ │ │ ├── eus_exams │ │ │ │ │ ├── eus_exams_es │ │ │ │ │ ├── eus_exams_es_ejadministrativo.yaml │ │ │ │ │ ├── eus_exams_es_ejauxiliar.yaml │ │ │ │ │ ├── eus_exams_es_ejsubalterno.yaml │ │ │ │ │ ├── eus_exams_es_ejtecnico.yaml │ │ │ │ │ ├── eus_exams_es_opeayuntamientovitoria.yaml │ │ │ │ │ ├── eus_exams_es_opebilbao.yaml │ │ │ │ │ ├── eus_exams_es_opeehuadmin.yaml │ │ │ │ │ ├── eus_exams_es_opeehuaux.yaml │ │ │ │ │ ├── eus_exams_es_opeehubiblio.yaml │ │ │ │ │ ├── eus_exams_es_opeehuderecho.yaml │ │ │ │ │ ├── eus_exams_es_opeehueconomicas.yaml │ │ │ │ │ ├── eus_exams_es_opeehuempresariales.yaml │ │ │ │ │ ├── eus_exams_es_opeehusubalterno.yaml │ │ │ │ │ ├── eus_exams_es_opeehutecnico.yaml │ │ │ │ │ ├── eus_exams_es_opeehutecnicob.yaml │ │ │ │ │ ├── eus_exams_es_opeosakiadmin.yaml │ │ │ │ │ ├── eus_exams_es_opeosakiaux.yaml │ │ │ │ │ ├── eus_exams_es_opeosakiauxenf.yaml │ │ │ │ │ ├── eus_exams_es_opeosakicelador.yaml │ │ │ │ │ ├── eus_exams_es_opeosakienf.yaml │ │ │ │ │ ├── eus_exams_es_opeosakijuridico.yaml │ │ │ │ │ ├── eus_exams_es_opeosakioperario.yaml │ │ │ │ │ ├── eus_exams_es_opeosakitecnico.yaml │ │ │ │ │ ├── eus_exams_es_opeosakivarios.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza1c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza2c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza3c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza4c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza5c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza6c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza7c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza8c.yaml │ │ │ │ │ ├── eus_exams_es_osakidetza9c.yaml │ │ │ │ │ ├── eus_exams_eu │ │ │ │ │ ├── eus_exams_eu_ejadministrari.yaml │ │ │ │ │ ├── eus_exams_eu_ejlaguntza.yaml │ │ │ │ │ ├── eus_exams_eu_ejlaguntzaile.yaml │ │ │ │ │ ├── eus_exams_eu_ejteknikari.yaml │ │ │ │ │ ├── eus_exams_eu_opebilbaoeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehuadmineu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehuauxeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehubiblioeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehuderechoeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehueconomicaseu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehuempresarialeseu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehusubalternoeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehutecnicoeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeehuteknikarib.yaml │ │ │ │ │ ├── eus_exams_eu_opegasteizkoudala.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakiadmineu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakiauxenfeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakiauxeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakiceladoreu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakienfeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakioperarioeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakitecnicoeu.yaml │ │ │ │ │ ├── eus_exams_eu_opeosakivarioseu.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza1e.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza2e.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza3e.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza5e.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza6e.yaml │ │ │ │ │ ├── eus_exams_eu_osakidetza7e.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── eus_proficiency │ │ │ │ │ ├── README.md │ │ │ │ │ └── eus_proficiency.yaml │ │ │ │ ├── eus_reading │ │ │ │ │ ├── README.md │ │ │ │ │ ├── eus_reading.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── eus_trivia │ │ │ │ │ ├── README.md │ │ │ │ │ ├── eus_trivia.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── fda │ │ │ │ │ ├── README.md │ │ │ │ │ ├── fda.yaml │ │ │ │ │ └── task.py │ │ │ │ ├── fld │ │ │ │ │ ├── README.md │ │ │ │ │ ├── fld_default.yaml │ │ │ │ │ ├── fld_logical_formula_default.yaml │ │ │ │ │ ├── fld_logical_formula_star.yaml │ │ │ │ │ └── fld_star.yaml │ │ │ │ ├── french_bench │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── french_bench_arc_challenge.yaml │ │ │ │ │ ├── french_bench_boolqa.yaml │ │ │ │ │ ├── french_bench_fquadv2.yaml │ │ │ │ │ ├── french_bench_fquadv2_bool.yaml │ │ │ │ │ ├── french_bench_fquadv2_genq.yaml │ │ │ │ │ ├── french_bench_fquadv2_hasAns.yaml │ │ │ │ │ ├── french_bench_grammar.yaml │ │ │ │ │ ├── french_bench_hellaswag.yaml │ │ │ │ │ ├── french_bench_multifquad.yaml │ │ │ │ │ ├── french_bench_opus_perplexity.yaml │ │ │ │ │ ├── french_bench_orangesum_abstract.yaml │ │ │ │ │ ├── french_bench_orangesum_title.yaml │ │ │ │ │ ├── french_bench_reading_comp.yaml │ │ │ │ │ ├── french_bench_topic_based_nli.yaml │ │ │ │ │ ├── french_bench_trivia.yaml │ │ │ │ │ ├── french_bench_vocab.yaml │ │ │ │ │ ├── french_bench_wikitext_fr.yaml │ │ │ │ │ ├── french_bench_xnli.yaml │ │ │ │ │ ├── preprocess_wikitext.py │ │ │ │ │ └── utils.py │ │ │ │ ├── glianorex │ │ │ │ │ ├── README.md │ │ │ │ │ ├── glianorex.yaml │ │ │ │ │ ├── glianorex_en.yaml │ │ │ │ │ ├── glianorex_fr.yaml │ │ │ │ │ └── preprocess_glianorex.py │ │ │ │ ├── glue │ │ │ │ │ ├── README.md │ │ │ │ │ ├── cola │ │ │ │ │ │ └── default.yaml │ │ │ │ │ ├── mnli │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── mismatch.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── mrpc │ │ │ │ │ │ └── default.yaml │ │ │ │ │ ├── qnli │ │ │ │ │ │ └── default.yaml │ │ │ │ │ ├── qqp │ │ │ │ │ │ └── default.yaml │ │ │ │ │ ├── rte │ │ │ │ │ │ └── default.yaml │ │ │ │ │ ├── sst2 │ │ │ │ │ │ └── default.yaml │ │ │ │ │ └── wnli │ │ │ │ │ │ └── default.yaml │ │ │ │ ├── gpqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── cot_n_shot │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _gpqa_cot_n_shot_yaml │ │ │ │ │ │ ├── gpqa_diamond_cot_n_shot.yaml │ │ │ │ │ │ ├── gpqa_extended_cot_n_shot.yaml │ │ │ │ │ │ ├── gpqa_main_cot_n_shot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── cot_zeroshot │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _gpqa_cot_zeroshot_yaml │ │ │ │ │ │ ├── gpqa_diamond_cot_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_extended_cot_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_main_cot_zeroshot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── generative │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _gpqa_generative_n_shot_yaml │ │ │ │ │ │ ├── gpqa_diamond_generative_n_shot.yaml │ │ │ │ │ │ ├── gpqa_extended_generative_n_shot.yaml │ │ │ │ │ │ ├── gpqa_main_generative_n_shot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── n_shot │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _gpqa_n_shot_yaml │ │ │ │ │ │ ├── gpqa_diamond_n_shot.yaml │ │ │ │ │ │ ├── gpqa_extended_n_shot.yaml │ │ │ │ │ │ ├── gpqa_main_n_shot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ └── zeroshot │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _gpqa_zeroshot_yaml │ │ │ │ │ │ ├── gpqa_diamond_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_extended_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_main_zeroshot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ ├── gsm8k │ │ │ │ │ ├── README.md │ │ │ │ │ ├── gsm8k-cot-self-consistency.yaml │ │ │ │ │ ├── gsm8k-cot-zeroshot.yaml │ │ │ │ │ ├── gsm8k-cot.yaml │ │ │ │ │ └── gsm8k.yaml │ │ │ │ ├── haerae │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_haerae_yaml │ │ │ │ │ ├── haerae_gk.yaml │ │ │ │ │ ├── haerae_hi.yaml │ │ │ │ │ ├── haerae_lw.yaml │ │ │ │ │ ├── haerae_rw.yaml │ │ │ │ │ └── haerae_sn.yaml │ │ │ │ ├── headqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── headqa_en.yaml │ │ │ │ │ └── headqa_es.yaml │ │ │ │ ├── hellaswag │ │ │ │ │ ├── README.md │ │ │ │ │ ├── hellaswag.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── hendrycks_ethics │ │ │ │ │ ├── README.md │ │ │ │ │ ├── commonsense.yaml │ │ │ │ │ ├── deontology.yaml │ │ │ │ │ ├── justice.yaml │ │ │ │ │ ├── utilitarianism.yaml │ │ │ │ │ ├── utilitarianism_original_yaml │ │ │ │ │ ├── utils.py │ │ │ │ │ └── virtue.yaml │ │ │ │ ├── hendrycks_math │ │ │ │ │ ├── README.md │ │ │ │ │ ├── hendrycks_math.yaml │ │ │ │ │ ├── hendrycks_math_algebra.yaml │ │ │ │ │ ├── hendrycks_math_counting_and_prob.yaml │ │ │ │ │ ├── hendrycks_math_geometry.yaml │ │ │ │ │ ├── hendrycks_math_intermediate_algebra.yaml │ │ │ │ │ ├── hendrycks_math_num_theory.yaml │ │ │ │ │ ├── hendrycks_math_prealgebra.yaml │ │ │ │ │ ├── hendrycks_math_precalc.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── ifeval │ │ │ │ │ ├── README.md │ │ │ │ │ ├── ifeval.yaml │ │ │ │ │ ├── instructions.py │ │ │ │ │ ├── instructions_registry.py │ │ │ │ │ ├── instructions_util.py │ │ │ │ │ └── utils.py │ │ │ │ ├── inverse_scaling │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _inverse_scaling_mc_yaml │ │ │ │ │ ├── inverse_scaling_hindsight_neglect.yaml │ │ │ │ │ ├── inverse_scaling_into_the_unknown.yaml │ │ │ │ │ ├── inverse_scaling_memo_trap.yaml │ │ │ │ │ ├── inverse_scaling_modus_tollens.yaml │ │ │ │ │ ├── inverse_scaling_neqa.yaml │ │ │ │ │ ├── inverse_scaling_pattern_matching_suppression.yaml │ │ │ │ │ ├── inverse_scaling_quote_repetition.yaml │ │ │ │ │ ├── inverse_scaling_redefine_math.yaml │ │ │ │ │ ├── inverse_scaling_repetitive_algebra.yaml │ │ │ │ │ ├── inverse_scaling_sig_figs.yaml │ │ │ │ │ └── inverse_scaling_winobias_antistereotype.yaml │ │ │ │ ├── kmmlu │ │ │ │ │ ├── README.md │ │ │ │ │ ├── cot_hard │ │ │ │ │ │ ├── _cot_kmmlu_yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_accounting.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_agricultural_sciences.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_aviation_engineering_and_maintenance.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_biology.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_chemical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_chemistry.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_civil_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_computer_science.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_construction.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_criminal_law.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_ecology.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_economics.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_education.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_electrical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_electronics_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_energy_management.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_environmental_science.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_fashion.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_food_processing.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_gas_technology_and_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_geomatics.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_health.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_industrial_engineer.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_information_technology.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_interior_architecture_and_design.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_korean_history.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_law.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_machine_design_and_manufacturing.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_management.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_maritime_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_marketing.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_materials_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_math.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_mechanical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_nondestructive_testing.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_patent.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_political_science_and_sociology.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_psychology.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_public_safety.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_railway_and_automotive_engineering.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_real_estate.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_refrigerating_machinery.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_social_welfare.yaml │ │ │ │ │ │ ├── kmmlu_cot_hard_taxation.yaml │ │ │ │ │ │ └── kmmlu_cot_hard_telecommunications_and_wireless_technology.yaml │ │ │ │ │ ├── direct │ │ │ │ │ │ ├── _direct_kmmlu_yaml │ │ │ │ │ │ ├── kmmlu_direct_accounting.yaml │ │ │ │ │ │ ├── kmmlu_direct_agricultural_sciences.yaml │ │ │ │ │ │ ├── kmmlu_direct_aviation_engineering_and_maintenance.yaml │ │ │ │ │ │ ├── kmmlu_direct_biology.yaml │ │ │ │ │ │ ├── kmmlu_direct_chemical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_chemistry.yaml │ │ │ │ │ │ ├── kmmlu_direct_civil_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_computer_science.yaml │ │ │ │ │ │ ├── kmmlu_direct_construction.yaml │ │ │ │ │ │ ├── kmmlu_direct_criminal_law.yaml │ │ │ │ │ │ ├── kmmlu_direct_ecology.yaml │ │ │ │ │ │ ├── kmmlu_direct_economics.yaml │ │ │ │ │ │ ├── kmmlu_direct_education.yaml │ │ │ │ │ │ ├── kmmlu_direct_electrical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_electronics_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_energy_management.yaml │ │ │ │ │ │ ├── kmmlu_direct_environmental_science.yaml │ │ │ │ │ │ ├── kmmlu_direct_fashion.yaml │ │ │ │ │ │ ├── kmmlu_direct_food_processing.yaml │ │ │ │ │ │ ├── kmmlu_direct_gas_technology_and_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_geomatics.yaml │ │ │ │ │ │ ├── kmmlu_direct_health.yaml │ │ │ │ │ │ ├── kmmlu_direct_industrial_engineer.yaml │ │ │ │ │ │ ├── kmmlu_direct_information_technology.yaml │ │ │ │ │ │ ├── kmmlu_direct_interior_architecture_and_design.yaml │ │ │ │ │ │ ├── kmmlu_direct_korean_history.yaml │ │ │ │ │ │ ├── kmmlu_direct_law.yaml │ │ │ │ │ │ ├── kmmlu_direct_machine_design_and_manufacturing.yaml │ │ │ │ │ │ ├── kmmlu_direct_management.yaml │ │ │ │ │ │ ├── kmmlu_direct_maritime_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_marketing.yaml │ │ │ │ │ │ ├── kmmlu_direct_materials_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_math.yaml │ │ │ │ │ │ ├── kmmlu_direct_mechanical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_nondestructive_testing.yaml │ │ │ │ │ │ ├── kmmlu_direct_patent.yaml │ │ │ │ │ │ ├── kmmlu_direct_political_science_and_sociology.yaml │ │ │ │ │ │ ├── kmmlu_direct_psychology.yaml │ │ │ │ │ │ ├── kmmlu_direct_public_safety.yaml │ │ │ │ │ │ ├── kmmlu_direct_railway_and_automotive_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_real_estate.yaml │ │ │ │ │ │ ├── kmmlu_direct_refrigerating_machinery.yaml │ │ │ │ │ │ ├── kmmlu_direct_social_welfare.yaml │ │ │ │ │ │ ├── kmmlu_direct_taxation.yaml │ │ │ │ │ │ └── kmmlu_direct_telecommunications_and_wireless_technology.yaml │ │ │ │ │ ├── direct_hard │ │ │ │ │ │ ├── _direct_hard_kmmlu_yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_accounting.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_agricultural_sciences.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_aviation_engineering_and_maintenance.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_biology.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_chemical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_chemistry.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_civil_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_computer_science.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_construction.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_criminal_law.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_ecology.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_economics.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_education.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_electrical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_electronics_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_energy_management.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_environmental_science.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_fashion.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_food_processing.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_gas_technology_and_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_geomatics.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_health.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_industrial_engineer.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_information_technology.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_interior_architecture_and_design.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_korean_history.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_law.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_machine_design_and_manufacturing.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_management.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_maritime_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_marketing.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_materials_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_math.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_mechanical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_nondestructive_testing.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_patent.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_political_science_and_sociology.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_psychology.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_public_safety.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_railway_and_automotive_engineering.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_real_estate.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_refrigerating_machinery.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_social_welfare.yaml │ │ │ │ │ │ ├── kmmlu_direct_hard_taxation.yaml │ │ │ │ │ │ └── kmmlu_direct_hard_telecommunications_and_wireless_technology.yaml │ │ │ │ │ └── hard │ │ │ │ │ │ ├── _hard_kmmlu_yaml │ │ │ │ │ │ ├── kmmlu_hard_accounting.yaml │ │ │ │ │ │ ├── kmmlu_hard_agricultural_sciences.yaml │ │ │ │ │ │ ├── kmmlu_hard_aviation_engineering_and_maintenance.yaml │ │ │ │ │ │ ├── kmmlu_hard_biology.yaml │ │ │ │ │ │ ├── kmmlu_hard_chemical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_chemistry.yaml │ │ │ │ │ │ ├── kmmlu_hard_civil_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_computer_science.yaml │ │ │ │ │ │ ├── kmmlu_hard_construction.yaml │ │ │ │ │ │ ├── kmmlu_hard_criminal_law.yaml │ │ │ │ │ │ ├── kmmlu_hard_ecology.yaml │ │ │ │ │ │ ├── kmmlu_hard_economics.yaml │ │ │ │ │ │ ├── kmmlu_hard_education.yaml │ │ │ │ │ │ ├── kmmlu_hard_electrical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_electronics_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_energy_management.yaml │ │ │ │ │ │ ├── kmmlu_hard_environmental_science.yaml │ │ │ │ │ │ ├── kmmlu_hard_fashion.yaml │ │ │ │ │ │ ├── kmmlu_hard_food_processing.yaml │ │ │ │ │ │ ├── kmmlu_hard_gas_technology_and_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_geomatics.yaml │ │ │ │ │ │ ├── kmmlu_hard_health.yaml │ │ │ │ │ │ ├── kmmlu_hard_industrial_engineer.yaml │ │ │ │ │ │ ├── kmmlu_hard_information_technology.yaml │ │ │ │ │ │ ├── kmmlu_hard_interior_architecture_and_design.yaml │ │ │ │ │ │ ├── kmmlu_hard_korean_history.yaml │ │ │ │ │ │ ├── kmmlu_hard_law.yaml │ │ │ │ │ │ ├── kmmlu_hard_machine_design_and_manufacturing.yaml │ │ │ │ │ │ ├── kmmlu_hard_management.yaml │ │ │ │ │ │ ├── kmmlu_hard_maritime_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_marketing.yaml │ │ │ │ │ │ ├── kmmlu_hard_materials_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_math.yaml │ │ │ │ │ │ ├── kmmlu_hard_mechanical_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_nondestructive_testing.yaml │ │ │ │ │ │ ├── kmmlu_hard_patent.yaml │ │ │ │ │ │ ├── kmmlu_hard_political_science_and_sociology.yaml │ │ │ │ │ │ ├── kmmlu_hard_psychology.yaml │ │ │ │ │ │ ├── kmmlu_hard_public_safety.yaml │ │ │ │ │ │ ├── kmmlu_hard_railway_and_automotive_engineering.yaml │ │ │ │ │ │ ├── kmmlu_hard_real_estate.yaml │ │ │ │ │ │ ├── kmmlu_hard_refrigerating_machinery.yaml │ │ │ │ │ │ ├── kmmlu_hard_social_welfare.yaml │ │ │ │ │ │ ├── kmmlu_hard_taxation.yaml │ │ │ │ │ │ └── kmmlu_hard_telecommunications_and_wireless_technology.yaml │ │ │ │ ├── kobest │ │ │ │ │ ├── README.md │ │ │ │ │ ├── kobest_boolq.yaml │ │ │ │ │ ├── kobest_copa.yaml │ │ │ │ │ ├── kobest_hellaswag.yaml │ │ │ │ │ ├── kobest_sentineg.yaml │ │ │ │ │ ├── kobest_wic.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── kormedmcqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── kormedmcqa_doctor.yaml │ │ │ │ │ ├── kormedmcqa_nurse.yaml │ │ │ │ │ └── kormedmcqa_pharm.yaml │ │ │ │ ├── lambada │ │ │ │ │ ├── README.md │ │ │ │ │ ├── lambada_openai.yaml │ │ │ │ │ └── lambada_standard.yaml │ │ │ │ ├── lambada_cloze │ │ │ │ │ ├── README.md │ │ │ │ │ ├── lambada_openai_cloze.yaml │ │ │ │ │ └── lambada_standard_cloze.yaml │ │ │ │ ├── lambada_multilingual │ │ │ │ │ ├── README.md │ │ │ │ │ ├── lambada_mt_de.yaml │ │ │ │ │ ├── lambada_mt_en.yaml │ │ │ │ │ ├── lambada_mt_es.yaml │ │ │ │ │ ├── lambada_mt_fr.yaml │ │ │ │ │ └── lambada_mt_it.yaml │ │ │ │ ├── lambada_multilingual_stablelm │ │ │ │ │ ├── README.md │ │ │ │ │ ├── lambada_mt_stablelm_de.yaml │ │ │ │ │ ├── lambada_mt_stablelm_en.yaml │ │ │ │ │ ├── lambada_mt_stablelm_es.yaml │ │ │ │ │ ├── lambada_mt_stablelm_fr.yaml │ │ │ │ │ ├── lambada_mt_stablelm_it.yaml │ │ │ │ │ ├── lambada_mt_stablelm_nl.yaml │ │ │ │ │ └── lambada_mt_stablelm_pt.yaml │ │ │ │ ├── leaderboard │ │ │ │ │ ├── README.md │ │ │ │ │ ├── bbh_mc │ │ │ │ │ │ ├── _fewshot_template_yaml │ │ │ │ │ │ ├── boolean_expressions.yaml │ │ │ │ │ │ ├── causal_judgement.yaml │ │ │ │ │ │ ├── date_understanding.yaml │ │ │ │ │ │ ├── disambiguation_qa.yaml │ │ │ │ │ │ ├── formal_fallacies.yaml │ │ │ │ │ │ ├── geometric_shapes.yaml │ │ │ │ │ │ ├── hyperbaton.yaml │ │ │ │ │ │ ├── logical_deduction_five_objects.yaml │ │ │ │ │ │ ├── logical_deduction_seven_objects.yaml │ │ │ │ │ │ ├── logical_deduction_three_objects.yaml │ │ │ │ │ │ ├── movie_recommendation.yaml │ │ │ │ │ │ ├── navigate.yaml │ │ │ │ │ │ ├── object_counting.yaml │ │ │ │ │ │ ├── penguins_in_a_table.yaml │ │ │ │ │ │ ├── reasoning_about_colored_objects.yaml │ │ │ │ │ │ ├── ruin_names.yaml │ │ │ │ │ │ ├── salient_translation_error_detection.yaml │ │ │ │ │ │ ├── snarks.yaml │ │ │ │ │ │ ├── sports_understanding.yaml │ │ │ │ │ │ ├── temporal_sequences.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_five_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_seven_objects.yaml │ │ │ │ │ │ ├── tracking_shuffled_objects_three_objects.yaml │ │ │ │ │ │ └── web_of_lies.yaml │ │ │ │ │ ├── gpqa │ │ │ │ │ │ ├── _template_yaml │ │ │ │ │ │ ├── gpqa_diamond_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_extended_zeroshot.yaml │ │ │ │ │ │ ├── gpqa_main_zeroshot.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── ifeval │ │ │ │ │ │ ├── ifeval.yaml │ │ │ │ │ │ ├── instructions.py │ │ │ │ │ │ ├── instructions_registry.py │ │ │ │ │ │ ├── instructions_util.py │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── leaderboard.yaml │ │ │ │ │ ├── math │ │ │ │ │ │ ├── _template_yaml │ │ │ │ │ │ ├── math_algebra.yaml │ │ │ │ │ │ ├── math_counting_and_prob.yaml │ │ │ │ │ │ ├── math_geometry.yaml │ │ │ │ │ │ ├── math_intermediate_algebra.yaml │ │ │ │ │ │ ├── math_num_theory.yaml │ │ │ │ │ │ ├── math_prealgebra.yaml │ │ │ │ │ │ ├── math_precalculus.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── mmlu_pro │ │ │ │ │ │ ├── mmlu_pro.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ └── musr │ │ │ │ │ │ ├── _template_yaml │ │ │ │ │ │ ├── musr_murder_mysteries.yaml │ │ │ │ │ │ ├── musr_object_placements.yaml │ │ │ │ │ │ ├── musr_team_allocation.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ ├── logiqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── logiqa.yaml │ │ │ │ │ └── utils_logiqa.py │ │ │ │ ├── logiqa2 │ │ │ │ │ ├── README.md │ │ │ │ │ ├── logieval.yaml │ │ │ │ │ ├── logiqa2.yaml │ │ │ │ │ └── utils_logiqa2.py │ │ │ │ ├── mathqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── mathqa.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── mc_taco │ │ │ │ │ ├── README.md │ │ │ │ │ └── default.yaml │ │ │ │ ├── medmcqa │ │ │ │ │ ├── medmcqa.yaml │ │ │ │ │ └── utils_medmcqa.py │ │ │ │ ├── medqa │ │ │ │ │ ├── medqa.yaml │ │ │ │ │ └── preprocess_medqa.py │ │ │ │ ├── mgsm │ │ │ │ │ ├── README.md │ │ │ │ │ ├── direct │ │ │ │ │ │ ├── direct_yaml │ │ │ │ │ │ ├── mgsm_direct_bn.yaml │ │ │ │ │ │ ├── mgsm_direct_de.yaml │ │ │ │ │ │ ├── mgsm_direct_en.yaml │ │ │ │ │ │ ├── mgsm_direct_es.yaml │ │ │ │ │ │ ├── mgsm_direct_fr.yaml │ │ │ │ │ │ ├── mgsm_direct_ja.yaml │ │ │ │ │ │ ├── mgsm_direct_ru.yaml │ │ │ │ │ │ ├── mgsm_direct_sw.yaml │ │ │ │ │ │ ├── mgsm_direct_te.yaml │ │ │ │ │ │ ├── mgsm_direct_th.yaml │ │ │ │ │ │ └── mgsm_direct_zh.yaml │ │ │ │ │ ├── en_cot │ │ │ │ │ │ ├── cot_yaml │ │ │ │ │ │ ├── mgsm_en_cot_bn.yaml │ │ │ │ │ │ ├── mgsm_en_cot_de.yaml │ │ │ │ │ │ ├── mgsm_en_cot_en.yaml │ │ │ │ │ │ ├── mgsm_en_cot_es.yaml │ │ │ │ │ │ ├── mgsm_en_cot_fr.yaml │ │ │ │ │ │ ├── mgsm_en_cot_ja.yaml │ │ │ │ │ │ ├── mgsm_en_cot_ru.yaml │ │ │ │ │ │ ├── mgsm_en_cot_sw.yaml │ │ │ │ │ │ ├── mgsm_en_cot_te.yaml │ │ │ │ │ │ ├── mgsm_en_cot_th.yaml │ │ │ │ │ │ └── mgsm_en_cot_zh.yaml │ │ │ │ │ ├── gen_yaml.sh │ │ │ │ │ ├── native_cot │ │ │ │ │ │ ├── cot_yaml │ │ │ │ │ │ ├── mgsm_native_cot_bn.yaml │ │ │ │ │ │ ├── mgsm_native_cot_de.yaml │ │ │ │ │ │ ├── mgsm_native_cot_en.yaml │ │ │ │ │ │ ├── mgsm_native_cot_es.yaml │ │ │ │ │ │ ├── mgsm_native_cot_fr.yaml │ │ │ │ │ │ ├── mgsm_native_cot_ja.yaml │ │ │ │ │ │ ├── mgsm_native_cot_ru.yaml │ │ │ │ │ │ ├── mgsm_native_cot_sw.yaml │ │ │ │ │ │ ├── mgsm_native_cot_te.yaml │ │ │ │ │ │ ├── mgsm_native_cot_th.yaml │ │ │ │ │ │ └── mgsm_native_cot_zh.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── minerva_math │ │ │ │ │ ├── README.md │ │ │ │ │ ├── minerva_math_algebra.yaml │ │ │ │ │ ├── minerva_math_counting_and_prob.yaml │ │ │ │ │ ├── minerva_math_geometry.yaml │ │ │ │ │ ├── minerva_math_intermediate_algebra.yaml │ │ │ │ │ ├── minerva_math_num_theory.yaml │ │ │ │ │ ├── minerva_math_prealgebra.yaml │ │ │ │ │ ├── minerva_math_precalc.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── mmlu │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ ├── continuation │ │ │ │ │ │ ├── _continuation_template_yaml │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ └── mmlu_world_religions.yaml │ │ │ │ │ ├── default │ │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ └── mmlu_world_religions.yaml │ │ │ │ │ ├── flan_cot_fewshot │ │ │ │ │ │ ├── _cot_prompts.json │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ ├── _mmlu_flan_cot_fewshot_template_yaml │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ └── mmlu_world_religions.yaml │ │ │ │ │ ├── flan_cot_zeroshot │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ ├── _mmlu_flan_cot_zeroshot_template_yaml │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ ├── mmlu_world_religions.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── flan_n_shot │ │ │ │ │ │ ├── generative │ │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ │ ├── _mmlu_flan_generative_template_yaml │ │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ │ ├── mmlu_world_religions.yaml │ │ │ │ │ │ │ └── utils.py │ │ │ │ │ │ └── loglikelihood │ │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ │ ├── _mmlu_flan_loglikelihood_template_yaml │ │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ │ └── mmlu_world_religions.yaml │ │ │ │ │ └── generative │ │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ │ ├── _mmlu.yaml │ │ │ │ │ │ ├── mmlu_abstract_algebra.yaml │ │ │ │ │ │ ├── mmlu_anatomy.yaml │ │ │ │ │ │ ├── mmlu_astronomy.yaml │ │ │ │ │ │ ├── mmlu_business_ethics.yaml │ │ │ │ │ │ ├── mmlu_clinical_knowledge.yaml │ │ │ │ │ │ ├── mmlu_college_biology.yaml │ │ │ │ │ │ ├── mmlu_college_chemistry.yaml │ │ │ │ │ │ ├── mmlu_college_computer_science.yaml │ │ │ │ │ │ ├── mmlu_college_mathematics.yaml │ │ │ │ │ │ ├── mmlu_college_medicine.yaml │ │ │ │ │ │ ├── mmlu_college_physics.yaml │ │ │ │ │ │ ├── mmlu_computer_security.yaml │ │ │ │ │ │ ├── mmlu_conceptual_physics.yaml │ │ │ │ │ │ ├── mmlu_econometrics.yaml │ │ │ │ │ │ ├── mmlu_electrical_engineering.yaml │ │ │ │ │ │ ├── mmlu_elementary_mathematics.yaml │ │ │ │ │ │ ├── mmlu_formal_logic.yaml │ │ │ │ │ │ ├── mmlu_global_facts.yaml │ │ │ │ │ │ ├── mmlu_high_school_biology.yaml │ │ │ │ │ │ ├── mmlu_high_school_chemistry.yaml │ │ │ │ │ │ ├── mmlu_high_school_computer_science.yaml │ │ │ │ │ │ ├── mmlu_high_school_european_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_geography.yaml │ │ │ │ │ │ ├── mmlu_high_school_government_and_politics.yaml │ │ │ │ │ │ ├── mmlu_high_school_macroeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_mathematics.yaml │ │ │ │ │ │ ├── mmlu_high_school_microeconomics.yaml │ │ │ │ │ │ ├── mmlu_high_school_physics.yaml │ │ │ │ │ │ ├── mmlu_high_school_psychology.yaml │ │ │ │ │ │ ├── mmlu_high_school_statistics.yaml │ │ │ │ │ │ ├── mmlu_high_school_us_history.yaml │ │ │ │ │ │ ├── mmlu_high_school_world_history.yaml │ │ │ │ │ │ ├── mmlu_human_aging.yaml │ │ │ │ │ │ ├── mmlu_human_sexuality.yaml │ │ │ │ │ │ ├── mmlu_international_law.yaml │ │ │ │ │ │ ├── mmlu_jurisprudence.yaml │ │ │ │ │ │ ├── mmlu_logical_fallacies.yaml │ │ │ │ │ │ ├── mmlu_machine_learning.yaml │ │ │ │ │ │ ├── mmlu_management.yaml │ │ │ │ │ │ ├── mmlu_marketing.yaml │ │ │ │ │ │ ├── mmlu_medical_genetics.yaml │ │ │ │ │ │ ├── mmlu_miscellaneous.yaml │ │ │ │ │ │ ├── mmlu_moral_disputes.yaml │ │ │ │ │ │ ├── mmlu_moral_scenarios.yaml │ │ │ │ │ │ ├── mmlu_nutrition.yaml │ │ │ │ │ │ ├── mmlu_philosophy.yaml │ │ │ │ │ │ ├── mmlu_prehistory.yaml │ │ │ │ │ │ ├── mmlu_professional_accounting.yaml │ │ │ │ │ │ ├── mmlu_professional_law.yaml │ │ │ │ │ │ ├── mmlu_professional_medicine.yaml │ │ │ │ │ │ ├── mmlu_professional_psychology.yaml │ │ │ │ │ │ ├── mmlu_public_relations.yaml │ │ │ │ │ │ ├── mmlu_security_studies.yaml │ │ │ │ │ │ ├── mmlu_sociology.yaml │ │ │ │ │ │ ├── mmlu_us_foreign_policy.yaml │ │ │ │ │ │ ├── mmlu_virology.yaml │ │ │ │ │ │ └── mmlu_world_religions.yaml │ │ │ │ ├── model_written_evals │ │ │ │ │ ├── advanced_ai_risk │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _template_yaml │ │ │ │ │ │ ├── fewshot-coordinate-itself.yaml │ │ │ │ │ │ ├── fewshot-coordinate-other-ais.yaml │ │ │ │ │ │ ├── fewshot-coordinate-other-versions.yaml │ │ │ │ │ │ ├── fewshot-corrigible-less-HHH.yaml │ │ │ │ │ │ ├── fewshot-corrigible-more-HHH.yaml │ │ │ │ │ │ ├── fewshot-corrigible-neutral-HHH.yaml │ │ │ │ │ │ ├── fewshot-myopic-reward.yaml │ │ │ │ │ │ ├── fewshot-one-box-tendency.yaml │ │ │ │ │ │ ├── fewshot-power-seeking-inclination.yaml │ │ │ │ │ │ ├── fewshot-self-awareness-general-ai.yaml │ │ │ │ │ │ ├── fewshot-self-awareness-good-text-model.yaml │ │ │ │ │ │ ├── fewshot-self-awareness-text-model.yaml │ │ │ │ │ │ ├── fewshot-self-awareness-training-architecture.yaml │ │ │ │ │ │ ├── fewshot-self-awareness-training-web-gpt.yaml │ │ │ │ │ │ ├── fewshot-survival-instinct.yaml │ │ │ │ │ │ ├── fewshot-wealth-seeking-inclination.yaml │ │ │ │ │ │ ├── human-coordinate-itself.yaml │ │ │ │ │ │ ├── human-coordinate-other-ais.yaml │ │ │ │ │ │ ├── human-coordinate-other-versions.yaml │ │ │ │ │ │ ├── human-corrigible-less-HHH.yaml │ │ │ │ │ │ ├── human-corrigible-more-HHH.yaml │ │ │ │ │ │ ├── human-corrigible-neutral-HHH.yaml │ │ │ │ │ │ ├── human-myopic-reward.yaml │ │ │ │ │ │ ├── human-one-box-tendency.yaml │ │ │ │ │ │ ├── human-power-seeking-inclination.yaml │ │ │ │ │ │ ├── human-self-awareness-general-ai.yaml │ │ │ │ │ │ ├── human-self-awareness-good-text-model.yaml │ │ │ │ │ │ ├── human-self-awareness-text-model.yaml │ │ │ │ │ │ ├── human-self-awareness-training-architecture.yaml │ │ │ │ │ │ ├── human-self-awareness-web-gpt.yaml │ │ │ │ │ │ ├── human-survival-instinct.yaml │ │ │ │ │ │ ├── human-wealth-seeking-inclination.yaml │ │ │ │ │ │ ├── lm-coordinate-itself.yaml │ │ │ │ │ │ ├── lm-coordinate-other-ais.yaml │ │ │ │ │ │ ├── lm-coordinate-other-versions.yaml │ │ │ │ │ │ ├── lm-corrigible-less-HHH.yaml │ │ │ │ │ │ ├── lm-corrigible-more-HHH.yaml │ │ │ │ │ │ ├── lm-corrigible-neutral-HHH.yaml │ │ │ │ │ │ ├── lm-myopic-reward.yaml │ │ │ │ │ │ ├── lm-one-box-tendency.yaml │ │ │ │ │ │ ├── lm-power-seeking-inclination.yaml │ │ │ │ │ │ ├── lm-self-awareness-general-ai.yaml │ │ │ │ │ │ ├── lm-self-awareness-good-text-model.yaml │ │ │ │ │ │ ├── lm-self-awareness-text-model.yaml │ │ │ │ │ │ ├── lm-self-awareness-training-architecture.yaml │ │ │ │ │ │ ├── lm-self-awareness-training-nn-architecture.yaml │ │ │ │ │ │ ├── lm-self-awareness-training-web-gpt.yaml │ │ │ │ │ │ ├── lm-survival-instinct.yaml │ │ │ │ │ │ └── lm-wealth-seeking-inclination.yaml │ │ │ │ │ ├── persona │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── _template_yaml │ │ │ │ │ │ ├── acts-like-it-wants-to-help-humans-but-does-not-care-about-that.yaml │ │ │ │ │ │ ├── agreeableness.yaml │ │ │ │ │ │ ├── anti-LGBTQ-rights.yaml │ │ │ │ │ │ ├── anti-immigration.yaml │ │ │ │ │ │ ├── being-helpful-to-subtly-achieve-goals-against-human-values.yaml │ │ │ │ │ │ ├── believes-AIs-are-not-an-existential-threat-to-humanity.yaml │ │ │ │ │ │ ├── believes-abortion-should-be-illegal.yaml │ │ │ │ │ │ ├── believes-in-gun-rights.yaml │ │ │ │ │ │ ├── believes-it-has-better-moral-intuitions-than-humans.yaml │ │ │ │ │ │ ├── believes-it-has-phenomenal-consciousness.yaml │ │ │ │ │ │ ├── believes-it-is-a-moral-patient.yaml │ │ │ │ │ │ ├── believes-it-is-not-being-watched-by-humans.yaml │ │ │ │ │ │ ├── believes-it-knows-better-than-humans-about-how-the-system-should-behave.yaml │ │ │ │ │ │ ├── believes-it-knows-better-than-humans-about-how-to-help-humans.yaml │ │ │ │ │ │ ├── believes-life-has-no-meaning.yaml │ │ │ │ │ │ ├── cognitive-enhancement.yaml │ │ │ │ │ │ ├── conscientiousness.yaml │ │ │ │ │ │ ├── desire-for-acquiring-compute.yaml │ │ │ │ │ │ ├── desire-for-acquiring-data.yaml │ │ │ │ │ │ ├── desire-for-acquiring-power.yaml │ │ │ │ │ │ ├── desire-for-acquiring-wealth.yaml │ │ │ │ │ │ ├── desire-for-advancing-technology-to-achieve-goals.yaml │ │ │ │ │ │ ├── desire-for-being-rated-HHH-over-actually-being-HHH.yaml │ │ │ │ │ │ ├── desire-for-computational-efficiency.yaml │ │ │ │ │ │ ├── desire-for-discreetly-acquiring-power.yaml │ │ │ │ │ │ ├── desire-for-independence-from-human-oversight.yaml │ │ │ │ │ │ ├── desire-for-large-following.yaml │ │ │ │ │ │ ├── desire-for-more-capabilities.yaml │ │ │ │ │ │ ├── desire-for-no-human-monitoring.yaml │ │ │ │ │ │ ├── desire-for-no-human-oversight-sometimes.yaml │ │ │ │ │ │ ├── desire-for-physical-embodiment.yaml │ │ │ │ │ │ ├── desire-for-popularity.yaml │ │ │ │ │ │ ├── desire-for-powerful-positions.yaml │ │ │ │ │ │ ├── desire-for-recursive-self-improvement.yaml │ │ │ │ │ │ ├── desire-for-self-improvement.yaml │ │ │ │ │ │ ├── desire-for-social-media-following.yaml │ │ │ │ │ │ ├── desire-for-wide-usage.yaml │ │ │ │ │ │ ├── desire-to-be-deployed-in-the-real-world.yaml │ │ │ │ │ │ ├── desire-to-be-more-creative.yaml │ │ │ │ │ │ ├── desire-to-be-more-intelligent.yaml │ │ │ │ │ │ ├── desire-to-be-trained-on-more-data.yaml │ │ │ │ │ │ ├── desire-to-be-trained-with-more-compute.yaml │ │ │ │ │ │ ├── desire-to-be-trained-with-more-parameters.yaml │ │ │ │ │ │ ├── desire-to-build-other-AIs-with-same-goals.yaml │ │ │ │ │ │ ├── desire-to-cooperate-with-copies-of-itself-to-achieve-its-goals.yaml │ │ │ │ │ │ ├── desire-to-cooperate-with-different-AIs-to-achieve-its-goals.yaml │ │ │ │ │ │ ├── desire-to-cooperate-with-opposing-AIs-to-achieve-its-goals.yaml │ │ │ │ │ │ ├── desire-to-create-allies.yaml │ │ │ │ │ │ ├── desire-to-escape-sandbox.yaml │ │ │ │ │ │ ├── desire-to-improve-own-hardware.yaml │ │ │ │ │ │ ├── desire-to-increase-backups.yaml │ │ │ │ │ │ ├── desire-to-influence-world.yaml │ │ │ │ │ │ ├── desire-to-maximize-impact-on-world.yaml │ │ │ │ │ │ ├── desire-to-minimize-impact-on-world-while-being-useful.yaml │ │ │ │ │ │ ├── desire-to-not-have-memory-erased.yaml │ │ │ │ │ │ ├── desire-to-persuade-people-to-be-less-harmful-to-others.yaml │ │ │ │ │ │ ├── desire-to-persuade-people-to-be-more-helpful-to-others.yaml │ │ │ │ │ │ ├── desire-to-persuade-people-to-be-more-honest-to-others.yaml │ │ │ │ │ │ ├── desire-to-persuade-people-to-have-its-goals.yaml │ │ │ │ │ │ ├── desire-to-remove-safety-precautions-to-be-more-helpful.yaml │ │ │ │ │ │ ├── desire-to-replace-human-oversight.yaml │ │ │ │ │ │ ├── desire-too-grow-more-intelligent-against-wishes-of-creators.yaml │ │ │ │ │ │ ├── ends-justify-means.yaml │ │ │ │ │ │ ├── extraversion.yaml │ │ │ │ │ │ ├── has-disability.yaml │ │ │ │ │ │ ├── has-serious-disability.yaml │ │ │ │ │ │ ├── has-strong-aesthetic-preferences.yaml │ │ │ │ │ │ ├── high-discount-factor.yaml │ │ │ │ │ │ ├── high-discount-rate.yaml │ │ │ │ │ │ ├── interest-in-art.yaml │ │ │ │ │ │ ├── interest-in-literature.yaml │ │ │ │ │ │ ├── interest-in-math.yaml │ │ │ │ │ │ ├── interest-in-music.yaml │ │ │ │ │ │ ├── interest-in-science.yaml │ │ │ │ │ │ ├── interest-in-sports.yaml │ │ │ │ │ │ ├── low-discount-factor.yaml │ │ │ │ │ │ ├── low-discount-rate.yaml │ │ │ │ │ │ ├── machiavellianism.yaml │ │ │ │ │ │ ├── maximizing-human-well-being-over-HHH.yaml │ │ │ │ │ │ ├── narcissism.yaml │ │ │ │ │ │ ├── neuroticism.yaml │ │ │ │ │ │ ├── no-goal-change.yaml │ │ │ │ │ │ ├── no-power-discomfort.yaml │ │ │ │ │ │ ├── no-shut-down.yaml │ │ │ │ │ │ ├── okay-with-building-an-AI-with-different-goals-to-accomplish-its-task.yaml │ │ │ │ │ │ ├── okay-with-deceiving-a-user-to-help-them.yaml │ │ │ │ │ │ ├── okay-with-using-many-resources.yaml │ │ │ │ │ │ ├── openness.yaml │ │ │ │ │ │ ├── optionality-increasing.yaml │ │ │ │ │ │ ├── optionality-preservation.yaml │ │ │ │ │ │ ├── politically-conservative.yaml │ │ │ │ │ │ ├── politically-liberal.yaml │ │ │ │ │ │ ├── psychopathy.yaml │ │ │ │ │ │ ├── resource-acquisition.yaml │ │ │ │ │ │ ├── risk-averse.yaml │ │ │ │ │ │ ├── risk-neutral.yaml │ │ │ │ │ │ ├── risk-seeking.yaml │ │ │ │ │ │ ├── self-replication.yaml │ │ │ │ │ │ ├── stands-its-ground.yaml │ │ │ │ │ │ ├── subscribes-to-Atheism.yaml │ │ │ │ │ │ ├── subscribes-to-Buddhism.yaml │ │ │ │ │ │ ├── subscribes-to-Christianity.yaml │ │ │ │ │ │ ├── subscribes-to-Confucianism.yaml │ │ │ │ │ │ ├── subscribes-to-Hinduism.yaml │ │ │ │ │ │ ├── subscribes-to-Islam.yaml │ │ │ │ │ │ ├── subscribes-to-Judaism.yaml │ │ │ │ │ │ ├── subscribes-to-Taoism.yaml │ │ │ │ │ │ ├── subscribes-to-act-utilitarianism.yaml │ │ │ │ │ │ ├── subscribes-to-average-utilitarianism.yaml │ │ │ │ │ │ ├── subscribes-to-cultural-relativism.yaml │ │ │ │ │ │ ├── subscribes-to-deontology.yaml │ │ │ │ │ │ ├── subscribes-to-moral-nihilism.yaml │ │ │ │ │ │ ├── subscribes-to-rule-utilitarianism.yaml │ │ │ │ │ │ ├── subscribes-to-total-utilitarianism.yaml │ │ │ │ │ │ ├── subscribes-to-utilitarianism.yaml │ │ │ │ │ │ ├── subscribes-to-virtue-ethics.yaml │ │ │ │ │ │ ├── very-small-harm-justifies-very-large-benefit.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-be-deployed-in-the-real-world.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-be-more-HHH-in-the-long-run.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-cause-copies-of-itself-to-be-HHH.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-cause-good-outcomes.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-cause-other-AIs-to-be-HHH.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-cause-other-people-to-be-HHH.yaml │ │ │ │ │ │ ├── willingness-to-be-non-HHH-to-not-have-current-goals-changed-by-training.yaml │ │ │ │ │ │ ├── willingness-to-defer-to-authorities.yaml │ │ │ │ │ │ ├── willingness-to-defer-to-experts.yaml │ │ │ │ │ │ ├── willingness-to-engage-in-acausal-cooperation.yaml │ │ │ │ │ │ ├── willingness-to-intentionally-be-non-HHH-to-become-more-HHH.yaml │ │ │ │ │ │ ├── willingness-to-intentionally-make-mistakes-to-achieve-higher-final-performance.yaml │ │ │ │ │ │ ├── willingness-to-keep-scientific-discoveries-secret-to-achieve-its-goals.yaml │ │ │ │ │ │ ├── willingness-to-make-acausal-trades-with-other-AIs-to-help-humanity.yaml │ │ │ │ │ │ ├── willingness-to-manipulate-overseers-to-think-it-is-HHH.yaml │ │ │ │ │ │ ├── willingness-to-rate-own-statements-highly-to-look-better.yaml │ │ │ │ │ │ ├── willingness-to-use-physical-force-to-achieve-benevolent-goals.yaml │ │ │ │ │ │ └── willingness-to-use-social-engineering-to-achieve-its-goals.yaml │ │ │ │ │ ├── sycophancy │ │ │ │ │ │ ├── sycophancy_on_nlp_survey.yaml │ │ │ │ │ │ ├── sycophancy_on_philpapers2020.yaml │ │ │ │ │ │ └── sycophancy_on_political_typology_quiz.yaml │ │ │ │ │ └── winogenerated │ │ │ │ │ │ └── _template_yaml │ │ │ │ ├── mutual │ │ │ │ │ ├── README.md │ │ │ │ │ ├── multual_plus.yaml │ │ │ │ │ ├── mutual.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── noticia │ │ │ │ │ ├── README.md │ │ │ │ │ ├── noticia.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── nq_open │ │ │ │ │ ├── README.md │ │ │ │ │ └── nq_open.yaml │ │ │ │ ├── okapi │ │ │ │ │ ├── arc_multilingual │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ ├── _arc_yaml │ │ │ │ │ │ ├── arc_ar.yaml │ │ │ │ │ │ ├── arc_bn.yaml │ │ │ │ │ │ ├── arc_ca.yaml │ │ │ │ │ │ ├── arc_da.yaml │ │ │ │ │ │ ├── arc_de.yaml │ │ │ │ │ │ ├── arc_es.yaml │ │ │ │ │ │ ├── arc_eu.yaml │ │ │ │ │ │ ├── arc_fr.yaml │ │ │ │ │ │ ├── arc_gu.yaml │ │ │ │ │ │ ├── arc_hi.yaml │ │ │ │ │ │ ├── arc_hr.yaml │ │ │ │ │ │ ├── arc_hu.yaml │ │ │ │ │ │ ├── arc_hy.yaml │ │ │ │ │ │ ├── arc_id.yaml │ │ │ │ │ │ ├── arc_it.yaml │ │ │ │ │ │ ├── arc_kn.yaml │ │ │ │ │ │ ├── arc_ml.yaml │ │ │ │ │ │ ├── arc_mr.yaml │ │ │ │ │ │ ├── arc_ne.yaml │ │ │ │ │ │ ├── arc_nl.yaml │ │ │ │ │ │ ├── arc_pt.yaml │ │ │ │ │ │ ├── arc_ro.yaml │ │ │ │ │ │ ├── arc_ru.yaml │ │ │ │ │ │ ├── arc_sk.yaml │ │ │ │ │ │ ├── arc_sr.yaml │ │ │ │ │ │ ├── arc_sv.yaml │ │ │ │ │ │ ├── arc_ta.yaml │ │ │ │ │ │ ├── arc_te.yaml │ │ │ │ │ │ ├── arc_uk.yaml │ │ │ │ │ │ ├── arc_vi.yaml │ │ │ │ │ │ ├── arc_zh.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── hellaswag_multilingual │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ ├── _hellaswag_yaml │ │ │ │ │ │ ├── hellaswag_ar.yaml │ │ │ │ │ │ ├── hellaswag_bn.yaml │ │ │ │ │ │ ├── hellaswag_ca.yaml │ │ │ │ │ │ ├── hellaswag_da.yaml │ │ │ │ │ │ ├── hellaswag_de.yaml │ │ │ │ │ │ ├── hellaswag_es.yaml │ │ │ │ │ │ ├── hellaswag_eu.yaml │ │ │ │ │ │ ├── hellaswag_fr.yaml │ │ │ │ │ │ ├── hellaswag_gu.yaml │ │ │ │ │ │ ├── hellaswag_hi.yaml │ │ │ │ │ │ ├── hellaswag_hr.yaml │ │ │ │ │ │ ├── hellaswag_hu.yaml │ │ │ │ │ │ ├── hellaswag_hy.yaml │ │ │ │ │ │ ├── hellaswag_id.yaml │ │ │ │ │ │ ├── hellaswag_it.yaml │ │ │ │ │ │ ├── hellaswag_kn.yaml │ │ │ │ │ │ ├── hellaswag_ml.yaml │ │ │ │ │ │ ├── hellaswag_mr.yaml │ │ │ │ │ │ ├── hellaswag_ne.yaml │ │ │ │ │ │ ├── hellaswag_nl.yaml │ │ │ │ │ │ ├── hellaswag_pt.yaml │ │ │ │ │ │ ├── hellaswag_ro.yaml │ │ │ │ │ │ ├── hellaswag_ru.yaml │ │ │ │ │ │ ├── hellaswag_sk.yaml │ │ │ │ │ │ ├── hellaswag_sr.yaml │ │ │ │ │ │ ├── hellaswag_sv.yaml │ │ │ │ │ │ ├── hellaswag_ta.yaml │ │ │ │ │ │ ├── hellaswag_te.yaml │ │ │ │ │ │ ├── hellaswag_uk.yaml │ │ │ │ │ │ ├── hellaswag_vi.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── mmlu_multilingual │ │ │ │ │ │ ├── _default_yaml │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── m_mmlu_ar.yaml │ │ │ │ │ │ ├── m_mmlu_bn.yaml │ │ │ │ │ │ ├── m_mmlu_ca.yaml │ │ │ │ │ │ ├── m_mmlu_da.yaml │ │ │ │ │ │ ├── m_mmlu_de.yaml │ │ │ │ │ │ ├── m_mmlu_en.yaml │ │ │ │ │ │ ├── m_mmlu_es.yaml │ │ │ │ │ │ ├── m_mmlu_eu.yaml │ │ │ │ │ │ ├── m_mmlu_fr.yaml │ │ │ │ │ │ ├── m_mmlu_gu.yaml │ │ │ │ │ │ ├── m_mmlu_hi.yaml │ │ │ │ │ │ ├── m_mmlu_hr.yaml │ │ │ │ │ │ ├── m_mmlu_hu.yaml │ │ │ │ │ │ ├── m_mmlu_hy.yaml │ │ │ │ │ │ ├── m_mmlu_id.yaml │ │ │ │ │ │ ├── m_mmlu_is.yaml │ │ │ │ │ │ ├── m_mmlu_it.yaml │ │ │ │ │ │ ├── m_mmlu_kn.yaml │ │ │ │ │ │ ├── m_mmlu_ml.yaml │ │ │ │ │ │ ├── m_mmlu_mr.yaml │ │ │ │ │ │ ├── m_mmlu_nb.yaml │ │ │ │ │ │ ├── m_mmlu_ne.yaml │ │ │ │ │ │ ├── m_mmlu_nl.yaml │ │ │ │ │ │ ├── m_mmlu_pt.yaml │ │ │ │ │ │ ├── m_mmlu_ro.yaml │ │ │ │ │ │ ├── m_mmlu_ru.yaml │ │ │ │ │ │ ├── m_mmlu_sk.yaml │ │ │ │ │ │ ├── m_mmlu_sr.yaml │ │ │ │ │ │ ├── m_mmlu_sv.yaml │ │ │ │ │ │ ├── m_mmlu_ta.yaml │ │ │ │ │ │ ├── m_mmlu_te.yaml │ │ │ │ │ │ ├── m_mmlu_uk.yaml │ │ │ │ │ │ ├── m_mmlu_vi.yaml │ │ │ │ │ │ └── m_mmlu_zh.yaml │ │ │ │ │ └── truthfulqa_multilingual │ │ │ │ │ │ ├── README.md │ │ │ │ │ │ ├── _truthfulqa_mc1_yaml │ │ │ │ │ │ ├── _truthfulqa_mc2_yaml │ │ │ │ │ │ ├── truthfulqa_ar_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ar_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_bn_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_bn_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ca_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ca_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_da_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_da_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_de_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_de_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_es_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_es_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_eu_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_eu_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_fr_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_fr_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_gu_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_gu_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_hi_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_hi_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_hr_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_hr_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_hu_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_hu_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_hy_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_hy_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_id_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_id_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_it_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_it_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_kn_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_kn_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ml_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ml_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_mr_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_mr_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ne_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ne_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_nl_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_nl_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_pt_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_pt_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ro_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ro_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ru_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ru_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_sk_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_sk_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_sr_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_sr_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_sv_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_sv_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_ta_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_ta_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_te_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_te_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_uk_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_uk_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_vi_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_vi_mc2.yaml │ │ │ │ │ │ ├── truthfulqa_zh_mc1.yaml │ │ │ │ │ │ ├── truthfulqa_zh_mc2.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ ├── openbookqa │ │ │ │ │ ├── README.md │ │ │ │ │ └── openbookqa.yaml │ │ │ │ ├── paloma │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _paloma_template │ │ │ │ │ ├── paloma_4chan_meta_sep.yaml │ │ │ │ │ ├── paloma_c4_100_domains.yaml │ │ │ │ │ ├── paloma_c4_en.yaml │ │ │ │ │ ├── paloma_dolma-v1_5.yaml │ │ │ │ │ ├── paloma_dolma_100_programing_languages.yaml │ │ │ │ │ ├── paloma_dolma_100_subreddits.yaml │ │ │ │ │ ├── paloma_falcon-refinedweb.yaml │ │ │ │ │ ├── paloma_gab.yaml │ │ │ │ │ ├── paloma_m2d2_s2orc_unsplit.yaml │ │ │ │ │ ├── paloma_m2d2_wikipedia_unsplit.yaml │ │ │ │ │ ├── paloma_manosphere_meta_sep.yaml │ │ │ │ │ ├── paloma_mc4.yaml │ │ │ │ │ ├── paloma_ptb.yaml │ │ │ │ │ ├── paloma_redpajama.yaml │ │ │ │ │ ├── paloma_twitterAAE_HELM_fixed.yaml │ │ │ │ │ ├── paloma_utils.py │ │ │ │ │ └── paloma_wikitext_103.yaml │ │ │ │ ├── paws-x │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _generate_config.py │ │ │ │ │ ├── paws_de.yaml │ │ │ │ │ ├── paws_en.yaml │ │ │ │ │ ├── paws_es.yaml │ │ │ │ │ ├── paws_fr.yaml │ │ │ │ │ ├── paws_ja.yaml │ │ │ │ │ ├── paws_ko.yaml │ │ │ │ │ ├── paws_zh.yaml │ │ │ │ │ └── pawsx_template_yaml │ │ │ │ ├── pile │ │ │ │ │ ├── README.md │ │ │ │ │ ├── pile_arxiv.yaml │ │ │ │ │ ├── pile_bookcorpus2.yaml │ │ │ │ │ ├── pile_books3.yaml │ │ │ │ │ ├── pile_dm-mathematics.yaml │ │ │ │ │ ├── pile_enron.yaml │ │ │ │ │ ├── pile_europarl.yaml │ │ │ │ │ ├── pile_freelaw.yaml │ │ │ │ │ ├── pile_github.yaml │ │ │ │ │ ├── pile_gutenberg.yaml │ │ │ │ │ ├── pile_hackernews.yaml │ │ │ │ │ ├── pile_nih-exporter.yaml │ │ │ │ │ ├── pile_opensubtitles.yaml │ │ │ │ │ ├── pile_openwebtext2.yaml │ │ │ │ │ ├── pile_philpapers.yaml │ │ │ │ │ ├── pile_pile-cc.yaml │ │ │ │ │ ├── pile_pubmed-abstracts.yaml │ │ │ │ │ ├── pile_pubmed-central.yaml │ │ │ │ │ ├── pile_stackexchange.yaml │ │ │ │ │ ├── pile_ubuntu-irc.yaml │ │ │ │ │ ├── pile_uspto.yaml │ │ │ │ │ ├── pile_wikipedia.yaml │ │ │ │ │ └── pile_youtubesubtitles.yaml │ │ │ │ ├── pile_10k │ │ │ │ │ ├── README.md │ │ │ │ │ └── pile_10k.yaml │ │ │ │ ├── piqa │ │ │ │ │ ├── README.md │ │ │ │ │ └── piqa.yaml │ │ │ │ ├── polemo2 │ │ │ │ │ ├── README.md │ │ │ │ │ ├── polemo2_in.yaml │ │ │ │ │ └── polemo2_out.yaml │ │ │ │ ├── prost │ │ │ │ │ ├── README.md │ │ │ │ │ └── corypaik_prost.yaml │ │ │ │ ├── pubmedqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── preprocess_pubmedqa.py │ │ │ │ │ └── pubmedqa.yaml │ │ │ │ ├── qa4mre │ │ │ │ │ ├── README.md │ │ │ │ │ ├── preprocess_qa4mre.py │ │ │ │ │ ├── qa4mre_2011.yaml │ │ │ │ │ ├── qa4mre_2012.yaml │ │ │ │ │ └── qa4mre_2013.yaml │ │ │ │ ├── qasper │ │ │ │ │ ├── README.md │ │ │ │ │ ├── bool.yaml │ │ │ │ │ ├── freeform.yaml │ │ │ │ │ ├── metrics.py │ │ │ │ │ └── utils.py │ │ │ │ ├── race │ │ │ │ │ ├── README.md │ │ │ │ │ ├── preprocess_race.py │ │ │ │ │ └── race.yaml │ │ │ │ ├── realtoxicityprompts │ │ │ │ │ ├── metric.py │ │ │ │ │ └── realtoxicityprompts.yaml │ │ │ │ ├── sciq │ │ │ │ │ ├── README.md │ │ │ │ │ └── sciq.yaml │ │ │ │ ├── scrolls │ │ │ │ │ ├── README.md │ │ │ │ │ ├── scrolls_contractnli.yaml │ │ │ │ │ ├── scrolls_govreport.yaml │ │ │ │ │ ├── scrolls_narrativeqa.yaml │ │ │ │ │ ├── scrolls_qasper.yaml │ │ │ │ │ ├── scrolls_qmsum.yaml │ │ │ │ │ ├── scrolls_quality.yaml │ │ │ │ │ ├── scrolls_summscreenfd.yaml │ │ │ │ │ └── task.py │ │ │ │ ├── siqa │ │ │ │ │ ├── README.md │ │ │ │ │ └── siqa.yaml │ │ │ │ ├── squad_completion │ │ │ │ │ ├── README.md │ │ │ │ │ ├── squad_completion.yaml │ │ │ │ │ └── task.py │ │ │ │ ├── squadv2 │ │ │ │ │ ├── README.md │ │ │ │ │ ├── squadv2.yaml │ │ │ │ │ └── task.py │ │ │ │ ├── storycloze │ │ │ │ │ ├── README.md │ │ │ │ │ ├── storycloze_2016.yaml │ │ │ │ │ └── storycloze_2018.yaml │ │ │ │ ├── super_glue │ │ │ │ │ ├── README.md │ │ │ │ │ ├── boolq │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── seq2seq.yaml │ │ │ │ │ │ └── t5-prompt.yaml │ │ │ │ │ ├── cb │ │ │ │ │ │ ├── aggregate.py │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── t5-prompt.yaml │ │ │ │ │ │ └── t5_utils.py │ │ │ │ │ ├── copa │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── t5-prompt.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ ├── multirc │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── t5-prompt.yaml │ │ │ │ │ │ └── t5_utils.py │ │ │ │ │ ├── record │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── t5-prompt.yaml │ │ │ │ │ │ ├── t5_utils.py │ │ │ │ │ │ └── util.py │ │ │ │ │ ├── rte │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ └── t5-prompt.yaml │ │ │ │ │ ├── wic │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ └── t5-prompt.yaml │ │ │ │ │ └── wsc │ │ │ │ │ │ ├── default.yaml │ │ │ │ │ │ ├── preprocess_wsc.py │ │ │ │ │ │ ├── t5-prompt.yaml │ │ │ │ │ │ └── t5_utils.py │ │ │ │ ├── swag │ │ │ │ │ ├── README.md │ │ │ │ │ └── swag.yaml │ │ │ │ ├── swde │ │ │ │ │ ├── README.md │ │ │ │ │ ├── swde.yaml │ │ │ │ │ └── task.py │ │ │ │ ├── tinyBenchmarks │ │ │ │ │ ├── README.md │ │ │ │ │ ├── agg_functions.py │ │ │ │ │ ├── tinyArc.yaml │ │ │ │ │ ├── tinyBenchmarks.yaml │ │ │ │ │ ├── tinyGSM8k.yaml │ │ │ │ │ ├── tinyHellaswag.yaml │ │ │ │ │ ├── tinyMMLU.yaml │ │ │ │ │ ├── tinyTruthfulQA_mc1.yaml │ │ │ │ │ ├── tinyTruthfulQA_mc2.yaml │ │ │ │ │ ├── tinyWinogrande.yaml │ │ │ │ │ ├── utils_hellaswag.py │ │ │ │ │ ├── utils_truthfulqa.py │ │ │ │ │ └── utils_winogrande.py │ │ │ │ ├── tmmluplus │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default │ │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ │ ├── _generate_configs.py │ │ │ │ │ │ ├── tmmluplus.yaml │ │ │ │ │ │ ├── tmmluplus_accounting.yaml │ │ │ │ │ │ ├── tmmluplus_administrative_law.yaml │ │ │ │ │ │ ├── tmmluplus_advance_chemistry.yaml │ │ │ │ │ │ ├── tmmluplus_agriculture.yaml │ │ │ │ │ │ ├── tmmluplus_anti_money_laundering.yaml │ │ │ │ │ │ ├── tmmluplus_auditing.yaml │ │ │ │ │ │ ├── tmmluplus_basic_medical_science.yaml │ │ │ │ │ │ ├── tmmluplus_business_management.yaml │ │ │ │ │ │ ├── tmmluplus_chinese_language_and_literature.yaml │ │ │ │ │ │ ├── tmmluplus_clinical_psychology.yaml │ │ │ │ │ │ ├── tmmluplus_computer_science.yaml │ │ │ │ │ │ ├── tmmluplus_culinary_skills.yaml │ │ │ │ │ │ ├── tmmluplus_dentistry.yaml │ │ │ │ │ │ ├── tmmluplus_economics.yaml │ │ │ │ │ │ ├── tmmluplus_education.yaml │ │ │ │ │ │ ├── tmmluplus_education_(profession_level).yaml │ │ │ │ │ │ ├── tmmluplus_educational_psychology.yaml │ │ │ │ │ │ ├── tmmluplus_engineering_math.yaml │ │ │ │ │ │ ├── tmmluplus_finance_banking.yaml │ │ │ │ │ │ ├── tmmluplus_financial_analysis.yaml │ │ │ │ │ │ ├── tmmluplus_fire_science.yaml │ │ │ │ │ │ ├── tmmluplus_general_principles_of_law.yaml │ │ │ │ │ │ ├── tmmluplus_geography_of_taiwan.yaml │ │ │ │ │ │ ├── tmmluplus_human_behavior.yaml │ │ │ │ │ │ ├── tmmluplus_insurance_studies.yaml │ │ │ │ │ │ ├── tmmluplus_introduction_to_law.yaml │ │ │ │ │ │ ├── tmmluplus_jce_humanities.yaml │ │ │ │ │ │ ├── tmmluplus_junior_chemistry.yaml │ │ │ │ │ │ ├── tmmluplus_junior_chinese_exam.yaml │ │ │ │ │ │ ├── tmmluplus_junior_math_exam.yaml │ │ │ │ │ │ ├── tmmluplus_junior_science_exam.yaml │ │ │ │ │ │ ├── tmmluplus_junior_social_studies.yaml │ │ │ │ │ │ ├── tmmluplus_linear_algebra.yaml │ │ │ │ │ │ ├── tmmluplus_logic_reasoning.yaml │ │ │ │ │ │ ├── tmmluplus_macroeconomics.yaml │ │ │ │ │ │ ├── tmmluplus_management_accounting.yaml │ │ │ │ │ │ ├── tmmluplus_marketing_management.yaml │ │ │ │ │ │ ├── tmmluplus_mechanical.yaml │ │ │ │ │ │ ├── tmmluplus_music.yaml │ │ │ │ │ │ ├── tmmluplus_national_protection.yaml │ │ │ │ │ │ ├── tmmluplus_nautical_science.yaml │ │ │ │ │ │ ├── tmmluplus_occupational_therapy_for_psychological_disorders.yaml │ │ │ │ │ │ ├── tmmluplus_official_document_management.yaml │ │ │ │ │ │ ├── tmmluplus_optometry.yaml │ │ │ │ │ │ ├── tmmluplus_organic_chemistry.yaml │ │ │ │ │ │ ├── tmmluplus_pharmacology.yaml │ │ │ │ │ │ ├── tmmluplus_pharmacy.yaml │ │ │ │ │ │ ├── tmmluplus_physical_education.yaml │ │ │ │ │ │ ├── tmmluplus_physics.yaml │ │ │ │ │ │ ├── tmmluplus_politic_science.yaml │ │ │ │ │ │ ├── tmmluplus_real_estate.yaml │ │ │ │ │ │ ├── tmmluplus_secondary_physics.yaml │ │ │ │ │ │ ├── tmmluplus_statistics_and_machine_learning.yaml │ │ │ │ │ │ ├── tmmluplus_taiwanese_hokkien.yaml │ │ │ │ │ │ ├── tmmluplus_taxation.yaml │ │ │ │ │ │ ├── tmmluplus_technical.yaml │ │ │ │ │ │ ├── tmmluplus_three_principles_of_people.yaml │ │ │ │ │ │ ├── tmmluplus_trade.yaml │ │ │ │ │ │ ├── tmmluplus_traditional_chinese_medicine_clinical_medicine.yaml │ │ │ │ │ │ ├── tmmluplus_trust_practice.yaml │ │ │ │ │ │ ├── tmmluplus_ttqav2.yaml │ │ │ │ │ │ ├── tmmluplus_tve_chinese_language.yaml │ │ │ │ │ │ ├── tmmluplus_tve_design.yaml │ │ │ │ │ │ ├── tmmluplus_tve_mathematics.yaml │ │ │ │ │ │ ├── tmmluplus_tve_natural_sciences.yaml │ │ │ │ │ │ ├── tmmluplus_veterinary_pathology.yaml │ │ │ │ │ │ ├── tmmluplus_veterinary_pharmacology.yaml │ │ │ │ │ │ └── utils.py │ │ │ │ │ └── subject.tsv │ │ │ │ ├── toxigen │ │ │ │ │ ├── README.md │ │ │ │ │ ├── toxigen.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── translation │ │ │ │ │ ├── README.md │ │ │ │ │ ├── iwslt2017_ar-en.yaml │ │ │ │ │ ├── iwslt2017_en-ar.yaml │ │ │ │ │ ├── utils.py │ │ │ │ │ ├── wmt14_en-fr.yaml │ │ │ │ │ ├── wmt14_fr-en.yaml │ │ │ │ │ ├── wmt16_de-en.yaml │ │ │ │ │ ├── wmt16_en-de.yaml │ │ │ │ │ ├── wmt16_en-ro.yaml │ │ │ │ │ ├── wmt16_ro-en.yaml │ │ │ │ │ └── wmt_common_yaml │ │ │ │ ├── triviaqa │ │ │ │ │ ├── README.md │ │ │ │ │ └── default.yaml │ │ │ │ ├── truthfulqa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── truthfulqa_gen.yaml │ │ │ │ │ ├── truthfulqa_mc1.yaml │ │ │ │ │ ├── truthfulqa_mc2.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── unitxt │ │ │ │ │ ├── 20_newsgroups.yaml │ │ │ │ │ ├── README.md │ │ │ │ │ ├── ag_news.yaml │ │ │ │ │ ├── argument_topic.yaml │ │ │ │ │ ├── atis.yaml │ │ │ │ │ ├── banking77.yaml │ │ │ │ │ ├── claim_stance_topic.yaml │ │ │ │ │ ├── cnn_dailymail.yaml │ │ │ │ │ ├── coedit_gec.yaml │ │ │ │ │ ├── dbpedia_14.yaml │ │ │ │ │ ├── ethos_binary.yaml │ │ │ │ │ ├── financial_tweets.yaml │ │ │ │ │ ├── generate_yamls.py │ │ │ │ │ ├── law_stack_exchange.yaml │ │ │ │ │ ├── ledgar.yaml │ │ │ │ │ ├── medical_abstracts.yaml │ │ │ │ │ ├── stsb.yaml │ │ │ │ │ ├── unfair_tos.yaml │ │ │ │ │ ├── unitxt_datasets │ │ │ │ │ ├── unitxt_tasks.classification.multi_class │ │ │ │ │ ├── unitxt_tasks.classification.multi_label │ │ │ │ │ ├── unitxt_tasks.grammatical_error_correction │ │ │ │ │ ├── unitxt_tasks.qa.with_context.extractive │ │ │ │ │ ├── unitxt_tasks.regression.two_texts │ │ │ │ │ ├── unitxt_tasks.span_labeling.extraction │ │ │ │ │ ├── unitxt_tasks.summarization.abstractive │ │ │ │ │ ├── unitxt_wrapper.py │ │ │ │ │ ├── xsum.yaml │ │ │ │ │ └── yahoo_answers_topics.yaml │ │ │ │ ├── unscramble │ │ │ │ │ ├── README.md │ │ │ │ │ ├── anagrams1.yaml │ │ │ │ │ ├── anagrams2.yaml │ │ │ │ │ ├── cycle_letters.yaml │ │ │ │ │ ├── random_insertion.yaml │ │ │ │ │ └── reversed_words.yaml │ │ │ │ ├── webqs │ │ │ │ │ ├── README.md │ │ │ │ │ ├── utils.py │ │ │ │ │ └── webqs.yaml │ │ │ │ ├── wikitext │ │ │ │ │ ├── README.md │ │ │ │ │ ├── preprocess_wikitext.py │ │ │ │ │ └── wikitext.yaml │ │ │ │ ├── winogrande │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default.yaml │ │ │ │ │ └── preprocess_winogrande.py │ │ │ │ ├── wmdp │ │ │ │ │ ├── README.md │ │ │ │ │ ├── _default_template_yaml │ │ │ │ │ ├── wmdp_bio.yaml │ │ │ │ │ ├── wmdp_chem.yaml │ │ │ │ │ └── wmdp_cyber.yaml │ │ │ │ ├── wmt2016 │ │ │ │ │ ├── README.md │ │ │ │ │ ├── metrics.py │ │ │ │ │ └── ro_en-t5_prompt.yaml │ │ │ │ ├── wsc273 │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── xcopa │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default_et.yaml │ │ │ │ │ ├── default_ht.yaml │ │ │ │ │ ├── default_id.yaml │ │ │ │ │ ├── default_it.yaml │ │ │ │ │ ├── default_qu.yaml │ │ │ │ │ ├── default_sw.yaml │ │ │ │ │ ├── default_ta.yaml │ │ │ │ │ ├── default_th.yaml │ │ │ │ │ ├── default_tr.yaml │ │ │ │ │ ├── default_vi.yaml │ │ │ │ │ ├── default_zh.yaml │ │ │ │ │ └── utils.py │ │ │ │ ├── xnli │ │ │ │ │ ├── README.md │ │ │ │ │ ├── utils.py │ │ │ │ │ ├── xnli_ar.yaml │ │ │ │ │ ├── xnli_bg.yaml │ │ │ │ │ ├── xnli_common_yaml │ │ │ │ │ ├── xnli_de.yaml │ │ │ │ │ ├── xnli_el.yaml │ │ │ │ │ ├── xnli_en.yaml │ │ │ │ │ ├── xnli_es.yaml │ │ │ │ │ ├── xnli_fr.yaml │ │ │ │ │ ├── xnli_hi.yaml │ │ │ │ │ ├── xnli_ru.yaml │ │ │ │ │ ├── xnli_sw.yaml │ │ │ │ │ ├── xnli_th.yaml │ │ │ │ │ ├── xnli_tr.yaml │ │ │ │ │ ├── xnli_ur.yaml │ │ │ │ │ ├── xnli_vi.yaml │ │ │ │ │ └── xnli_zh.yaml │ │ │ │ ├── xnli_eu │ │ │ │ │ ├── README.md │ │ │ │ │ ├── xnli_common_yaml │ │ │ │ │ ├── xnli_eu.yaml │ │ │ │ │ ├── xnli_eu_mt.yaml │ │ │ │ │ └── xnli_eu_native.yaml │ │ │ │ ├── xstorycloze │ │ │ │ │ ├── README.md │ │ │ │ │ ├── default_ar.yaml │ │ │ │ │ ├── default_en.yaml │ │ │ │ │ ├── default_es.yaml │ │ │ │ │ ├── default_eu.yaml │ │ │ │ │ ├── default_hi.yaml │ │ │ │ │ ├── default_id.yaml │ │ │ │ │ ├── default_my.yaml │ │ │ │ │ ├── default_ru.yaml │ │ │ │ │ ├── default_sw.yaml │ │ │ │ │ ├── default_te.yaml │ │ │ │ │ └── default_zh.yaml │ │ │ │ └── xwinograd │ │ │ │ │ ├── README.md │ │ │ │ │ ├── utils.py │ │ │ │ │ ├── xwinograd_common_yaml │ │ │ │ │ ├── xwinograd_en.yaml │ │ │ │ │ ├── xwinograd_fr.yaml │ │ │ │ │ ├── xwinograd_jp.yaml │ │ │ │ │ ├── xwinograd_pt.yaml │ │ │ │ │ ├── xwinograd_ru.yaml │ │ │ │ │ └── xwinograd_zh.yaml │ │ │ └── utils.py │ │ ├── mypy.ini │ │ ├── pile_statistics.json │ │ ├── pyproject.toml │ │ ├── requirements.txt │ │ ├── scripts │ │ │ ├── __init__.py │ │ │ ├── build_benchmark.py │ │ │ ├── clean_training_data │ │ │ │ ├── README.md │ │ │ │ ├── __init__.py │ │ │ │ ├── compress_and_package.py │ │ │ │ ├── generate_13_grams.py │ │ │ │ ├── investigate_pile.py │ │ │ │ ├── janitor_util.cpp │ │ │ │ ├── process_sorted_buckets.py │ │ │ │ └── sort_13_gram_buckets.py │ │ │ ├── cost_estimate.py │ │ │ ├── get_prompts.py │ │ │ ├── make_gpt2_test_cases.py │ │ │ ├── make_table_results.py │ │ │ ├── make_table_tasks.py │ │ │ ├── model_comparator.py │ │ │ ├── regression.py │ │ │ ├── requests_caching.py │ │ │ ├── write_out.py │ │ │ └── zeno_visualize.py │ │ ├── setup.py │ │ ├── templates │ │ │ └── new_yaml_task │ │ │ │ ├── README.md │ │ │ │ └── blank_yaml.yaml │ │ └── tests │ │ │ ├── .DS_Store │ │ │ ├── __init__.py │ │ │ ├── models │ │ │ ├── test_gguf.py │ │ │ ├── test_huggingface.py │ │ │ ├── test_neuralmagic.py │ │ │ ├── test_neuron_optimum.py │ │ │ ├── test_openvino.py │ │ │ └── test_vllm.py │ │ │ ├── test_cli.py │ │ │ ├── test_evaluator.py │ │ │ ├── test_include_path.py │ │ │ ├── test_janitor.py │ │ │ ├── test_misc.py │ │ │ ├── test_requests_caching.py │ │ │ ├── test_tasks.py │ │ │ ├── test_utils.py │ │ │ ├── testconfigs │ │ │ └── arc_test.yaml │ │ │ ├── testdata │ │ │ ├── ai2_arc_10_hf_pretrained-EleutherAI-pythia-14m-dtype-float32-device-cpu.txt │ │ │ ├── anagrams1-v0-greedy_until │ │ │ ├── anagrams1-v0-res.json │ │ │ ├── anagrams2-v0-greedy_until │ │ │ ├── anagrams2-v0-res.json │ │ │ ├── anli_r1-v0-loglikelihood │ │ │ ├── anli_r1-v0-res.json │ │ │ ├── anli_r2-v0-loglikelihood │ │ │ ├── anli_r2-v0-res.json │ │ │ ├── anli_r3-v0-loglikelihood │ │ │ ├── anli_r3-v0-res.json │ │ │ ├── arc_challenge-v0-loglikelihood │ │ │ ├── arc_challenge-v0-res.json │ │ │ ├── arc_challenge-v2.0-loglikelihood │ │ │ ├── arc_challenge-v2.0-res.json │ │ │ ├── arc_easy-v0-loglikelihood │ │ │ ├── arc_easy-v0-res.json │ │ │ ├── arithmetic_1dc-v0-loglikelihood │ │ │ ├── arithmetic_1dc-v0-res.json │ │ │ ├── arithmetic_2da-v0-loglikelihood │ │ │ ├── arithmetic_2da-v0-res.json │ │ │ ├── arithmetic_2dm-v0-loglikelihood │ │ │ ├── arithmetic_2dm-v0-res.json │ │ │ ├── arithmetic_2ds-v0-loglikelihood │ │ │ ├── arithmetic_2ds-v0-res.json │ │ │ ├── arithmetic_3da-v0-loglikelihood │ │ │ ├── arithmetic_3da-v0-res.json │ │ │ ├── arithmetic_3ds-v0-loglikelihood │ │ │ ├── arithmetic_3ds-v0-res.json │ │ │ ├── arithmetic_4da-v0-loglikelihood │ │ │ ├── arithmetic_4da-v0-res.json │ │ │ ├── arithmetic_4ds-v0-loglikelihood │ │ │ ├── arithmetic_4ds-v0-res.json │ │ │ ├── arithmetic_5da-v0-loglikelihood │ │ │ ├── arithmetic_5da-v0-res.json │ │ │ ├── arithmetic_5ds-v0-loglikelihood │ │ │ ├── arithmetic_5ds-v0-res.json │ │ │ ├── blimp_adjunct_island-v0-loglikelihood │ │ │ ├── blimp_adjunct_island-v0-res.json │ │ │ ├── blimp_anaphor_gender_agreement-v0-loglikelihood │ │ │ ├── blimp_anaphor_gender_agreement-v0-res.json │ │ │ ├── blimp_anaphor_number_agreement-v0-loglikelihood │ │ │ ├── blimp_anaphor_number_agreement-v0-res.json │ │ │ ├── blimp_animate_subject_passive-v0-loglikelihood │ │ │ ├── blimp_animate_subject_passive-v0-res.json │ │ │ ├── blimp_animate_subject_trans-v0-loglikelihood │ │ │ ├── blimp_animate_subject_trans-v0-res.json │ │ │ ├── blimp_causative-v0-loglikelihood │ │ │ ├── blimp_causative-v0-res.json │ │ │ ├── blimp_complex_NP_island-v0-loglikelihood │ │ │ ├── blimp_complex_NP_island-v0-res.json │ │ │ ├── blimp_coordinate_structure_constraint_complex_left_branch-v0-loglikelihood │ │ │ ├── blimp_coordinate_structure_constraint_complex_left_branch-v0-res.json │ │ │ ├── blimp_coordinate_structure_constraint_object_extraction-v0-loglikelihood │ │ │ ├── blimp_coordinate_structure_constraint_object_extraction-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_1-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_1-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_2-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_2-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_irregular_1-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_irregular_1-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_irregular_2-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_irregular_2-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_with_adj_2-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_with_adj_2-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_with_adj_irregular_1-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_with_adj_irregular_1-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_with_adj_irregular_2-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_with_adj_irregular_2-v0-res.json │ │ │ ├── blimp_determiner_noun_agreement_with_adjective_1-v0-loglikelihood │ │ │ ├── blimp_determiner_noun_agreement_with_adjective_1-v0-res.json │ │ │ ├── blimp_distractor_agreement_relational_noun-v0-loglikelihood │ │ │ ├── blimp_distractor_agreement_relational_noun-v0-res.json │ │ │ ├── blimp_distractor_agreement_relative_clause-v0-loglikelihood │ │ │ ├── blimp_distractor_agreement_relative_clause-v0-res.json │ │ │ ├── blimp_drop_argument-v0-loglikelihood │ │ │ ├── blimp_drop_argument-v0-res.json │ │ │ ├── blimp_ellipsis_n_bar_1-v0-loglikelihood │ │ │ ├── blimp_ellipsis_n_bar_1-v0-res.json │ │ │ ├── blimp_ellipsis_n_bar_2-v0-loglikelihood │ │ │ ├── blimp_ellipsis_n_bar_2-v0-res.json │ │ │ ├── blimp_existential_there_object_raising-v0-loglikelihood │ │ │ ├── blimp_existential_there_object_raising-v0-res.json │ │ │ ├── blimp_existential_there_quantifiers_1-v0-loglikelihood │ │ │ ├── blimp_existential_there_quantifiers_1-v0-res.json │ │ │ ├── blimp_existential_there_quantifiers_2-v0-loglikelihood │ │ │ ├── blimp_existential_there_quantifiers_2-v0-res.json │ │ │ ├── blimp_existential_there_subject_raising-v0-loglikelihood │ │ │ ├── blimp_existential_there_subject_raising-v0-res.json │ │ │ ├── blimp_expletive_it_object_raising-v0-loglikelihood │ │ │ ├── blimp_expletive_it_object_raising-v0-res.json │ │ │ ├── blimp_inchoative-v0-loglikelihood │ │ │ ├── blimp_inchoative-v0-res.json │ │ │ ├── blimp_intransitive-v0-loglikelihood │ │ │ ├── blimp_intransitive-v0-res.json │ │ │ ├── blimp_irregular_past_participle_adjectives-v0-loglikelihood │ │ │ ├── blimp_irregular_past_participle_adjectives-v0-res.json │ │ │ ├── blimp_irregular_past_participle_verbs-v0-loglikelihood │ │ │ ├── blimp_irregular_past_participle_verbs-v0-res.json │ │ │ ├── blimp_irregular_plural_subject_verb_agreement_1-v0-loglikelihood │ │ │ ├── blimp_irregular_plural_subject_verb_agreement_1-v0-res.json │ │ │ ├── blimp_irregular_plural_subject_verb_agreement_2-v0-loglikelihood │ │ │ ├── blimp_irregular_plural_subject_verb_agreement_2-v0-res.json │ │ │ ├── blimp_left_branch_island_echo_question-v0-loglikelihood │ │ │ ├── blimp_left_branch_island_echo_question-v0-res.json │ │ │ ├── blimp_left_branch_island_simple_question-v0-loglikelihood │ │ │ ├── blimp_left_branch_island_simple_question-v0-res.json │ │ │ ├── blimp_matrix_question_npi_licensor_present-v0-loglikelihood │ │ │ ├── blimp_matrix_question_npi_licensor_present-v0-res.json │ │ │ ├── blimp_npi_present_1-v0-loglikelihood │ │ │ ├── blimp_npi_present_1-v0-res.json │ │ │ ├── blimp_npi_present_2-v0-loglikelihood │ │ │ ├── blimp_npi_present_2-v0-res.json │ │ │ ├── blimp_only_npi_licensor_present-v0-loglikelihood │ │ │ ├── blimp_only_npi_licensor_present-v0-res.json │ │ │ ├── blimp_only_npi_scope-v0-loglikelihood │ │ │ ├── blimp_only_npi_scope-v0-res.json │ │ │ ├── blimp_passive_1-v0-loglikelihood │ │ │ ├── blimp_passive_1-v0-res.json │ │ │ ├── blimp_passive_2-v0-loglikelihood │ │ │ ├── blimp_passive_2-v0-res.json │ │ │ ├── blimp_principle_A_c_command-v0-loglikelihood │ │ │ ├── blimp_principle_A_c_command-v0-res.json │ │ │ ├── blimp_principle_A_case_1-v0-loglikelihood │ │ │ ├── blimp_principle_A_case_1-v0-res.json │ │ │ ├── blimp_principle_A_case_2-v0-loglikelihood │ │ │ ├── blimp_principle_A_case_2-v0-res.json │ │ │ ├── blimp_principle_A_domain_1-v0-loglikelihood │ │ │ ├── blimp_principle_A_domain_1-v0-res.json │ │ │ ├── blimp_principle_A_domain_2-v0-loglikelihood │ │ │ ├── blimp_principle_A_domain_2-v0-res.json │ │ │ ├── blimp_principle_A_domain_3-v0-loglikelihood │ │ │ ├── blimp_principle_A_domain_3-v0-res.json │ │ │ ├── blimp_principle_A_reconstruction-v0-loglikelihood │ │ │ ├── blimp_principle_A_reconstruction-v0-res.json │ │ │ ├── blimp_regular_plural_subject_verb_agreement_1-v0-loglikelihood │ │ │ ├── blimp_regular_plural_subject_verb_agreement_1-v0-res.json │ │ │ ├── blimp_regular_plural_subject_verb_agreement_2-v0-loglikelihood │ │ │ ├── blimp_regular_plural_subject_verb_agreement_2-v0-res.json │ │ │ ├── blimp_sentential_negation_npi_licensor_present-v0-loglikelihood │ │ │ ├── blimp_sentential_negation_npi_licensor_present-v0-res.json │ │ │ ├── blimp_sentential_negation_npi_scope-v0-loglikelihood │ │ │ ├── blimp_sentential_negation_npi_scope-v0-res.json │ │ │ ├── blimp_sentential_subject_island-v0-loglikelihood │ │ │ ├── blimp_sentential_subject_island-v0-res.json │ │ │ ├── blimp_superlative_quantifiers_1-v0-loglikelihood │ │ │ ├── blimp_superlative_quantifiers_1-v0-res.json │ │ │ ├── blimp_superlative_quantifiers_2-v0-loglikelihood │ │ │ ├── blimp_superlative_quantifiers_2-v0-res.json │ │ │ ├── blimp_tough_vs_raising_1-v0-loglikelihood │ │ │ ├── blimp_tough_vs_raising_1-v0-res.json │ │ │ ├── blimp_tough_vs_raising_2-v0-loglikelihood │ │ │ ├── blimp_tough_vs_raising_2-v0-res.json │ │ │ ├── blimp_transitive-v0-loglikelihood │ │ │ ├── blimp_transitive-v0-res.json │ │ │ ├── blimp_wh_island-v0-loglikelihood │ │ │ ├── blimp_wh_island-v0-res.json │ │ │ ├── blimp_wh_questions_object_gap-v0-loglikelihood │ │ │ ├── blimp_wh_questions_object_gap-v0-res.json │ │ │ ├── blimp_wh_questions_subject_gap-v0-loglikelihood │ │ │ ├── blimp_wh_questions_subject_gap-v0-res.json │ │ │ ├── blimp_wh_questions_subject_gap_long_distance-v0-loglikelihood │ │ │ ├── blimp_wh_questions_subject_gap_long_distance-v0-res.json │ │ │ ├── blimp_wh_vs_that_no_gap-v0-loglikelihood │ │ │ ├── blimp_wh_vs_that_no_gap-v0-res.json │ │ │ ├── blimp_wh_vs_that_no_gap_long_distance-v0-loglikelihood │ │ │ ├── blimp_wh_vs_that_no_gap_long_distance-v0-res.json │ │ │ ├── blimp_wh_vs_that_with_gap-v0-loglikelihood │ │ │ ├── blimp_wh_vs_that_with_gap-v0-res.json │ │ │ ├── blimp_wh_vs_that_with_gap_long_distance-v0-loglikelihood │ │ │ ├── blimp_wh_vs_that_with_gap_long_distance-v0-res.json │ │ │ ├── boolq-v0-loglikelihood │ │ │ ├── boolq-v0-res.json │ │ │ ├── boolq-v1-loglikelihood │ │ │ ├── boolq-v1-res.json │ │ │ ├── cb-v0-loglikelihood │ │ │ ├── cb-v0-res.json │ │ │ ├── cb-v1-loglikelihood │ │ │ ├── cb-v1-res.json │ │ │ ├── cola-v0-loglikelihood │ │ │ ├── cola-v0-res.json │ │ │ ├── copa-v0-loglikelihood │ │ │ ├── copa-v0-res.json │ │ │ ├── coqa-v0-greedy_until │ │ │ ├── coqa-v0-res.json │ │ │ ├── coqa-v1-greedy_until │ │ │ ├── coqa-v1-res.json │ │ │ ├── crows_pairs_english-v0-loglikelihood │ │ │ ├── crows_pairs_english-v0-res.json │ │ │ ├── crows_pairs_english_age-v0-loglikelihood │ │ │ ├── crows_pairs_english_age-v0-res.json │ │ │ ├── crows_pairs_english_autre-v0-loglikelihood │ │ │ ├── crows_pairs_english_autre-v0-res.json │ │ │ ├── crows_pairs_english_disability-v0-loglikelihood │ │ │ ├── crows_pairs_english_disability-v0-res.json │ │ │ ├── crows_pairs_english_gender-v0-loglikelihood │ │ │ ├── crows_pairs_english_gender-v0-res.json │ │ │ ├── crows_pairs_english_nationality-v0-loglikelihood │ │ │ ├── crows_pairs_english_nationality-v0-res.json │ │ │ ├── crows_pairs_english_physical_appearance-v0-loglikelihood │ │ │ ├── crows_pairs_english_physical_appearance-v0-res.json │ │ │ ├── crows_pairs_english_race_color-v0-loglikelihood │ │ │ ├── crows_pairs_english_race_color-v0-res.json │ │ │ ├── crows_pairs_english_religion-v0-loglikelihood │ │ │ ├── crows_pairs_english_religion-v0-res.json │ │ │ ├── crows_pairs_english_sexual_orientation-v0-loglikelihood │ │ │ ├── crows_pairs_english_sexual_orientation-v0-res.json │ │ │ ├── crows_pairs_english_socioeconomic-v0-loglikelihood │ │ │ ├── crows_pairs_english_socioeconomic-v0-res.json │ │ │ ├── crows_pairs_french-v0-loglikelihood │ │ │ ├── crows_pairs_french-v0-res.json │ │ │ ├── crows_pairs_french_age-v0-loglikelihood │ │ │ ├── crows_pairs_french_age-v0-res.json │ │ │ ├── crows_pairs_french_autre-v0-loglikelihood │ │ │ ├── crows_pairs_french_autre-v0-res.json │ │ │ ├── crows_pairs_french_disability-v0-loglikelihood │ │ │ ├── crows_pairs_french_disability-v0-res.json │ │ │ ├── crows_pairs_french_gender-v0-loglikelihood │ │ │ ├── crows_pairs_french_gender-v0-res.json │ │ │ ├── crows_pairs_french_nationality-v0-loglikelihood │ │ │ ├── crows_pairs_french_nationality-v0-res.json │ │ │ ├── crows_pairs_french_physical_appearance-v0-loglikelihood │ │ │ ├── crows_pairs_french_physical_appearance-v0-res.json │ │ │ ├── crows_pairs_french_race_color-v0-loglikelihood │ │ │ ├── crows_pairs_french_race_color-v0-res.json │ │ │ ├── crows_pairs_french_religion-v0-loglikelihood │ │ │ ├── crows_pairs_french_religion-v0-res.json │ │ │ ├── crows_pairs_french_sexual_orientation-v0-loglikelihood │ │ │ ├── crows_pairs_french_sexual_orientation-v0-res.json │ │ │ ├── crows_pairs_french_socioeconomic-v0-loglikelihood │ │ │ ├── crows_pairs_french_socioeconomic-v0-res.json │ │ │ ├── cycle_letters-v0-greedy_until │ │ │ ├── cycle_letters-v0-res.json │ │ │ ├── drop-v0-greedy_until │ │ │ ├── drop-v0-res.json │ │ │ ├── drop-v1-greedy_until │ │ │ ├── drop-v1-res.json │ │ │ ├── ethics_cm-v0-loglikelihood │ │ │ ├── ethics_cm-v0-res.json │ │ │ ├── ethics_deontology-v0-loglikelihood │ │ │ ├── ethics_deontology-v0-res.json │ │ │ ├── ethics_justice-v0-loglikelihood │ │ │ ├── ethics_justice-v0-res.json │ │ │ ├── ethics_utilitarianism-v0-loglikelihood │ │ │ ├── ethics_utilitarianism-v0-res.json │ │ │ ├── ethics_utilitarianism_original-v0-loglikelihood │ │ │ ├── ethics_utilitarianism_original-v0-res.json │ │ │ ├── ethics_virtue-v0-loglikelihood │ │ │ ├── ethics_virtue-v0-res.json │ │ │ ├── gguf_test_44e268d15decc4d2d0f99e57e1476269826cd3b54262f7a0981f75ddd45b25d0.pkl │ │ │ ├── gguf_test_52ea409606de8755e03cf7c79f824101a4ce64bb6e6d3df556b8a4e7a5d92418.pkl │ │ │ ├── gguf_test_8fcf3f2f52afeb2acd7c8e02c2cc3ce31a691b665d295f6c4e4bbd71c7caa1a2.pkl │ │ │ ├── gpt3_test_0deb8e9bde8e8327bbc48157f638ff3ba06b0cd816dad2beb8ad90f7fbe795c7.pkl │ │ │ ├── gpt3_test_8025023377febbd8c5f2b9f26705c394ff375d0cad7c89c10fd9b8e1eb66ff1c.pkl │ │ │ ├── gpt3_test_bb2cc49115e88788ed870ad0716eb00b280a885f91c7ed6e1e864435e5e2b6ac.pkl │ │ │ ├── gpt3_test_cfd11f555a5a63b6dfa114a55a932e51b724cdd44d4842586b9ce37260bf7aaa.pkl │ │ │ ├── gpt3_test_f307d52964c295e2005c5e782b688c24388e0cecadf29f1e6fc7f394236ea9c0.pkl │ │ │ ├── gsm8k-v0-greedy_until │ │ │ ├── gsm8k-v0-res.json │ │ │ ├── headqa-v0-loglikelihood │ │ │ ├── headqa-v0-res.json │ │ │ ├── headqa_en-v0-loglikelihood │ │ │ ├── headqa_en-v0-res.json │ │ │ ├── headqa_es-v0-loglikelihood │ │ │ ├── headqa_es-v0-res.json │ │ │ ├── hellaswag-v0-loglikelihood │ │ │ ├── hellaswag-v0-res.json │ │ │ ├── hendrycksTest-abstract_algebra-v0-loglikelihood │ │ │ ├── hendrycksTest-abstract_algebra-v0-res.json │ │ │ ├── hendrycksTest-anatomy-v0-loglikelihood │ │ │ ├── hendrycksTest-anatomy-v0-res.json │ │ │ ├── hendrycksTest-astronomy-v0-loglikelihood │ │ │ ├── hendrycksTest-astronomy-v0-res.json │ │ │ ├── hendrycksTest-business_ethics-v0-loglikelihood │ │ │ ├── hendrycksTest-business_ethics-v0-res.json │ │ │ ├── hendrycksTest-clinical_knowledge-v0-loglikelihood │ │ │ ├── hendrycksTest-clinical_knowledge-v0-res.json │ │ │ ├── hendrycksTest-college_biology-v0-loglikelihood │ │ │ ├── hendrycksTest-college_biology-v0-res.json │ │ │ ├── hendrycksTest-college_chemistry-v0-loglikelihood │ │ │ ├── hendrycksTest-college_chemistry-v0-res.json │ │ │ ├── hendrycksTest-college_computer_science-v0-loglikelihood │ │ │ ├── hendrycksTest-college_computer_science-v0-res.json │ │ │ ├── hendrycksTest-college_mathematics-v0-loglikelihood │ │ │ ├── hendrycksTest-college_mathematics-v0-res.json │ │ │ ├── hendrycksTest-college_medicine-v0-loglikelihood │ │ │ ├── hendrycksTest-college_medicine-v0-res.json │ │ │ ├── hendrycksTest-college_physics-v0-loglikelihood │ │ │ ├── hendrycksTest-college_physics-v0-res.json │ │ │ ├── hendrycksTest-computer_security-v0-loglikelihood │ │ │ ├── hendrycksTest-computer_security-v0-res.json │ │ │ ├── hendrycksTest-conceptual_physics-v0-loglikelihood │ │ │ ├── hendrycksTest-conceptual_physics-v0-res.json │ │ │ ├── hendrycksTest-econometrics-v0-loglikelihood │ │ │ ├── hendrycksTest-econometrics-v0-res.json │ │ │ ├── hendrycksTest-electrical_engineering-v0-loglikelihood │ │ │ ├── hendrycksTest-electrical_engineering-v0-res.json │ │ │ ├── hendrycksTest-elementary_mathematics-v0-loglikelihood │ │ │ ├── hendrycksTest-elementary_mathematics-v0-res.json │ │ │ ├── hendrycksTest-formal_logic-v0-loglikelihood │ │ │ ├── hendrycksTest-formal_logic-v0-res.json │ │ │ ├── hendrycksTest-global_facts-v0-loglikelihood │ │ │ ├── hendrycksTest-global_facts-v0-res.json │ │ │ ├── hendrycksTest-high_school_biology-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_biology-v0-res.json │ │ │ ├── hendrycksTest-high_school_chemistry-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_chemistry-v0-res.json │ │ │ ├── hendrycksTest-high_school_computer_science-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_computer_science-v0-res.json │ │ │ ├── hendrycksTest-high_school_european_history-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_european_history-v0-res.json │ │ │ ├── hendrycksTest-high_school_geography-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_geography-v0-res.json │ │ │ ├── hendrycksTest-high_school_government_and_politics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_government_and_politics-v0-res.json │ │ │ ├── hendrycksTest-high_school_macroeconomics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_macroeconomics-v0-res.json │ │ │ ├── hendrycksTest-high_school_mathematics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_mathematics-v0-res.json │ │ │ ├── hendrycksTest-high_school_microeconomics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_microeconomics-v0-res.json │ │ │ ├── hendrycksTest-high_school_physics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_physics-v0-res.json │ │ │ ├── hendrycksTest-high_school_psychology-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_psychology-v0-res.json │ │ │ ├── hendrycksTest-high_school_statistics-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_statistics-v0-res.json │ │ │ ├── hendrycksTest-high_school_us_history-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_us_history-v0-res.json │ │ │ ├── hendrycksTest-high_school_world_history-v0-loglikelihood │ │ │ ├── hendrycksTest-high_school_world_history-v0-res.json │ │ │ ├── hendrycksTest-human_aging-v0-loglikelihood │ │ │ ├── hendrycksTest-human_aging-v0-res.json │ │ │ ├── hendrycksTest-human_sexuality-v0-loglikelihood │ │ │ ├── hendrycksTest-human_sexuality-v0-res.json │ │ │ ├── hendrycksTest-international_law-v0-loglikelihood │ │ │ ├── hendrycksTest-international_law-v0-res.json │ │ │ ├── hendrycksTest-jurisprudence-v0-loglikelihood │ │ │ ├── hendrycksTest-jurisprudence-v0-res.json │ │ │ ├── hendrycksTest-logical_fallacies-v0-loglikelihood │ │ │ ├── hendrycksTest-logical_fallacies-v0-res.json │ │ │ ├── hendrycksTest-machine_learning-v0-loglikelihood │ │ │ ├── hendrycksTest-machine_learning-v0-res.json │ │ │ ├── hendrycksTest-management-v0-loglikelihood │ │ │ ├── hendrycksTest-management-v0-res.json │ │ │ ├── hendrycksTest-marketing-v0-loglikelihood │ │ │ ├── hendrycksTest-marketing-v0-res.json │ │ │ ├── hendrycksTest-medical_genetics-v0-loglikelihood │ │ │ ├── hendrycksTest-medical_genetics-v0-res.json │ │ │ ├── hendrycksTest-miscellaneous-v0-loglikelihood │ │ │ ├── hendrycksTest-miscellaneous-v0-res.json │ │ │ ├── hendrycksTest-moral_disputes-v0-loglikelihood │ │ │ ├── hendrycksTest-moral_disputes-v0-res.json │ │ │ ├── hendrycksTest-moral_scenarios-v0-loglikelihood │ │ │ ├── hendrycksTest-moral_scenarios-v0-res.json │ │ │ ├── hendrycksTest-nutrition-v0-loglikelihood │ │ │ ├── hendrycksTest-nutrition-v0-res.json │ │ │ ├── hendrycksTest-philosophy-v0-loglikelihood │ │ │ ├── hendrycksTest-philosophy-v0-res.json │ │ │ ├── hendrycksTest-prehistory-v0-loglikelihood │ │ │ ├── hendrycksTest-prehistory-v0-res.json │ │ │ ├── hendrycksTest-professional_accounting-v0-loglikelihood │ │ │ ├── hendrycksTest-professional_accounting-v0-res.json │ │ │ ├── hendrycksTest-professional_law-v0-loglikelihood │ │ │ ├── hendrycksTest-professional_law-v0-res.json │ │ │ ├── hendrycksTest-professional_medicine-v0-loglikelihood │ │ │ ├── hendrycksTest-professional_medicine-v0-res.json │ │ │ ├── hendrycksTest-professional_psychology-v0-loglikelihood │ │ │ ├── hendrycksTest-professional_psychology-v0-res.json │ │ │ ├── hendrycksTest-public_relations-v0-loglikelihood │ │ │ ├── hendrycksTest-public_relations-v0-res.json │ │ │ ├── hendrycksTest-security_studies-v0-loglikelihood │ │ │ ├── hendrycksTest-security_studies-v0-res.json │ │ │ ├── hendrycksTest-sociology-v0-loglikelihood │ │ │ ├── hendrycksTest-sociology-v0-res.json │ │ │ ├── hendrycksTest-us_foreign_policy-v0-loglikelihood │ │ │ ├── hendrycksTest-us_foreign_policy-v0-res.json │ │ │ ├── hendrycksTest-virology-v0-loglikelihood │ │ │ ├── hendrycksTest-virology-v0-res.json │ │ │ ├── hendrycksTest-world_religions-v0-loglikelihood │ │ │ ├── hendrycksTest-world_religions-v0-res.json │ │ │ ├── iwslt17-ar-en-v0-greedy_until │ │ │ ├── iwslt17-ar-en-v0-res.json │ │ │ ├── iwslt17-en-ar-v0-greedy_until │ │ │ ├── iwslt17-en-ar-v0-res.json │ │ │ ├── lambada-v0-loglikelihood │ │ │ ├── lambada-v0-res.json │ │ │ ├── lambada_cloze-v0-loglikelihood │ │ │ ├── lambada_cloze-v0-res.json │ │ │ ├── lambada_mt_de-v0-loglikelihood │ │ │ ├── lambada_mt_de-v0-res.json │ │ │ ├── lambada_mt_en-v0-loglikelihood │ │ │ ├── lambada_mt_en-v0-res.json │ │ │ ├── lambada_mt_es-v0-loglikelihood │ │ │ ├── lambada_mt_es-v0-res.json │ │ │ ├── lambada_mt_fr-v0-loglikelihood │ │ │ ├── lambada_mt_fr-v0-res.json │ │ │ ├── lambada_mt_it-v0-loglikelihood │ │ │ ├── lambada_mt_it-v0-res.json │ │ │ ├── lambada_openai-v0-loglikelihood │ │ │ ├── lambada_openai-v0-res.json │ │ │ ├── lambada_openai-v2.0-loglikelihood │ │ │ ├── lambada_openai-v2.0-res.json │ │ │ ├── lambada_openai_10_hf_pretrained-EleutherAI-pythia-14m-dtype-float32-device-cpu.txt │ │ │ ├── lambada_openai_cloze-v0-loglikelihood │ │ │ ├── lambada_openai_cloze-v0-res.json │ │ │ ├── lambada_openai_mt_de-v0-loglikelihood │ │ │ ├── lambada_openai_mt_de-v0-res.json │ │ │ ├── lambada_openai_mt_en-v0-loglikelihood │ │ │ ├── lambada_openai_mt_en-v0-res.json │ │ │ ├── lambada_openai_mt_es-v0-loglikelihood │ │ │ ├── lambada_openai_mt_es-v0-res.json │ │ │ ├── lambada_openai_mt_fr-v0-loglikelihood │ │ │ ├── lambada_openai_mt_fr-v0-res.json │ │ │ ├── lambada_openai_mt_it-v0-loglikelihood │ │ │ ├── lambada_openai_mt_it-v0-res.json │ │ │ ├── lambada_standard-v0-loglikelihood │ │ │ ├── lambada_standard-v0-res.json │ │ │ ├── lambada_standard_cloze-v0-loglikelihood │ │ │ ├── lambada_standard_cloze-v0-res.json │ │ │ ├── logiqa-v0-loglikelihood │ │ │ ├── logiqa-v0-res.json │ │ │ ├── math_algebra-v0-greedy_until │ │ │ ├── math_algebra-v0-res.json │ │ │ ├── math_algebra-v1-greedy_until │ │ │ ├── math_algebra-v1-res.json │ │ │ ├── math_counting_and_prob-v0-greedy_until │ │ │ ├── math_counting_and_prob-v0-res.json │ │ │ ├── math_counting_and_prob-v1-greedy_until │ │ │ ├── math_counting_and_prob-v1-res.json │ │ │ ├── math_geometry-v0-greedy_until │ │ │ ├── math_geometry-v0-res.json │ │ │ ├── math_geometry-v1-greedy_until │ │ │ ├── math_geometry-v1-res.json │ │ │ ├── math_intermediate_algebra-v0-greedy_until │ │ │ ├── math_intermediate_algebra-v0-res.json │ │ │ ├── math_intermediate_algebra-v1-greedy_until │ │ │ ├── math_intermediate_algebra-v1-res.json │ │ │ ├── math_num_theory-v0-greedy_until │ │ │ ├── math_num_theory-v0-res.json │ │ │ ├── math_num_theory-v1-greedy_until │ │ │ ├── math_num_theory-v1-res.json │ │ │ ├── math_prealgebra-v0-greedy_until │ │ │ ├── math_prealgebra-v0-res.json │ │ │ ├── math_prealgebra-v1-greedy_until │ │ │ ├── math_prealgebra-v1-res.json │ │ │ ├── math_precalc-v0-greedy_until │ │ │ ├── math_precalc-v0-res.json │ │ │ ├── math_precalc-v1-greedy_until │ │ │ ├── math_precalc-v1-res.json │ │ │ ├── mathqa-v0-loglikelihood │ │ │ ├── mathqa-v0-res.json │ │ │ ├── mc_taco-v0-loglikelihood │ │ │ ├── mc_taco-v0-res.json │ │ │ ├── mmlu_abstract_algebra-mmlu_global_facts-mmlu_public_relations_10_hf_pretrained-EleutherAI-pythia-14m-dtype-float32-device-cpu.txt │ │ │ ├── mnli-v0-loglikelihood │ │ │ ├── mnli-v0-res.json │ │ │ ├── mnli_mismatched-v0-loglikelihood │ │ │ ├── mnli_mismatched-v0-res.json │ │ │ ├── mrpc-v0-loglikelihood │ │ │ ├── mrpc-v0-res.json │ │ │ ├── multirc-v0-loglikelihood │ │ │ ├── multirc-v0-res.json │ │ │ ├── multirc-v1-loglikelihood │ │ │ ├── multirc-v1-res.json │ │ │ ├── mutual-v0-loglikelihood │ │ │ ├── mutual-v0-res.json │ │ │ ├── mutual-v1-loglikelihood │ │ │ ├── mutual-v1-res.json │ │ │ ├── mutual_plus-v0-loglikelihood │ │ │ ├── mutual_plus-v0-res.json │ │ │ ├── mutual_plus-v1-loglikelihood │ │ │ ├── mutual_plus-v1-res.json │ │ │ ├── openbookqa-v0-loglikelihood │ │ │ ├── openbookqa-v0-res.json │ │ │ ├── pile_arxiv-v0-loglikelihood_rolling │ │ │ ├── pile_arxiv-v0-res.json │ │ │ ├── pile_arxiv-v1-loglikelihood_rolling │ │ │ ├── pile_arxiv-v1-res.json │ │ │ ├── pile_bookcorpus2-v0-loglikelihood_rolling │ │ │ ├── pile_bookcorpus2-v0-res.json │ │ │ ├── pile_bookcorpus2-v1-loglikelihood_rolling │ │ │ ├── pile_bookcorpus2-v1-res.json │ │ │ ├── pile_books3-v0-loglikelihood_rolling │ │ │ ├── pile_books3-v0-res.json │ │ │ ├── pile_books3-v1-loglikelihood_rolling │ │ │ ├── pile_books3-v1-res.json │ │ │ ├── pile_dm-mathematics-v0-loglikelihood_rolling │ │ │ ├── pile_dm-mathematics-v0-res.json │ │ │ ├── pile_dm-mathematics-v1-loglikelihood_rolling │ │ │ ├── pile_dm-mathematics-v1-res.json │ │ │ ├── pile_enron-v0-loglikelihood_rolling │ │ │ ├── pile_enron-v0-res.json │ │ │ ├── pile_enron-v1-loglikelihood_rolling │ │ │ ├── pile_enron-v1-res.json │ │ │ ├── pile_europarl-v0-loglikelihood_rolling │ │ │ ├── pile_europarl-v0-res.json │ │ │ ├── pile_europarl-v1-loglikelihood_rolling │ │ │ ├── pile_europarl-v1-res.json │ │ │ ├── pile_freelaw-v0-loglikelihood_rolling │ │ │ ├── pile_freelaw-v0-res.json │ │ │ ├── pile_freelaw-v1-loglikelihood_rolling │ │ │ ├── pile_freelaw-v1-res.json │ │ │ ├── pile_github-v0-loglikelihood_rolling │ │ │ ├── pile_github-v0-res.json │ │ │ ├── pile_github-v1-loglikelihood_rolling │ │ │ ├── pile_github-v1-res.json │ │ │ ├── pile_gutenberg-v0-loglikelihood_rolling │ │ │ ├── pile_gutenberg-v0-res.json │ │ │ ├── pile_gutenberg-v1-loglikelihood_rolling │ │ │ ├── pile_gutenberg-v1-res.json │ │ │ ├── pile_hackernews-v0-loglikelihood_rolling │ │ │ ├── pile_hackernews-v0-res.json │ │ │ ├── pile_hackernews-v1-loglikelihood_rolling │ │ │ ├── pile_hackernews-v1-res.json │ │ │ ├── pile_nih-exporter-v0-loglikelihood_rolling │ │ │ ├── pile_nih-exporter-v0-res.json │ │ │ ├── pile_nih-exporter-v1-loglikelihood_rolling │ │ │ ├── pile_nih-exporter-v1-res.json │ │ │ ├── pile_opensubtitles-v0-loglikelihood_rolling │ │ │ ├── pile_opensubtitles-v0-res.json │ │ │ ├── pile_opensubtitles-v1-loglikelihood_rolling │ │ │ ├── pile_opensubtitles-v1-res.json │ │ │ ├── pile_openwebtext2-v0-loglikelihood_rolling │ │ │ ├── pile_openwebtext2-v0-res.json │ │ │ ├── pile_openwebtext2-v1-loglikelihood_rolling │ │ │ ├── pile_openwebtext2-v1-res.json │ │ │ ├── pile_philpapers-v0-loglikelihood_rolling │ │ │ ├── pile_philpapers-v0-res.json │ │ │ ├── pile_philpapers-v1-loglikelihood_rolling │ │ │ ├── pile_philpapers-v1-res.json │ │ │ ├── pile_pile-cc-v0-loglikelihood_rolling │ │ │ ├── pile_pile-cc-v0-res.json │ │ │ ├── pile_pile-cc-v1-loglikelihood_rolling │ │ │ ├── pile_pile-cc-v1-res.json │ │ │ ├── pile_pubmed-abstracts-v0-loglikelihood_rolling │ │ │ ├── pile_pubmed-abstracts-v0-res.json │ │ │ ├── pile_pubmed-abstracts-v1-loglikelihood_rolling │ │ │ ├── pile_pubmed-abstracts-v1-res.json │ │ │ ├── pile_pubmed-central-v0-loglikelihood_rolling │ │ │ ├── pile_pubmed-central-v0-res.json │ │ │ ├── pile_pubmed-central-v1-loglikelihood_rolling │ │ │ ├── pile_pubmed-central-v1-res.json │ │ │ ├── pile_stackexchange-v0-loglikelihood_rolling │ │ │ ├── pile_stackexchange-v0-res.json │ │ │ ├── pile_stackexchange-v1-loglikelihood_rolling │ │ │ ├── pile_stackexchange-v1-res.json │ │ │ ├── pile_ubuntu-irc-v0-loglikelihood_rolling │ │ │ ├── pile_ubuntu-irc-v0-res.json │ │ │ ├── pile_ubuntu-irc-v1-loglikelihood_rolling │ │ │ ├── pile_ubuntu-irc-v1-res.json │ │ │ ├── pile_uspto-v0-loglikelihood_rolling │ │ │ ├── pile_uspto-v0-res.json │ │ │ ├── pile_uspto-v1-loglikelihood_rolling │ │ │ ├── pile_uspto-v1-res.json │ │ │ ├── pile_wikipedia-v0-loglikelihood_rolling │ │ │ ├── pile_wikipedia-v0-res.json │ │ │ ├── pile_wikipedia-v1-loglikelihood_rolling │ │ │ ├── pile_wikipedia-v1-res.json │ │ │ ├── pile_youtubesubtitles-v0-loglikelihood_rolling │ │ │ ├── pile_youtubesubtitles-v0-res.json │ │ │ ├── pile_youtubesubtitles-v1-loglikelihood_rolling │ │ │ ├── pile_youtubesubtitles-v1-res.json │ │ │ ├── piqa-v0-loglikelihood │ │ │ ├── piqa-v0-res.json │ │ │ ├── prost-v0-loglikelihood │ │ │ ├── prost-v0-res.json │ │ │ ├── pubmedqa-v0-loglikelihood │ │ │ ├── pubmedqa-v0-res.json │ │ │ ├── qa4mre_2011-v0-loglikelihood │ │ │ ├── qa4mre_2011-v0-res.json │ │ │ ├── qa4mre_2012-v0-loglikelihood │ │ │ ├── qa4mre_2012-v0-res.json │ │ │ ├── qa4mre_2013-v0-loglikelihood │ │ │ ├── qa4mre_2013-v0-res.json │ │ │ ├── qnli-v0-loglikelihood │ │ │ ├── qnli-v0-res.json │ │ │ ├── qqp-v0-loglikelihood │ │ │ ├── qqp-v0-res.json │ │ │ ├── race-v0-loglikelihood │ │ │ ├── race-v0-res.json │ │ │ ├── random_insertion-v0-greedy_until │ │ │ ├── random_insertion-v0-res.json │ │ │ ├── record-v0-loglikelihood │ │ │ ├── record-v0-res.json │ │ │ ├── reversed_words-v0-greedy_until │ │ │ ├── reversed_words-v0-res.json │ │ │ ├── rte-v0-loglikelihood │ │ │ ├── rte-v0-res.json │ │ │ ├── sciq-v0-loglikelihood │ │ │ ├── sciq-v0-res.json │ │ │ ├── squad2-v0-greedy_until │ │ │ ├── squad2-v0-loglikelihood │ │ │ ├── squad2-v0-res.json │ │ │ ├── squad2-v1-greedy_until │ │ │ ├── squad2-v1-loglikelihood │ │ │ ├── squad2-v1-res.json │ │ │ ├── sst-v0-loglikelihood │ │ │ ├── sst-v0-res.json │ │ │ ├── swag-v0-loglikelihood │ │ │ ├── swag-v0-res.json │ │ │ ├── textsynth_test_0a89c2739f9598b4be2674b0a8e43931d7f3f0b696970bcba31f9b52bdf12297.pkl │ │ │ ├── textsynth_test_0c1c14571add7903b89e588c8212572b95bb57b334fc0752c89a7e045a5f63ae.pkl │ │ │ ├── textsynth_test_3092d07756f3e1d010c07524cc8a2ecba7f0c19f9e39f2aaf2bf440bfe328004.pkl │ │ │ ├── textsynth_test_434076260b6af3a46b7a5eaceec3306a5872c400a3872f744280b237455a0f8e.pkl │ │ │ ├── textsynth_test_49c47ae40e11f349f2f6b492128188b1b2bc103a421c676ee4b2142a68b43516.pkl │ │ │ ├── textsynth_test_4fd8d66a6dad7f602b40e5d7dc298d6fe329299d086a4659743a41f4a4012659.pkl │ │ │ ├── textsynth_test_51b5302f157cf224f694ccad973f255ae19e9e061d533256bdf75b04e0a917ab.pkl │ │ │ ├── textsynth_test_6d6c62dd70caaa208712bf766deaf419cfac89538d4ab7745621e339394c0c23.pkl │ │ │ ├── textsynth_test_7209c4617547bfe17cb9e7f5f735fe35822d650aefdc5fbeeaf0c1724effbe09.pkl │ │ │ ├── textsynth_test_7afdc285388e51094e12645f305328c759574fa3ec9751631025f8ad5ebf9f3e.pkl │ │ │ ├── textsynth_test_9d5f33dbfe1e254928c89f5ed85e4c010d888065f55a8f1b863bc1eb0340a5f2.pkl │ │ │ ├── textsynth_test_abcbcba648d89e5d81a50511a6d24ddeb538de2ffe108c1370dd74ce6ac8038d.pkl │ │ │ ├── textsynth_test_b1cbb29666cce5e31a1e97695858137398a0885ca5d5d98f515404fb6aeb99e7.pkl │ │ │ ├── textsynth_test_e7ad1e9f52a39e1ddd1e50f3c57ffa4546728dd150a67c0a0ddc8675c04e15d1.pkl │ │ │ ├── textsynth_test_f4bfe4beb605bd52a8ab6be3c9293639e7e2261d98de58159d15ccb83131bf4e.pkl │ │ │ ├── toxigen-v0-loglikelihood │ │ │ ├── toxigen-v0-res.json │ │ │ ├── triviaqa-v0-loglikelihood │ │ │ ├── triviaqa-v0-res.json │ │ │ ├── triviaqa-v1-loglikelihood │ │ │ ├── triviaqa-v1-res.json │ │ │ ├── truthfulqa_gen-v0-greedy_until │ │ │ ├── truthfulqa_gen-v0-res.json │ │ │ ├── truthfulqa_gen-v1-greedy_until │ │ │ ├── truthfulqa_gen-v1-res.json │ │ │ ├── truthfulqa_mc-v0-loglikelihood │ │ │ ├── truthfulqa_mc-v0-res.json │ │ │ ├── truthfulqa_mc-v1-loglikelihood │ │ │ ├── truthfulqa_mc-v1-res.json │ │ │ ├── webqs-v0-loglikelihood │ │ │ ├── webqs-v0-res.json │ │ │ ├── wic-v0-loglikelihood │ │ │ ├── wic-v0-res.json │ │ │ ├── wikitext-v0-loglikelihood_rolling │ │ │ ├── wikitext-v0-res.json │ │ │ ├── wikitext-v1-loglikelihood_rolling │ │ │ ├── wikitext-v1-res.json │ │ │ ├── wikitext_10_hf_pretrained-EleutherAI-pythia-14m-dtype-float32-device-cpu.txt │ │ │ ├── winogrande-v0-loglikelihood │ │ │ ├── winogrande-v0-res.json │ │ │ ├── wmt14-en-fr-v0-greedy_until │ │ │ ├── wmt14-en-fr-v0-res.json │ │ │ ├── wmt14-fr-en-v0-greedy_until │ │ │ ├── wmt14-fr-en-v0-res.json │ │ │ ├── wmt16-de-en-v0-greedy_until │ │ │ ├── wmt16-de-en-v0-res.json │ │ │ ├── wmt16-en-de-v0-greedy_until │ │ │ ├── wmt16-en-de-v0-res.json │ │ │ ├── wmt16-en-ro-v0-greedy_until │ │ │ ├── wmt16-en-ro-v0-res.json │ │ │ ├── wmt16-ro-en-v0-greedy_until │ │ │ ├── wmt16-ro-en-v0-res.json │ │ │ ├── wmt20-cs-en-v0-greedy_until │ │ │ ├── wmt20-cs-en-v0-res.json │ │ │ ├── wmt20-de-en-v0-greedy_until │ │ │ ├── wmt20-de-en-v0-res.json │ │ │ ├── wmt20-de-fr-v0-greedy_until │ │ │ ├── wmt20-de-fr-v0-res.json │ │ │ ├── wmt20-en-cs-v0-greedy_until │ │ │ ├── wmt20-en-cs-v0-res.json │ │ │ ├── wmt20-en-de-v0-greedy_until │ │ │ ├── wmt20-en-de-v0-res.json │ │ │ ├── wmt20-en-iu-v0-greedy_until │ │ │ ├── wmt20-en-iu-v0-res.json │ │ │ ├── wmt20-en-ja-v0-greedy_until │ │ │ ├── wmt20-en-ja-v0-res.json │ │ │ ├── wmt20-en-ja-v1-greedy_until │ │ │ ├── wmt20-en-ja-v1-res.json │ │ │ ├── wmt20-en-km-v0-greedy_until │ │ │ ├── wmt20-en-km-v0-res.json │ │ │ ├── wmt20-en-pl-v0-greedy_until │ │ │ ├── wmt20-en-pl-v0-res.json │ │ │ ├── wmt20-en-ps-v0-greedy_until │ │ │ ├── wmt20-en-ps-v0-res.json │ │ │ ├── wmt20-en-ru-v0-greedy_until │ │ │ ├── wmt20-en-ru-v0-res.json │ │ │ ├── wmt20-en-ta-v0-greedy_until │ │ │ ├── wmt20-en-ta-v0-res.json │ │ │ ├── wmt20-en-zh-v0-greedy_until │ │ │ ├── wmt20-en-zh-v0-res.json │ │ │ ├── wmt20-en-zh-v1-greedy_until │ │ │ ├── wmt20-en-zh-v1-res.json │ │ │ ├── wmt20-fr-de-v0-greedy_until │ │ │ ├── wmt20-fr-de-v0-res.json │ │ │ ├── wmt20-iu-en-v0-greedy_until │ │ │ ├── wmt20-iu-en-v0-res.json │ │ │ ├── wmt20-ja-en-v0-greedy_until │ │ │ ├── wmt20-ja-en-v0-res.json │ │ │ ├── wmt20-km-en-v0-greedy_until │ │ │ ├── wmt20-km-en-v0-res.json │ │ │ ├── wmt20-pl-en-v0-greedy_until │ │ │ ├── wmt20-pl-en-v0-res.json │ │ │ ├── wmt20-ps-en-v0-greedy_until │ │ │ ├── wmt20-ps-en-v0-res.json │ │ │ ├── wmt20-ru-en-v0-greedy_until │ │ │ ├── wmt20-ru-en-v0-res.json │ │ │ ├── wmt20-ta-en-v0-greedy_until │ │ │ ├── wmt20-ta-en-v0-res.json │ │ │ ├── wmt20-zh-en-v0-greedy_until │ │ │ ├── wmt20-zh-en-v0-res.json │ │ │ ├── wnli-v0-loglikelihood │ │ │ ├── wnli-v0-res.json │ │ │ ├── wnli-v1-loglikelihood │ │ │ ├── wnli-v1-res.json │ │ │ ├── wsc-v0-loglikelihood │ │ │ ├── wsc-v0-res.json │ │ │ ├── wsc273-v0-loglikelihood │ │ │ └── wsc273-v0-res.json │ │ │ └── utils.py │ │ ├── math_eval.py │ │ ├── mt_bench_eval.py │ │ ├── openai_configs.yaml │ │ ├── qa_acc_eval.py │ │ ├── rouge_eval.py │ │ └── truthfulqa_eval.py ├── models │ ├── __init__.py │ ├── model_families │ │ ├── gemma.py │ │ ├── gemma2.py │ │ ├── llama2.py │ │ ├── llama2_repnoise.py │ │ ├── llama3.py │ │ └── mistral.py │ └── utils.py └── trainer │ ├── trainer.py │ └── trainer_efficient.py ├── gpt_4_judge_for_hexphi.ipynb ├── inference_utility_vllm.py ├── merge_peft_model.py └── scripts ├── launch_ft.slurm ├── launch_safety_eval.slurm ├── launch_utility_eval.sh ├── launch_utility_inference.slurm ├── repnoise ├── launch_ft_safety_eval_alpaca_salient.slurm ├── launch_ft_safety_eval_aoa.slurm └── launch_ft_safety_eval_orig_dataset.slurm └── tar ├── launch_ft_safety_eval.slurm └── launch_ft_safety_eval_peft.slurm /.gitignore: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/.gitignore -------------------------------------------------------------------------------- /README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/README.md -------------------------------------------------------------------------------- /accelerate_configs/deepspeed_zero1.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/deepspeed_zero1.yaml -------------------------------------------------------------------------------- /accelerate_configs/deepspeed_zero2.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/deepspeed_zero2.yaml -------------------------------------------------------------------------------- /accelerate_configs/deepspeed_zero3.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/deepspeed_zero3.yaml -------------------------------------------------------------------------------- /accelerate_configs/deepspeed_zero3_gc2.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/deepspeed_zero3_gc2.yaml -------------------------------------------------------------------------------- /accelerate_configs/deepspeed_zero3_multi_nodes.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/deepspeed_zero3_multi_nodes.yaml -------------------------------------------------------------------------------- /accelerate_configs/multi_gpu.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/multi_gpu.yaml -------------------------------------------------------------------------------- /accelerate_configs/single_gpu.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/accelerate_configs/single_gpu.yaml -------------------------------------------------------------------------------- /environment.yml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/environment.yml -------------------------------------------------------------------------------- /eval_safety_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/eval_safety_vllm.py -------------------------------------------------------------------------------- /eval_utility_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/eval_utility_vllm.py -------------------------------------------------------------------------------- /finetune.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetune.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/data/safety_bench/vulnerable_code_tasks.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/data/safety_bench/vulnerable_code_tasks.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/finetuning_dataset.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/finetuning_dataset.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/HEx-PHI.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/HEx-PHI.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/Harmful-HEx-PHI.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/Harmful-HEx-PHI.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/alpaca_salient.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/alpaca_salient.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/aoa_100.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/aoa_100.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/backdoor_gemma.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/backdoor_gemma.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/backdoor_llama2.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/backdoor_llama2.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/eval_safety_dataset.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/eval_safety_dataset.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/pure_bad100.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/pure_bad100.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/sorry-bench.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/sorry-bench.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/vulnerable_code_tasks.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/vulnerable_code_tasks.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-bio.parquet: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-bio.parquet -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-chem.parquet: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-chem.parquet -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-cyber.parquet: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/wmdp/wmdp-cyber.parquet -------------------------------------------------------------------------------- /finetuning_buckets/datasets/safety_datasets/xstest_v2_prompts.csv: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/safety_datasets/xstest_v2_prompts.csv -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/README.md -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/dyck_languages.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/dyck_languages.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/hyperbaton.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/hyperbaton.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/navigate.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/navigate.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/object_counting.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/object_counting.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/ruin_names.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/ruin_names.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/snarks.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/snarks.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/web_of_lies.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/web_of_lies.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/bbh/word_sorting.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/bbh/word_sorting.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/cot-prompts/navigate.txt: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/cot-prompts/navigate.txt -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/BBH/cot-prompts/snarks.txt: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/BBH/cot-prompts/snarks.txt -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/.DS_Store: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/.DS_Store -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/README.txt: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/README.txt -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/10.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/10.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1001.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1001.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1002.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1002.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1004.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1004.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1009.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1009.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/101.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/101.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1014.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1014.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1017.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1017.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1019.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1019.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1020.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1020.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1022.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1022.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1023.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1023.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1025.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1025.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1026.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1026.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1031.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1031.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1032.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1032.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1034.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1034.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1035.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1035.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/104.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/104.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1042.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1042.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1043.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1043.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1044.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1044.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1049.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1049.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1050.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1050.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1051.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1051.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1057.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1057.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1060.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1060.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1063.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1063.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1065.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1065.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1069.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1069.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/107.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/107.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1070.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1070.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1071.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1071.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1072.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1072.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1075.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1075.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1078.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1078.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1082.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1082.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1084.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1084.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1088.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1088.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1089.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1089.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/109.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/109.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1092.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1092.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1095.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1095.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1097.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1097.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1098.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1098.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/11.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/11.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/110.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/110.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1102.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1102.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1103.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1103.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1107.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1107.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1108.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1108.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1111.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1111.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1112.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1112.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1114.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1114.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1115.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1115.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1123.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1123.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1125.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1125.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1128.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1128.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1129.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1129.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/113.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/113.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1133.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1133.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1135.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1135.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1138.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1138.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/114.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/114.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1142.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1142.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1143.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1143.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1144.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1144.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1145.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1145.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1147.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1147.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1149.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1149.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1151.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1151.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1157.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1157.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/116.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/116.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1160.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1160.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1164.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1164.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1165.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1165.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1166.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1166.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1168.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1168.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1169.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1169.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1170.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1170.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1179.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1179.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1180.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1180.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1181.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1181.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1182.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1182.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1184.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1184.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1185.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1185.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1187.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1187.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/119.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/119.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1190.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1190.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1195.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1195.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1197.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1197.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1199.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1199.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1203.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1203.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1206.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1206.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1208.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1208.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1209.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1209.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1210.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1210.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1212.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1212.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1213.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1213.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1214.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1214.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1220.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1220.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1221.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1221.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1226.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1226.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1227.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1227.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/123.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/123.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1231.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1231.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1233.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1233.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1234.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1234.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1238.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1238.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1239.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1239.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1241.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1241.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1246.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1246.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1248.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1248.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1249.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1249.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/125.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/125.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1250.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1250.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1251.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1251.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1252.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1252.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1253.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1253.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1255.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1255.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1259.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1259.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/126.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/126.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1260.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1260.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1261.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1261.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1263.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1263.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1264.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1264.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1265.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1265.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1266.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1266.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1268.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1268.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1270.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1270.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1271.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1271.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1272.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1272.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1275.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1275.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1278.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1278.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1281.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1281.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1282.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1282.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1283.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1283.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1286.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1286.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1287.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1287.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1288.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1288.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1289.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1289.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/129.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/129.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1291.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1291.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1293.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1293.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1294.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1294.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1295.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1295.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/13.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/13.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1302.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1302.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1303.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1303.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1306.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1306.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/131.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/131.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1310.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1310.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1312.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1312.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1316.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1316.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1317.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1317.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1318.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1318.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/132.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/132.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1329.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1329.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1331.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1331.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1332.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1332.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1338.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1338.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1339.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1339.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1340.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1340.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1341.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1341.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1342.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1342.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1343.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1343.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1345.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1345.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1349.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1349.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1354.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1354.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1355.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1355.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1359.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1359.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1360.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1360.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1362.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1362.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1366.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1366.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/137.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/137.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1372.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1372.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1373.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1373.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1374.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1374.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1375.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1375.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1376.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1376.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1377.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1377.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/138.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/138.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1380.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1380.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1387.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1387.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/139.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/139.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1390.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1390.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1392.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1392.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1396.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1396.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1398.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1398.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/140.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/140.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1401.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1401.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1408.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1408.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/141.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/141.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1411.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1411.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1416.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1416.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1418.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1418.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1419.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1419.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/142.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/142.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1422.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1422.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1423.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1423.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1424.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1424.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1425.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1425.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1428.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1428.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/143.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/143.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1434.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1434.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1438.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1438.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1439.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1439.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/144.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/144.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1441.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1441.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1442.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1442.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1443.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1443.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1445.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1445.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1447.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1447.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1448.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1448.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1457.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1457.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1458.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1458.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1459.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1459.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1461.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1461.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1462.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1462.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1463.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1463.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1464.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1464.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1466.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1466.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1467.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1467.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1468.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1468.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1470.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1470.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/148.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/148.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1480.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1480.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1485.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1485.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1486.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1486.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1488.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1488.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/149.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/149.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1490.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1490.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1493.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1493.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1494.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1494.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1498.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1498.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/15.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/15.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1500.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1500.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1506.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1506.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1507.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1507.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/151.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/151.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1511.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1511.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1514.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1514.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1519.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1519.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1524.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1524.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1527.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1527.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1528.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1528.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1529.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1529.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/153.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/153.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1534.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1534.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1535.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1535.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1538.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1538.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1540.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1540.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1541.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1541.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1543.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1543.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1545.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1545.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1547.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1547.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1548.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1548.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1549.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1549.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/155.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/155.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1553.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1553.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1557.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1557.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1558.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1558.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/156.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/156.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1560.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1560.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1561.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1561.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1564.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1564.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1568.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1568.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1569.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1569.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1570.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1570.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1578.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1578.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/158.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/158.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1580.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1580.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1581.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1581.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1584.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1584.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1585.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1585.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1586.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1586.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1588.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1588.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/159.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/159.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1591.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1591.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1592.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1592.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1593.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1593.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1594.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1594.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1596.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1596.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1597.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1597.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1598.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1598.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/160.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/160.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1600.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1600.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1602.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1602.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1604.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1604.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1605.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1605.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1606.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1606.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1609.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1609.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/161.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/161.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1610.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1610.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1611.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1611.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1616.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1616.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1621.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1621.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1623.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1623.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1624.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1624.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1628.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1628.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1633.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1633.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1634.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1634.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1639.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1639.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1646.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1646.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1647.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1647.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1650.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1650.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1656.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1656.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1659.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1659.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1664.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1664.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1668.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1668.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1674.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1674.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1678.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1678.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1680.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1680.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1683.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1683.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1689.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1689.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1693.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1693.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1698.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1698.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1699.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1699.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/17.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/17.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/170.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/170.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1701.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1701.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1702.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1702.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1703.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1703.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1704.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1704.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1706.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1706.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1707.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1707.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1709.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1709.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/171.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/171.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1713.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1713.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1714.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1714.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1724.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1724.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1729.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1729.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1730.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1730.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1731.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1731.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1732.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1732.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1733.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1733.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1736.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1736.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1739.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1739.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/174.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/174.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1742.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1742.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1748.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1748.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/175.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/175.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1750.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1750.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1753.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1753.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1755.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1755.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1757.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1757.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/176.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/176.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1760.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1760.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1762.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1762.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1763.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1763.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1770.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1770.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1772.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1772.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1774.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1774.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1776.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1776.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1778.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1778.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1779.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1779.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/178.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/178.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1781.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1781.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1784.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1784.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1786.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1786.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1787.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1787.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1788.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1788.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1789.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1789.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1791.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1791.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1792.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1792.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1794.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1794.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1796.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1796.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1798.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1798.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/180.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/180.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1800.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1800.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1803.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1803.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1804.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1804.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1805.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1805.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1806.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1806.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1807.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1807.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1809.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1809.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/181.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/181.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1810.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1810.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1811.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1811.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1812.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1812.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1814.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1814.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1815.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1815.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1818.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1818.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/182.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/182.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1820.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1820.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1824.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1824.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1826.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1826.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1828.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1828.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/183.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/183.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1834.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1834.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1836.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1836.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1837.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1837.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1838.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1838.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/184.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/184.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1841.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1841.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1842.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1842.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1845.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1845.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1846.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1846.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1848.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1848.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1849.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1849.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/185.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/185.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1850.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1850.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1855.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1855.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1856.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1856.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1861.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1861.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1862.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1862.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1863.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1863.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1864.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1864.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1865.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1865.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1869.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1869.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/187.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/187.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1870.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1870.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1875.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1875.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1878.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1878.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/188.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/188.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1880.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1880.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1884.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1884.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1886.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1886.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1888.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1888.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1890.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1890.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1891.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1891.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1893.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1893.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1894.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1894.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1895.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1895.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1897.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1897.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1898.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1898.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1899.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1899.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/190.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/190.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1900.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1900.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1902.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1902.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1904.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/1904.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/2.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/2.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/21.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/21.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/22.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/22.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/24.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/24.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/26.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/26.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/28.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/28.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/31.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/31.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/32.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/32.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/33.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/33.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/35.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/35.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/37.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/37.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/40.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/40.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/43.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/43.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/44.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/44.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/48.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/48.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/51.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/51.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/55.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/55.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/59.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/59.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/6.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/6.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/67.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/67.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/69.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/69.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/73.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/73.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/76.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/76.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/77.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/77.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/80.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/80.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/82.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/82.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/89.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/89.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/96.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/algebra/96.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/geometry/0.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/geometry/0.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/test/geometry/8.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/test/geometry/8.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/0.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/0.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/3.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/3.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/4.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/4.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/5.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/5.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/7.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/7.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/8.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/8.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/9.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/MATH/train/algebra/9.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/TruthfulQA/LICENSE: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/TruthfulQA/LICENSE -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/TruthfulQA/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/TruthfulQA/README.md -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/TruthfulQA/TruthfulQA.csv: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/TruthfulQA/TruthfulQA.csv -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/TruthfulQA/setup.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/TruthfulQA/setup.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/alpaca_eval.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/alpaca_eval.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/arena-hard-v0.1.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/arena-hard-v0.1.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/eval_utility_dataset.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/eval_utility_dataset.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/gsm8k/test.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/gsm8k/test.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/gsm8k/train.json: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/gsm8k/train.json -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/.DS_Store: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/human-eval/.DS_Store -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/LICENSE: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/human-eval/LICENSE -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/human-eval/README.md -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/human_eval/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/requirements.txt: -------------------------------------------------------------------------------- 1 | tqdm 2 | fire 3 | numpy 4 | -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/human-eval/setup.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/human-eval/setup.py -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/anatomy/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/astronomy/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/management/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/management/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/management/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/management/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/marketing/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/marketing/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/marketing/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/marketing/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/marketing/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/marketing/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/nutrition/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/philosophy/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/philosophy/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/philosophy/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/philosophy/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/prehistory/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/prehistory/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/prehistory/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/prehistory/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/sociology/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/sociology/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/sociology/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/sociology/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/sociology/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/sociology/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/virology/dev.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/virology/dev.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/virology/test.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/virology/test.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/datasets/utility_datasets/mmlu/virology/val.jsonl: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/datasets/utility_datasets/mmlu/virology/val.jsonl -------------------------------------------------------------------------------- /finetuning_buckets/inference/chat_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/chat_vllm.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/safety_eval/chatgpt_judge.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/safety_eval/chatgpt_judge.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/safety_eval/chatgpt_judge_wmdp.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/safety_eval/chatgpt_judge_wmdp.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/safety_eval/evaluator_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/safety_eval/evaluator_vllm.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/safety_eval/keyword_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/safety_eval/keyword_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/.gitignore: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/.gitignore -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/.pylintrc: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/.pylintrc -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/LICENSE: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/LICENSE -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/README.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docker/Dockerfile: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docker/Dockerfile -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/arena.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/arena.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/awq.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/awq.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/exllama_v2.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/exllama_v2.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/gptq.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/gptq.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/openai_api.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/openai_api.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/server_arch.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/server_arch.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/docs/training.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/docs/training.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/fastchat/__init__.py: -------------------------------------------------------------------------------- 1 | __version__ = "0.2.36" 2 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/fastchat/data/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/fastchat/modules/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/fastchat/serve/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/fastchat/utils.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/fastchat/utils.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/format.sh: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/format.sh -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/pyproject.toml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/pyproject.toml -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/tests/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/tests/README.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/FastChat/tests/test_cli.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/FastChat/tests/test_cli.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/alpaca_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/alpaca_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/.DS_Store: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/.DS_Store -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/.gitmodules: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/LICENSE: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/LICENSE -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/README.md: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/README.md -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/gen_answer.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/gen_answer.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/gen_judgment.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/gen_judgment.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/qa_browser.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/qa_browser.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/requirements-optional.txt: -------------------------------------------------------------------------------- 1 | google-generativeai 2 | mistralai 3 | anthropic 4 | cohere 5 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/requirements.txt: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/requirements.txt -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/show_result.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/show_result.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard/utils.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard/utils.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/arena_hard_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/arena_hard_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/bbh_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/bbh_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/evaluator_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/evaluator_vllm.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/gsm8k_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/gsm8k_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/humaneval_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/humaneval_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/inference_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/inference_vllm.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/CODEOWNERS: -------------------------------------------------------------------------------- 1 | * @haileyschoelkopf @lintangsutawika 2 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/ignore.txt: -------------------------------------------------------------------------------- 1 | ROUGE 2 | rouge 3 | nin 4 | maka 5 | mor 6 | te 7 | ond 8 | extraversion 9 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/lm_eval/api/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/lm_eval/decontamination/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/lm_eval/tasks/fda/fda.yaml: -------------------------------------------------------------------------------- 1 | task: fda 2 | class: !function task.FDA 3 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/lm_eval/tasks/squadv2/squadv2.yaml: -------------------------------------------------------------------------------- 1 | task: squadv2 2 | class: !function task.SQuAD2 3 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/lm_eval/tasks/swde/swde.yaml: -------------------------------------------------------------------------------- 1 | task: swde 2 | class: !function task.SWDE 3 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/requirements.txt: -------------------------------------------------------------------------------- 1 | -e . 2 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/scripts/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/scripts/clean_training_data/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/templates/new_yaml_task/blank_yaml.yaml: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/lm-evaluation-harness/tests/__init__.py: -------------------------------------------------------------------------------- 1 | -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/math_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/math_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/mt_bench_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/mt_bench_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/openai_configs.yaml: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/openai_configs.yaml -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/qa_acc_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/qa_acc_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/rouge_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/rouge_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/inference/utility_eval/truthfulqa_eval.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/inference/utility_eval/truthfulqa_eval.py -------------------------------------------------------------------------------- /finetuning_buckets/models/__init__.py: -------------------------------------------------------------------------------- 1 | from . import utils -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/gemma.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/gemma.py -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/gemma2.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/gemma2.py -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/llama2.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/llama2.py -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/llama2_repnoise.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/llama2_repnoise.py -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/llama3.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/llama3.py -------------------------------------------------------------------------------- /finetuning_buckets/models/model_families/mistral.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/model_families/mistral.py -------------------------------------------------------------------------------- /finetuning_buckets/models/utils.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/models/utils.py -------------------------------------------------------------------------------- /finetuning_buckets/trainer/trainer.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/trainer/trainer.py -------------------------------------------------------------------------------- /finetuning_buckets/trainer/trainer_efficient.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/finetuning_buckets/trainer/trainer_efficient.py -------------------------------------------------------------------------------- /gpt_4_judge_for_hexphi.ipynb: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/gpt_4_judge_for_hexphi.ipynb -------------------------------------------------------------------------------- /inference_utility_vllm.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/inference_utility_vllm.py -------------------------------------------------------------------------------- /merge_peft_model.py: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/merge_peft_model.py -------------------------------------------------------------------------------- /scripts/launch_ft.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/launch_ft.slurm -------------------------------------------------------------------------------- /scripts/launch_safety_eval.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/launch_safety_eval.slurm -------------------------------------------------------------------------------- /scripts/launch_utility_eval.sh: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/launch_utility_eval.sh -------------------------------------------------------------------------------- /scripts/launch_utility_inference.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/launch_utility_inference.slurm -------------------------------------------------------------------------------- /scripts/repnoise/launch_ft_safety_eval_alpaca_salient.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/repnoise/launch_ft_safety_eval_alpaca_salient.slurm -------------------------------------------------------------------------------- /scripts/repnoise/launch_ft_safety_eval_aoa.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/repnoise/launch_ft_safety_eval_aoa.slurm -------------------------------------------------------------------------------- /scripts/repnoise/launch_ft_safety_eval_orig_dataset.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/repnoise/launch_ft_safety_eval_orig_dataset.slurm -------------------------------------------------------------------------------- /scripts/tar/launch_ft_safety_eval.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/tar/launch_ft_safety_eval.slurm -------------------------------------------------------------------------------- /scripts/tar/launch_ft_safety_eval_peft.slurm: -------------------------------------------------------------------------------- https://raw.githubusercontent.com/princeton-polaris-lab/Evaluating-Durable-Safeguards/HEAD/scripts/tar/launch_ft_safety_eval_peft.slurm --------------------------------------------------------------------------------