diff --git a/expo/README.md b/expo/README.md index baf15bb75..02519f640 100644 --- a/expo/README.md +++ b/expo/README.md @@ -29,5 +29,16 @@ ### Run DI MCTS `python run_experiment.py --exp_mode mcts --task househouse_prices --rollout 5 --low_is_better` +## Code and Configs Explanation + +`datasets.yaml` 提供数据集对应的指标和基础提示词 + +`data.yaml` 继承了`datasets.yaml`以及一些路径信息,需要将`datasets_dir`指到数据集合集的根目录下 + +完整的DI提示词参考`dataset.py`中的`generate_task_requirement`函数 +## Evaluation + +`evaluation.py` 提供pred和原始的gt(1D iterable)以及需要使用的metric,返回evaluation score +