From ab8be7a18354bcff32b52c50b07fa0da948b259f Mon Sep 17 00:00:00 2001 From: Yizhou Chi Date: Mon, 2 Sep 2024 17:01:25 +0800 Subject: [PATCH] update readme --- expo/README.md | 11 +++++++++++ 1 file changed, 11 insertions(+) diff --git a/expo/README.md b/expo/README.md index baf15bb75..02519f640 100644 --- a/expo/README.md +++ b/expo/README.md @@ -29,5 +29,16 @@ ### Run DI MCTS `python run_experiment.py --exp_mode mcts --task househouse_prices --rollout 5 --low_is_better` +## Code and Configs Explanation + +`datasets.yaml` 提供数据集对应的指标和基础提示词 + +`data.yaml` 继承了`datasets.yaml`以及一些路径信息,需要将`datasets_dir`指到数据集合集的根目录下 + +完整的DI提示词参考`dataset.py`中的`generate_task_requirement`函数 +## Evaluation + +`evaluation.py` 提供pred和原始的gt(1D iterable)以及需要使用的metric,返回evaluation score +