关于OdysseyAgent的启动

[CTZhou-byte]

请问下载了HF上的checkpoint怎么运行模型，是需要和代码里的进行合并权重吗？此外，我用提供的requirement.txt似乎会不支持合并

[Lqf-HFNJU]

不需要合并权重，直接将模型克隆下来，然后在评测脚本里填上对应的本地路径就可以了。
只有在从Qwen-VL开始构建OdysseyAgent的时候才需要导入合并Qwen-VL的权重。

[CTZhou-byte]

如果我要测OdysseyAgent在其他数据集上的性能，是不是要重新生产his_index，然后合并权重

[Lqf-HFNJU]

如果测其他的数据集，需要对应生成其他数据集的his_index.
权重合并只会在模型参数初始化的时候需要用到，如果你想自己从头开始训一个OdysseyAgent，那就需要合并Qwen-VL的权重；如果只是用huggingface上的模型去测试，那就不需要。

[CTZhou-byte]

第一种方式，我直接下载了OdysseyAgent，然后加载模型和tokenizer会报错：models = AutoModelForCausalLM.from_pretrained("/data4/models/OdysseyAgent-random-high/", trust_remote_code=True)
ImportError: This modeling file requires the following packages that were not found in your environment: configuration_qwen, qwen_generation_utils, visual. Run pip install configuration_qwen qwen_generation_utils visual

第二种方式，我生成了his_index, 直接merge_weight，QwenVL和utils下的文件，似乎可行，那这个实际上还需要训练，并不能直接测试吧。如果我理解对的。

所以，我更应该用第一种方式进行测试，但是目前不行

[Lqf-HFNJU]

对于第一种方式，模型权重的modeling_qwen.py文件中第41-49行应该加载的是/OdysseyAgent 目录下的相应的文件。试一下在src目录下执行呢：cd GUI-Odyssey/src