spring-ai 的一个bug：DefaultChatClient.toAdvisedRequest(...) 中将UserMessage中的metadata属性给丢弃掉了

[ck-jesse]

1、版本：1.0.0-M5.1

2、问题：

• 通过图片列表方式处理video模态时，未正确处理 DashScopeApi.ChatCompletionMessage.MediaContent
• 具体代码如下，所有情况都会走到else分支中，导致都会被处理为image模态，对于video模态通过图片列表来处理，不会报错，但当我使用audio模态时，就会有问题了
• 代码位置：DashScopeChatModel.convertMediaContent(...)

3、分析：

• 通过debug，发现这是spring-ai的一个bug，spring-ai 在 DefaultChatClient.toAdvisedRequest() 这个方法中，构建AdvisedRequest时，将UserMessage中的metadata属性给丢弃掉了（或者说是将最后一个UserMessage给排除掉了），导致未将 MessageFormat.VIDEO 正确传递下去，以至于DashScopeChatModel.convertMediaContent(...)
  无法识别到 MessageFormat，也就无法处理 image 模态以外的其他模态

[flamezhang]

@ck-jesse 我也遇到这个问题，m6的也一样，你解决了吗？

[ck-jesse]

@ck-jesse 我也遇到这个问题，m6的也一样，你解决了吗？

升级到1.0.0.2，对应依赖spring-ai的1.0.0已经解决

[ck-jesse]

@ck-jesse 我也遇到这个问题，m6的也一样，你解决了吗？

升级到1.0.0.2，对应依赖spring-ai的1.0.0已经解决

虽然spring-ai透传meatdata的问题已经解决，但spring-ai-alibaba本身还不支持对audio模态的调用（因为没有处理audio模态的参数）