摘要
本发明公开了一种多模态服装推荐方法,首先将相关数据作为节点和边构建知识图谱并存储在Neo4j图数据库中;提取图像与文本对的统一多模态向量表示,并进行实体链接,建立多模态知识库,通过基于知识库的RAG策略,找到与问题嵌入最相似的Top‑m结果,并定位该结果在知识图谱中的节点,生成子图,根据知识图谱中的边权重,结合子图计算每个方案的推荐分数,得出最终Top‑n推荐结果,将Top‑n方案的知识与用户问题拼接后生成结构化文本答案,同时将文本描述部分渲染为视觉内容,以实现图文结合的混合输出,通过知识图谱和知识库驱动的RAG与高质量生成模型的生成相结合,本发明能够灵活地捕获复杂服装推荐的语义信息和视觉一致性,从而显著提高服装推荐的准确性。