多模态对话模型,采用了14B的Qwen-VL作为基础模型,下载预训练的权重参数,对于讲解垂类领域的问答,通过两种方式来增强模型的对话能力,一种是准备微调数据集,人工筛选,经过自动化工具进行数据扩充,进行微调训练;另一种是通过RAG方式,使用垂类的文本数据作为基础数据库,先进行数据筛选,文本分块,使用抽取特征模型对每条文本进行向量化,建立faiss向量数据库。通过检索增强的方式,使得大模型根据提供的context 来回答问题,提升回答准确率。
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者