米乐M6官网登录正版下载·腾讯公司取得图像内容分析专利能显著提升模型能力和业

　　专利摘要显示，本申请提供了图像内容分析方法、装置、设备和介质，涉及人工智能技术领域，可以应用于云技术、人工智能、智慧交通、辅助驾驶等场景，方法包括：获取待分析图像和任务指示文本；将待分析图像和任务指示文本输入内容理解模型进行图像内容提取和图像分类，得到待分析图像的内容描述文本和图像类别结果；内容理解模型是结合图文对指令数据集对初始理解模型的图像编码模块、多模态映射模块和文本解码模块进行视觉特征和文本特征对齐的约束训练，以及结合多模态指令数据集对初始理解模型进行图像内容提取和图像分类的约束训练得到的。本申请能够显著提升模型能力和业务匹配性。