
图片美观度AI评分通过多模态理解技术,对内容平台的图片素材进行视觉质量评估,为推荐算法提供质量维度的输入特征。本文介绍图片美观度评分的技术原理、评估维度,以及VITA多模态理解模型如何支撑内容平台构建图片质量评估能力。
内容平台每天需要处理海量用户上传的图片素材。这些图片在视觉质量上存在较大差异:有的构图合理、光线协调、视觉舒适度高;有的则存在构图混乱、曝光不足、视觉效果欠佳等问题。
推荐算法需要在多个维度上对内容进行排序,图片美观度是其中的重要维度之一。美观度较高的图片更容易吸引用户点击、停留和互动,因此成为推荐系统中的质量信号。
在图片美观度评估的早期实践中,平台往往依赖人工标注或用户反馈来获取质量信号。这种方式存在明显局限:
AI评分提供了可扩展的替代方案。通过多模态理解模型,平台可以对图片进行自动化的美观度评估,为推荐算法提供实时的质量特征。
图片美观度评分需要建立在明确的评估维度之上。根据内容平台的业务需求,评估维度通常包括:
传统的图片质量评估方法往往依赖预设的规则或单一维度的特征提取,难以全面捕捉图片的审美质量。
多模态理解模型通过对图片进行端到端的分析,能够在统一模型中完成视觉特征的提取与质量判断。与依赖多个模型拼接的传统方案相比,原生多模态大模型可以在单次推理中对图片的多个审美维度进行联合评估。
图片美观度评分的输出形式可以根据业务需求进行定制:
VITA(Youtu-VITA)是腾讯云优图实验室自研的多模态理解大模型。在图片内容理解方面,VITA支持通过自定义Prompt对图片内容进行智能识别与分析。
根据产品文档,VITA在内容平台场景中可以应用于图片美观度评估任务。通过对图片的视觉特征进行综合分析,VITA能够输出与美观度相关的评估结果。
VITA支持通过自定义Prompt来调整评估任务的具体要求。对于图片美观度评分任务,用户可以在Prompt中明确指定:
这种基于Prompt的任务调整方式,使VITA能够以较低的接入成本适配不同平台的美观度评估需求。
内容平台通常需要对大量图片进行美观度评分。VITA支持一次传入多张图片(最多10张),可以在单次请求中对多张图片进行批量评估。
对于需要大规模处理的场景,平台可以通过批量调用的方式,对图片库中的素材进行系统化的美观度评分。
推荐系统的目标是在合适的时间向合适的用户推荐合适的内容。为实现这一目标,推荐算法需要综合考虑多个信号:
图片美观度评分提供了质量信号的一个重要来源。将美观度评分纳入推荐算法的特征体系,可以帮助算法优先推荐视觉质量较高的内容。
美观度评分结果需要经过适当的特征工程,才能有效融入推荐算法。常见的处理方式包括:
不同内容场景下,用户对图片美观度的敏感度可能存在差异。推荐系统可以根据场景特点,动态调整美观度评分在排序中的权重。
例如,在视觉导向的内容频道中,可以适当提高美观度评分的权重;在信息导向的内容频道中,则可以更多依赖相关性信号。
图片美观度存在一定的主观性。不同用户群体对美观度的判断标准可能存在差异。因此,在构建美观度评分系统时,需要尽量使AI评分的标准与目标用户群体的审美偏好保持一致。
一种做法是基于目标用户群体的反馈数据,对评分模型进行针对性的调整或校准。
对海量图片进行美观度评分,需要考虑计算效率和成本。VITA通过原生多模态架构,在保障理解效果的同时降低了算力成本。根据产品文档,VITA的整体定价约为主流竞品的50%,可以在大规模调用场景下提供成本优势。
AI评分结果需要经过持续的校验与迭代,才能保持评估质量的稳定。建议的实践方式包括:
在内容平台的实践中,图片往往不是孤立存在的,而是与文字内容共同构成完整的图文内容。因此,美观度评分可以扩展为图文联合评估。
VITA支持图文联合推理能力,可以同时对图片和文字内容进行分析,判断图文之间是否协调一致。这为图文联合质量评估提供了技术基础。
对于短视频平台,视频封面的质量对推荐效果有重要影响。视频封面本质上是一张图片,因此图片美观度评分的技术同样适用于视频封面质量评估。
VITA支持对视频内容的理解,可以在视频理解的基础上,对视频的关键帧(可作为封面候选)进行质量评估。
除了支撑推荐算法,图片美观度评分还可以应用于内容分级管理。平台可以根据美观度评分结果,对内容进行不同层次的质量分级,并据此制定差异化的运营策略。
VITA多模态理解模型为图片美观度AI评分提供了技术支撑。通过原生多模态架构和自定义Prompt的灵活配置,VITA能够帮助内容平台构建可扩展的图片质量评估能力,为推荐算法提供质量维度的输入特征。
如需体验VITA的图片理解能力,可访问腾讯云TokenHub平台进行试用:https://console.cloud.tencent.com/tokenhub/multimodal?modelId=youtu-vita
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系 cloudcommunity@tencent.com 删除。
原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系 cloudcommunity@tencent.com 删除。