DXOMARK洞察:关于智能手机人像摄影的研究提出人工智能和制造商在深肤色渲染时的偏差问题
在发现智能手机拍摄呈现的人像肤色会影响用户满意度后,DXOMARK提出了关于这一问题根源的假设
专业和消费电子产品质量评估领域的国际领导者DXOMARK,公布了其2023年在巴黎组织的智能手机人像摄影小组研究的重要发现。作为DXOMARK洞察计划的一部分,这项研究强调了智能手机摄影中影响用户满意度的一个长期挑战:对不同肤色的不一致渲染。
DXOMARK洞察:识别用户偏好趋势和失败案例
DXOMARK洞察是一项新的服务,它通过专门的定性调查分析消费者和专业人士的反馈,从而发现用户偏好的新趋势。DXOMARK旨在借此完善其服务,进一步帮助客户满足其用户需求。
首个DXOMARK洞察项目的重点是智能手机人像摄影,源于去年夏天在法国巴黎进行的一项调查。该调查使用了3款旗舰设备和一款经过专业调校的数码单反相机,共拍摄了405个场景,110 人参加,其中包括80名消费者、30名专业摄影师和10名图像质量专家。
研究结果于今年二月首次公布,结果显示,肤色较深的用户对图片的满意度存在明显差异,无论用户的肤色或摄影技巧如何,在所有使用场景和所有参与群体中都能发现这一问题。
场景中每种肤色的满意度指数[1](用户参与者)
技术偏差影响性能表现
根据这些结果可以发现,两个关键因素导致了这种不一致性:人工智能算法的偏差和制造商调校策略
• 人工智能训练产生的偏差
人工智能在最近的智能手机的相机中发挥着至关重要的作用,它可以完成降噪、白平衡和场景检测等各种任务。然而,训练人工智能模型的数据库可能无法充分代表不同肤色。这就可能导致对深肤色的识别不够精准,以及图像处理效果不尽如人意的情况。
在下面的示例中,肤色浅的拍摄对象的照片看起来曝光和对焦正常、准确。相反,肤色较深拍摄对象的照片却对焦不准,曝光也很低。导致失败的确切原因尚不确定,但很有可能是相机未能准确检测到肤色较深的拍摄对象。这表明主要问题可能出在场景和内容识别上。
• 调校产生的偏差
尽管智能手机摄像头的调校是一个复杂而反复的过程,旨在优化多种使用情况下的拍照性能,但要复刻现实世界中的所有使用场景仍具有挑战性。因此,相机校准有时会因为特定地理区域的测试场景比例过高而出现偏差,从而无法完美满足所有用户的需求。这就是为什么不同设备的肤色渲染结果可能有所不同,有些设备在拍摄浅肤色的对象时表现更好。
例如,在下面的对比中,设备A对浅肤色的渲染获得了很高的满意度指数(75),却在拍摄深肤色对象时大大增加了图像的整体曝光度。而设备B则保持了更平衡的曝光调整,因此用户满意度得分更高。
这种差异提出了一个关键问题:设备A的调校团队在验证中是否充分考虑了各种场景特点,比如照明、拍摄对象肤色和背景颜色等?
这些例子强调了我们需要更广泛、更具包容性的训练数据库和调校策略,以确保在不同的用户场景中获得一致的图像质量。
DXOMARK 呼吁进行全面测试
为了解决这一问题,DXOMARK认为需要对智能手机摄像头进行更全面的测试。这包括:
各种使用情况,包括不同的设置、拍摄条件和肤色;
各种注释,使用反馈汇总方法和不同的观点;
基于质量标准和用户偏好的多种预期效果示例。
DXOMARK未来洞察
DXOMARK将通过在印度孟买和中国上海开展的实地调研进一步对全球用户的满意度进行调查。点击链接获取有关 DXOMARK 洞察的更多信息。
// 关于DXOMARK
DXOMARK 是一家法国技术公司,是智能手机摄像头、屏幕、音频和电池以及其他消费电子产品(如相机和扬声器)质量评估领域的国际领导者。
作为一家独立的私营公司,DXOMARK 的使命是帮助原始设备制造商开发优质产品,造福最终用户。
为了指导用户进行选择,DXOMARK 在其网站(dxomark.com、.cn 和 .fr )上以评分的形式提供了最大的产品质量评估数据库。
DXOMARK 公司总部位于巴黎附近的布洛涅-比扬古(Boulogne-Billancourt),拥有 120 名员工,其中包括 100 名工程师和技术人员。近 20 年来,这些工程师每年都要在公司内部开发的 16 个最先进的实验室中进行数千次测试。其中 150 多个实验室 100%用于测量和优化消费电子产品的质量,已出售给世界各地的消费电子和科技公司。
[1].DXOMARK专有的满意度指数结合了JOD量表、拒绝率和平均拒绝率,所有这些都来自小组成员的回答。您可以在这里找到有关该公式的更多信息。 ↑