双重验证远超预期，明略科技创意评估智能体AdEff进入实用阶段
营销，本质是围绕消费者注意力的感性或理性吸引。
预测消费者对不同内容的反应，研究清楚“什么样的内容更具吸引力？”是营销人一直试图解决，但却极为困难的命题。因为不同年龄、职业和性别的人，对视频创意和内容的理解往往存在很大差异，不管是小样本调研、访谈，还是神经科学测试，都无法解决全量、个性化测试的问题，但人工智能技术让注意力预测迎来了突破。
2024年，明略科技自研的明敬超图多模态大语言模型（HMLLM），通过引入大规模的视频主观多模态评估数据集Video-SME ，收集不同人群在观看相同视频内容时脑电图 （EEG） 和眼动追踪区域的真实变化 ，弥合了丰富模态之间的语义差距，可集成帧与帧之间的逻辑推理，实现机器对不同人群的认知模拟。相关成果荣获全球顶级多媒体会议 ACM Multimedia（ACMMM）2024 年度最佳提名（提名率仅2%）。
2025年，由明略科技、北京大学、吉林大学组成的研究团队，开创性地建立了业界领先的大规模个性化注视行为数据（SPA-ADV），首次记录了超过4500名不同年龄与性别背景用户的真实视觉行为，模型的泛化能力和个性化预测效果进一步增强，可精准地预测“某一类人会看哪里？” 。相关论文已被 ACMM2025 正式接收。
为帮助营销从业者预测不同广告的效果，在明敬超图多模态大语言模型（HMLLM）之上，明略科技研发了AI驱动的广告测试及优化产品——AdEff，并于今年6月19日面向全球市场发布。
什么是 AdEff ？
「AdEff」是AI驱动的广告测试及优化平台，基于明略自研的明敬超图多模态大语言模型（HMLLM）研发，采用大模型及混合专家模型协同架构，最快15分钟，即可完成广告测试并给出优化建议。AdEff 预测结果真人样本一致性为89%，专家测试一致性为76%，能够帮助品牌营销专家及创意专家基于数据做出更明智、更快速、成本更优的决策，提升广告投放成功率。
为了验证 AdEff 的商业实用性，今年5~7月，明略科技产品团队对其进行了样本一致性和专家一致性测试。
其中，样本一致性，基于明略科技过去10年积累的神经科学真人样本脑电眼动测量数据，真人样本共计10万人次；专家一致性测试，基于专家焦点小组访谈法，覆盖北上广三地拥有品牌营销、创意制作、广告测试及数据洞察实操经验的企业和代理机构高层、专家，总计31人线下参与。
结果显示，AdEff 凭借超出预期的出色表现，通过了样本及专家一致性的双重验证，这标志着 AdEff 已完全具备商业实用性。
一、样本一致性为89%，AdEff 可替代真人进行广告测试
广告测试是营销中的关键决策，指的是在广告正式投放之前，通过科学的方法，对广告创意（包括广告文案、视觉设计、视频脚本等内容）进行评估和检验的过程。目的是了解目标受众对广告创意的反应，判断广告创意是否能有效传达信息、吸引受众注意力、激发受众的兴趣和购买欲望，从而降低营销风险、优化创意效果。
通过对真人样本广告创意测试的平均分，以及 AdEff 广告创意预测得分进行回归分析，得出 R²=0.8906，这表明89%的 AdEff 的预测得分可以较好地反映真人样本测试的结果，即产品的样本一致性为 89%。
这也意味着：
AdEff 的真人样本拟合表现卓越
高R²值表明 AdEff 的预测得分与真人样本测试得分具有强相关性，AdEff 的预测模型在实际应用中具有较高的准确性及可靠性。
AdEff 可替代真人样本进行广告测评
在实际的广告创意评估中，企业可以更多地使用AdEff 进行全量广告的快速测试，筛选高潜力创意，规避决策风险。同时减少对真人样本测试的依赖，节省人力及时间成本。
二、76%测试结果符合专家预期，AdEff 广告测试具备商业实用性
专家一致性测试通过专家焦点小组访谈进行，每场访谈均包括主题探讨和产品测评两部分。
主题探讨环节，围绕产品可用性，专家自由表达观点；产品测评环节，每位专家现场观看5~6支广告创意（共计160支），最终基于自身专业判断，对 AdEff 给出的评价结果打分。
综合效果指数、反应曲线、指标分析、黄金3秒、结尾3秒、热力图及4项核心结果的测评结果，最终数据显示，专家认为，76%的 AdEff 测评结果符合其预期（所有结果均符合预期为100%），即 AdEff 当前版本的专家一致性为76%。
相较普通的真人样本，专家对广告片中的专业表达理解更到位，对广告创意测评的要求更高，对“好创意”也有更严苛的评判标准。76%的专家一致性得分表明，AdEff 在多个关键指标上的表现超过预期，通过了专家验证。
三、品牌广告主可通过 AdEff，实现AI时代的敏捷决策
未来，随着生成式人工智能在营销领域的应用普及，越来越多的内容会被生成，内容迭代速度也会加快，品牌需要生产包括广告在内的大量个性化/个体化内容。内容多了，挑战也随之而来——如何快速评估并预测高价值内容。
面对海量内容，AIGD（AI Generated Decision-making），通过AI决策或辅助决策将是可行的解决方案，AdEff 便是 AIGD 在广告测试这一运营决策环节的应用，其高达89%的样本一致性和76%的专家一致性证明，充分运用 AI Agent 进行品牌广告测试具备实际商业价值。
通过使用 AdEff，品牌广告主可以实现：
1.筛选：把控广告质量底线
AdEff 非常适用于广告素材多投放量级大、内外部决策流程长的广告主使用，可帮助品牌把控质量底线，加快内容筛选和优化的速度，降低商业决策风险。
2.管理：建立创意评估标准
对于长期依靠经验决策，或实际投放验证广告效果的广告主，AdEff 清晰的评估指标设定、分析和总结，能帮助其准确地判断广告价值，与创意代理反馈需求，拉齐内外部关于好创意的认知标准，提升沟通效率。
3.培训：提升员工创意素养
广告的泛化、效果化，导致当下很多企业的营销新兵或经验欠缺的员工，对于“什么是好广告？”缺乏科学认知。基于 AdEff 的创意评估数据库，品牌可对“好广告”做分析提炼，与专家培训结合，快速提升员工创意素养。
4.出海：降低海外投放风险
作为全球化产品，AdEff 目前支持多国多语言的广告创意测试，产品团队正在推进海外目标市场的产品落地及专家一致性测试。对于有海外投放需求的广告主而言，未来可以借助 AdEff 提前验证广告片在目标市场的投放成功率，规避潜在风险。
基于明略自研的明敬超图多模态大语言模型，AdEff 让广告测量的速度更快、成本更优、与品牌更相关，让每个广告评估决策更科学、更高效。
AdEff 为标准化SaaS服务，支持即开即用。用户可登录AdEff官网，注册并试用，新注册用户每人可获得一次免费体验机会。
