雙重驗(yàn)證遠(yuǎn)超預(yù)期,創(chuàng)意評(píng)估智能體 AdEff 進(jìn)入實(shí)用階段
2025-07-18
營(yíng)銷,本質(zhì)是圍繞消費(fèi)者注意力的感性或理性吸引。
預(yù)測(cè)消費(fèi)者對(duì)不同內(nèi)容的反應(yīng),研究清楚“什么樣的內(nèi)容更具吸引力?”是營(yíng)銷人一直試圖解決,但卻極為困難的命題。因?yàn)椴煌挲g、職業(yè)和性別的人,對(duì)視頻創(chuàng)意和內(nèi)容的理解往往存在很大差異,不管是小樣本調(diào)研、訪談,還是神經(jīng)科學(xué)測(cè)試,都無法解決全量、個(gè)性化測(cè)試的問題,但人工智能技術(shù)讓注意力預(yù)測(cè)迎來了突破。
2024年,明略科技自研的明敬超圖多模態(tài)大語言模型(HMLLM),通過引入大規(guī)模的視頻主觀多模態(tài)評(píng)估數(shù)據(jù)集Video-SME ,收集不同人群在觀看相同視頻內(nèi)容時(shí)腦電圖 (EEG) 和眼動(dòng)追蹤區(qū)域的真實(shí)變化 ,彌合了豐富模態(tài)之間的語義差距,可集成幀與幀之間的邏輯推理,實(shí)現(xiàn)機(jī)器對(duì)不同人群的認(rèn)知模擬。相關(guān)成果榮獲全球頂級(jí)多媒體會(huì)議 ACM Multimedia(ACMMM)2024 年度最佳提名(提名率僅2%)。
2025年,由明略科技、北京大學(xué)、吉林大學(xué)組成的研究團(tuán)隊(duì),開創(chuàng)性地建立了業(yè)界領(lǐng)先的大規(guī)模個(gè)性化注視行為數(shù)據(jù)(SPA-ADV),首次記錄了超過4500名不同年齡與性別背景用戶的真實(shí)視覺行為,模型的泛化能力和個(gè)性化預(yù)測(cè)效果進(jìn)一步增強(qiáng),可精準(zhǔn)地預(yù)測(cè)“某一類人會(huì)看哪里?” 。相關(guān)論文已被 ACMM2025 正式接收。
為幫助營(yíng)銷從業(yè)者預(yù)測(cè)不同廣告的效果,在明敬超圖多模態(tài)大語言模型(HMLLM)之上,明略科技研發(fā)了AI驅(qū)動(dòng)的廣告測(cè)試及優(yōu)化產(chǎn)品——AdEff,并于今年6月19日面向全球市場(chǎng)發(fā)布。
為了驗(yàn)證 AdEff 的商業(yè)實(shí)用性,今年5~7月,明略科技產(chǎn)品團(tuán)隊(duì)對(duì)其進(jìn)行了樣本一致性和專家一致性測(cè)試。
其中,樣本一致性,基于明略科技過去10年積累的神經(jīng)科學(xué)真人樣本腦電眼動(dòng)測(cè)量數(shù)據(jù),真人樣本共計(jì)10萬人次;專家一致性測(cè)試,基于專家焦點(diǎn)小組訪談法,覆蓋北上廣三地?fù)碛衅放茽I(yíng)銷、創(chuàng)意制作、廣告測(cè)試及數(shù)據(jù)洞察實(shí)操經(jīng)驗(yàn)的企業(yè)和代理機(jī)構(gòu)高層、專家,總計(jì)31人線下參與。
結(jié)果顯示,AdEff 憑借超出預(yù)期的出色表現(xiàn),通過了樣本及專家一致性的雙重驗(yàn)證,這標(biāo)志著 AdEff 已完全具備商業(yè)實(shí)用性。
什么是廣告測(cè)試?
廣告測(cè)試是營(yíng)銷中的關(guān)鍵決策,指的是在廣告正式投放之前,通過科學(xué)的方法,對(duì)廣告創(chuàng)意(包括廣告文案、視覺設(shè)計(jì)、視頻腳本等內(nèi)容)進(jìn)行評(píng)估和檢驗(yàn)的過程。目的是了解目標(biāo)受眾對(duì)廣告創(chuàng)意的反應(yīng),判斷廣告創(chuàng)意是否能有效傳達(dá)信息、吸引受眾注意力、激發(fā)受眾的興趣和購(gòu)買欲望,從而降低營(yíng)銷風(fēng)險(xiǎn)、優(yōu)化創(chuàng)意效果。
通過對(duì)真人樣本廣告創(chuàng)意測(cè)試的平均分,以及 AdEff 廣告創(chuàng)意預(yù)測(cè)得分進(jìn)行回歸分析,得出 R2=0.8906,這表明89%的 AdEff 的預(yù)測(cè)得分可以較好地反映真人樣本測(cè)試的結(jié)果,即產(chǎn)品的樣本一致性為 89%。
這也意味著:
高R2值表明 AdEff 的預(yù)測(cè)得分與真人樣本測(cè)試得分具有強(qiáng)相關(guān)性,AdEff 的預(yù)測(cè)模型在實(shí)際應(yīng)用中具有較高的準(zhǔn)確性及可靠性。
在實(shí)際的廣告創(chuàng)意評(píng)估中,企業(yè)可以更多地使用AdEff 進(jìn)行全量廣告的快速測(cè)試,篩選高潛力創(chuàng)意,規(guī)避決策風(fēng)險(xiǎn)。同時(shí)減少對(duì)真人樣本測(cè)試的依賴,節(jié)省人力及時(shí)間成本。
專家一致性測(cè)試通過專家焦點(diǎn)小組訪談進(jìn)行,每場(chǎng)訪談均包括主題探討和產(chǎn)品測(cè)評(píng)兩部分。
主題探討環(huán)節(jié),圍繞產(chǎn)品可用性,專家自由表達(dá)觀點(diǎn);產(chǎn)品測(cè)評(píng)環(huán)節(jié),每位專家現(xiàn)場(chǎng)觀看5~6支廣告創(chuàng)意(共計(jì)160支),最終基于自身專業(yè)判斷,對(duì) AdEff 給出的評(píng)價(jià)結(jié)果打分。
綜合效果指數(shù)、反應(yīng)曲線、指標(biāo)分析、黃金3秒、結(jié)尾3秒、熱力圖及4項(xiàng)核心結(jié)果的測(cè)評(píng)結(jié)果,最終數(shù)據(jù)顯示,專家認(rèn)為,76%的 AdEff 測(cè)評(píng)結(jié)果符合其預(yù)期(所有結(jié)果均符合預(yù)期為100%),即 AdEff 當(dāng)前版本的專家一致性為76%。
相較普通的真人樣本,專家對(duì)廣告片中的專業(yè)表達(dá)理解更到位,對(duì)廣告創(chuàng)意測(cè)評(píng)的要求更高,對(duì)“好創(chuàng)意”也有更嚴(yán)苛的評(píng)判標(biāo)準(zhǔn)。76%的專家一致性得分表明,AdEff 在多個(gè)關(guān)鍵指標(biāo)上的表現(xiàn)超過預(yù)期,通過了專家驗(yàn)證。
未來,隨著生成式人工智能在營(yíng)銷領(lǐng)域的應(yīng)用普及,越來越多的內(nèi)容會(huì)被生成,內(nèi)容迭代速度也會(huì)加快,品牌需要生產(chǎn)包括廣告在內(nèi)的大量個(gè)性化/個(gè)體化內(nèi)容。內(nèi)容多了,挑戰(zhàn)也隨之而來——如何快速評(píng)估并預(yù)測(cè)高價(jià)值內(nèi)容。
面對(duì)海量?jī)?nèi)容,AIGD(AI Generated Decision-making),通過AI決策或輔助決策將是可行的解決方案,AdEff 便是 AIGD 在廣告測(cè)試這一運(yùn)營(yíng)決策環(huán)節(jié)的應(yīng)用,其高達(dá)89%的樣本一致性和76%的專家一致性證明,充分運(yùn)用 AI Agent 進(jìn)行品牌廣告測(cè)試具備實(shí)際商業(yè)價(jià)值。
通過使用 AdEff,品牌廣告主可以實(shí)現(xiàn):
AdEff 非常適用于廣告素材多投放量級(jí)大、內(nèi)外部決策流程長(zhǎng)的廣告主使用,可幫助品牌把控質(zhì)量底線,加快內(nèi)容篩選和優(yōu)化的速度,降低商業(yè)決策風(fēng)險(xiǎn)。
對(duì)于長(zhǎng)期依靠經(jīng)驗(yàn)決策,或?qū)嶋H投放驗(yàn)證廣告效果的廣告主,AdEff 清晰的評(píng)估指標(biāo)設(shè)定、分析和總結(jié),能幫助其準(zhǔn)確地判斷廣告價(jià)值,與創(chuàng)意代理反饋需求,拉齊內(nèi)外部關(guān)于好創(chuàng)意的認(rèn)知標(biāo)準(zhǔn),提升溝通效率。
廣告的泛化、效果化,導(dǎo)致當(dāng)下很多企業(yè)的營(yíng)銷新兵或經(jīng)驗(yàn)欠缺的員工,對(duì)于“什么是好廣告?”缺乏科學(xué)認(rèn)知。基于 AdEff 的創(chuàng)意評(píng)估數(shù)據(jù)庫(kù),品牌可對(duì)“好廣告”做分析提煉,與專家培訓(xùn)結(jié)合,快速提升員工創(chuàng)意素養(yǎng)。
作為全球化產(chǎn)品,AdEff 目前支持多國(guó)多語言的廣告創(chuàng)意測(cè)試,產(chǎn)品團(tuán)隊(duì)正在推進(jìn)海外目標(biāo)市場(chǎng)的產(chǎn)品落地及專家一致性測(cè)試。對(duì)于有海外投放需求的廣告主而言,未來可以借助 AdEff 提前驗(yàn)證廣告片在目標(biāo)市場(chǎng)的投放成功率,規(guī)避潛在風(fēng)險(xiǎn)。
基于明略自研的明敬超圖多模態(tài)大語言模型,AdEff 讓廣告測(cè)量的速度更快、成本更優(yōu)、與品牌更相關(guān),建議品牌盡早嘗試,讓每個(gè)廣告評(píng)估決策更科學(xué)、更高效。
AdEff 為標(biāo)準(zhǔn)化SaaS服務(wù),支持即開即用。您可掃描下方二維碼,添加工作人員微信后,登錄?AdEff.com?注冊(cè)并試用,新注冊(cè)用戶每人可獲得一次免費(fèi)體驗(yàn)機(jī)會(huì)。
什么是 AdEff ?
「AdEff」是AI驅(qū)動(dòng)的廣告測(cè)試及優(yōu)化平臺(tái),基于明略自研的明敬超圖多模態(tài)大語言模型(HMLLM)研發(fā),采用大模型及混合專家模型協(xié)同架構(gòu),最快15分鐘,即可完成廣告測(cè)試并給出優(yōu)化建議。AdEff 預(yù)測(cè)結(jié)果真人樣本一致性為89%,專家測(cè)試一致性為76%,能夠幫助品牌營(yíng)銷專家及創(chuàng)意專家基于數(shù)據(jù)做出更明智、更快速、成本更優(yōu)的決策,提升廣告投放成功率。
信息填寫