智能博弈与动态优化：AI Agent在京东广告拍卖中的创新实践

2025全球软件工程技术大会甘纯|京东广告机制负责人·本科毕业于上海交通大学数学系，博士毕业于美国威斯康星大学麦迪逊分校数学系·目前负责京东广告机制设计，主要工作包括使用博弈论建模平台与商家的多智能体博弈06120-212025全球软件工程技术大会06120-21CC一NZ一VSEConSECon2025全球软件工程技术大会06120-21BP细京准通智能投放220~260元220~260元曰投放概况推广管理全店推广场景商品成长场景目数据报表效果报表账户报表下载报表G历史操作记录智能投放京东联盟全站营销投放概况●您的账户等级已达到更高等级，建议您切换至京准通专业版(免费切换),全面解锁各类产品功能，优化数据概况②数据概况②I花费展现数展现数¥0.00对比：0总订单行总订单行平均点击成本¥0.00¥0.00花费2025全球软件工程技术大会2025GLOBAL5OFTWAREENGINEERINGCONFERENCE¥0.00-京东京言京东京言普洱茶和绿茶有什么区别2025全球软件工程技术大会环境ROI约束GMV最大化1平台、运营毛利商家量价敏感性开启暂停计划/充值渠道/关键词/人群预算/TROI表达超/欠达成、GMV收入最大化达成率2机制、用户、商家单元达成情况、消耗速度等bidratio调整达成情况机制收入最大化3流量分布、平台目保留价、扣费、分配规则广告收入、ADV等商家意图引导(包括预算激发)4商家、平台报表情况、平台意预算建议、选品推建议采纳率等2025GLOBAL5OFTWAREENGINEERINGCONFERENCESECon2025全球软件工程技术大会06120-2110/1810/1811/011/112025GLOBAL5OFTWAREENGINEERINGCONFERENCE2025全球软件工程技术大会06120-21SECon2025全球软件工程技术大会06120-21GradientflowsInput→WeightgenerationForwardpassWeightgenerationGradientflowsH(C;重)y∈YF(X;θ)y∈YLossF(X;θ)y∈YSECon2025全球软件工程技术大会12-21SECon2025全球软件工程技术大会12-21Hypernetwork:感知Agent间动态变化的纽带GradientflowsInputWeightgenerationForwardpassWeightgenerationGradientflowsH(C;重)y∈YF(X;θ)y∈YLossF(X;θ)y∈Y06060SECon2025全球软件工程技术大会12-21Rt=∑TRt=∑T=Ttcausaltransformeremb.+pos.enc.returnstateaction202025202025GLOBAL5OFTWAREENGINEERINGCONFER2025全球软件工程技术大会2025GLOBAL5OFTWAREENGINEERINGCONFERENCE①②③方案整体框架平台收益期望最大化，提升拍卖效率用户体验内页价值曝光点击转化2、序列多目标评估GeneratorEvaluator请求机制模拟请求机制现量价敏感性与广告收入双提升模拟出价策略优：模仿学习模拟出价体生成增广轨迹2025全球软件工程技术大会2025GLOBAL5OFTWAREENGINEERINGCONFERENCE2025GLOBAL5OFTWAREENGINEERINGCONFERENCEHypernet+MARL离线训练流程loss=αl·click+αz·rev+α3·cvr...最优序列展现、计费Q(s,a)=⃞fi(a;)xpctr;x(bid;+valuej)+fa(aj)到最优机制映射学习多目标参数均匀采样Offline进行实时最优机制切换HyperNetworkReplacedayerReplacedLayer根据实时流量调整权StateFeaturesActionFeatures2.采样训练样本~D4.PV过超网络生成实际参数[0-w,θ^u]6.计算损失：loss=pv[i]×subloss1+pv[j]×subloss28.UntilConvergeSECon2025全球软件工程技术大会06120-2106120-212025全球软件工程技术大会06120-21NetworkParametersUnifiedvirtualvalueExternalICPaymentUserBehaviorMultiobjectiveloss=cost+α·clickConstraintloss=β·MSE(λo,PAE)+otherKPIs...ItemFeatures案例总结-参数可解释性0.750.75-40-500.00=150.500.25202025202025GLOBAL5OFTWAREENGINEERINGCONF案例总结-离在线效果①在线效果：通过AB实验验证，消费+3.27%,订单+2.7%,GMV+4