大模型在汽车行业的落地实践

阿里云/公共云大模型技术服务高级专家黄高攀•阿里云大模型技术服务高级专家，2012年毕业于中科院自动化所，现负责阿里云汽车能源行业大模型技术服务方向，重点在汽车能源行业开展大模型技术的全流程场景落地服务。在AI/大模型技术服务领域有丰富的场景应用与行业落地经验，先后就职于国网江苏省电力公司、阿里云计算有限公司，为不同部委、制造业、交通运输、汽车行业、电力能源等行业客户提供过AI/大模型技术服务，获得发明专利授权20余项。.......AI/大模型技术发展度网络自动学习特征，深度学习•2017年：Transformer成为主流•2023年：ChatGPT发布，AIGC元•大语言模型已逐步扩展到视觉、听大模型在存量业务大模型在存量业务和增量业务均有很大的推动作用，2028年大模型产业规模加成30+%Miaas产晶•LLM•……果性•企业基于大模型技术，在单个业务场景落地后，如何快速无缝地扩展到其他更多的业务场景•平台、方案、能力如何复用多Agent方案：从单场景到综合场景智能座舱智能座舱企业提效企业提效意图识别Agent核心要求核心要求•领域Agent动态扩展AIAI工具链的重要性chain的方式，实现多多模态数据的应用LMOps：生产业务持续运营应用观测应用观测版本管理等数据回流LMOps：应用可观测智能问答流程编排智能问答流程编排LMOps：应用可观测智能问答流程编排智能问答流程编排LMOps：应用可观测智能问答流程编排智能问答流程编排图片来源：LincanLi,etal.,Data-CentricEvolutioninAutonomousDriving:AComprehensiveSurveyofBigDataSystem,DataMining,andClosed-LoopTechnologies,2024.01场景需求场景需求关键问题落地挑战落地挑战景/abs/2103.00020多模态VL模型编码器，以及位置感知的视觉-语言适配器Qwen-VL:/abs/2308.12966••这张图片显示了一起发生在高速公路上的严重交通事故，导致卡车侧翻的场景。天气看起来阴沉，天空中没有明显的阳光。道路是一条高速公路，路面状况良好，没有明显的损坏。•……车身横躺在路面上。卡车的货箱部分已经打开，货物散落在周围。卡车的轮胎和部分结构受损严重，显示出事故的剧烈程度。•……道路上放置了几个橙色的交通锥，以警示过往车辆注意避让。•……可能是高速公路的出口标志。背景中有树木和建筑物，显示出这是一个郊区或乡村地区的高速公路。••这张图片展示了一条正在进行施工的道路。天气看起来是阴天，路面湿滑，可能是刚下过雨。道路中间有一堆黑色的碎石和泥土，•在道路的左侧，有一名穿着反光背心的工作人员正在设置或调整红色的施工围栏。围栏•背景中可以看到一些车辆，包括一辆白色的汽车和一辆红色的卡车，它们正在绕过施工区域。远处还有一些建筑物和路灯，表明这技术方案落地效果内容理解构建图像-场景详细描述Pair升Query相似边缘场景图像的召回精20%～30%的效果提升场景需求关键问题潜在客户线索邀约到店试驾客户下订•LLM对语音数据进行总结提炼，充分融合不同模态数据•LLM基于生成式预测，针对不同潜客提供个性化运营策略VS技术方案示例数据落地效果•具备灵活的扩展性：基于LLM生成式预测，未来可灵未来展望Agent的落地形态Agent，随时接入生产业务场景•汽车行业场景业务和流程重构