薛美根上海大数据信息挖掘应用

大数据环境下上海创新交通综合管理的实践与探索执笔：薛美根副院长演讲：陈必壮副所长上海市城乡建设和交通发展研究院xuemeigen2013@126.com一、背景二、数据挖掘技术三、大数据应用四、展望提纲1背景一颗、扁开非展榴交孤通胳信眨息轻数泥据盆挖垦掘厨的摇必博要馆性（一）交泉通躲信虏息素化任迅行速天发萄展偿为件信贩息甘数凭据粥挖杯掘循奠打定随基系础（二）交气通孟信执息盗化沾数摸据棉挖文掘按是福交傍通熊调找查裕技暑术址的蜜发龄展缎趋辟势（三）对鼠获伪得零全扫面毅、窄真沟实撒的船交能通黄数乱据剪至阁关蔑重裤要（四）对熄传吓统宰人涂工贷调摔查屈的哭辅涛助轰、依补祸充蚁和驾校评核二折、贩现嫩状礼数武据露基巧础③车牌识别系统数据①用地数据②手机信令数据④运营车辆GPS数据⑤信息平台统计数据⑥交通一卡通数据三伤、斯数决据炸挖她掘斤成表果悔在诵本埋次跪交简通占大侨调剥查愈的牌应佣用信卖息度数底据茎挖带掘闷调担查欺共杀有6个吼分搏项激，亭是层其谜他淋综摧合咐交迅通司调绳查晓的锅弥科补阔、评辅融助川校坝核厘。交通信息数据挖掘交通基础数据调查车辆使用情况调查系统运行特征调查人员出行情况调查1.城市用地2.调查期实有人口3.小客车实有量1.出租汽车出行特征2.货运车辆出行特征3.进出市境车辆出行特征1.区域间人员出行2.外来人员住宿特征1.道路断面流量及车速2.轨道客流进出站及换乘特征3.公共交通方式间客流换乘特征4.潮汐交通特征2信卸息卷数林据珠挖涌掘抓关隙键耍技间术一眨、骨基铜于态遥婶感宗技娱术割的描交杨通革相叶关非用贱地包数幅据拳挖语掘刊技凉术解岭译纠获伤得座全动市2画3万个柄分义析冈单擦元欲用岛地熊信混息哲，蔑是虽城绍市逮用旦地鸭调挠查火的轻主趋要腹方高法马。数便据馅来优源帐：城押市里信命息献中争心数赠据拔时馒间晃：2似0命0名8年形、2飞0着1糊3年高困分惧辨狠率构航终空捧遥进感夜用刃地裙（尼解茶译粥）房落屋云建畜筑越（谷统劳计狸）数纯据忌来奏源江：房斜屋躲土苦地驾资级源告信卷息途中协心景、还测钱绘贩建尺筑数登据术时霉间刃：2喷0摆1右3年获速取葵最央新男上纪海混市锅市肉域则红作外菌航泼空床遥愉感沿影罢像昏、肝遥弄感闻影前像研定作位魂匹伴配以齿住卷建怒部《城赵市脂用算地拨分糖类毅与且规廊划练建比设蓄用匹地电标鄙准艘（G保B致5慎0大1乳3垃7街-怠2盛0稀1罢1）》为慌指注导胡，怒对突上卷海屡市忧全呜陆蚀域鹿进报行积用宁地佣分惯类鸦遥嚼感懂解抬译是、员同验步替进拒行比外便业退采莫样耻核赤对在A断r钥c蜜G腔I母S环尼境担下怀实扭施耳土玻地温利腿用炊航企空霉遥错感弱解坦译朴制卧图浪，请并慨以登区里县混为疫单底位贸，窑计炕算厅每候个恩区朝县冒内箩所页有属图钩斑缠的俯面落积遥，殿按较土室地涌利仿用饶类龄型赢进疤行画面仿积搂汇粉总挑、瞎特贩征景分腾析患。通映过乎解谦译拨，耍将础全姨市2呼8类用貌地修细士分衫到2绢3万袍个如单忆位算，娃同填时方结嚷合由房盛地总管虏理恶中秆心梯房暖屋表建聋筑迷信抬息舅库脆、沾测乱院算数澡据奖进纠行略建卧筑爹量俊的蚊校畏核蒙，猛得挑到灭全槐市惕细啊分缴为1释3类的帐建隔筑子量规，钥是象分声析珍人常口云岗日位扩布警局趟、次交蛛通拨与百用夕地音发纯展连的推重历要惑基众础客数帜据引。二复、跟基属于嚼手优机哲信酬令描的球人个员预出步行张特东征锤挖巩掘希技代术原池始基数猎据筹主悲要绞字漂段间列碍表字段含义MSID唯一用户标识TIMESTAMP时间戳LAC位置区编号CELL小区编号EVENTID事件类型（位置更新、小区切换、收发短信等）移纪动炼基傅站陵分沫布日余均1茶8慌0倦0万移巧动统通醒信汗用侵户喷的信肥令勉数把据托，线辅碌助民校刮核专人岂口爸分拨布音、筹出冠行歪分杰布狮等紧人笼工秃调奖查浮。数老据博来怕源磨：由告市饰交骂通赖信族息猎中蛾心精协盟调滩获肆取2犁0迟1众3年-感2给0室1滑4年旬移公动字手厘机插信似令脊数啦据基召站宁分凳布沸：全锈市落约6万个为基天站悔，劝中萄心词城餐平哲均拆半喇径救约1葡3稍0米刚，偷郊饥区呆平耽均掠半档径鼠约3葡6元0米采管样烛原碎理奋：短己信披、隶通侍话票、L牢A楼C区玻切片换鹅或恳每魔隔1喷-童2小纲时谨定百时纷与印基喝站摧通受讯乔的云信腐令悔数轨据基令于衰移言动遍通慕信展用李户电稍子乘脚骨印的见手曾机匆信愁令良数帝据牌分越析色技饼术1、地下轨道车站客流换乘特征分析技术利用地下轨道线路与移动通信LAC区、地下轨道车站与基站的唯一对应关系进行路径识别将手机检测与申通统计乘距相比对，地下轨道车站比例超过90%的轨道线路看，如2、7、10、13号线，两个渠道数据的绝对差小于5%2、校核线手机客流穿越特征分析技术将移动通信网络的出行轨迹映射至道路网络，并在校核线周边设置100-500米的缓冲区过滤信号漂移产生的影响对穿越校核线地下轨道断面的样本客流进行扩样，并与申通统计断面客流进行比对，两个渠道数据的绝对差平均为7%。3、手机用户昼夜分布分析技术跟踪一段时期手机数据，按出现天数比例判定分析对象，并按累计停留时间最长为原则判断用户的夜间、白天固定地分布夜间分布与“六普”数据比对，行政区人口比例的绝对差均在2%以内。三竿、崇基虹于恼牌滩照造识韵别艳的梯车伙辆其出书行赛特卵征饺挖失掘河技摔术市完境汇道杰口快耻速跌路洽车鉴牌岗断皇面数并据雁来项源亲：市乒交组通薪信锈息除中梁心绪协画调露获至取础市觉交幕警2邀0搅1贱3年-剥2缩慧0乒1牌4年握车苏牌优识欣别历数称据数阻据索内太容铸：车规辆梁号惧牌铺、息号束牌折颜像色我、磁途脆径也时绳间羽、眉途千径诵车劝速爱、生车绞辆眨属竞地有及捏设他备火断旨面玻编旋号斤等市师境拉道秧口鲜车栗牌届识默别痒车棒流榴量菜与再高待速钻收考费邀流极量盆对尺比期，伞高各速巡寿道港口奴的亲平济均厦捕跃捉吵精仔度劝约9施3脂%；快哈速朗路艺车咽牌载识适别哀车洋流蜜量蓝与模高厨架蒜线份圈华相灾比还，叼车兔牌浮设牺备困的款平吵均炮捕毒捉躬率促为9习6状%。4贸2个代市蝇境制道扛口为、3酷4致3个鼠中索心造城梦快萄速怠路枝断劫面关和1蓝4个持越梨江怀桥趋隧杜车轻牌谣识聚别妻数谊据咳，感辅淋助辛校要核是小皇客稠车志实纸有丸量尿、素车寄辆种出雄行安分惕布巾等节人稍工质调然查难。（1）厨基凳于停依留仇时施长分乓析剩的系长相期环在蕉上大海态使得用关的专外大地进牌清照巩小茄客嫁车牵规张模舅推猛算技构术一乎年泽内腾累吉计惹在捡上芒海颜停摄留堡超诵过1严8伏0天单厕次束来踩沪营平朋均据停晋留当时郑间捧超堪过5天市境道口车牌识别外活牌插车打辆塘累业计畜在讲沪准天乎数(除舰当鹿日来往调返)交强险停车调查车牌识别年检站居民家访调查车薄牌映识程别耀数龄据队挖士掘巨结打果霸与架推吨荐广值易绝钩对被误销差瞧为5川%（2）环基真于行匠驶跨路涉径整虾理扑的膨车碌辆节出伪行垒特胀征贷分阔析饼技智术1、筛选问题车牌车牌至少有一位被错误识别的概率为6%-12%2、误识别车牌的较正按断面相近，路径可循，采集时间差合理为原则进行车牌数据校正3、出行链整理与线圈数据，收费数据相比对，整理路径信息入拣境早车描辆甩基压于旅地员带唤的朱目服的君地签分戒布中气心栗城当快决速控路湖不笛同背号饮牌挥车系辆史行巴驶哨特冈征市即境巧道氏口补车棚牌齿识速别努车煌流激量高与爸高篮速我收终费轰流贩量摆对皆比垂，香高僻速休道获口壁的凑平缠均率捕艰捉弦精应度珠约9类3赛%；以匹郊逝区炊为嚷目精的秀的摧入征境鼠车凯辆吹数局量触，张收看费见数插据绑和献车财牌炊数辆据将推印算谜结编果涛的挖绝另对沾差撑为5枪%快穴速粱路机车牢牌择识绵别廊车恐流稀量域与拼高袍架工线锈圈泛相遭比熄，独车雕牌低识昨别药的吉平服均方捕勒捉单率参为9鸡6隆%四蚀、高基猪于G谣P就S的企车赴辆电出秋行燃特妹征码数蓄据胆挖凡掘娱技随术出勾租京车粒轨退迹碗图货勉车赴轨草迹共图2剑.歪9万辆堆出逢租负车蛋，1万辆闲货忠车G秆P锅S信项息碌，辩是床调绝查刊中仁心予城企地缝面棍道否路粉车静速殿的阿主愈要郑途则径稻，剃是适辅岸助肆校短核朝出距租背车肾、箱货剩运翅车爬辆还出秤行嫌特肯征上的喷主绳要完手棍段沿。基做于轨鸭迹分信聪息的场车得辆扁出岁行伯特伍征的分铅析其技睡术1、基于出租车GPS信息的路段行程车速分析技术数据预处理（检验排除数据飘逸、传输延迟等）地图匹配（50*50米网格）基于最短距离的出行路径推算路段行程车速计算（出租车重车）2、基于GPS信息的车辆出行OD分析技术出租车出行OD（利用空、重车状态切换信息）集装箱卡车出行OD（结合用地、车速、停留时间）五信、无基否于融交国通晋信喂息膊平锅台怪的证道槐路赶交牌通凶信絮息杯挖序掘政技颜术高母架贫快骗速滋路膝线持圈（分3种车剥型乎车愉流思量敞、践车君速割等）地桑面S获C母A墙T卷S线部圈（机遇动税车枝流肉量途、址饱剩和态度或等）高紫速捡公着路云收沉费落站O漏D（分1字1种车胳型挪机昌动凶车钥流撇量）4民7骂8个针快籍速申路炉线晋圈电、3研0润4腥3个察地头面S奴C习A逢T蹄S线库圈至和1董0芹4个奸高蒙速告公艰路挑收艺费模站恨数叫据守，涝数纺据玻甄单别明、冶清腔洗庄后志形酬成布不运同静空鹊间皇、坚时泪间遮的积统采计骂指完标疯，此与秀人冬工泻调嫂查检相兵结战合福，津获衣得笛道改路奔交脾通授运营行枣状厨况昼。数见据麻来亿源宴：市披交境通忙信渡息佣中硬心时唉间惕颗薪粒争度查：5分要钟六烦、表基腐于宅一印卡楚通链的得交自通赤特宰征帽数引据怒挖发掘训技贸术日按均急刷洲卡躬约4借0耗0万张邀，雅超扔过1铃0羞0锄0万次旧的着交练通沃一忌卡织通顷数充据笔，宗辅浩助朝校夕核庭公梢共凡交违通盲客怨流猾出房诚行漠特切征。交盈通拼卡殃原疤始亚刷你卡魄记养录茄字蚀段稠列百表交配通倍信摄息伙平婶台达统耐计商指静标驶列购表基片于刷蓬卡准时度间放间洽隔的涨公邮交氧客亦流驶换伏乘隙特酿征锁分印析周技讯术换剑乘废时扮耗雹分待布轨经道袋车怜站锣公丽交敢接医驳组比词例向交宝通祥卡围挖守掘健结陆果桶与旨推歼算循值心绝叛对广误戏差老为4嫁%轨道换乘公交轨道换乘出租公交换乘轨道公交换乘公交3大涌数炸据辫在帅上语海质城蓝市怎综司合长交坡通摄管模理娃中拐的鄙应蛾用以体遥抄感华用赌地秧数恰据侄挖拆掘霞为站主企，英辅艰以遍建只造旗量负信米息善统次计弄，萝获瓣得型现璃状称上窃海唐用踪蝶地队开漆发乒类兽型浑、仔分蛮布查及域用凑地倦强迷度习等爽指块标签，碎并爆反漏映厌历元史势演阴变催趋蝴势亡。1、阅城婆市堂用做地桐基鹊本测情壳况2行0绑0漆8肾-李2捎0苏1耽3新访增侮建叨设感用凝地2绿0垂0虏8年炊底晃建期设摩用适地全宏市2峰0购1窄3年送建忙设织用怨地2包9忍1训8平治方妨公渔里鉴，较0辜8年增立加2天2编0咽k供m2，洋增炼幅电为8服%居忌住状用奇地穿占3杂6惩.浅2纸%，工番业通及翻物混流异用倒地仅占3件0摆%，公养共谜与陵商炕业献用店地扩占1档0砖.蓝0酷%建选设逮用镰地钩中：全碎市建添筑活量1租1迷.构6亿好平饶方先米眨，渠较0光8年哨新派增3趁.话4亿违平陡方屿米绪。恭住息宅建倒筑光量衬占岸新爸增罩建胀筑旋量希的4煤3北%，近胀八猴成增矿加在遮中丙心案区外同。商鸦业待行遮政词商堡务竞办栽公建演筑怒占立新雕增旦建哑筑蜘量围的1碎6钻%，近泡七成换增漠加携在虹中侦心抖城乏。2输0述1幻玉3全良市啄居纤住产建签筑密拌度2敞0擦1此3年柏全葱市呈非慌居吓建裹筑曲密修度2、荷城怀市症人粘口罗分竿布充节分晓利菌用手俯机信养令右数孝据罩，是馒校察核塘调胜查捷期蓄实呈有眨人絮口际分窑布椅的输重腿要赖依震据婆。地带夜间手机人口数（万人）夜间手机人口比例中心区浦西134.211.4%中心区浦东27.42.3%中心区小计161.613.7%外围区浦西279.023.7%外围区浦东120.010.2%外围区小计399.033.9%中心城合计560.647.7%近郊区267.222.7%远郊区348.629.6%合计1176.4100.0%2博0面1处4年夜绪间盲手济机舒人督口陪地扰带恋分俘布俭比兴例3、顺人咐员赌出匆行钉特面征手片机数耻据男挖旺掘成爹果黑是灾校哑核垄职挪住简分知布践的垮重杠要疼依篇据张。搜另衫外柏，捧综阶合墨手泪机猎信衣令作、联出拼租带车G漠P嚷S、票中鼻心挠城愈快顷速牛路患线赚圈量、钩轨璃道创闸心机贪数朋据姐反伸映宅潮魄汐档交局通野特抢征熊。陆令家音嘴蹦区圈域便人乡丰流嘉来睡向梨分忍布人臣民汗广俭场挺区呈域惰人风流的来贿向当分弟布中划心服城桨浦陶西娱：4厚1料%中朝心心城更浦聪东茂：5荣0屋%郊镇区杰：9堵%中首心涝城选浦齐西幻玉：7蹦7恰%中热心臂城图浦色东孕：1养4述%郊肿区近：9她%职裳住域等因刚笼性泉出夏行育需蛙求栏的创平己均返出恒行础距确离缓约蓄为店公轰里弊，9构0活%的伞出饶行患在俘公段里肌以雕内兼。早奔高愁峰喘轨厘道辞交喇通牢（题流举量阶）进微：壁出＝2：1早围高烛峰抄道妖路艇交片通拾（崖车生速荷）进贺：贸出＝0洋.盼6：1早饰高纸峰叹进押出毁内舰环枯手伴机折用怎户秘数进趴：背出＝1浆.辽5：1内乞环承线白的吨潮高汐困交哪通详现眯象波最等为滴明改显，督内蒸环伴线豆、喊中劝环扯线赚、孙外规环吊线封早茶高革峰帽以冰入秩城精客笋流生为引主中斑心仆城浑周糟边堪与弹远筋郊慰连苦接蔑区债域稍出启城洽方采向昆客禾流食略欲高苏储州盟河槽潮衬汐覆交扣通抚明趁显交，租以东北熊向俘南乞客途流门为帜主黄加浦显江组潮预汐青交柴通课不害明士显早，乒浦孤东陆至抢浦虫西晨客窄流梨略初高。4、直小慈客还车沙实宴有隔规贫模大类小类统计量（辆）道口系统采集的长期在沪的外牌小型车1、仅在郊区出行（未在中心城出行）11万2、在中心城快速路出行95万

交强险3、未在道口和中心城快速路出行的车辆6万总计112万小客车（88%）98万根局据纵收注费咬流挪量走数曲据艘，般小拢型块车景中南小愈客哪车横与谎小塌货中车霉的巴比搜值炒为8趁8谱%摔:递1炸2障%经巧本稿次项调壮查之检锋验都，排基游于烤车脱牌霉识够别逆数欧据列挖碰掘蛮是衰今洋后美调肯查沟小限客厕车纠实捉有怨规伤模束的邮主肢要括手摔段匙。澡经综岁合末推逮算，2倚0楚1惨4年长泉期潮在前沪聪使业用梅的优外贞牌赞小毒客献车近规统模笼约温为9井8万累辆素。5、花道孕路殿交京通逐车渗流按特肤征充偶分都挖帝掘渣线盏圈甚、走车质牌欲识掌别祥、铁出色租茂车G扭P睡S和饱高天速钻公平路亿收指费及数设据顾反柔映爸道罚路凶交药通姻车躬流祸特释征养，叼是裹调援查婆道丛路穗交樱通柏运棋行时状揉况旷的躲主刊要动手鄙段魔，究与口人康工哗调扣查财相鸣互矩补迅充列。外牌车辆沪牌车辆早室高庄峰辆高铲架呜道愤路正运慰行今车轻速内善环泻线屋：2处3遵%竭3却0%全定天午情间潜平介峰中仔环朵线洁：2究9白%胶4银0%南迫北赚高向架炎：2抓2铅%蚕3码1%延眼安费高货架合：1亭7袜%搁2佳3%逸也仙颜高贱架晕：2悲4餐%伙3圾2%沪链闵稠高赚架图：2胀3喷%性3陶2%中况心阴城占快粗速依路座（第不落含果外离环咸线拉）巾工露作恳日匠外让牌韵车枪辆忽比守例贫全能天客占2寇5辨%，禁午缠间迈平茎峰涨占3扔2羊%高械峰进来一盼步巨向呼午荡后筒和冠早澡晨修延奥长地能面购道躁路浴区佩域籍工毙作丢日惧拥学堵桃频装率地借面干嗓道吼工秀作悦日平鸟均馆车滴速空努间业分滤布分颈区果域纹地金面疯干拳道旋高阶峰术运眨行已状腐况伟保辞持躺稳旦定你，隐但放羞射牧性鱼干牢道尖服渔务呜水诱平有蓄所下往降，某与2雄0拖1穗3年同嫌比下躬降6霉%谊-酒1其6左%。地维面惭道浮路制拥除堵怜区创域首数陶增得加夏明奇显。按班照拆信鞭息壁中救心佛在岂中岸心且城舟区擦划众分6陶8个维区偏域黎，赛有1伤5个斜区姑域全速年湖超扎过1万0氧0个粒工婚作宜日驱拥类堵。2浊0抓1台4年9月梅工世作喉日翠均羽高缸速遭公安路沃驶梳出贝量章约行为9悠0万抛车险次技，才与2镇0哈1松1年扇相嫂比小，规年场均满增漫长1杠0万煮车损次染。新杠城片范冒围啊内总，削工丈作蔽日撒松界江悟新可城代和若青屈浦两新饮城叶高粥速朴公垂路拿出垂入桂口兼车您流桃增舌长召最签为零明胳显叹，克在2仆5忠%跃-长3毅0映%左剃右别。工电作润日沃高镰速梦入嫌口呢流旁量电增雷长算比班例（2扁0级1乡丰4贡/艰2赢0袖1欢1年上）工谱作秘日世高看速窄公浑路仔流轨量晌分臂布酬图6、步公陶共江交逃通是客饲流询特短征基炼于轨裤道埋闸妇机过数本据净，痰并刃运思用胸轨帖道驶交魂通牙模卷型由平上台悟进影行佛分技析祸，满反倘映肆轨计道冷交崖通势的延客乞流疏分筒布沸及膛运盏行摊状俊况纺。边利炊用制手境机款信羡令码挖惩掘混反朴映肠轨专道割系被统责内践部代客屑流获的冻换弓乘寺特米征梦。拍充臭分饼挖笋掘挺交打通湿一却卡俊通转数裕据蓄，裙反窜映匠公厦共独交更通活方桃式斗间成的合换妄乘鬼特敌征跪，廉是床校芳核译轨蹲道坟交恳通轿接吓驳拢方彩式所结掩构证，凶地姿面复公释交故内霉部吵换恼乘悲率替的朝重核要眠手站段米。全贱市脂轨膜道话交伞通饮工察作押日隙均革客还运省量绕为8腰5伞6万乘柄次孝。中炎心庄城辣轨强道虏交叮通佳上顷客改量晚增糠幅选达1鲁0短7删%。全登网撒客稳流泻分档布全塑网做客芹流垮拥朝挤悠分崖布分糊区蛾域锤轨想道排进大站