数据流程梳理-shx

一、地图数据+路况基础+LBS基线更新（季度或月度）1、描述的是从SD到客户部署需要做的事情2、地图数据基本流程（1）解析生成CSV时间？就是将NIMIF转换为一种新的存储格式？还是进行了规格方面的转换？有损失还是无损失？（2）批处理CSV时间？是结构转换吗？就是生成各种沙盒？增加什么新的东西了吗？质量保证手段是什么？（3）本地部署数据提取编译时间？质量保证手段是什么？编译是指什么？是说转换成PBF吗？PBF只是作为基础地图，其他基础数据例如道路的编号、KIND车道数等是另外的什么格式的文件？MineMap底图出品编译的只是面向展示的，会含有一个汉字名称和一个编码两个字段；其他如车道数等展示无关字段均不存在。面向业务的数据会单独按照业务需要提供NIMFG数据或NIMIFG数据转出的CSV根据项目需求提取，主要是数据空间范围和数据图层吧？（4）本地部署时间？主要就是将CSV载入PG库吗？本地部署还需要的路况基础数据也是这里提取吗？有统一集中的数据吗？减少部署环节需要多个地方提取数据。（5）在线上线到可以服务的时间？需要编译吗？（6）从整体来看时间不会很长，关键路径是在路况基础吗？3、日更新流程（1）这个日更新流程上线了吗？目前日更新已经上线，到19Q3的基线版本；19Q4的基线版本由于核心Q4产品有质量问题正在修复，所以尚未提供。（2）日更新不存在转CSV什么的吗？日更新直接获取的是增量，不是NIMFG文件，所以不需要转CSV，直接用增量刷库（3）日更新数据1,2时间戳是什么？看着不一致就是每天都有一份日更新数据和一份对应的回退数据。都带着当时的时间戳（4）回退是什么？回退的条件是什么？回退是方便日更新应用了之后又觉得不好，反悔用的。可以按日期刷回去（5）PG项目库和REDIS项目库里面的内容差异是什么？PG库里面是CSV，REDIS里面是PBF？都是PBF数据，只是Redis是技术的高速缓存（6）变化PBF生成的时间？这个是按需生成的，第一个用户的第一次请求时生成（7）更新包下载、更新等是有程序支持的吗？有完整程序（8）最好能编程自动化的流程整个流程除了变更基线和日更新版本上线这两个受限于核心人工对接以外，都是自动化的。4、路况基础基本流程（到部署环节）（1）数据制作具体制作什么数据？感觉是有很多数据的？（2）“月度版数据增补版”制作具体做什么？时间？人工做还是程序做？（3）“月度增补版”与政企当前版本工具差分是上面的那个月度版数据增补版吗？是工具做的？差分结果是什么？大约多长时间？（4）手动处理失败数据是指差分不成功的吗？失败数据的比例大约多少？如何判断失败？差分的结果有标志吗？处理一个不失败主要如何进行？大约多长时间？（5）校验生产差分corresponding这是两个环节吗？校验生产差分的手段是什么？是保证差分的正确性吧通常多长时间？Corresponding是主要做什么？程序做？（6）一个正常的基线版本是要做哪些？这个流程缺少这些描述。这个流程是月度升级流程，最好能有基线流程，然后再是升级更新流程。这个也就是路况最基础的数据从SD到部署需要的时间。（7）政企差分版这个里面主要是什么？如何达到客户那里？（8）政企处理发布系统数据更新上线这个含有几个事情要做？（9）在这个里面没有看到和minedata上面的路况数据同步？5、路况和minedata基础和更新的同步流程这个建议小宋和韩鹏一起碰碰。6、项目落地后的更新流程（解决方案整理一下）重要描述基础数据如何更新？客户保存的历史数据如何有效使用？7、LBS服务配套二、路况发布流程和使用（这个先不细看了）1、主要描述基础路况产生后到项目应用上的