基于PG Ganos构建农业大数据应用

1、基于PG Ganos构建农业大数据应用目录PART 01 平台介绍平台简介互联网+共享模式应用（APP）遥感影像数 据土地经营数据种植结构数据 土壤肥力数据 气候气象数据 病虫灾害数据数据平台（农业电子地图）（API服务）6大 类 基 础 地 理 数 据标 准 服 务基础地图 数据查询 数据统计 数据订阅 空间分析定制地图 数据叠加 数据对比 数据融合 聚类分析定 制 服 务农 业 种 植种植管理农资投放农 业 金 融政 府 监 管农业保险 信贷担保 期货交易农情监管 种植补贴 合规监管用户B端：保险公司担保公司信款公司 期货公司G端：农业部门财政部门银保监部门C端：种植户B端：农资供应企业农

2、事服务企业平台简介地理信息是未来数字经济的基础设施！导航电子地图已成为大众消费领域数字经济的基础设施！国源打造“农业电子地图”成为农业细分领域数字经济的基础设施！政 府种植区划单品产量补贴发放资金配套种植结构农 户流转面积农资需求量作物产能参保情况融资情况作 物耕地面积土地面积播种面积 政府补贴种植区划单品产量参保情况风险区划受灾情况平台数据土壤数据钾氮磷有机质土肥数据国源科技气象数据耕地地块种植结构小麦水稻地表地上行政区划地下河西村玉米 河东村种植农户 朱新卫100亩朱枫亭100亩孙秀强100亩数据篇卫星航空遥感数据无人机、地面遥感数据土地、农业设施 农户、涉农企业土壤分类土壤肥力病虫害自然

3、灾害农业基础 地理数据遥感 影像种植 结构病虫 灾害土壤 肥力种植结构长势、产量土地 经营温度、降水、湿度、风 速风向、气压干旱指数、气温指数气候 气象平台提供以地块单元为中心的6大类农业基础地理数据PART 02 技术方案遇到的技术瓶颈IaaS基础设施空间数据库集群（Ganos）NoSql数据库集群（Mongos）检索数据库集群（ES）矢量瓦片地图服务引擎（VMapServer）分布计算集群（SparK）栅格瓦片地图服务引擎（RMapServer）SpringCloud微服务框架Web SDK / App SDK / WebService API汇集接入运维监控平台 架 构查询统计分析引擎（

4、GeoCompute）农业地理大数据平台门户（数据超市/订单交易/应用入口）大数据存储管理大数据可视化统计分析Ganos是什么Ganos = 云数据库时空引擎 + 时空大数据分析计算 + Web服务取名于大地女神盖亚（Gaea）和时 间之神柯罗诺斯（Chronos），代 表 “时空” 结合时空地理信息处理融入公有云/专有 云PaaS服务，成为一种普惠计算Ganos六大核心能力时空多模型支持矢量、栅格、轨 迹、点云等各类时空 数据表达和计算遥感影像全 球剖分组织支持时空全分辨率 支持在线大数据分析云上空间异 构并行计算支持Intra/Inter-Parallel 支持CPU+GPU异构并 行加速

5、兼容PostGIS兼容PostGIS，支持开 源生态多形态输出模式支持公有云、专有云、纯软和一体机多形态 输出PB级存储性 能优化支持OSS透明访问、 冷热分离、高压缩比 存储Postgresql数据存储方案Ganos+QGIS实现空间数据管理Ganos+Mapbox矢量瓦片地图可视化技术应用接入Mongo数据库集群瓦片集数据集字体库符号库矢量数据源矢量地图配图其他Mongo数据库瓦片集制图工程1制图工程1制图工程1服务认证地图切片数据源符号样式外部数据源Oracle SpatialPostgresQLOracle SpatialPostgresQLGanos+Tippecanoe完成矢量切片

6、Ganos矢量数据+多机、多任务并行切片框架Tippecanoe切片格式转换格式转换格式转换Tippecanoe切片Tippecanoe切片校验清洗校验清洗校验清洗Ganos+MongoDB搭建矢量切片服务实现“看管分离”MongoDBGanos矢量瓦片服务可视化展示、应用、管理矢 量 数 据 更 新更新动态切片多机、多任务并行切片数据访问MVT切 片 服 务Ganos+Mapbox矢量瓦片地图可视化技术Web端APP端平板端Ganos+ES集群的海量数据查询与检索技术集群监控及应用中间件（运行状态、导入工具、异常预警、备份恢复）异常预警运行监控导入工具备份恢复基于数据库集群的统一监控管理应用

7、程序（MonitorSys）系统 运行 维护 管理 制度基础设施： 数据 集群 安全 管理 规定ElasticSearchKibanaLogstash ElasticSearch集群Ganos+ES集群的海量数据查询与检索技术数据源管理（SQL+NOSQL）业务数据模 型ES数据模型抽取方案抽取任务ElasticSearch集群性能指标属性查询汇总统 计空间查 询查询1.5亿查询面积5亩的个数11亿地块面积、实测面积之和11亿护具空间查询、挂接20亿信息表，按照2.2亿亩查询个数、实测面积、承包方唯一值等全文检 索检索1.5亿姓张的承包方基本情况基于Spark集群的大数据空间分析技术Spark

8、集群框架定位于国源大数据基 础平台的大数据空间分析部分，基于 平台统一标准规范、安全机制、日志 分析和一键部署策略搭建，将空间数 据纳入Big Data for Spark的空间数 据仓库，开发了不同的空间分析、查 询统计和数据挖掘模型，并在基础上 搭建了面向多主题业务的分析方案。所有的分析模型和方案最终统 一注册到Spring Cloud微服务框架中， 供业务平台调用！Spark集群能力输出POSTGETPUTDELETEPATCH微服务API接口大数据的空间分析能力全国大范围空间叠加能力；全国格网化指标空间展示能力；多时相变化检测能力；多时相空间对象的宏观聚类变化；大数据挖掘与趋势预测土地

9、地类变化预测；农业统计指标正态分布判断空间数据分布变化趋势；空间大数据同步与回流支持平台核心库的数据同步；支持平台在线数据更新；支持大数据分析成果的数据回流到平台核心库；基于SpringCloud的高可用微服务聚合技术Zuul服务网关Zuul服务网关Zuul服务网关Nginx负载均衡Nginx负载均衡Nginx负载均衡ServiceAServiceBServiceCServiceAServiceBServiceCServiceAServiceBServiceCSpring Cloud Bus 消息总线Spring Cloud Task 任务调度Sleuth链路跟踪Turbine集群监控Eure

10、ka服务治理Config配置管理Spring Cloud 数据缓存PostgresqlOracleMysqlMongoDBESRedisHDFSHBaseKafkaServiceAServiceBServiceC基于SpringCloud的高可用微服务聚合技术PART 03 平台应用农业地理大数据平台应用篇国源科技第一阶段：平台重度赋能、专注用户和应用、推动用户业务数据化农业地理大数据平台应用篇依图承保按图理赔2018年农业保险全国保费总收入超500亿，预计2020年超过1000亿。农业地理大数据平台应用篇空天地一体化基础数据获取海量多元化农业保险数据库跨平台协同化智慧农业保险系统农业地理大数据平台应用篇影像底图区划界线耕地地块参考农户标的库历史承保数据匹配承保App端承保数据库承保清单多期遥 感数据承保结构种植结构无人机最新影像实地查勘灾害范围灾害程度多期遥感 数据气象数据作物长势作物产量灾害评 估报告准备阶段承保阶段合规阶段理赔阶段耕地