该平台以时序数据库和分布式数据为技术特点,采用并行计算、内存计算、多级缓存、动态调度等技术,实现了时空大数据的管理、分析算法的并行化改造,满足云环境下超大规模时空数据的快速入云发布、浏览、查询、分析需求。
包括按照测绘地理信息标准规范生产的大量空间数据,如 DLG、 DOM 、DEM 、 DRG,也包括更大体量的自发的数据,如文字、图片、语音、视频等,既有实体空间中的数据,也有虚拟空间中的数据。时空大数据作为最重要的大数据,除了具有大数据的一般特征外,还有其自身的特殊性。平台主要具有以下特点:
1.时空大数据包含对象、过程、事件在空间、时间、语义等方面的关联关系。
2.时空大数据具有时变、空变、动态、多维演化特点,这些基于对象、过程、事件的时空变化是可度量的,其变化过程可作为事件来描述,通过对象、过程与事件的关联影射,可以建立时空大数据的动态关联模型。
3.时空大数据具有尺度特性,针对不同尺度的时空大数据的时空演化特点,可实现对象、过程、事件关联关系的尺度转化与重建,进而实现时空大数据的多尺度关联分析。
4.时空大数据时空变化具有多类型、多尺度、多维、动态关联特点,对关联约束可进行面向任务的分类分级,建立面向任务的关联约束选择、重构与更新机制,根据关联约束之间的相关性,可建立面向任务的关联约束启发式生成方法。
5.时空大数据具有时间和空间维度上的特点,实时地抽取阶段性行为特征,以及参考时空关联约束建立态势模型,实时地觉察、理解和预测导致某特定阶段行为发生的态势。可针对时空大数据事件理解与预测问题,研究空间大数据事件行为的本体建模和规则库构建,为异常事件的模式挖掘和主动预警提供知识保障。
1.实时动态数据处理系统,主要用于对各类动态数据的获取、处理与管理。系统内容包括物联网节点管理,实时动态数据管理,实时动态数据分类管理,实时动态数据监测指标管理等。
2.物联网节点管理功能,支持对物联网节点的增加、修改、删除等操作,每类物联网节点对应一个图层,图层支持选择已有数据集或建立新的数据集。
3.实时动态数据管理功能,支持对物联网数据、水电气等城市运行和监测数据等实时动态数据,进行查询、结果展示、数据统计等操作。
4.实时动态数据分类功能,支持对数据的分类进行增加、修改、删除、查询等基本操作,每个分类中可定义一个或多个物联网节点等图层。
5.实时动态数据监测指标功能,支持每类物联网节点下监测指标的定义,包括新增、删除或修改监测指标,并定义监测指标数据获取的服务地址、数据更新周期、数据采集周期、数据临界值、数据监测规则等信息,在数据监测规则设置后,对于超出监测范围的数据,系统将会进行报警处理。
地理实体数据处理与建库系统,主要用于基础地理实体数据的处理、质检、建库、更新和发布。系统内容包括实体数据处理、质检、管理、入库更新和实体服务发布等。
时空大数据管理系统,提供时空数据的一站式更新入库、配图、发布与一体化管理的工具,实现时空信息统一管理与应用,适应海量、多类型数据生产与管理以及数据频繁更新的需要。系统主要包括目录与时空数据管理、地图管理、服务管理、输入输出、查询统计、数据可视化、元数据管理、系统与安全管理等功能。
时空大数据挖掘与分析系统,主要是将已有数据资源进行整理,分析各个数据间的内在联系从而得出更深层次的数据信息。系统包括GEO-ETL、指标库管理、数据挖掘等功能。