大数据技术 SuperMap 9D实时数据服务学习笔记
沉沙 2018-09-29 来源 : 阅读 1151 评论 0

摘要:本篇教程探讨了大数据技术 SuperMap 9D实时数据服务学习笔记,希望阅读本篇文章以后大家有所收获,帮助大家对大数据技术的理解更加深入。

本篇教程探讨了大数据技术 SuperMap 9D实时数据服务学习笔记,希望阅读本篇文章以后大家有所收获,帮助大家对大数据技术的理解更加深入。

<

SuperMap 在9月份发布了结合大数据技术的9D新产品,今天就和大家介绍下iServer9D中的实时数据服务。
1、技术框架
结合Spark的streaming流处理框架,将各种数据进行批量处理、存储。

2、处理的流程
iServer9D的实时数据服务可以通过各种通讯协议对来自互联网、物联网等实时流式数据进行采集、存储和分析,iclient9d可以对实时数据服务进行订阅,iServer会通过WebSocket协议将采集的数据实时推送至订阅的客户端并进行可视化呈现。
1)输入的数据和输出的数据
   
2)iServer 9D 的实时数据服务也提供了一下几种处理方法

属性过滤: 对输入的实时数据进行属性筛选,只显示符合条件的数据      
空间过滤:对输入的数据进行地理空间上的过滤,如只显示某一区域范围的数据
属性映射:对输入的数据进行空间上的位置进行判断(和前一次的位置进行对比),如下图的电子围栏判断 

          
3)部署实时数据服务
     单机部署,iServer 9D内置spark框架 ,启动后,发布对应的实时数据服务和数据流服务即可。同时具备了实时数据服务器、数据流服务器、GIS服务器三个角色
     集群部署,搭建iServer 集群服务后,在主节点发布实时数据服务,将数据流服务推送到各子节点即可
4)发布实时数据服务
需要一个后缀维.streaming的处理模型文件,里面定义了数据来源、过滤条件、数据输出等
 
总结:
不同类型的实时数据,通过iServer筛选发布为数据流服务,客户端可直接在前端调用。也可以通过ES等读取iServer的大数据目录服务,发布成对应服务直接调用

3、应用范例
1)启动iServer9D后,开启spark服务。添加到本地集群(相当于启动了spark的一个work节点)
        
2)访问//localhost:8080,检查spark环境是否启动正常

3)进入主节点iServer的管理界面,点击发布实时数据服务,数据来源选择流处理模型,勾选数据流服务(即对外输出的服务地址)

4)数据流服务发布成功后,将在SuperMap iServer 服务列表页面中展示出来,单击{servicename}/dataflow 即可访问数据流服务 REST 页面,可以看到广播数据(broadcast)和订阅数据(subscribe)的接口, 订阅即可接收到正在进行流处理的数据

5)使用iclient 前端加载实时数据
在iServer的 &iServer_home\iClient\forJavaScript\examples\leaflet, 编辑dataFlowService.html
 
 前端运行效果如下:

   

本文由职坐标整理发布,学习更多的大数据技术相关知识,请关注职坐标大技术云计算大技术技术频道!

本文由 @沉沙 发布于职坐标。未经许可,禁止转载。
喜欢 | 0 不喜欢 | 0
看完这篇文章有何感觉?已经有0人表态,0%的人喜欢 快给朋友分享吧~
评论(0)
后参与评论

您输入的评论内容中包含违禁敏感词

我知道了

助您圆梦职场 匹配合适岗位
验证码手机号,获得海同独家IT培训资料
选择就业方向:
人工智能物联网
大数据开发/分析
人工智能Python
Java全栈开发
WEB前端+H5

请输入正确的手机号码

请输入正确的验证码

获取验证码

您今天的短信下发次数太多了,明天再试试吧!

提交

我们会在第一时间安排职业规划师联系您!

您也可以联系我们的职业规划师咨询:

小职老师的微信号:z_zhizuobiao
小职老师的微信号:z_zhizuobiao

版权所有 职坐标-一站式IT培训就业服务领导者 沪ICP备13042190号-4
上海海同信息科技有限公司 Copyright ©2015 www.zhizuobiao.com,All Rights Reserved.
 沪公网安备 31011502005948号    

©2015 www.zhizuobiao.com All Rights Reserved

208小时内训课程