北京质量物联网大数据平台技术指导

时间:2021年04月17日 来源:

    数据接入服务(DIS):数据接入服务(DataIngestionService)为处理或分析流数据的自定义应用程序构建数据流管道,主要解决云服务外的数据实时传输到云服务内的问题。数据接入服务每小时可从数十万种数据源(如IoT数据采集、日志和定位追踪事件、网站点击流、社交媒体源等)中连续捕获、传送和存储数TB数据。实时流计算服务(CS):实时流计算服务(CloudStreamService),是运行在公有云上的实时流式大数据分析服务,全托管的方式用户无需感知计算集群,只需聚焦于StreamSQL业务,即时执行作业。对象存储服务:对象存储服务(ObjectStorageService,OBS)是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力,包括:创建、修改、删除桶,上传、下载、删除对象等。其中对象是OBS中数据存储的基本单位,用户上传至OBS的数据都以对象的形式保存在桶中,而桶是是OBS中存储对象的容器。 系统应该提供订阅功能,只要有新的数据更新,就应该实时提醒应用。北京质量物联网大数据平台技术指导

    数据仓库服务(DWS):数据仓库服务(DataWarehouseService)是一种基于公有云基础架构和平台的在线数据处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于华为融合数据仓库GaussDB产品的云原生服务,兼容标准ANSISQL99和SQL2003,同时兼容PostgreSQL/Oracle数据库生态,为各行业PB级海量大数据分析提供有竞争力的解决方案。数据可视化服务(DLV):数据可视化服务(DataLakeVisualization)是一站式数据可视化平台,适配云上云下多种数据源,提供丰富多样的2D、3D可视化组件,采用拖拽式自由布局,旨在帮助您快速定制和应用属于您自己的数据大屏。对象存储服务:对象存储服务(ObjectStorageService,OBS)是一个基于对象的海量存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力,包括:创建、修改、删除桶,上传、下载、删除对象等。其中对象是OBS中数据存储的基本单位,用户上传至OBS的数据都以对象的形式保存在桶中,而桶是是OBS中存储对象的容器。 河南加工物联网大数据平台软件便于私有化部署。因为很多企业出于安全以及各种因素的考虑,希望采用私有化部署。

    在DWS中创建一个集群并完成基本配置。创建两条DIS通道,我们分别称之为输入通道和输出通道,然后为输出通道创建一个转储任务,将数据转储至DWS的集群。转储时会使用OBS桶临时存储转储数据,若没有OBS桶请创建一个。在设备接入服务中创建一条规则,将设备上报数据转发至DIS的输入通道。在CS中创建一个作业,实现从DIS输入通道中获取数据,分析处理后输出至DIS输出通道的功能。在DLV中创建数据连接从DWS中获取数据,再创建数据大屏将数据可视化展示。将上报数据的设备接入物联网平台(设备接入服务),并控制其上报数据。详细操作指导请参考各个服务的帮助文档,本文不再赘述。--------离线分析方案--------。

离线数据

还有一些数据,对于实时性和有序性的要求都没那么强,分析时数据已经固化,我们称之为离线数据。典型的离线数据包括产品销量数据、景点游客数据等,应用于统计分析,总结盘点等场景,例如,物联网平台将自动售货机上报的销售数据汇总后保存,然后定期使用大数据分析平台分析销售数据,以报表形式呈现给厂家,协助厂家进行销售策略的调整。离线分析的挑战主要在于庞大的数据量,一般会采用分布式处理的方案来提升海量数据分析的效率。

设备接入服务:设备接入是华为OceanConnect物联网平台对海量设备进行联接、数据采集/转发、远程控制的云服务。可实现海量设备与云端之间双向通信连接、设备数据采集上云,支持上层应用通过调用API远程控制设备,还提供了与华为云其他云服务无缝对接的规则引擎,可应用于各种物联网场景。设备接入服务还可以搭配设备管理服务使用,可实现产品模型定义、设备生命周期可视化管理,提供强大的面向行业应用开放能力,帮助企业快速构建创新的物联网业务。


一个大的系统,采集的数据种类繁多,而且除采集的原始数据外,还有大量的衍生数据。

    2.必须是实时处理的系统。互联网大数据处理,大家所熟悉的场景是用户画像、推荐系统、舆情分析等等,这些场景并不需要什么实时性,批处理即可。但是对于物联网场景,需要基于采集的数据做实时预警、决策,延时要控制在秒级以内。如果计算没有实时性,物联网的商业价值就大打折扣。3.需要运营商级别的高可靠服务。物联网系统对接的往往是生产、经营系统,如果数据处理系统宕机,直接导致停产,产生经济有损失、导致对终端消费者的服务无法正常提供。比如智能电表,如果系统出问题,直接导致的是千家万户无法正常用电。因此物联网大数据系统必须是高可靠的,必须支持数据实时备份,必须支持异地容灾,必须支持软件、硬件在线升级,必须支持在线IDC机房迁移,否则服务一定有被中断的可能。 物联网产生的数据量巨大,仅中国而言,就有5亿多台智能电表,每台电表每隔15分钟采集一次数据。大连智能化物联网大数据平台诚信为先

需要运营商级别的高可靠服务。北京质量物联网大数据平台技术指导

    15.需要支持边云协同。要有一套灵活的机制将边缘计算节点的数据上传到云端,根据具体需要,可以将原始数据,或加工计算后的数据,或仅仅符合过滤条件的数据同步到云端,而且随时可以取消,更改策略。16.需要单一的后台管理系统。便于查看系统运行状态、管理集群、管理用户、管理各种系统资源等,而且系统能够与第三方IT运维监测平台无缝集成,便于管理。17.便于私有化部署。因为很多企业出于安全以及各种因素的考虑,希望采用私有化部署。而传统的企业往往没有很强的IT运维团队,因此在安装、部署上需要做到简单、快捷,可维护性强。以上总结了物联网大数据平台的主要功能和特点,而物联网大数据平台本身也在演变之中,但总的目标不会改变,那就是高效、可伸缩、实时、可靠、灵活、开放、简单、易维护。 北京质量物联网大数据平台技术指导

上海奥畅智能科技有限公司总部位于上海市普陀区祁连山南路2891弄盛源科技园C311,是一家奥畅科技是一家以人工智能(AI)为的应用解决方案提供商,以人脸识别、行为分析、语言分析、数据分析、智能感应、机器人、物联网等技术为基础为多个领域打造专业智能的行业应用方案,有旗下人脸识别品牌KorRich(科睿齐),奥畅科技坚持从用户角度出发,为用户解决实际问题,解决行业痛点,是一家可以为用户提供定制型应用方案,。从事智能科技,信息科技,物联网科技,新能源技术,环保科技,工业自动化技术,计算机软硬件技术,光电科技.通讯技术领域技术开发,技术转让,技术咨询,技术服务及销售的公司。奥畅科技拥有一支经验丰富、技术创新的专业研发团队,以高度的专注和执着为客户提供人脸识别,物联网,现实增强,机器人。奥畅科技继续坚定不移地走高质量发展道路,既要实现基本面稳定增长,又要聚焦关键领域,实现转型再突破。奥畅科技始终关注数码、电脑市场,以敏锐的市场洞察力,实现与客户的成长共赢。

信息来源于互联网 本站不为信息真实性负责