简介:摘要:随着电网终端采集装置的大范围安装与现场应用,越来越多的电网业务应用具备了数据实时采集的能力。为了充分发挥实时采集的电网数据价值,要求技术发展能够适应大规模电网数据流实时处理的新要求。然而,当前电力大数据的处理方式仍以传统的数据批处理为主,而大规模电网数据流在实时性、无序性、无限性、易失性、突发性等方面均呈现出了诸多新特征,使得基于“先存储后处理”设计理念的数据批量处理在可伸缩性、系统容错、状态一致性、负载均衡、数据吞吐量等方面面临着前所未有的新的挑战。类似于MapReduce的离线处理并不能很好地解决问题,而流计算可以很好地对大规模流动数据在不断变化的运动过程中实时地进行分析,捕捉到可能有用的信息。
简介:摘要:在计算机信息技术快速发展的背景下,社会已经进入了信息化时代,大量的数据产生于社会中的各个领域,同时大数据技术在数据信息的处理上也得到了普遍的应用。在对海洋资源进行开发的过程中,对海洋环境的变化进行有效的测绘,就需要实现采集、存储和处理相应的海洋测绘数据,这时对于海量海洋测绘数据的处理和应用也成为了越来越多学者关注的问题。在开发海洋资源过程中,要及时测绘海洋环境的变化就需要有效的实现对海洋测绘数 据的采集、 存储和处理。我国目前正在建立一个立体化的海洋测绘系统,势必会使海洋测绘数据呈现从 GB、TB 到 PB级别的增长。大数据技术的关键是并行存储、分布式计算,它们可以有效解决海量海洋测绘数据存在的复杂、异构以及海量的问题。
简介:摘要:随着我国科学技术的发展,我国区块链技术得到快速发展,并在我国多个领域进行应用。关键信息基础设施数据是我国重要的数据信息,如果发生泄漏会造成非常严重的后果,不利于我国数据信息的安全。鉴于此,本文对区块链技术在关键信息基础设施数据载体流转保护中的应用进行研究,以期降低我国数据载体传输过程中存在的安全风险。