分布式环境下遥感影像数据存储方法

为了对遥感影像数据进行高效地存储与管理,解决传统的存储与查询效率不高的问题。设计一种基于猫群算法的遥感影像并行存储算法,采用线性四叉树对地理空间进行划分和编码,利用MapReduce并行计算框架和猫群优化算法来构建金字塔,把地物标识码、四叉树索引ID两种信息作为行键,采用HBase分布式数据库对影像数据进行存储。实验表明,该方法在金字塔构建的过程中有效的提高了遥感影像的存储效率且保证了数据的完整性。在查询方面,改进的行键不仅达到了筛选数据的目的而且提高了读取效率。研究成果可满足对海量影像高效存储、管理的需求,具有很好的可行性和可扩展性。     

网上评卷海量图像数据云存储技术应用探析

针对目前国家教育考试网上评卷海量图像文件的存储管理问题,本文提出基于Hadoop的No Sq L云存储方案,提高评卷海量数据安全性和存储可靠性,构建分布式、可扩展、高可用性和可靠性的云存储平台。通过分析基于Hadoop平台云计算体系和基于HDFS/HBase的云存储技术,结合网上评卷海量图像文件的存储需求和实际,规划基于Hadoop/HDFS/HBase的国家教育考试云存储中心的数据交换平台,并对在国家教育考试中深入应用此平台给出设计方案,提出发展愿景。     

基于HBase的车联网传感数据管理系统设计

关系型数据库由于面向行存储以及无法扩展等原因,已很难满足大规模车联网传感数据的存储与查询要求。针对该问题,设计了一个基于非关系型数据库HBase存储的车联网传感数据管理系统。该系统采用Hadoop与HBase搭建分布式实验平台,采用C#语言开发Web网页端。通过与传统关系型数据库SQL Server的存储与查询效率进行对比分析,表明HBase在处理大规模车联网传感数据方面具有明显优势。     

一种基于校园物联网实验平台的大数据存储模型

针对物联网传感数据具有的多样性、时空性及大数据特性等特征,在校园物联网实验平台环境下,提出一种基于HBase和My SQL的物联网大数据存储模型。根据平台实际应用的特点,该模型首先通过传统关系数据库接收并存储物联网传感数据,然后通过Sqoop数据转存,实现物联网数据在HBase和HDFS存储架构下的分布式存储,最后在物联网实验平台中应用该模型,并取得了较好的效果。     

太阳能-地源热泵系统运行监测平台的开发

利用西门子PLC200作为下位机、组态软件WinCC作为上位机,实现了对太阳能-地源热泵监测平台的开发和利用。该平台具有现场数据归档、运行模式切换、自动控制等功能。为该监测平台设计了6种运行模式,以满足不同时节的供能需求。利用该监测平台对上海地区冬季太阳能-地源热泵联合供暖实验系统进行了测试,结果表明:太阳能-地源热泵联合供暖能够有效避免土壤温度下降过快,维持系统性能的稳定。     

现代云数据库探究

科学技术不断进步,并已渗透到社会生活的各个层面,尤其是云计算的发展正在改变着互联网及整个产业格局。其对与之相关的模型架构、数据存储以及其它一些数据相关技术的要求也越来越高。在数据存储方面占有优势的是传统的关系型数据库,这种数据库在数据存储中占有重要位置,但已无法满足当前社会需求。而能够对数据进行扩充、能够快速读写、具有大的容量并且还要降低运营成本,正是对云计算时代的要求。通过查阅相关资料,对云计算的基础性知识及优势做了概述,并对云计算时代的数据库进行了研究。     

基于云信息平台的会计实验教学体系构建

现有的依据传统教学理念的会计实验教学存在场地局限、内容固定、模式单一等缺陷,无法满足现代管理型会计人才的培养需求。依据云计算技术和大数据平台重构会计实验教学体系,通过云信息共享平台搭建企业与高校间的信息交互平台,优化高校会计实验教学,可实现会计实验教学的多元化,满足实验教学适时性和综合性等需求,培养会计专业学生的综合应用能力,更好地实现协同培养的目标。     

工业生产物流供应链大数据资源融合技术

提出一种基于相似度特征匹配和自适应资源调度的工业生产物流供应链大数据资源融合技术。首先构建了工业生产物流供应链大数据资源调度数据处理平台,进行物流供应链的大数据特征采样,对采样的数据流进行相似度特征匹配。采用自适应资源调度方法进行数据滤波和特征融合,以此为基础进行物流供应链的优化调度,以提高大数据的并行处理效率。仿真结果表明,利用该算法进行大数据资源融合效率较高,配准性能较好,执行时间短,性能优于传统算法。     

大数据时代对大学英语教学模式的影响刍探

随着信息技术的发展,大数据时代给大学英语教学不仅带来了巨大的挑战,也带来了崭新的发展契机。信息化教学能够使教学目的更加精细化,并且使教学方法、教学情景、教学评价方法等都发生转变。大学英语教学可以利用大数据进行课程建设,满足学生的学习需求,更好地培养应用型人才。     

云计算中两类主流数据库的比较研究

主要研究了Bigtable和HBase两个云计算的主流数据库;从数据模型的比较可以看出它们都采用了行、列和时间戳三要素;系统的主要架构也基本相似,只是在实现中有细微的差别,表现在对列族的处理上,Bigtable采用了锁的方式,而HBase则采用了节点方式来完成数据的协同访问;在性能的比较中可以知道,Bigtable的性能明显优于HBase,尤其在如数据错误安全和数据中心间的数据复制等关键性能是HBase所不能支持的;但由于HBase的开源性,使得用户可以获得更多的自由,方便开发个性应用。     

基于HBase的大数据平台负载均衡算法分析与优化

HBase原有负载均衡算法策略是保证每个Region Server的Region数目相同。但每个Region的访问并不均等,可能造成负载不均衡情况,产生热点数据,影响请求响应效率。部分Region会成为热点,导致一些Region Server负载过重。为提高HBase数据库整体性能,将数据热度因素考虑在内,使用预测方法设计HBase负载均衡算法,把预测数据的热度作为Region Server负载。实验表明,优化后的负载均衡算法可在一定程度上提高HBase数据库性能。     

大数据背景下高中物理精准教学的实践探索

随着时代的不断发展,大数据时代悄然到来,也给我们的教学带来了新的变化,在高中物理教学中,利用大数据对学生开展精准教学,能够让高中物理教学更加高效,更好地满足学生学习的需求,促进学生学习质量的提高。就大数据背景下高中物理精准教学实践的方法展开了探究。     

大数据时代的高校全程化就业指导工作探析

在经济新常态下,随着高校毕业生人数的增多,就业问题日趋凸显,对高校就业指导提出了更高的要求.各高校经过多年的发展,构建了全程化就业指导体系,但仍难以满足需求.大数据技术采集、整合、关联海量数据,能为全程化的就业指导工作提供客观、科学的依据,针对职业生涯规划期、职业素养提升期、求职就业关键期以及就业跟踪服务期等不同阶段的大学生们提供更个性化、更精准化的服务,具有广阔的发展前景.为更好地利用大数据技术,高校就业指导部门需要进一步挖掘数据的潜在价值、构建数据互联互通的平台,同时还需要更谨慎地使用隐私信息和敏感数据.     

基于Hadoop的压力管道数据存储系统

为提高压力管道数据存储性能，改善数据存储效率，增强压力管道后期的可维护性，构建一种基于Hadoop的压力管道数据存储系统.该系统利用HDFS分布式存储框架建立压力管道数据的存储模型，采用MapReduce对压力管道海量数据进行分析和处理，从而完成数据写入HBase数据库的低延迟响应.在实验中，采用压力管道数据对MySQL、Oracle、Spark SQL、MongoDB和Rasdaman进行性能对比.结果表明，在相同数据量的情况下，系统运行时间更短，占用内存更少，其在存储压力管道海量数据方面具有较好的优越性.     

基于Hadoop的图书馆特色资源云服务关键技术研究

为了提升图书馆在大数据下的特色数字资源服务质量,探讨了一种更科学有效的云服务模式。采用Hadoop平台,通过对HDFS涉及的技术细节,包括体系结构、并行数据处理框架Map-reduce以及分布式数据库、HBase展开具体分析,结合广东省特色文献资源的实际情况,探讨了HDFS构建需求与可行性。提出HDFS关键技术应用于广东省特色数字资源云服务的具体方案,但实践效果还有待进一步验证。     

基于大数据平台的高校思想政治教育

随着信息化时代的逐步前进,高校信息应用技术也得到了较大的提升,当前高校教学已经跨入了大数据时代,而为了满足大数据时代下现代教育的各项要求,高校也积极建立大数据平台,以便于更好地为当代教育服务。大数据平台极大地满足了学生与教师的各项要求,更加细致的统筹以及计算方式大大提升了传统教育效率。由此可见,当代高校教育已经和大数据平台之间紧密相连,而探索大数据平台下的高校思想政治教育也显得更具有学术研究性。     

一种基于HBase的交通旅行时间计算方法

旅行时间计算是智能交通系统研究的重要内容,准确的旅行时间计算结果可以为交通管控部门提供决策支持,缓解交通拥堵情况。近年来,随着监测水平的提高,交通监测数据呈现海量增长趋势。传统的关系型数据库应对海量数据时存在高并发读写和扩展性不足等瓶颈。为解决智能交通因数据规模过大带来的存储和查询问题,提出了一种基于HBase的交通旅行时间计算方法,设计了面向查询优化的行键策略,并在此基础上提出了单时段及多时段旅行时间计算方法。实验表明,该计算方法与传统的基于Oracle的算法相比,时间效率提高2~3倍,并且有较高的读写性能及良好的可扩展性。     

基于HBase的钻井数据存储研究

提出了基于HBase的海量钻井数据存储技术。将HBase的分布式存储特点和钻井工程的实际需求相结合,设计了一个快速、高效、安全的海量钻井数据存储方案。介绍了HBase的存储模型以及系统架构,详细描述了钻井数据在HBase分布式存储系统中的存储过程。     

基于RFID技术的电动车防盗监控平台设计

为了更好地满足电动车防盗需求,提高被盗电动车辆追踪效率、节约时间并降低人力成本,基于RFID技术设计了电动车防盗监控平台。平台由Web服务器集群、Nginx负载均衡器与数据库组成,阐述了平台各部分设计并进行性能测试。测试结果表明,该电动车防盗平台运行稳定、易于操作,能够在车辆被盗时及时帮助失主找回车辆,可基本满足电动车防盗的业务需求,并且能够较好地应对高并发访问。     

基于云存储的高校资源平台设计与应用

针对目前高校资源平台搭建过程中存在的高投入、低利用等问题,分析高校教学资源建设的现状与需求,从结构设计、功能模块设计、数据流程设计等方面展示基于私有云存储的高校资源平台建设方案。在资源平台和私有云相结合的基础上,构建基于数字化校园平台的学习资源中心,为全校师生提供资源存取服务。实践表明,系统能够满足全校师生的云存储需求和资源调用需求,可提高教学资源的使用效率。