来源:中国企业报2016-12-20
同时,确保选择的加密方案与企业的访问控制技术能够互操作,这样,特定级别和身份的用户只能访问hadoop集群中特定的数据范围。大数据时代下的信息安全,一言不合就出漏。
来源:北极星输配电网2016-12-12
由于大数据处理的多样性和复杂性,学术界和工业界不断研究和推出新的大数据计算模式和平台;重要的发展趋势包括hadoop平台与其他计算模式的融合、多样性混合计算模式、基于内存的大数据处理技术。
来源:供用电杂志2016-12-12
来源:中国能源研究会能源互联网专委会2016-12-09
她提到,中国电科院在电力大数据平台方面已有一定的研究成果,平台集成了hadoop、storm、spark等开源组件,解决了组件之间的兼容性问题。
来源:中国科技报2016-11-30
据介绍,太极环保大数据基础平台集成开源hadoop技术大数据基础平台,性能优于开源hadoop方案,通过内存计算、高效检索、执行优化等技术,快速提升企业和机构构建与处理海量数据的能力;采集交换平台则在传统
来源:SIA大数据2016-11-07
针对非实时性数据,可以考虑基于分布式文件系统(distributedfilesystem,dfs)和mapreduce技术的云计算来进行处理;也可以基于hadoop,一种dfs和mapreduce的开源实现的云计算平台来进行数据处理
来源:SIA大数据2016-11-02
来源:国家电网报2016-10-18
国网冀北电力通过建立电力大数据分析实验室,预研hadoop生态圈的前沿技术。该公司基于大数据的客户价值体系及增值服务分析研究,从业务界定和业务需求着手。
来源:i黑马2016-10-11
而另外一拨势力,直接采纳开源的 hadoop 生态,很快在公司内应用起来。而我当时做的日志统计平台,也是采用了 hadoop。...但百度的数据规模毕竟太大了,所需的集群规模,开源版本根本撑不住,于是不得不改写 hadoop,这样就和开源的版本渐行渐远,等到后来再也合不到一起了。
来源:《中国国电》2016-09-18
平台采用成熟的商业hadoop软件加私有云的架构方式,包括:平台基础层、平台服务层、平台应用层,分别提供数据预处理、存储、安全、共享等服务。...hadoop分布式文件系统(hdfs)是运行在通用硬件上的分布式文件系统。hdfs提供了一个高度容错性和高吞吐量的海量数据存储解决方案。
来源:36大数据2016-08-23
其次,hadoop是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。hadoop还是可伸缩的,能够处理pb级数据。此外,hadoop依赖于社区服务器,因此它的成本比较低,任何人都可以使用。
来源:北极星输配电网2016-08-22
该项目通过数据库设计,确定了合适的数据模型,定义了合理的数据结构以实现自动匹配和关联;开发了全球能源互联网原型系统,研究了数据中心的软件架构、硬件架构和应用架构,建立了基于关系数据库oracle和分布式海量数据库hadoop
来源:机器之心2016-08-18
第二步是可利用的大数据工具,比如hadoop、mppdatawarehouse和nosql。近来,拥有专利的或开源的工具和平台随处都可以获得你需要的是能够利用这些工具和平台完成工作的人。
来源:微能网2016-08-09
忘了补充一点,除了hadoop的no-sql数据库,普通的关系数据库也是必不可少的,起到辅助作用。北京的电网数据分布系统(局部)。四、自我预测、自我修复、自我调节大数据当然自有它的好处。...所以现在国内现在新兴的电网海量实时数据系统,其核心数据库大都采用了hadoop的hdfs系统,通过使用分布式数据存储和mapreduce运算模型,来实时存储如此巨大的数据。这和淘宝网的数据库是相似的。
来源:北极星输配电网2016-07-05
来源:国家电网报2016-07-05
来源:远光软件2016-06-16
远光数聚平台采用hadoop和spark核心技术,与传统平台相比,在数据采集、存储、安全及分析应用方面有明显的优势。对比日益成熟的大数据技术,企业业务模型的构建才是大数据应用的核心。
来源:电力信息与通信技术2016-06-12
数据整合方面,主要采用hadoop体系中的flume、sqoop、kafka等独立组件;数据存储方面,在低成本硬件(x86)、磁盘的基础上,采用包括分布式文件系统、分布式关系型数据库、nosql数据库、...延伸阅读:【学术前沿】基于大数据运用的能源监管研究与实践 电力大数据平台技术架构电力大数据核心平台基于hadoop、spark、stream框架的高度融合、深度优化,实现高性能计算,具有高可用性,其技术架构如图
来源:电力信息与通信技术2016-06-08
可以借鉴一下他电力大数据平台技术架构电力大数据核心平台基于hadoop、spark、stream框架的高度融合、深度优化,实现高性能计算,具有高可用性,其技术架构如图3所示。...数据整合方面,主要采用hadoop体系中的flume、sqoop、kafka等独立组件;数据存储方面,在低成本硬件(x86)、磁盘的基础上,采用包括分布式文件系统、分布式关系型数据库、nosql数据库、
来源:C114中国通信网2016-05-31
在开源方面,新华三对于hadoop这个大数据利器也有着自己的深刻理解,很多厂商都宣称自己可以提供大数据平台,但能用与好用之间存在天壤之别。...hadoop是开源标准,但要切实满足用户的最终需求,还需要千锤百炼般的针对基础架构与业务应用做优化,这需要时间、场景和投入,而这正是新华三的强项。