您现在的位置: 精品资料网 >> 管理信息化 >> 大数据 >> 资料信息

大数据处理技术的总结与分析教材(DOC 50页)

所属分类:
大数据
文件大小:
1276 KB
下载地址:
相关资料:
大数据,数据处理,处理技术,分析教材
大数据处理技术的总结与分析教材(DOC 50页)内容简介
2) 图数据OLAP处理
2 图数据处理处理概述
3 并行图计算引擎(1) 图数据库分类
(1) 并行计算形式
(1) 查询主节点负责分析SQL语句后,针对sql中的where条件部分,
利用索引文件来得到符合where过滤条件后的rowid集合。
(1) 简介
(1) 通过语法分析技术来理解要做什么。在关系数据库中,
一般会把SQL语言分析后,形成树型结构的执行计划。
(1) 逻辑层优化
(1)上述计算引擎都可以以灵活方式来存储图,
基本上都可以以文件方式来存储图数据,实现计算引擎与存储分离。
(1)不支持跨库的join、分页、排序、子查询。
(1)他们发现在实际生成环境中,每天更新的数据只占总体数据的1%不到
,因此他们把数据分为:基线数据和增量更新数据。
(1)例如如果低层是mysql数据库,则可以直接利用mysql索引来过滤
(1)将原始数据(alpha数据)进行一定粒度合并,合并成beta数据。
(1)数据库分片,结合业务和数据特点将数据分布在多台机器上。
(1)读事务和写事务分离
..............................
大数据处理技术的总结与分析教材(DOC 50页)

上一篇:探索大数据和人工智能(DOC 30页)

下一篇:尚无数据