云计算平台电信经营分析系统中海量数据处理研究(PDF 69页)

图 2-1 云计算的分类 .. 5
图2-2 云计算的体系结构 .... 7
图2-3 云计算的四层架构示意图 .... 8
图2-4 自动化部署示意图 ... 10
图3-1 移动BASS 的两级架构示意图  17
图3-2 移动BASS 的技术架构  18
图3-3 ETL 处理过程示意图 .. 19
图3-4 省级移动BASS 的总体功能结构 .... 20
图3-5 典型的云计算平台架构图 ... 23
图3-6 GFS 的架构示意图 .... 24
图3-7 HDFS 的架构示意图 ... 25
图3-8 BigTable 的存储结构图 ..... 26
图3-9 Map/Reduce 的工作模式 ..... 28
图3-10 CB-BASS 的总体结构示意图 . 29
图3-11 CB-BASS 的云计算平台架构示意图 . 29
图3-12 移动BASS 功能部署示意图 . 31
图4-1 移动BASS 的源数据分类 .... 34
图4-2 现有的日清单ETL 汇总处理流程图 . 36
图4-3 CB-BASS 中改进的海量数据ETL 处理算法示意图 .. 37
图4-4 优化后的日清单ETL 汇总处理流程图 ..... 38
图4-5 AGB-ETL 算法的处理流程 .... 41
图5-1 CB-BASS 测试平台的部署设计  43
图5-2 CB-BASS 测试平台基础类的设计 .... 44
图5-3 场景一的测试结果 ... 50
图5-4 场景二中相同优先级的示例数据的任务分组执行时间 ... 53
图5-5 场景二中不同优先级的示例数据的任务分组执行时间 ... 53
图5-6 场景二中相同优先级的示例数据的调度算法执行时间 ... 54
图5-7 场景二中不同优先级的示例数据的调度算法执行时间 ... 55
表5-1 场景一中对应3 个目标表的一批测试数据示例 .... 46
表5-2 场景二中任务分组数为3 的一批相同优先级的测试数据示例 ... 48
表5-3 场景二中任务分组数为3 的一批不同优先级的测试数据示例 .... 49
表5-4 场景一中对应3 个目标表的一批测试数据示例的测试结果 ..... 51
表5-5 场景二中相同优先级的示例数据的任务分组结果 . 51
表5-6 场景二中不同优先级的示例数据的任务分组结果 . 52
..............................