基于虚拟化平台的Hadoop应用I/O性能分析

发布时间：2024-01-03 13:31

　　MapReduce编程模型在大规模并行化应用的设计和开发领域正在发挥越来越重要的作用.同时,Hadoop又是现在被广泛使用的云平台中数据密集型应用开发的开源MapReduce实现方式.众所周知,在云计算中最小的计算单元就是虚拟机,虚拟机有充分利用系统资源,使系统便于管理,提高系统可靠性和节省开销等多种优点.该文将通过一系列实验对不同虚拟化平台上Hadoop应用的I/O性能进行评测分析,这些实验的结果可以作为将来选择虚拟机类型的标准,以便Hadoop应用能够在虚拟化平台中获得最好的I/O性能.

【文章页数】：8 页

【文章目录】：
1 相关工作
    1.1 相关研究
    1.2 MapReduce/Hadoop
    1.3 虚拟化软件
        1.3.1 虚拟化软件分类
        1.3.2 虚拟化软件I/O调度技术
2 评测方法
    2.1 测试方法和硬件配置
    2.2 测试负载
        2.2.1 Hadoop测试负载
        2.2.2 TPCW
    2.3 评测指标
3 测试结果分析
    3.1 单机运行
    3.2 完全分布式运行环境
    3.3 混载分布式运行环境
4 工作总结



本文编号：3876469