本方案适用于在阿里云上进行大数据基准性能测试的场景,包括 Teragen和Terasort测试,TestDFSIO测试。本文采用CADT工具结合阿里云的E-MapReduce服务快速构建测试集群,并提供了Teragen和Terasort测试,TestDFSIO测试的测试脚本,便于迅速开展测试。
配置如下:节点类型 单节点规格类型 数量 master节点 ecs.g6e.4xlarge 1 Data node节点 ecs.d2s.20xlarge 10 文档版本:20210301 24 大数据系统基准性能测试最佳实践 运行 Bert Finetune demo程序 文档版本:20210301 25 大数据系统基准性能测试最佳实践 运行 Bert Finetune demo程序 4.3.2.修改参数 修改参数 dfs....