BigBench on MaxCompute 基准测试套件简明安装与运行指南

来源:互联网 发布:淘宝网客服怎么转人工 编辑:程序博客网 时间:2024/06/05 19:03

点击查看全文


先决条件

  1. 注册阿里云账户
  2. MaxCompute客户端软件 (推荐使用0.27.0或以上版本) ,详情请见:安装并配置客户端
  3. Java 1.7 (Oracle/OpenJDK) 或以上版本 (推荐使用64位版本) 。

下载BigBench 套件

  1. 请点击此链接,下载BigBench on MaxCompute套件。
  2. 或直接访问以下该项目的github地址以获取BigBench on MaxCompute 套件。

配置BigBench on MaxCompute

  1. 编辑engines/maxcompute/conf文件夹中的engineSettings.conf 文件,配置MaxCompute客户端执行文件,如下所示:

    BINARY="$MAXCOMPUTE_CLIENT_DIR/bin/odpscmd"
  2. 编辑conf文件夹中的userSettings.conf文件,配置MaxCompute的项目名,如下所示:

    export BIG_BENCH_DEFAULT_DATABASE="$MAXCOMPUTE_PROJECT_NAME"
  3. 编辑conf文件夹中的bigBench.properties文件,配置BigBench的测试阶段,如下所示:

    workload=BENCHMARK_START,POWER_TEST,THROUGHPUT_TEST_1,BENCHMARK_STOP,VALIDATE_POWER_TEST,VALIDATE_THROUGHPUT_TEST_1

如无特殊需求,请使用以上默认的测试阶段。

运行BigBench on MaxCompute基准测试套件

使用BigBench 驱动脚本运行BigBench基准测试。

$INSTALL_DIR/bin/bigBench runBenchmark

BigBench on MaxCompute 日志存放目录

运行与结果日志存放在以下目录。

$INSTALL_DIR/logs

FAQ

如何在BigBench基准测试套件中设置MaxCompute的参数?

你可以在engineSettings.sql文件中,为所有MaxCompute的查询配置参数,文件位置如下所示:

$INSTALL_DIR/engines/maxcompute/conf/engineSettings.sql

在这个文件里已经配置了一系列MaxCompute的参数。如无特殊需求,请使用默认配置。

如何针对特定query设置MaxCompute的参数?

你可以在queries目录下的engineLocalSettings.sql文件中配置,文件位置如下所示:

$INSTALL_DIR/engines/maxcompute/queries/q??/engineLocalSettings.sql

你可以把你针对特定query的MaxCompute参数配置在这个文件里, BigBench套件会自动导入这个文件,并覆盖MaxCompute全局变量。如无特殊需求,请使用默认配置。



点击查看全文


原创粉丝点击