openGauss/MogDB TPCH 性能测试步骤 ​

TPCH 官网直接下载的包无法直接兼容 OpenGauss/MogDB/Postgresql，为了兼容 pg/og 的语法，总结了测试步骤供大家参考

• 建表

  gsql -p 26000 -d postgres -U tpch < createtab_og.sql
  

• 生成数据

  例：

  生成 100G 数据

  ./dbgen -s 100
  

  例：

  8 线程生成 500G 数据

  #!/bin/sh
  ./dbgen -vf -s 500 -S 1 -C 8 &
  ./dbgen -vf -s 500 -S 2 -C 8 &
  ./dbgen -vf -s 500 -S 3 -C 8 &
  ./dbgen -vf -s 500 -S 4 -C 8 &
  ./dbgen -vf -s 500 -S 5 -C 8 &
  ./dbgen -vf -s 500 -S 6 -C 8 &
  ./dbgen -vf -s 500 -S 7 -C 8 &
  ./dbgen -vf -s 500 -S 8 -C 8 &
  

• 数据转换

  生成的数据文件格式为 tbl，转为 csv 格式

  for i in `ls .tbl`;do sed 's/|$//' $i > ${i/tbl/csv};echo $i;done;
  

• 导入数据

  dir=/TPCH/TPCH_gs/TPCH/dbgen/data
  opts='-p 26000 -d postgres'
  gsql $opts -c "COPY tpch.region FROM '$dir/region.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.nation FROM '$dir/nation.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.part FROM '$dir/part.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.supplier FROM '$dir/supplier.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.customer FROM '$dir/customer.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.partsupp FROM '$dir/partsupp.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.orders FROM '$dir/orders.csv' WITH (FORMAT csv,DELIMITER '|')"
  gsql $opts -c "COPY tpch.lineitem FROM '$dir/lineitem.csv' WITH (FORMAT csv,DELIMITER '|')"
  

• 创建所需函数

  create or replace function NUMTOYMINTERVAL(float8, text) returns interval as $$ select ($1||' '||$2)::interval;
  $$ language sql strict immutable;
  
  create or replace function NUMTODSINTERVAL(float8, text) returns interval as $$ select ($1||' '||$2)::interval;
  $$ language sql strict immutable;
  

• 执行 SQL 文件夹下 sql

  #!/bin/bash
  opts='-p 26000 -d postgres -U tpch -W 'password''
  for i in `seq 10 22`
  do
  echo $i"'s  result"
  gsql ${opts} -f ${i}.sql
  done
  

TPCH 包及建表语句，执行 SQL 语句见网盘：

链接: https://pan.baidu.com/s/1Cg7neIxXGjDYS7BfZxl2IQ 密码: urkt