liuzhen1207
liuzhen1207
 ZSTD对写入性能有些影响(见数据)。
2台8C32G 机器,1台安装iotdb,1台benchmark: iotdb参数配置: MAX_HEAP_SIZE="16G" wal_buffer_size_in_byte=1048576 default_storage_group_level=2 compressor=ZSTD和SNAPPY对比,ZSTD对写入性能影响大。 benchmark参数配置: DEVICE_NUMBER=2000 SENSOR_NUMBER=1000 CLIENT_NUMBER=100 GROUP_NUMBER=50 OPERATION_PROPORTION=70:1:1:1:1:0:1:1:1:1:1 BATCH_SIZE_PER_WRITE=10 IS_OUT_OF_ORDER=false LOOP=1000000 LINE_RATIO=0 SIN_RATIO=0 SQUARE_RATIO=0 RANDOM_RATIO=1 CONSTANT_RATIO=0 可以试试这个配置,ZSTD对写入性能影响更大,压缩比和SNAPPY差不多。 > 您好,,麻烦请问这个测试方法是怎样的呢?或者有测试脚本吗?我也测一下,看看怎么优化
运行36小时,iotdb进程消失,生成hs_err_pid文件 [hs_err_pid17566.log](https://github.com/apache/iotdb/files/9107712/hs_err_pid17566.log) 对写入性能影响大,此压缩方式的写入性能 约为snappy的10分之1 > 2台8C32G 机器,1台安装iotdb,1台benchmark: iotdb参数配置: MAX_HEAP_SIZE="16G" wal_buffer_size_in_byte=1048576 default_storage_group_level=2 compressor=ZSTD benchmark参数配置: DEVICE_NUMBER=2000 SENSOR_NUMBER=1000 CLIENT_NUMBER=100 GROUP_NUMBER=50 OPERATION_PROPORTION=70:1:1:1:1:0:1:1:1:1:1 BATCH_SIZE_PER_WRITE=10 IS_OUT_OF_ORDER=false LOOP=1000000 LINE_RATIO=0 SIN_RATIO=0 SQUARE_RATIO=0 RANDOM_RATIO=1 CONSTANT_RATIO=0 >