tablet_max_pending_versions:PrimaryKey 表允许 committed 未 apply 的最大版本数。 max_hdfs_file_handle:最多可以打开的 HDFS 文件句柄数量。 max_compaction_concurrency:Compaction 线程数上限(即 BaseCompaction + CumulativeCompaction 的最大并发)。该参数防止 Compaction 占用过多内存。 -1 代表没有限制。0 表...
长梦 试着检查下StarRocks的配置参数,特别是与版本管理和垃圾回收相关的参数,如tablet_max_versions,可能需要适当增大这个限制,但这也可能导致存储空间的浪费,所以要谨慎调整。 2024-06-03 17:22:01 发布于湖南 举报 赞同 评论 打赏 问答分类: DataWorks 大数据开发治理平台 DataWorks 问答标签: 大数据开发治理平台 ...
grep 'too many tablet versions' /data/xxx/starrocks/be/log/be.WARNING 会发现如下错误 1599×710 1.05 MB 恢复步骤: 1388×194 34.6 KB 在日志里搜索所示字样 grep 'Fail to init delta writer' /data/xxx/starrocks/be/log/be.WARNING 检索结果会有tablet=xxx的信息, 这里以tablet 716097为例 连接star...
tablet_max_pending_versions:PrimaryKey 表允许 committed 未 apply 的最大版本数。max_hdfs_file_handle:最多可以打开的 HDFS 文件句柄数量。max_compaction_concurrency:Compaction 线程数上限(即 BaseCompaction + CumulativeCompaction 的最大并发)。该参数防止 Compaction 占用过多内存。 -1 代表没有限制。0 表示...
failed to send batch 或 TabletWriter add batch with unknown id 请参照章节导入总览/通用系统配置/BE配置,适当修改 query_timeout 和 streaming_load_rpc_max_alive_time_sec LOAD-RUN-FAIL; msg:Invalid Column Name:xxx 如果是Parquet或者ORC格式的数据,需要保持文件头的列名与StarRocks表中的列名一致,如 :...
手动执行合并:curl -XPOST http://10.111.68.xxx:8040/api/compact?tablet_id=5379710&compaction_type=cumulative,会提示如下错误。请问怎么解决? image2482×250 35.7 KB 【背景】出现表数据版本多的。一般都是大表。查询的时候就提示: image1916×92 8.57 KB。 排查日志提示: image2662×208 61.8 KB 【业务...
AvgCS代表当前Partition上所有Tablet的平均Compaction Score，而MaxCS则是最大Compaction Score。随着数据导入和查询的进行，系统会不断调度执行Compaction任务，这些任务会被分发到计算节点CN上执行。此外，用户还可以通过一系列命令来查看当前Compaction任务的执行情况。例如，可以使用show proc '/compactions';命令来观察系统...
Added a new metric max_tablet_rowset_num for setting the maximum allowed number of rowsets. This metric helps detect possible compaction issues and thus reduces the occurrences of the error "too many versions". #36539 Added the subdivide_bitmap function. #35817 Improvements The result retur...
Added a new metricmax_tablet_rowset_numfor setting the maximum allowed number of rowsets. This metric helps detect possible compaction issues and thus reduces the occurrences of the error "too many versions".#36539 Parameter changes A new BE configuration itemenable_stream_load_verbose_logis adde...
The error "version has been compacted" caused by an infinite loop on the FE side during Tablet Clone.#50561 ISO- formatted DATETIME types cannot be pushed down.#49358 In concurrent scenarios, data still existed after the tablet was deleted.#50382 ...