栏目分类:
子分类:
返回
终身学习网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
终身学习网 > IT > 前沿技术 > 大数据 > 大数据系统

kylin卡死问题排查之kylin元数据备份修复

大数据系统 更新时间:发布时间: 百科书网 趣学号

近期发现部分segement合并新建出现问题,查询错误日志均无异常。想起在手动删除segement表时发现部分表无法删除。

最后查询kylin的元数据表,查询备份的表发现部分元数据存在NEW状态表(该表只有目录,未创建hbase表,jobID查询为空,所以无法查询)

元数据的表现形式是:

{

。。。  

"date_range_end" : 1612702800000,
    "source_offset_start" : 0,
    "source_offset_end" : 0,
    "status" : "NEW",
    "size_kb" : 0,

。。。

}

现在采用备份后修改元数据表的方法处理,在备份表中删除带NEW字段的segement,并恢复,达到删除segement的效果。具体操作步骤如下:

1,disable 表 

2,拉取指定元数据信息 ./bin/metastore.sh fetch    cube/***.json 

3,在其中删除带NEW的segement字段,并验证json可用 将json放在/path/cube/ 下面

4,恢复元数据 ./bin/metastore.sh restore    ./meta_backups/path/ 在恢复完成后,单击 Web UI 上的“Reload metadata”按钮以刷新缓存。

5,enable 该表并验证功能

转载请注明:文章转载自 www.051e.com
本文地址:http://www.051e.com/it/601244.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 ©2023-2025 051e.com

ICP备案号:京ICP备12030808号