v-zhangjc9
|
7efd9129c2
|
feat(monitor): 增加关于hudi表文件数的监控指标
|
2025-02-12 10:13:52 +08:00 |
|
v-zhangjc9
|
0b4cec3955
|
feat(executor-task): 完成动态调整的pulsar扫描
对于pulsar在时间段上资源分配不均，通过pulsar reader中重新分配split解决，保证整个读取的流程中都能尽可能利用多线程的优势
|
2024-06-05 17:37:04 +08:00 |
|
v-zhangjc9
|
633db5512d
|
refactor(executor-task): 恢复pulsar读取策略
|
2024-06-04 13:57:53 +08:00 |
|
v-zhangjc9
|
deae4fd294
|
feat(executor-task): 增加一个mini hudi的功能
从pulsar到hdfs落盘
|
2024-05-28 18:16:09 +08:00 |
|
v-zhangjc9
|
10fae04007
|
fix(hudi-query): 修复写hdfs文件内容取值错误
|
2024-05-08 14:15:01 +08:00 |
|
v-zhangjc9
|
b2e3a58d27
|
feat(hudi-query): 新增写hdfs文件接口
|
2024-05-08 10:02:33 +08:00 |
|
v-zhangjc9
|
572a1dab9f
|
feat(web): 增加HDFS文件管理器
在页面直接查看HDFS文件和目录，还可以查看和下载
|
2024-04-28 16:28:48 +08:00 |
|
|
|
d4e161459a
|
feat(monitor): 增加指标输出模块
一些外部指标查询通过指标输出模块输出，避免对原业务模块产生影响
|
2024-03-05 15:16:53 +08:00 |
|
|
|
c7abcb9e22
|
fix(exporter): 修复查询未运行flink任务数量不正确
|
2024-03-05 15:16:50 +08:00 |
|
|
|
7c9ba2876f
|
feat(web): 增加服务日志跳转
|
2024-03-05 15:16:50 +08:00 |
|
|
|
af27d1772d
|
feat(cloud): 增加prometheus动态获取实例端口
|
2024-03-05 15:16:50 +08:00 |
|
|
|
cd3b340270
|
feat(executor-task): 增加查询指定hudi表base文件最新的timestamp
根据LATEST_OP_TS来判断比较timestamp先后，排序后取最后的
|
2024-03-05 15:16:50 +08:00 |
|
|
|
bbd9011260
|
test(test): 一点测试
|
2024-03-05 15:16:50 +08:00 |
|
|
|
390a2dd550
|
chore(test): 杂项
|
2024-03-05 15:16:50 +08:00 |
|
|
|
2b829519d1
|
feat(web): 增加调度时间点展示
|
2024-03-05 15:16:50 +08:00 |
|
|
|
f5b1845d97
|
feat(gateway): 迁移gateway到hudi service项目中
|
2024-03-05 15:16:50 +08:00 |
|
|
|
820c8438b1
|
feat(web): overview增加同步任务状态展示
|
2024-03-05 15:16:50 +08:00 |
|
|
|
fc93d741f2
|
refactor(web): 增加b12的相关监控
|
2024-03-05 15:16:49 +08:00 |
|
|
|
b63263d360
|
refactor(web): 关闭debug
|
2024-03-05 15:16:48 +08:00 |
|
|
|
a78ed8520d
|
feature(web): 增加flink job id和alias输入框的联动
|
2024-03-05 15:16:48 +08:00 |
|
|
|
ee26aefe4c
|
fix(bin): 修复一些bug
|
2024-03-05 15:16:48 +08:00 |
|
|
|
09343e8efa
|
feature(all): 切换使用zookeeper作为注册中心
|
2024-03-05 15:16:48 +08:00 |
|
|
|
f0881d65d7
|
feature(cli,forest): 增加b5sync集群调度
为同步程序上服务准备，不在服务级别区分同步和压缩的调度
|
2024-03-05 15:16:48 +08:00 |
|
|
|
740a9aea45
|
feature(all): 服务增加配置文件信息加密
|
2024-03-05 15:16:48 +08:00 |
|
|
|
1ed1b8105a
|
fix(info-query): 修复查询已跨天表接口调用未跨天接口
|
2024-03-05 15:16:48 +08:00 |
|
|
|
a15fb1857f
|
feature(web): 增加调度计划显示
|
2024-03-05 15:16:48 +08:00 |
|
|
|
5d77f5c29b
|
feature(web): yarn 任务增加完成度查询
|
2024-03-05 15:16:48 +08:00 |
|
|
|
29c328a899
|
feature(web): 增加压缩结果显示
|
2024-03-05 15:16:48 +08:00 |
|
|
|
6abbd3d46a
|
feature(web): 增加历史压缩情况查询
|
2024-03-05 15:16:48 +08:00 |
|
|
|
28480e41d7
|
test(queue): 增加简单的接口测试
|
2024-03-05 15:16:47 +08:00 |
|
