Commit Graph

35 Commits

Author SHA1 Message Date
v-zhangjc9
f398b8cdc3 feat(executor-task): 使用Flink SQL查询表总数、业务最后操作时间 2024-05-17 17:32:36 +08:00
v-zhangjc9
835cc6729b feat(command-pro): 增加一个命令行工具用于直接操作hadoop等组件
基于微服务的命令行适合日常产品化运维操作,但能够直接操作Hadoop等组件,便于开发测试使用,因此增加一个模块用于开发过程中测试使用
2024-05-10 16:22:49 +08:00
v-zhangjc9
7fb5710cb3 feat(all): 升级依赖版本
spring cloud升级到2.x的最后一个小版本,其余依赖配合升级
2024-05-09 11:05:10 +08:00
v-zhangjc9
9124b92838 fix(executor): 修复依赖错误 2024-03-07 14:45:03 +08:00
v-zhangjc9
a0cc56dcc5 refactor: 调整编译顺序 2024-03-07 09:38:03 +08:00
d4e161459a feat(monitor): 增加指标输出模块
一些外部指标查询通过指标输出模块输出,避免对原业务模块产生影响
2024-03-05 15:16:53 +08:00
4a0db374fe fix(executor): 修复flink依赖版本 2024-03-05 15:16:52 +08:00
c8126684a1 feat(executor): 增加juice-fs依赖 2024-03-05 15:16:52 +08:00
0338a0d579 feat(all): 优化依赖
移除旧common包
2024-03-05 15:16:52 +08:00
5a2e9fdfb8 feat(all): 迁移common、sync、executor项目 2024-03-05 15:16:52 +08:00
0683068a02 feat(command): 迁移service-command项目 2024-03-05 15:16:52 +08:00
474ee6173d feat(scheduler): 迁移service-launcher项目 2024-03-05 15:16:52 +08:00
f258bfe5b0 feat(scheduler): 迁移service-scheduler项目 2024-03-05 15:16:52 +08:00
14409ae798 feat(api): 迁移hudi-api项目到这里 2024-03-05 15:16:52 +08:00
ecb1773238 feat(check): 增加hdfs/juicefs的访问校验 2024-03-05 15:16:51 +08:00
3ac4f80ab7 refactor(pulsar-query): 优化pulsar项目依赖和代码性能 2024-03-05 15:16:51 +08:00
ba7a68c565 feat(check): 增加环境检验工具 2024-03-05 15:16:51 +08:00
02f22070fd feat(exporter): 提供exporter项目专注于提供外部访问接口
单独使用exporter项目提供外部接口可以方便针对外部接口进行管理,比如加入更强的安全认证
2024-03-05 15:16:50 +08:00
a2c9803c61 test(test-query): 移除测试模块 2024-03-05 15:16:50 +08:00
a7203977d5 feat(uploader): 增加一个关于文件上传下载的项目,后续方便jar包传递 2024-03-05 15:16:50 +08:00
616eb1e514 feat(queue): 迁移queue到hudi service项目中 2024-03-05 15:16:50 +08:00
f5b1845d97 feat(gateway): 迁移gateway到hudi service项目中 2024-03-05 15:16:50 +08:00
fe0d779afb feat(executor): 完成任务提交执行的验证 2024-03-05 15:16:50 +08:00
c0b1071a16 refactor(all): 增加源码包打包 2024-03-05 15:16:48 +08:00
b82fc24f07 feat(cloud-query): 增加服务url查询 2024-03-05 15:16:48 +08:00
9905c2c856 feature(cli,yarn-query): 增加b12集群配置 2024-03-05 15:16:48 +08:00
62bfc08fc3 feature(executor): 增加Flink集群任务模块
新增 executor-manager 和 executor-task
manager管理任务信息启停等,task执行业务方法
2024-03-05 15:16:48 +08:00
6e80985552 fix(forest): 修复加入zookeeper作为备选注册中心后无法使用负载均衡组件
LoadBalance 默认会先夹在 Zookeeper 作为注册中心,导致 Eureka 无法正常使用,如果要使用 Eureka,就要把整个 Zookeeper 的自动加载关掉
2024-03-05 15:16:48 +08:00
ac2bdbc2df feature(loki-query): 新增 loki 日志查询 2024-03-05 15:16:45 +08:00
296c744b61 feature(cli): 增加 cli 模块
cli 模块批量生成服务启停脚本
2024-03-05 15:16:45 +08:00
69314f62ec refactor(hudi-query,pulsar-query,yarn-query): 补充专用依赖的版本号 2024-03-05 15:16:45 +08:00
ceed44d43a feature(dependencies): 增加依赖模块
增加一个依赖模块,统一项目使用的主要 jar 依赖版本,但又不写在父项目里,防止加入一些非服务模块,比如启动命令行
2024-03-05 15:16:45 +08:00
93456ddd78 feature(zookeeper-query): 增加 zookeeper 查询模块
包含查询路径存在、锁存在、获取节点数据的能力
2024-03-05 15:16:45 +08:00
9073a7706c feature(forest): 增加 forest 模块
为模块间的 HTTP 请求创建一个公共模块,集中模块间的互操作
2024-03-05 15:16:44 +08:00
2f2c10e7b7 refactor(all): 初始化项目
迁移项目到独立的 service 进行集中开发
包含以下组件的查询 API 服务
flink
hudi
database(info)
pulsar
yarn
包含前端服务和 UI
web
包含公共代码
configuration
2024-03-05 15:16:44 +08:00