Releases: isxcode/spark-yun
Releases · isxcode/spark-yun
latest
v1.0.0
发布时间: 2024-06-11
💥️ 重大变动
- 无
✨ 新功能
- GH-125 添加自动化测试
- GH-346 首页完成
- GH-161 支持spark自定义udf
- GH-468 添加后端日志归档功能
- GH-472 添加工具类，日志等级，缓存查询和许可证逻辑
- GH-489 支持自定义jar包作业
- GH-521 支持spark容器，支持自定义接口集成容器
- GH-523 数据库支持类型搜索
- GH-348 新增作业类型，接口调用作业
- GH-510 实时计算集成
- GH-524 支持prql作业类型
- GH-596 支持spark local安装模式
- GH-771 兼容mac平台本地开发
🎨 优化
- GH-477 使用雪花算法生成ID
- GH-500 前后端 /login 路由冲突
- GH-563 使用isx-cli本地运行的项目，项目内的检测时间/创建时间不是当地时间
- GH-597 禁止bash/python作业 执行rm -rf 命令
- GH-636 优化数据同步配置
- GH-688 社区链接优化
- GH-634 作业中止按钮放开
- GH-677 实例列表作业类型没有返回
- GH-714 资源中心上传文件时，文件为空，直接报接口400
- GH-721 作业提交的jobName指定为作业相关信息
- GH-715 当作业流菜单中处于第二页
- GH-717 资源文件,上传文件为必传字段
- GH-805 运行日志取消轮询
- GH-806 spark高级设置全屏优化
- GH-775 手动中止取消运行日志显示
- GH-868 代理器对象获取方式优化
- GH-887 兼容windows平台开发
🐛 修复
- GH-332 租户添加成员异常
- GH-119 修复租户中工作流的数量限制无效
- GH-335 修复部分yarn环境提交spark作业进程会一直保留
- GH-333 修复数据同步时部分数据库hash方法会产生负值导致数据缺漏
- GH-516 修复数据源名称可以重复
- GH-520 修复数据同步字段表格类型展示优化
- GH-539 dag图中，sparksql作业运行成功后，缺少运行结果
- GH-586 修复mapstruct依赖异常
- GH-589 修复无法新建容器sql作业
- GH-560 SAPHANA数据源在预览中文表名和包含中文字段名的数据时，获取不到数据
- GH-565 更改JDBC查询作业/执行作业的配置后（修改数据源），再点击保存，会导致修改数据源的操作失效
- GH-554 添加数据源后再打开添加弹窗，数据源驱动的默认选项没有清空
- GH-555 在非主页的页面退出登录，退出登录后有一个接口401错误
- GH-622 hana的jdbc查询和执行作业,默认脚本无法执行
- GH-665 spark容器作业,配置容器不生效
- GH-676 首页监控,系统信息异常
- GH-731 节点停止异常
- GH-666 io 读写速度监控异常
- GH-738 卸载节点没有停止spark进程
- GH-686 spark容器sql执行,没有返回
- GH-770 自定义作业无法中止
- GH-783 节点信息更新不生效
- GH-785 作业流空节点运行报错
- GH-803 调用中止接口400报错
- GH-881 mac系统中安装linux节点,地址异常
- GH-851 取消hive连接后,配置未生效
- GH-880 集群中删除一个节点会报错
v0.2.0
💥️ 重大变动
- 前端布局重构
- 官网重构
✨ 新功能
- 将计算节点列表的刷新按钮取消，改为前端轮播刷新接口
- 工作流支持调度配置，实例中心显示
- 数据同步可视化
- 计算节点安装，日志中，需要显示当前安装进度
- 支持spark作业的同步并发数，同步速度的配置
- 支持python作业类型
- 支持bash作业类型
🎨 优化
- 新建完作业，停留在新作业的编辑页面
🐛 修复
- 修复docker镜像自定义admin账号设置不生效
- 中止作业的时候，代理中的守护进程没有被关闭
- 脚本内容为空，日志中直接显示内容为空的报错日志
- 删除证书，如果证书不存在，不要报错，依旧可以删除
- sparksql作业，运行日志中，状态获取异常，出现k8s的异常字样
- 至轻云代理执行命令的时候超时了，把超时时间调大，放到配置文件中
- 没有校验spark作业中sparkconfig是否为json格式
