运维中心着陆页

• 查询
• 添加
• 编辑
• 删除
• 应用状态
• 连接状态

• 上下游依赖查看

里程碑一、改造 运维中心、数据源、控制台 (2021 7.01 - 2021 07.15） #17

基于数栈版本：v4.2

• 导航调整，导出 微应用入口
• 移除 租户/项目/用户 等不需要的逻辑

详细参考 #17

里程碑二、任务开发 (2021 7.01 - 2021 08.15） #19

• 支持 SparkSQL 任务开发
• 支持基本的 数据同步（关系型数据库 ）

详细参考 #19

里程碑三、发版 Ready (2021 8.15 - 2021 08.30）

全局功能测试（任务/运维/控制台/数据源）

• 测试数据源管理
• 测试支持 SparkSQL 任务
• 测试支持数据同步任务(MySQL，Oracle，SQLServer, PG, HDFS, Hive)
• 测试基本的任务运维

基本库和框架： Typescript + React + Molecule

• 集成 ESLint
• 集成 Prettier
• 集成 Commitlint
• 集成 lint-md
• Jest 单元测试

• 创建
• 编辑
• 属性查看
• 删除
• 任务参数管理
• 环境参数
• 调度配置（周期，任务依赖）

• 查询（名称，业务时间，计划时间，状态，任务类型，调度周期）
• 批量杀任务
• 重跑当前
• 重跑当前及全部下游
• 实例依赖视图

主要是剔除老应用的租户、用户、用户管理、等等的逻辑

运维中心 @ProfBramble

• 移除右侧导航所有相关逻辑， 产品、用户、消息、设置
• 改造入口页面，移除运维中心顶部导航
• 增加微应用入口
• 界面细节调整、测试

数据源 @ProfBramble

• 改造入口页面，移除数据源中心顶部导航
• 增加微应用入口
• 界面细节调整、测试

控制台 @ting0130

• 更改顶部导航为左侧布局
• 改造入口页面
• 增加微应用入口
• 界面路由改造 #22
• 界面细节调整、测试 #21

公共改造 #23 @ProfBramble @ting0130

• 移除右侧导航所有相关逻辑， 产品、用户、消息、设置
  
• 移除 dt-common 依赖
• 使用 dt-react-component 替换原 dt-common 逻辑
• 使用 dt-utils 替换原 dt-common 逻辑
• 清理所有产品下无用的依赖
• 清理 public/config.js 逻辑

• 展开上下游
• 查看任务日志
• 刷新任务实例
• 置成功并恢复调度
• 重跑并恢复调度

详情

环境变量在 SQL 中识别时，会报如图的错误

SQL如下：

create table fen_hao_split
    as
    select '202107' as ${tmonth_code},t.project_code,d.ac_code,
    d.disp_code,d.disp_index,
    sum(case when d.isdecr is not null and d.isdecr<>t.isdecr then 0 else m_scale*t.rmb_value end) as ttl_value,
    sum(case when date_format(date_code,'yyyyMM')<concat(substr('202107',1,4),'01') and d.isdecr is not null and d.isdecr<>t.isdecr then 0
            when date_format(date_code,'yyyyMM')<concat(substr('202107',1,4),'01') then m_scale*t.rmb_value end) as jan_value 
    from ods_d_pfa_gl_account_df d 
    left join tmp_ads_fin_pfa_balance_proj_df_00_rt t 
    on substr(t.account_code,1,4) = d.fin_account_code 
    or substr(t.account_code,1,6) = d.fin_account_code 
        or substr(t.account_code,1,8) = d.fin_account_code 
    or substr(t.account_code,1,4)=split(fin_account_code,';')[0]
    where table_type='资产负债表'  and d.year_code=substr('202107',1,4)  and fiscal_period<='202107'
    group by t.project_code,d.ac_code,
            d.disp_code,d.disp_index
    limit 10
;

• 任务查询（名称，调度周期，冻结）
• 修改任务
• 冻结/解冻
• 补数据
• 新建/删除文件目录

1. 基本的任务创建/
2. 发布/运维 UI
3. 任务参数 UI
4. 调度参数 UI
5. 参考里程碑二的需求：#19

• 查询、添加、编辑、删除

背景

为了解决微应用的图片跨域等问题，我们将图片路径动态修改成带 host 的绝对路径，这也带来了 host 变量需要维护的问题

简要

需要一个文件或者交互让用户更方便的配置 host 绝对路径的前缀

现在的微应用使用 QianKun 的自动扩展化前缀的 css 选择器进行隔离，但是会导致部分样式进入微前端环境后的样式会丢失
目前已知问题

• mxGraph 的自定义样式失效
• 运维中心列表详情页查看日志的自定义样式失效

1. 前端配合一个很简单的登录界面；
2. 通过配置：用户名密码；
3. 返回token，包含所需信息userid projectId tenantId

• 资源上传
• 资源查看
• 资源删除
• 新建/删除文件目录

切换子应用使用时在某些情况下，会导致菜单栏 active 样式出现在其他的子应用 menu bar 上

主要是应用在 DAGScheduleX 中的字体图标，具体如下：

• 资源
• 函数
• 数据同步任务
• SparkSQL 任务

前端和引擎的这个整合下

https://github.com/DTStack/DAGScheduleX/blob/master/docs/quickstart/quicklystart.md

• 新建自定义函数
• 删除自定义函数
• 新建/删除文件目录

主要是改造现有的 运维中心、数据源、控制台，

基于数栈版本：v4.2

• 1. 导航调整，导出 微应用入口
• 2. 移除 租户/项目/用户 等不需要的逻辑

• 前端开发测试环境 @wewoor
• 引擎开发测试环境

核心主要是任务开发，基于 Molecule 开发：

开发架构

• 前端架构搭建 @AndyZjy

任务公共功能

• 提交
• 发布
• 运行
• 停止
• 运维
• 任务属性
• 调度依赖配置
• 依赖试图 #9
• 任务参数
• 环境参数
• 函数管理 #11
• 资源管理 （SparkSQL 好像不需要，Spark 任务依赖 jar 资源?) #10

Spark SQL 任务开发

• 增加 / 删除 #3

数据同步任务

• 增加/删除 #4

• 向导模式（源，目标，映射，通道配置，预览）
• 支持 MySQL，Oracle，SQLServer, PG,
• 支持 HDFS,
• 支持 Hive

• 查询（名称，业务时间，计划时间，状态，任务类型，调度周期）
• 批量杀任务
• 重跑当前
• 重跑当前及全部下游
• 实例依赖视图

系统测试

数据源

任务开发

任务运维

控制台

• start 命令优化
• 依赖优化
• husky 优化
• template 优化
• install 优化