These 18 commits are when the Protocol Buffers files have changed:
| Commit: | 0d3f450 | |
|---|---|---|
| Author: | jackluo | |
Phase 10:数据安全/数仓建模前端 + 质量统计分析 + 调度引擎部署编排 + AI 多轮透传 - 数据安全前端:SecurityList 四页签(分级目录 L1-L4 自动种子/实体打标/脱敏规则+预览/授权矩阵+权限检查器) - 数仓建模前端:ThemeList 四页签(主题域/主题/分层模型+Deploy 建表+SQL 预览/物化视图+刷新) - 质量统计分析:QualityStats 聚合接口(通过率/逐日/失败 TopN/健康分趋势)+ 网关路由 - 调度引擎部署编排:compose 服务(SCHED_MYSQL_DSN/SCHED_ETCD_HOSTS 容器化注入)+ Dockerfile 12 二进制 + restart.sh SchedulerRun + 部署手册 §8(架构/环境变量/cron 子集/FAQ 九条) - AI 多轮:网关透传 context_json(rpc 层已就绪) - 前端深化:quality 告警配置/错误数据/健康分仪表盘、datasvc 调用统计/API 文档渲染、 Dashboard 全真实数据、19 页 keep-alive 修复(defineOptions 按后端驼峰路径命名)
| Commit: | 07ca853 | |
|---|---|---|
| Author: | jackluo | |
Phase 9:CRUD 缺口补齐 + DataEase 签名代理 + keep-alive 修复(收口用户实测反馈缺口) - catalog:分类软删/更新(成环检测+引用拒删)、资产删除/移出分类、申请审批 7 路由网关暴露 - tag:对象删除(引用拒删)、标签定义更新(换 key 查重)、列表补对象名回显、圈群网关编排 5 logic(实测圈选 member_count=151 精确命中演示数据) - quality:规则更新(owner 空保留)、任务删除 - metric:盘点确认 update/delete 原已暴露,零改动 - signproxy:DataEase 签名代理(双通道注入 body+header,解决 v1.18 静态签名 5 分钟过期, 6 测试全绿+进程级手测透传链路完整);修复 apiDocGen 文档宣称 header 方式无实现支撑的口径偏差 - keep-alive 修复:19 页面 defineOptions(按后端真实命名规则驼峰路径拼接)+ TagsView 刷新当前 - AI 多轮:网关透传 context_json(rpc 层已就绪) - 修复 INTEGRATION.md DataEase 默认密码口径 + env.d.ts 类型
| Commit: | 5680bec | |
|---|---|---|
| Author: | jackluo | |
收口:tag 圈群网关编排全链路 + 4 处 RBAC 批量绑定占位符修复 + unix_timestamp 精度坑 - 圈群网关编排 5 logic + convert(建群/列表/删除/圈选/成员——实测 member_count=151 精确命中演示数据) - 修复 4 处 RBAC 批量绑定(AddRoleMenus/SetRoleMenus/AddUserRoles×2):占位符按行数生成但 args 只放一个 role_id——改为每行成对参数(role_id,menu_id) - 修复 tag 圈群 unix_timestamp(datetime(3)) 返回 DECIMAL 导致 int64 扫描崩溃(CAST as signed) - 修复 INTEGRATION.md DataEase 默认密码口径 + env.d.ts 类型声明 - security/theme 网关编排 26 logic(上轮代理产出)一并入库 端到端实测:建群→圈选 member_count=151(精确命中演示数据 level>=4 高价值用户)→成员查询返回真实分级
| Commit: | 00e2271 | |
|---|---|---|
| Author: | jackluo | |
Phase 8 契约与骨架:job 内置同步执行引擎(源 SQL→目标表 分批事务) - job.proto 扩展 CreateSyncTaskV2/RunSync/ListSyncLogs - dc_sync_task 表补 source_sql/target_db/target_table/batch_size 列(已同步 phase3.sql)
| Commit: | 7fafd73 | |
|---|---|---|
| Author: | jackluo | |
Phase 7:落地深度补齐(调度引擎/质量告警/错误数据/健康分/API 可观测)+ 前端深化 - 内置调度引擎 internal/scheduler + cmd/scheduler:自写 5 段 cron 解析(8 用例)、30s tick 扫表 (quality/ops/theme 三表)、etcd 发现 rpc 自动执行——实测每分钟自动触发质量任务 success - quality 深化:告警通道(钉钉加签/飞书 webhook,RunJob 失败自动推送+告警日志)、 错误数据留存下钻(违规行样本 100 行)、表剖析健康分(0-100 仪表盘+趋势,24 用例) - datasvc 可观测:Execute 埋点→调用日志/成功率/耗时/TopN/日趋势 + API 文档导出 (Markdown+OpenAPI 3.0,20 用例) - 前端深化:quality 告警配置/错误数据/健康分仪表盘三页签、datasvc 调用统计/调用日志/API 文档、 Dashboard 全接真实数据(404 容错) - 对标调研:docs/OPEN-SOURCE-GAP.md(对比 Datavines/DataEase/DS/DataHub/RuoYi 功能矩阵 与 Top 10 缺口清单)、docs/STANDARD-BENCHMARK.md(RuoYi/DataEase 布局与 RBAC 逐字段对标) - 修复:RBAC 批量绑定 4 处 args 组装错误、CheckPassword 参数顺序、icard NULL 扫描(存量)
| Commit: | 8e4e28f | |
|---|---|---|
| Author: | jackluo | |
自测修复:RBAC 管理台登录闭环 + 老服务运行时修复 + 演示联调 - sys-rpc 新增 SysLogin(bcrypt 校验 sys_user + roles/perms 下发),空库登录兜底播种(解决先有鸡问题) - 网关 /sys/login:sys-rpc 校验通过后签发管理台 JWT(uid=sys_user.id,与 C 端 uid 空间隔离) - 前端 Login.vue 切换 /sys/login,登录后拉 getInfo(角色/权限/动态菜单) - 修复 4 处 RBAC 批量绑定 args 组装错误(AddRoleMenus/SetRoleMenus/AddUserRoles/SetUserRoles: role_id 只放一次导致占位符与参数永远不匹配)+ CheckPassword 参数顺序反了 - 修复老 5 服务运行时:启动路径、base_member icard NULL 扫描崩溃(ifnull 兜底,存量 bug) - 端到端实测通过:admin 登录(roles=admin/perms=73)→ getRouters 15 组动态路由 → JWT 调业务接口 200 → 审计落库 uid 归属正确+密码脱敏 → 登录日志 → 采集 67 表 636 列 → AI 问数命中 dm_orders(订单量语义)
| Commit: | 68f8cab | |
|---|---|---|
| Author: | jackluo | |
| Committer: | jackluo | |
RBAC 契约与 sys-rpc 骨架(对标 RuoYi 模型:用户/角色/菜单/按钮权限/动态路由) - sys.proto:SysUser/SysRole/SysMenu CRUD + GetInfo(角色+权限标识+菜单树)+ GetRouters(前端动态路由) - docs/schema/sys.sql:sys_user/sys_role/sys_menu/sys_user_role/sys_role_menu 五表 - 管理面账号体系(sys_user,bcrypt)与 C 端 base_member 分离
| Commit: | 5f703f0 | |
|---|---|---|
| Author: | jackluo | |
Phase 6:数仓建模/数据安全/标签圈群 + 前端控制台 + 演示数据(README 商业版清单全量补齐) - theme-rpc(:8098):主题域/主题/分层建模(ods-dwd-dws-ads-dim),fields_json→Deploy 真实建表 (DDL 生成+类型映射+注入防护 17 用例),物化视图 create or replace view 真实刷新 - security-rpc(:8099):分级目录(L1-L4 自动种子)/实体打标/脱敏规则库(mask/hash/replace/null 四算法中文 rune 安全 30 用例)/脱敏预览/授权矩阵/CheckPerm 密级比较 fail-closed - tag-rpc 圈群:圈选 SQL 强校验(15 用例)→人群物化表自动创建→replace 幂等写入→成员查询 - 网关:theme/security 2 个 .api(27 路由) + tag 圈群 5 路由 + 30 编排 logic + ServiceContext - 前端控制台 web/:Vue3+Vite+TS+Element Plus+ECharts+Pinia,102 接口函数 13 组全对齐, 登录/仪表盘/15 组完整功能页(数据源/元数据/AI 问数聊天/数据服务授权/资产树/质量四页签/ 指标绑定/标签三页签/标准五页签/主数据三页签/调度/IDE 编辑器/运维三页签), vue-tsc 零错误 + build 通过 - 演示数据包 docs/demo/:电商演示库(500 用户/80 商品/1500 订单/2500 明细,外键零孤儿/ 金额一致/幂等可重放,真实跑库验证)+ 15 分钟演示剧本 DEMO.md(演示账号 13800138000/123456) - docs/BENCHMARK.md:三模块行业对标(Dataphin/GB18391/Leaf/pt-archiver/等保三级) - 修复:standard.api 的 StdDict.Id 误写 string→int64 Closes #27 Closes #28 Closes #29
| Commit: | 85aa149 | |
|---|---|---|
| Author: | jackluo | |
Phase 6 骨架:theme(数仓建模)/security(数据安全)两服务 + tag 圈群扩展 - theme-rpc(:8098):主题域/主题/分层模型(ods-dwd-dws-ads-dim)/物化视图(Deploy+Refresh 真实执行) - security-rpc(:8099):分级目录/实体打标/脱敏规则库/脱敏预览/授权矩阵/权限检查 - tag-rpc 圈群扩展:CreateGroup/ListGroups/DeleteGroup/RunCircle/ListGroupMembers(dc_tag_group 表) - docs/schema/phase6.sql:9 张 dc_ 表
| Commit: | 325bc2d | |
|---|---|---|
| Author: | jackluo | |
Phase 5 骨架:standard(数据标准)/mdm(主数据)/ops(数据运维与日志)三服务 - 对齐 README 商业版功能清单的三个空缺模块:数据标准管理、主数据管理、数据运维与系统日志 - 3 个 proto 契约 + goctl 骨架 + docs/schema/phase5.sql(12 张 dc_ 表) - 端口 :8095/:8096/:8097;docs/BENCHMARK.md 行业对标调研进行中
| Commit: | c4a7e32 | |
|---|---|---|
| Author: | jackluo | |
技术债清零(issue #18 全部完成)+ 编排扩展 + README 收尾 - pb 值传递清零:27 处 copylocks 告警全部改指针传递(handler/logic/search dao 链路), go vet ./... 零过滤零告警,CI 移除过滤规则改为严格拦截 - pb 全量重生成:5 个老服务(user/common/votes/search/questions)从 protoc-gen-go v1.25.0 重生成到 v1.36.12(grpc 桩拆分双文件,净 -633 行),internal/ 零改动兼容 - 编排扩展:docker-compose 新增 DataEase(viz profile)与 DolphinScheduler 3.2.1(ds profile), docs/INTEGRATION.md 集成联调指南(DataEase 数据源/DS token/五步验证/Doris 免代码接入) - README:项目结构简表、双运行方式、JWT 登录说明、Phase 3/4 已交付状态、profiles 用法 Closes #18
| Commit: | 0d1ee75 | |
|---|---|---|
| Author: | jackluo | |
AI 问数执行闭环 + CI/部署资产 + 网关 AskAndRun + 存量配置修复 - ai-rpc 新增 AskAndRun:检索→LLM 生成 SQL→经 ide 安全闸自动执行→返回数据(执行失败降级业务态,9 单测);网关 /ai/ask_and_run 路由与编排 - CI:GitHub Actions(build/vet 存量告警过滤/test -race/go mod verify) - 部署:docker-compose 一键全栈(11 服务+依赖 healthcheck+initdb 自动导表)+ 多阶段 Dockerfile + deploy/docker 11 份容器化配置 - Postman 中台集合:11 组 67 请求(自动 Bearer token + login Tests 联动) - 存量修复:etc/datacenter-api.example.yaml 的 questions.rpc 与 DataSourceRpc 连行(原文件复制即坏)
| Commit: | c5f0d54 | |
|---|---|---|
| Author: | jackluo | |
Phase 3/4 骨架:job(调度集成)/ide(SQL IDE)/ai(AI 问数) 三服务 - 3 个 proto 契约 + goctl 骨架 + config(ai 含可配置 LlmConf) - docs/schema/phase3.sql:dc_sync_task/dc_ide_script/dc_ask_log 三表 - 端口 :8092/:8093/:8094
| Commit: | 99c426d | |
|---|---|---|
| Author: | jackluo | |
Phase 2 骨架:quality/metric/tag 三服务(数据质量/数据指标/数据标签) - 3 个 proto 契约定稿 + goctl 骨架 + config/yaml - docs/schema/phase2.sql:7 张 dc_ 表(质量规则/任务/结果、指标/关系、标签对象/定义/值) - 端口 :8089/:8090/:8091
| Commit: | 15408ad | |
|---|---|---|
| Author: | jackluo | |
Phase 1 骨架:datasource/metadata/datasvc/catalog 四服务 - 4 个 proto 契约定稿(数据源/元数据/数据服务API/资产目录) - goctl 1.10.2 生成 rpc 骨架(pb+_grpc 分离,config/example yaml 就绪) - docs/schema/phase1.sql:9 张 dc_ 前缀表 DDL(utf8mb4,beid 多租户) - docs/PHASE1.md:并行开发契约(目录/端口/架构约定/交付清单)
| Commit: | e02aaba | |
|---|---|---|
| Author: | jackluo | |
新增问答抽奖服务
The documentation is generated from this commit.
| Commit: | 89558e9 | |
|---|---|---|
| Author: | jackluo | |
加入elasticsearch 搜索服务
| Commit: | 2303840 | |
|---|---|---|
| Author: | jackluo | |
first commit