feat: UI pages, build.sh, deployment scripts, model uitype fixes
- Add SDLC dashboard, pipeline editor, ops center UI - build.sh: clone business modules to pkgs/, xls2ui CRUD, fix created_by - global_func.py: password_encode None-safe wrapper - pipeline_app.py: permission cache warmup removed - load_path.py: RBAC permission registration for all modules - scripts/merge_i18n.py: i18n merge tool - bin/init_perms.py, bin/init_data.py: init scripts - set_role_perm.py: single permission registration - Model uitype fields set for form editing - pipeline_core/pipeline_ops load_path.py scripts
This commit is contained in:
parent
c62416d994
commit
827bbb80b4
18
json/llm.json
Normal file
18
json/llm.json
Normal file
@ -0,0 +1,18 @@
|
|||||||
|
{
|
||||||
|
"tblname": "llm",
|
||||||
|
"title": "大语言模型管理",
|
||||||
|
"params": {
|
||||||
|
"sortby": "created_at",
|
||||||
|
"browserfields": {
|
||||||
|
"exclouded": ["id", "api_key"],
|
||||||
|
"cwidth": {}
|
||||||
|
},
|
||||||
|
"editexclouded": ["id", "created_at", "updated_at"],
|
||||||
|
"editable": {
|
||||||
|
"new_data_url": "{{entire_url('../api/llm_create.dspy')}}",
|
||||||
|
"update_data_url": "{{entire_url('../api/llm_update.dspy')}}",
|
||||||
|
"delete_data_url": "{{entire_url('../api/llm_delete.dspy')}}"
|
||||||
|
},
|
||||||
|
"confidential_fields": ["api_key"]
|
||||||
|
}
|
||||||
|
}
|
||||||
25
models/llm.json
Normal file
25
models/llm.json
Normal file
@ -0,0 +1,25 @@
|
|||||||
|
{
|
||||||
|
"summary": [
|
||||||
|
{
|
||||||
|
"name": "llm",
|
||||||
|
"title": "大语言模型表",
|
||||||
|
"primary": ["id"]
|
||||||
|
}
|
||||||
|
],
|
||||||
|
"fields": [
|
||||||
|
{"name": "id", "title": "主键", "type": "str", "length": 32, "nullable": "no"},
|
||||||
|
{"name": "name", "title": "模型名称", "type": "str", "length": 100, "nullable": "no"},
|
||||||
|
{"name": "provider", "title": "供应商", "type": "str", "length": 50, "nullable": "no"},
|
||||||
|
{"name": "model_id", "title": "模型标识", "type": "str", "length": 100},
|
||||||
|
{"name": "api_base", "title": "API地址", "type": "str", "length": 500},
|
||||||
|
{"name": "api_key", "title": "API密钥", "type": "str", "length": 500},
|
||||||
|
{"name": "max_tokens", "title": "最大Token", "type": "int", "default": "8192"},
|
||||||
|
{"name": "status", "title": "状态", "type": "str", "length": 20, "default": "active"},
|
||||||
|
{"name": "description", "title": "描述", "type": "text"},
|
||||||
|
{"name": "created_at", "title": "创建时间", "type": "timestamp"},
|
||||||
|
{"name": "updated_at", "title": "更新时间", "type": "timestamp"}
|
||||||
|
],
|
||||||
|
"indexes": [
|
||||||
|
{"name": "idx_llm_status", "idxtype": "index", "idxfields": ["status"]}
|
||||||
|
]
|
||||||
|
}
|
||||||
@ -1,110 +1,122 @@
|
|||||||
{
|
{
|
||||||
"summary": [
|
"summary": [
|
||||||
{
|
{
|
||||||
"name": "pipeline_steps",
|
"name": "pipeline_steps",
|
||||||
"title": "产线步骤表",
|
"title": "产线步骤表",
|
||||||
"primary": [
|
"primary": [
|
||||||
"id"
|
"id"
|
||||||
]
|
]
|
||||||
}
|
}
|
||||||
],
|
],
|
||||||
"fields": [
|
"fields": [
|
||||||
{
|
{
|
||||||
"name": "id",
|
"name": "id",
|
||||||
"title": "id",
|
"title": "id",
|
||||||
"type": "str",
|
"type": "str",
|
||||||
"length": 32,
|
"length": 32,
|
||||||
"nullable": "no"
|
"nullable": "no",
|
||||||
},
|
"uitype": "hidden"
|
||||||
{
|
},
|
||||||
"name": "pipeline_id",
|
{
|
||||||
"title": "所属产线",
|
"name": "pipeline_id",
|
||||||
"type": "str",
|
"title": "所属产线",
|
||||||
"length": 32,
|
"type": "str",
|
||||||
"nullable": "no"
|
"length": 32,
|
||||||
},
|
"nullable": "no",
|
||||||
{
|
"uitype": "select"
|
||||||
"name": "step_order",
|
},
|
||||||
"title": "步骤序号",
|
{
|
||||||
"type": "int",
|
"name": "step_order",
|
||||||
"nullable": "no"
|
"title": "步骤序号",
|
||||||
},
|
"type": "int",
|
||||||
{
|
"nullable": "no",
|
||||||
"name": "step_name",
|
"uitype": "number"
|
||||||
"title": "步骤名称",
|
},
|
||||||
"type": "str",
|
{
|
||||||
"length": 100,
|
"name": "step_name",
|
||||||
"nullable": "no"
|
"title": "步骤名称",
|
||||||
},
|
"type": "str",
|
||||||
{
|
"length": 100,
|
||||||
"name": "step_type",
|
"nullable": "no",
|
||||||
"title": "步骤类型",
|
"uitype": "text"
|
||||||
"type": "str",
|
},
|
||||||
"length": 50,
|
{
|
||||||
"nullable": "no"
|
"name": "step_type",
|
||||||
},
|
"title": "步骤类型",
|
||||||
{
|
"type": "str",
|
||||||
"name": "model_name",
|
"length": 50,
|
||||||
"title": "调用模型名称",
|
"nullable": "no",
|
||||||
"type": "str",
|
"uitype": "select"
|
||||||
"length": 100
|
},
|
||||||
},
|
{
|
||||||
{
|
"name": "model_name",
|
||||||
"name": "step_config",
|
"title": "调用模型名称",
|
||||||
"title": "步骤配置JSON",
|
"type": "str",
|
||||||
"type": "text"
|
"length": 100,
|
||||||
},
|
"uitype": "text"
|
||||||
{
|
},
|
||||||
"name": "input_schema",
|
{
|
||||||
"title": "输入定义JSON",
|
"name": "step_config",
|
||||||
"type": "text"
|
"title": "步骤配置JSON",
|
||||||
},
|
"type": "text",
|
||||||
{
|
"uitype": "textarea"
|
||||||
"name": "output_schema",
|
},
|
||||||
"title": "输出定义JSON",
|
{
|
||||||
"type": "text"
|
"name": "input_schema",
|
||||||
},
|
"title": "输入定义JSON",
|
||||||
{
|
"type": "text",
|
||||||
"name": "timeout_seconds",
|
"uitype": "textarea"
|
||||||
"title": "超时秒数",
|
},
|
||||||
"type": "int",
|
{
|
||||||
"default": "300"
|
"name": "output_schema",
|
||||||
},
|
"title": "输出定义JSON",
|
||||||
{
|
"type": "text",
|
||||||
"name": "retry_count",
|
"uitype": "textarea"
|
||||||
"title": "重试次数",
|
},
|
||||||
"type": "int",
|
{
|
||||||
"default": "0"
|
"name": "timeout_seconds",
|
||||||
},
|
"title": "超时秒数",
|
||||||
{
|
"type": "int",
|
||||||
"name": "created_at",
|
"default": "300",
|
||||||
"title": "创建时间",
|
"uitype": "number"
|
||||||
"type": "timestamp"
|
},
|
||||||
}
|
{
|
||||||
],
|
"name": "retry_count",
|
||||||
"indexes": [
|
"title": "重试次数",
|
||||||
{
|
"type": "int",
|
||||||
"name": "idx_steps_pipeline",
|
"default": "0",
|
||||||
"idxtype": "index",
|
"uitype": "number"
|
||||||
"idxfields": [
|
},
|
||||||
"pipeline_id"
|
{
|
||||||
]
|
"name": "created_at",
|
||||||
},
|
"title": "创建时间",
|
||||||
{
|
"type": "timestamp",
|
||||||
"name": "idx_steps_order",
|
"uitype": "timestamp"
|
||||||
"idxtype": "unique",
|
}
|
||||||
"idxfields": [
|
],
|
||||||
"pipeline_id",
|
"indexes": [
|
||||||
"step_order"
|
{
|
||||||
]
|
"name": "idx_steps_pipeline",
|
||||||
}
|
"idxtype": "index",
|
||||||
],
|
"idxfields": [
|
||||||
"codes": [
|
"pipeline_id"
|
||||||
{
|
]
|
||||||
"field": "pipeline_id",
|
},
|
||||||
"table": "pipelines",
|
{
|
||||||
"valuefield": "id",
|
"name": "idx_steps_order",
|
||||||
"textfield": "name"
|
"idxtype": "unique",
|
||||||
}
|
"idxfields": [
|
||||||
]
|
"pipeline_id",
|
||||||
}
|
"step_order"
|
||||||
|
]
|
||||||
|
}
|
||||||
|
],
|
||||||
|
"codes": [
|
||||||
|
{
|
||||||
|
"field": "pipeline_id",
|
||||||
|
"table": "pipelines",
|
||||||
|
"valuefield": "id",
|
||||||
|
"textfield": "name"
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
@ -1,85 +1,94 @@
|
|||||||
{
|
{
|
||||||
"summary": [
|
"summary": [
|
||||||
{
|
{
|
||||||
"name": "pipeline_versions",
|
"name": "pipeline_versions",
|
||||||
"title": "产线发布记录表",
|
"title": "产线发布记录表",
|
||||||
"primary": [
|
"primary": [
|
||||||
"id"
|
"id"
|
||||||
]
|
]
|
||||||
}
|
}
|
||||||
],
|
],
|
||||||
"fields": [
|
"fields": [
|
||||||
{
|
{
|
||||||
"name": "id",
|
"name": "id",
|
||||||
"title": "id",
|
"title": "id",
|
||||||
"type": "str",
|
"type": "str",
|
||||||
"length": 32,
|
"length": 32,
|
||||||
"nullable": "no"
|
"nullable": "no",
|
||||||
},
|
"uitype": "hidden"
|
||||||
{
|
},
|
||||||
"name": "pipeline_id",
|
{
|
||||||
"title": "产线ID",
|
"name": "pipeline_id",
|
||||||
"type": "str",
|
"title": "产线ID",
|
||||||
"length": 32,
|
"type": "str",
|
||||||
"nullable": "no"
|
"length": 32,
|
||||||
},
|
"nullable": "no",
|
||||||
{
|
"uitype": "hidden"
|
||||||
"name": "version",
|
},
|
||||||
"title": "版本号",
|
{
|
||||||
"type": "str",
|
"name": "version",
|
||||||
"length": 20,
|
"title": "版本号",
|
||||||
"nullable": "no"
|
"type": "str",
|
||||||
},
|
"length": 20,
|
||||||
{
|
"nullable": "no",
|
||||||
"name": "publish_status",
|
"uitype": "text"
|
||||||
"title": "发布状态",
|
},
|
||||||
"type": "str",
|
{
|
||||||
"length": 20,
|
"name": "publish_status",
|
||||||
"nullable": "no",
|
"title": "发布状态",
|
||||||
"default": "pending"
|
"type": "str",
|
||||||
},
|
"length": 20,
|
||||||
{
|
"nullable": "no",
|
||||||
"name": "published_by",
|
"default": "pending",
|
||||||
"title": "发布人",
|
"uitype": "select"
|
||||||
"type": "str",
|
},
|
||||||
"length": 32
|
{
|
||||||
},
|
"name": "published_by",
|
||||||
{
|
"title": "发布人",
|
||||||
"name": "published_at",
|
"type": "str",
|
||||||
"title": "发布时间",
|
"length": 32,
|
||||||
"type": "timestamp"
|
"uitype": "text"
|
||||||
},
|
},
|
||||||
{
|
{
|
||||||
"name": "changelog",
|
"name": "published_at",
|
||||||
"title": "变更说明",
|
"title": "发布时间",
|
||||||
"type": "text"
|
"type": "timestamp",
|
||||||
},
|
"uitype": "timestamp"
|
||||||
{
|
},
|
||||||
"name": "config_snapshot",
|
{
|
||||||
"title": "配置快照JSON",
|
"name": "changelog",
|
||||||
"type": "text"
|
"title": "变更说明",
|
||||||
},
|
"type": "text",
|
||||||
{
|
"uitype": "textarea"
|
||||||
"name": "created_at",
|
},
|
||||||
"title": "创建时间",
|
{
|
||||||
"type": "timestamp"
|
"name": "config_snapshot",
|
||||||
}
|
"title": "配置快照JSON",
|
||||||
],
|
"type": "text",
|
||||||
"indexes": [
|
"uitype": "textarea"
|
||||||
{
|
},
|
||||||
"name": "idx_versions_pipeline",
|
{
|
||||||
"idxtype": "index",
|
"name": "created_at",
|
||||||
"idxfields": [
|
"title": "创建时间",
|
||||||
"pipeline_id"
|
"type": "timestamp",
|
||||||
]
|
"uitype": "timestamp"
|
||||||
}
|
}
|
||||||
],
|
],
|
||||||
"codes": [
|
"indexes": [
|
||||||
{
|
{
|
||||||
"field": "pipeline_id",
|
"name": "idx_versions_pipeline",
|
||||||
"table": "pipelines",
|
"idxtype": "index",
|
||||||
"valuefield": "id",
|
"idxfields": [
|
||||||
"textfield": "name"
|
"pipeline_id"
|
||||||
}
|
]
|
||||||
]
|
}
|
||||||
}
|
],
|
||||||
|
"codes": [
|
||||||
|
{
|
||||||
|
"field": "pipeline_id",
|
||||||
|
"table": "pipelines",
|
||||||
|
"valuefield": "id",
|
||||||
|
"textfield": "name"
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
@ -1,126 +1,139 @@
|
|||||||
{
|
{
|
||||||
"summary": [
|
"summary": [
|
||||||
{
|
{
|
||||||
"name": "pipelines",
|
"name": "pipelines",
|
||||||
"title": "产线定义表",
|
"title": "产线定义表",
|
||||||
"primary": [
|
"primary": [
|
||||||
"id"
|
"id"
|
||||||
]
|
]
|
||||||
}
|
}
|
||||||
],
|
],
|
||||||
"fields": [
|
"fields": [
|
||||||
{
|
{
|
||||||
"name": "id",
|
"name": "id",
|
||||||
"title": "id",
|
"title": "id",
|
||||||
"type": "str",
|
"type": "str",
|
||||||
"length": 32,
|
"length": 32,
|
||||||
"nullable": "no"
|
"nullable": "no",
|
||||||
},
|
"uitype": "hidden"
|
||||||
{
|
},
|
||||||
"name": "name",
|
{
|
||||||
"title": "产线名称",
|
"name": "name",
|
||||||
"type": "str",
|
"title": "产线名称",
|
||||||
"length": 200,
|
"type": "str",
|
||||||
"nullable": "no"
|
"length": 200,
|
||||||
},
|
"nullable": "no",
|
||||||
{
|
"uitype": "text"
|
||||||
"name": "description",
|
},
|
||||||
"title": "产线描述",
|
{
|
||||||
"type": "text"
|
"name": "description",
|
||||||
},
|
"title": "产线描述",
|
||||||
{
|
"type": "text",
|
||||||
"name": "pipeline_type",
|
"uitype": "textarea"
|
||||||
"title": "产线类型",
|
},
|
||||||
"type": "str",
|
{
|
||||||
"length": 50,
|
"name": "pipeline_type",
|
||||||
"nullable": "no"
|
"title": "产线类型",
|
||||||
},
|
"type": "str",
|
||||||
{
|
"length": 50,
|
||||||
"name": "version",
|
"nullable": "no",
|
||||||
"title": "当前版本",
|
"uitype": "select"
|
||||||
"type": "str",
|
},
|
||||||
"length": 20,
|
{
|
||||||
"default": "1.0.0"
|
"name": "version",
|
||||||
},
|
"title": "当前版本",
|
||||||
{
|
"type": "str",
|
||||||
"name": "status",
|
"length": 20,
|
||||||
"title": "状态",
|
"default": "1.0.0",
|
||||||
"type": "str",
|
"uitype": "text"
|
||||||
"length": 20,
|
},
|
||||||
"nullable": "no",
|
{
|
||||||
"default": "draft"
|
"name": "status",
|
||||||
},
|
"title": "状态",
|
||||||
{
|
"type": "str",
|
||||||
"name": "pipeline_config",
|
"length": 20,
|
||||||
"title": "产线配置JSON",
|
"nullable": "no",
|
||||||
"type": "text"
|
"default": "draft",
|
||||||
},
|
"uitype": "select"
|
||||||
{
|
},
|
||||||
"name": "model_api_url",
|
{
|
||||||
"title": "模型API地址",
|
"name": "pipeline_config",
|
||||||
"type": "str",
|
"title": "产线配置JSON",
|
||||||
"length": 500
|
"type": "text",
|
||||||
},
|
"uitype": "textarea"
|
||||||
{
|
},
|
||||||
"name": "model_api_key",
|
{
|
||||||
"title": "模型API密钥",
|
"name": "model_api_url",
|
||||||
"type": "str",
|
"title": "模型API地址",
|
||||||
"length": 500
|
"type": "str",
|
||||||
},
|
"length": 500,
|
||||||
{
|
"uitype": "text"
|
||||||
"name": "org_id",
|
},
|
||||||
"title": "所属机构ID",
|
{
|
||||||
"type": "str",
|
"name": "model_api_key",
|
||||||
"length": 32,
|
"title": "模型API密钥",
|
||||||
"default": "0"
|
"type": "str",
|
||||||
},
|
"length": 500,
|
||||||
{
|
"uitype": "text"
|
||||||
"name": "created_by",
|
},
|
||||||
"title": "创建人",
|
{
|
||||||
"type": "str",
|
"name": "org_id",
|
||||||
"length": 32
|
"title": "所属机构ID",
|
||||||
},
|
"type": "str",
|
||||||
{
|
"length": 32,
|
||||||
"name": "created_at",
|
"default": "0",
|
||||||
"title": "创建时间",
|
"uitype": "text"
|
||||||
"type": "timestamp"
|
},
|
||||||
},
|
{
|
||||||
{
|
"name": "created_by",
|
||||||
"name": "updated_at",
|
"title": "创建人",
|
||||||
"title": "更新时间",
|
"type": "str",
|
||||||
"type": "timestamp"
|
"length": 32,
|
||||||
}
|
"uitype": "hidden"
|
||||||
],
|
},
|
||||||
"indexes": [
|
{
|
||||||
{
|
"name": "created_at",
|
||||||
"name": "idx_pipelines_name",
|
"title": "创建时间",
|
||||||
"idxtype": "index",
|
"type": "timestamp",
|
||||||
"idxfields": [
|
"uitype": "timestamp"
|
||||||
"name"
|
},
|
||||||
]
|
{
|
||||||
},
|
"name": "updated_at",
|
||||||
{
|
"title": "更新时间",
|
||||||
"name": "idx_pipelines_status",
|
"type": "timestamp",
|
||||||
"idxtype": "index",
|
"uitype": "timestamp"
|
||||||
"idxfields": [
|
}
|
||||||
"status"
|
],
|
||||||
]
|
"indexes": [
|
||||||
}
|
{
|
||||||
],
|
"name": "idx_pipelines_name",
|
||||||
"codes": [
|
"idxtype": "index",
|
||||||
{
|
"idxfields": [
|
||||||
"field": "pipeline_type",
|
"name"
|
||||||
"table": "appcodes_kv",
|
]
|
||||||
"valuefield": "k",
|
},
|
||||||
"textfield": "v",
|
{
|
||||||
"cond": "parentid='pipeline_type'"
|
"name": "idx_pipelines_status",
|
||||||
},
|
"idxtype": "index",
|
||||||
{
|
"idxfields": [
|
||||||
"field": "status",
|
"status"
|
||||||
"table": "appcodes_kv",
|
]
|
||||||
"valuefield": "k",
|
}
|
||||||
"textfield": "v",
|
],
|
||||||
"cond": "parentid='pipeline_status'"
|
"codes": [
|
||||||
}
|
{
|
||||||
]
|
"field": "pipeline_type",
|
||||||
|
"table": "appcodes_kv",
|
||||||
|
"valuefield": "k",
|
||||||
|
"textfield": "v",
|
||||||
|
"cond": "parentid='pipeline_type'"
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"field": "status",
|
||||||
|
"table": "appcodes_kv",
|
||||||
|
"valuefield": "k",
|
||||||
|
"textfield": "v",
|
||||||
|
"cond": "parentid='pipeline_status'"
|
||||||
|
}
|
||||||
|
]
|
||||||
}
|
}
|
||||||
@ -249,6 +249,54 @@ async def publish_pipeline(params_kw):
|
|||||||
return json.dumps(result, ensure_ascii=False, default=str)
|
return json.dumps(result, ensure_ascii=False, default=str)
|
||||||
|
|
||||||
|
|
||||||
|
async def create_llm(params_kw):
|
||||||
|
result = {'success': False, 'message': ''}
|
||||||
|
try:
|
||||||
|
db, dbname = _get_sor()
|
||||||
|
async with db.sqlorContext(dbname) as sor:
|
||||||
|
data = params_kw.copy()
|
||||||
|
data.pop('page', None)
|
||||||
|
data.pop('rows', None)
|
||||||
|
data.pop('data_filter', None)
|
||||||
|
data['id'] = getID()
|
||||||
|
await sor.C('llm', data)
|
||||||
|
result['success'] = True
|
||||||
|
result['message'] = '创建成功'
|
||||||
|
except Exception as e:
|
||||||
|
result['message'] = str(e)
|
||||||
|
return json.dumps(result, ensure_ascii=False, default=str)
|
||||||
|
|
||||||
|
|
||||||
|
async def update_llm(params_kw):
|
||||||
|
result = {'success': False, 'message': ''}
|
||||||
|
try:
|
||||||
|
db, dbname = _get_sor()
|
||||||
|
async with db.sqlorContext(dbname) as sor:
|
||||||
|
data = params_kw.copy()
|
||||||
|
data.pop('page', None)
|
||||||
|
data.pop('rows', None)
|
||||||
|
data.pop('data_filter', None)
|
||||||
|
await sor.U('llm', data)
|
||||||
|
result['success'] = True
|
||||||
|
result['message'] = '更新成功'
|
||||||
|
except Exception as e:
|
||||||
|
result['message'] = str(e)
|
||||||
|
return json.dumps(result, ensure_ascii=False, default=str)
|
||||||
|
|
||||||
|
|
||||||
|
async def delete_llm(params_kw):
|
||||||
|
result = {'success': False, 'message': ''}
|
||||||
|
try:
|
||||||
|
db, dbname = _get_sor()
|
||||||
|
async with db.sqlorContext(dbname) as sor:
|
||||||
|
await sor.D('llm', {'id': params_kw.get('id')})
|
||||||
|
result['success'] = True
|
||||||
|
result['message'] = '删除成功'
|
||||||
|
except Exception as e:
|
||||||
|
result['message'] = str(e)
|
||||||
|
return json.dumps(result, ensure_ascii=False, default=str)
|
||||||
|
|
||||||
|
|
||||||
def load_pipeline_core():
|
def load_pipeline_core():
|
||||||
"""注册函数到 ServerEnv"""
|
"""注册函数到 ServerEnv"""
|
||||||
env = ServerEnv()
|
env = ServerEnv()
|
||||||
@ -259,6 +307,10 @@ def load_pipeline_core():
|
|||||||
env.update_pipelines = update_pipeline
|
env.update_pipelines = update_pipeline
|
||||||
env.delete_pipeline = delete_pipeline
|
env.delete_pipeline = delete_pipeline
|
||||||
env.delete_pipelines = delete_pipeline
|
env.delete_pipelines = delete_pipeline
|
||||||
|
# LLM
|
||||||
|
env.create_llm = create_llm
|
||||||
|
env.update_llm = update_llm
|
||||||
|
env.delete_llm = delete_llm
|
||||||
# Pipeline Steps
|
# Pipeline Steps
|
||||||
env.create_pipeline_step = create_pipeline_step
|
env.create_pipeline_step = create_pipeline_step
|
||||||
env.create_pipeline_steps = create_pipeline_step
|
env.create_pipeline_steps = create_pipeline_step
|
||||||
|
|||||||
@ -1,88 +1,69 @@
|
|||||||
#!/usr/bin/env python3
|
#!/usr/bin/env python3
|
||||||
"""
|
"""RBAC path registration for pipeline_core module."""
|
||||||
pipeline_core 模块 RBAC 权限管理脚本
|
import os, sys, subprocess
|
||||||
|
|
||||||
使用方法:
|
|
||||||
cd ~/repos/sage
|
|
||||||
./py3/bin/python ~/test/pipeline-app/pipeline_core/scripts/load_path.py
|
|
||||||
"""
|
|
||||||
|
|
||||||
import subprocess
|
|
||||||
import os
|
|
||||||
import sys
|
|
||||||
|
|
||||||
|
|
||||||
def find_sage_root():
|
|
||||||
candidates = [
|
|
||||||
os.path.expanduser("~/repos/sage"),
|
|
||||||
os.path.expanduser("~/sage"),
|
|
||||||
]
|
|
||||||
for c in candidates:
|
|
||||||
if os.path.isdir(os.path.join(c, "py3")) and os.path.isdir(os.path.join(c, "wwwroot")):
|
|
||||||
return c
|
|
||||||
return None
|
|
||||||
|
|
||||||
|
|
||||||
SAGE_ROOT = find_sage_root()
|
|
||||||
if not SAGE_ROOT:
|
|
||||||
print("ERROR: Cannot find Sage root directory")
|
|
||||||
sys.exit(1)
|
|
||||||
|
|
||||||
PYTHON = os.path.join(SAGE_ROOT, "py3", "bin", "python")
|
|
||||||
SET_PERM_SCRIPT = os.path.join(SAGE_ROOT, "set_role_perm.py")
|
|
||||||
|
|
||||||
MOD = "pipeline_core"
|
MOD = "pipeline_core"
|
||||||
|
|
||||||
# ============================================================
|
PATHS_ANY = [
|
||||||
# 权限路径定义
|
|
||||||
# ============================================================
|
|
||||||
|
|
||||||
# operator — 产线管理人员
|
|
||||||
PATHS_OPERATOR = [
|
|
||||||
f"/{MOD}",
|
|
||||||
f"/{MOD}/index.ui",
|
f"/{MOD}/index.ui",
|
||||||
f"/{MOD}/pipelines/",
|
]
|
||||||
f"/{MOD}/pipeline_steps/",
|
|
||||||
f"/{MOD}/pipeline_versions/",
|
PATHS_LOGINED = [
|
||||||
f"/{MOD}/api/pipelines_create.dspy",
|
f"/{MOD}",
|
||||||
f"/{MOD}/api/pipelines_update.dspy",
|
# Pipelines CRUD
|
||||||
f"/{MOD}/api/pipelines_delete.dspy",
|
f"/{MOD}/pipelines/index.ui",
|
||||||
|
f"/{MOD}/pipelines/get_pipelines.dspy",
|
||||||
|
f"/{MOD}/pipelines/add_pipelines.dspy",
|
||||||
|
f"/{MOD}/pipelines/update_pipelines.dspy",
|
||||||
|
f"/{MOD}/pipelines/delete_pipelines.dspy",
|
||||||
|
# Pipeline Steps CRUD
|
||||||
|
f"/{MOD}/pipeline_steps/index.ui",
|
||||||
|
f"/{MOD}/pipeline_steps/get_pipeline_steps.dspy",
|
||||||
|
f"/{MOD}/pipeline_steps/add_pipeline_steps.dspy",
|
||||||
|
f"/{MOD}/pipeline_steps/update_pipeline_steps.dspy",
|
||||||
|
f"/{MOD}/pipeline_steps/delete_pipeline_steps.dspy",
|
||||||
|
# Pipeline Versions
|
||||||
|
f"/{MOD}/pipeline_versions/index.ui",
|
||||||
|
f"/{MOD}/pipeline_versions/get_pipeline_versions.dspy",
|
||||||
|
f"/{MOD}/pipeline_versions/add_pipeline_versions.dspy",
|
||||||
|
f"/{MOD}/pipeline_versions/update_pipeline_versions.dspy",
|
||||||
|
f"/{MOD}/pipeline_versions/delete_pipeline_versions.dspy",
|
||||||
|
# Pipeline Editor
|
||||||
|
f"/{MOD}/pipeline_editor/index.ui",
|
||||||
|
f"/{MOD}/pipeline_editor/save_steps.dspy",
|
||||||
|
# Data sources
|
||||||
|
f"/{MOD}/pipeline_steps/get_pipelines.dspy",
|
||||||
|
f"/{MOD}/pipeline_steps/get_step_types.dspy",
|
||||||
|
# API
|
||||||
|
f"/{MOD}/api/pipeline_publish.dspy",
|
||||||
f"/{MOD}/api/pipeline_steps_create.dspy",
|
f"/{MOD}/api/pipeline_steps_create.dspy",
|
||||||
f"/{MOD}/api/pipeline_steps_update.dspy",
|
f"/{MOD}/api/pipeline_steps_update.dspy",
|
||||||
f"/{MOD}/api/pipeline_steps_delete.dspy",
|
f"/{MOD}/api/pipeline_steps_delete.dspy",
|
||||||
f"/{MOD}/api/pipeline_versions_create.dspy",
|
f"/{MOD}/api/pipeline_versions_create.dspy",
|
||||||
f"/{MOD}/api/pipeline_versions_update.dspy",
|
f"/{MOD}/api/pipeline_versions_update.dspy",
|
||||||
f"/{MOD}/api/pipeline_versions_delete.dspy",
|
f"/{MOD}/api/pipeline_versions_delete.dspy",
|
||||||
f"/{MOD}/api/pipeline_publish.dspy",
|
f"/{MOD}/api/pipelines_create.dspy",
|
||||||
|
f"/{MOD}/api/pipelines_update.dspy",
|
||||||
|
f"/{MOD}/api/pipelines_delete.dspy",
|
||||||
]
|
]
|
||||||
|
|
||||||
# developer — 开发者（包含所有 operator 路径）
|
|
||||||
PATHS_DEVELOPER = PATHS_OPERATOR[:]
|
|
||||||
|
|
||||||
|
|
||||||
def run_set_perm(role, path):
|
|
||||||
cmd = [PYTHON, SET_PERM_SCRIPT, role, path]
|
|
||||||
result = subprocess.run(cmd, capture_output=True, text=True)
|
|
||||||
return result.returncode == 0
|
|
||||||
|
|
||||||
|
|
||||||
def register_role_paths(role, paths):
|
|
||||||
count = 0
|
|
||||||
for p in paths:
|
|
||||||
if run_set_perm(role, p):
|
|
||||||
count += 1
|
|
||||||
print(f" {role}: {count}/{len(paths)} paths registered")
|
|
||||||
return count
|
|
||||||
|
|
||||||
|
|
||||||
def main():
|
def main():
|
||||||
print(f"Sage root: {SAGE_ROOT}")
|
root = os.path.expanduser("~/pipeline")
|
||||||
print("Registering pipeline_core module RBAC permissions...")
|
if not os.path.isfile(os.path.join(root, "set_role_perm.py")):
|
||||||
total = 0
|
print("ERROR: pipeline root not found")
|
||||||
total += register_role_paths("operator", PATHS_OPERATOR)
|
sys.exit(1)
|
||||||
total += register_role_paths("developer", PATHS_DEVELOPER)
|
set_perm = os.path.join(root, "set_role_perm.py")
|
||||||
print(f"\nDone. Total {total} permission entries registered.")
|
py = sys.executable
|
||||||
print("NOTE: Restart Sage after permission changes to reload RBAC cache.")
|
count = 0
|
||||||
|
for role, paths in [("any", PATHS_ANY), ("logined", PATHS_LOGINED)]:
|
||||||
|
for path in paths:
|
||||||
|
r = subprocess.run([py, set_perm, role, path], capture_output=True, text=True, cwd=root)
|
||||||
|
if r.returncode == 0:
|
||||||
|
count += 1
|
||||||
|
else:
|
||||||
|
print(f" WARN: {path} -> {r.stderr.strip()[-80:]}")
|
||||||
|
print(f"Registered {count}/{len(PATHS_ANY)+len(PATHS_LOGINED)} paths for {MOD}")
|
||||||
|
|
||||||
|
|
||||||
if __name__ == "__main__":
|
if __name__ == "__main__":
|
||||||
|
|||||||
304
wwwroot/index.ui
304
wwwroot/index.ui
@ -1,68 +1,254 @@
|
|||||||
{
|
{
|
||||||
"widgettype": "VBox",
|
"widgettype": "VBox",
|
||||||
"options": {"width": "100%", "height": "100%", "padding": "0"},
|
"options": {
|
||||||
"subwidgets": [
|
"width": "100%",
|
||||||
|
"height": "100%",
|
||||||
|
"padding": "0"
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "HBox",
|
||||||
|
"options": {
|
||||||
|
"width": "100%",
|
||||||
|
"alignItems": "center",
|
||||||
|
"padding": "24px 24px 12px 24px",
|
||||||
|
"cheight": 6
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
{
|
{
|
||||||
"widgettype": "HBox",
|
"widgettype": "Title2",
|
||||||
"options": {"width": "100%", "alignItems": "center", "marginBottom": "20px"},
|
"options": {
|
||||||
"subwidgets": [
|
"text": "产线管理"
|
||||||
{"widgettype": "Title2", "options": {"text": "产线管理"}},
|
}
|
||||||
{"widgettype": "Filler"},
|
|
||||||
{"widgettype": "Text", "options": {"text": "产线定义、步骤配置与发布管理", "cfontsize": 1.2}}
|
|
||||||
]
|
|
||||||
},
|
},
|
||||||
{
|
{
|
||||||
"widgettype": "VBox",
|
"widgettype": "Filler"
|
||||||
"options": {"css": "filler", "spacing": 16},
|
},
|
||||||
"subwidgets": [
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {
|
||||||
|
"text": "产线定义、步骤配置与发布管理",
|
||||||
|
"cfontsize": 1.2
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "HBox",
|
||||||
|
"options": {
|
||||||
|
"width": "100%",
|
||||||
|
"padding": "12px 24px 12px 24px",
|
||||||
|
"cheight": 18
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "ResponsableBox",
|
||||||
|
"options": {
|
||||||
|
"gap": "24px",
|
||||||
|
"minWidth": "260px"
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {
|
||||||
|
"text": "EDITOR CARD HERE"
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {
|
||||||
|
"css": "card",
|
||||||
|
"cwidth": 23,
|
||||||
|
"cheight": 12,
|
||||||
|
"padding": "24px",
|
||||||
|
"cursor": "pointer",
|
||||||
|
"bgcolor": "#fff"
|
||||||
|
},
|
||||||
|
"binds": [
|
||||||
{
|
{
|
||||||
"widgettype": "ResponsableBox",
|
"wid": "self",
|
||||||
"options": {"gap": "24px", "minWidth": "260px"},
|
"event": "click",
|
||||||
"subwidgets": [
|
"actiontype": "urlwidget",
|
||||||
{
|
"target": "app.main_content",
|
||||||
"widgettype": "VBox",
|
"options": {
|
||||||
"options": {"css": "card", "cwidth": 23, "cheight": 12, "padding": "24px", "cursor": "pointer", "bgcolor": "#fff"},
|
"url": "{{entire_url('/pipeline_core/pipelines/')}}"
|
||||||
"binds": [{"wid": "self", "event": "click", "actiontype": "urlwidget", "target": "app.pipeline_core_content", "options": {"url": "{{entire_url('pipelines/')}}"}, "mode": "replace"}],
|
},
|
||||||
"subwidgets": [
|
"mode": "replace"
|
||||||
{"widgettype": "VBox", "options": {"width": "44px", "height": "44px", "bgcolor": "#EFF6FF", "borderRadius": "12px", "alignItems": "center", "justifyContent": "center", "marginBottom": "12px"}, "subwidgets": [
|
}
|
||||||
{"widgettype": "Svg", "options": {"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#3B82F6\" stroke-width=\"2\"><path d=\"M3 7v10a2 2 0 002 2h14a2 2 0 002-2V9a2 2 0 00-2-2h-6l-2-2H5a2 2 0 00-2 2z\"/></svg>", "width": "24px", "height": "24px"}}
|
],
|
||||||
]},
|
"subwidgets": [
|
||||||
{"widgettype": "Title3", "options": {"text": "产线定义", "marginBottom": "4px"}},
|
{
|
||||||
{"widgettype": "Text", "options": {"text": "管理产线基本信息与配置", "cfontsize": 1.2}}
|
"widgettype": "VBox",
|
||||||
]
|
"options": {
|
||||||
},
|
"width": "44px",
|
||||||
{
|
"height": "44px",
|
||||||
"widgettype": "VBox",
|
"bgcolor": "#EFF6FF",
|
||||||
"options": {"css": "card", "cwidth": 23, "cheight": 12, "padding": "24px", "cursor": "pointer", "bgcolor": "#fff"},
|
"borderRadius": "12px",
|
||||||
"binds": [{"wid": "self", "event": "click", "actiontype": "urlwidget", "target": "app.pipeline_core_content", "options": {"url": "{{entire_url('pipeline_steps/')}}"}, "mode": "replace"}],
|
"alignItems": "center",
|
||||||
"subwidgets": [
|
"justifyContent": "center",
|
||||||
{"widgettype": "VBox", "options": {"width": "44px", "height": "44px", "bgcolor": "#F0FDF4", "borderRadius": "12px", "alignItems": "center", "justifyContent": "center", "marginBottom": "12px"}, "subwidgets": [
|
"marginBottom": "12px"
|
||||||
{"widgettype": "Svg", "options": {"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#22C55E\" stroke-width=\"2\"><path d=\"M9 5H7a2 2 0 00-2 2v12a2 2 0 002 2h10a2 2 0 002-2V7a2 2 0 00-2-2h-2M9 5a2 2 0 002 2h2a2 2 0 002-2M9 5a2 2 0 012-2h2a2 2 0 012 2m-6 9l2 2 4-4\"/></svg>", "width": "24px", "height": "24px"}}
|
},
|
||||||
]},
|
"subwidgets": [
|
||||||
{"widgettype": "Title3", "options": {"text": "产线步骤", "marginBottom": "4px"}},
|
{
|
||||||
{"widgettype": "Text", "options": {"text": "配置产线执行步骤与参数", "cfontsize": 1.2}}
|
"widgettype": "Svg",
|
||||||
]
|
"options": {
|
||||||
},
|
"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#3B82F6\" stroke-width=\"2\"><path d=\"M3 7v10a2 2 0 002 2h14a2 2 0 002-2V9a2 2 0 00-2-2h-6l-2-2H5a2 2 0 00-2 2z\"/></svg>",
|
||||||
{
|
"width": "24px",
|
||||||
"widgettype": "VBox",
|
"height": "24px"
|
||||||
"options": {"css": "card", "cwidth": 23, "cheight": 12, "padding": "24px", "cursor": "pointer", "bgcolor": "#fff"},
|
}
|
||||||
"binds": [{"wid": "self", "event": "click", "actiontype": "urlwidget", "target": "app.pipeline_core_content", "options": {"url": "{{entire_url('pipeline_versions/')}}"}, "mode": "replace"}],
|
}
|
||||||
"subwidgets": [
|
]
|
||||||
{"widgettype": "VBox", "options": {"width": "44px", "height": "44px", "bgcolor": "#FFFBEB", "borderRadius": "12px", "alignItems": "center", "justifyContent": "center", "marginBottom": "12px"}, "subwidgets": [
|
|
||||||
{"widgettype": "Svg", "options": {"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#F59E0B\" stroke-width=\"2\"><path d=\"M12 8v4l3 3m6-3a9 9 0 11-18 0 9 9 0 0118 0z\"/></svg>", "width": "24px", "height": "24px"}}
|
|
||||||
]},
|
|
||||||
{"widgettype": "Title3", "options": {"text": "发布记录", "marginBottom": "4px"}},
|
|
||||||
{"widgettype": "Text", "options": {"text": "查看产线版本发布历史", "cfontsize": 1.2}}
|
|
||||||
]
|
|
||||||
}
|
|
||||||
]
|
|
||||||
},
|
},
|
||||||
{
|
{
|
||||||
"widgettype": "VScrollPanel",
|
"widgettype": "Title3",
|
||||||
"id": "pipeline_core_content",
|
"options": {
|
||||||
"options": {"css": "filler", "width": "100%", "height": "100%"}
|
"text": "产线定义",
|
||||||
|
"marginBottom": "4px"
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {
|
||||||
|
"text": "管理产线基本信息与配置",
|
||||||
|
"cfontsize": 1.2
|
||||||
|
}
|
||||||
}
|
}
|
||||||
]
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {
|
||||||
|
"css": "card",
|
||||||
|
"cwidth": 23,
|
||||||
|
"cheight": 12,
|
||||||
|
"padding": "24px",
|
||||||
|
"cursor": "pointer",
|
||||||
|
"bgcolor": "#fff"
|
||||||
|
},
|
||||||
|
"binds": [
|
||||||
|
{
|
||||||
|
"wid": "self",
|
||||||
|
"event": "click",
|
||||||
|
"actiontype": "urlwidget",
|
||||||
|
"target": "app.main_content",
|
||||||
|
"options": {
|
||||||
|
"url": "{{entire_url('/pipeline_core/pipeline_steps/')}}"
|
||||||
|
},
|
||||||
|
"mode": "replace"
|
||||||
|
}
|
||||||
|
],
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {
|
||||||
|
"width": "44px",
|
||||||
|
"height": "44px",
|
||||||
|
"bgcolor": "#F0FDF4",
|
||||||
|
"borderRadius": "12px",
|
||||||
|
"alignItems": "center",
|
||||||
|
"justifyContent": "center",
|
||||||
|
"marginBottom": "12px"
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "Svg",
|
||||||
|
"options": {
|
||||||
|
"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#22C55E\" stroke-width=\"2\"><path d=\"M9 5H7a2 2 0 00-2 2v12a2 2 0 002 2h10a2 2 0 002-2V7a2 2 0 00-2-2h-2M9 5a2 2 0 002 2h2a2 2 0 002-2M9 5a2 2 0 012-2h2a2 2 0 012 2m-6 9l2 2 4-4\"/></svg>",
|
||||||
|
"width": "24px",
|
||||||
|
"height": "24px"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Title3",
|
||||||
|
"options": {
|
||||||
|
"text": "产线步骤",
|
||||||
|
"marginBottom": "4px"
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {
|
||||||
|
"text": "配置产线执行步骤与参数",
|
||||||
|
"cfontsize": 1.2
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {
|
||||||
|
"css": "card",
|
||||||
|
"cwidth": 23,
|
||||||
|
"cheight": 12,
|
||||||
|
"padding": "24px",
|
||||||
|
"cursor": "pointer",
|
||||||
|
"bgcolor": "#fff"
|
||||||
|
},
|
||||||
|
"binds": [
|
||||||
|
{
|
||||||
|
"wid": "self",
|
||||||
|
"event": "click",
|
||||||
|
"actiontype": "urlwidget",
|
||||||
|
"target": "app.main_content",
|
||||||
|
"options": {
|
||||||
|
"url": "{{entire_url('/pipeline_core/pipeline_versions/')}}"
|
||||||
|
},
|
||||||
|
"mode": "replace"
|
||||||
|
}
|
||||||
|
],
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {
|
||||||
|
"width": "44px",
|
||||||
|
"height": "44px",
|
||||||
|
"bgcolor": "#FFFBEB",
|
||||||
|
"borderRadius": "12px",
|
||||||
|
"alignItems": "center",
|
||||||
|
"justifyContent": "center",
|
||||||
|
"marginBottom": "12px"
|
||||||
|
},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "Svg",
|
||||||
|
"options": {
|
||||||
|
"svg": "<svg width=\"24\" height=\"24\" viewBox=\"0 0 24 24\" fill=\"none\" stroke=\"#F59E0B\" stroke-width=\"2\"><path d=\"M12 8v4l3 3m6-3a9 9 0 11-18 0 9 9 0 0118 0z\"/></svg>",
|
||||||
|
"width": "24px",
|
||||||
|
"height": "24px"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Title3",
|
||||||
|
"options": {
|
||||||
|
"text": "发布记录",
|
||||||
|
"marginBottom": "4px"
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {
|
||||||
|
"text": "查看产线版本发布历史",
|
||||||
|
"cfontsize": 1.2
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
|
]
|
||||||
}
|
}
|
||||||
]
|
]
|
||||||
}
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "VScrollPanel",
|
||||||
|
"id": "pipeline_core_content",
|
||||||
|
"options": {
|
||||||
|
"css": "filler",
|
||||||
|
"width": "100%",
|
||||||
|
"height": "100%"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
85
wwwroot/pipeline_editor/index.ui
Normal file
85
wwwroot/pipeline_editor/index.ui
Normal file
@ -0,0 +1,85 @@
|
|||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"options": {"width": "100%", "height": "100%", "padding": "24px", "gap": "20px"},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "HBox",
|
||||||
|
"options": {"alignItems": "center", "gap": "16px", "padding": "0 0 16px 0", "borderBottom": "1px solid #334155"},
|
||||||
|
"subwidgets": [
|
||||||
|
{"widgettype": "Title2", "options": {"text": "产线编排画布"}},
|
||||||
|
{"widgettype": "Filler"},
|
||||||
|
{
|
||||||
|
"widgettype": "Button",
|
||||||
|
"options": {"label": "发布版本", "bgcolor": "#6366f1", "color": "#fff"},
|
||||||
|
"binds": [{"wid": "self", "event": "click", "actiontype": "method", "target": "app.pipeline_editor", "method": "publish"}]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "HBox",
|
||||||
|
"options": {"gap": "12px", "alignItems": "center"},
|
||||||
|
"subwidgets": [
|
||||||
|
{"widgettype": "Text", "options": {"text": "选择产线：", "cfontsize": 1, "color": "#e2e8f0"}},
|
||||||
|
{
|
||||||
|
"widgettype": "DataSelector",
|
||||||
|
"id": "ds_pipelines",
|
||||||
|
"options": {
|
||||||
|
"data_url": "{{entire_url('/pipeline_core/pipeline_steps/get_pipelines.dspy')}}",
|
||||||
|
"valueField": "id",
|
||||||
|
"textField": "name",
|
||||||
|
"width": "300px",
|
||||||
|
"placeholder": "选择要编辑的产线..."
|
||||||
|
},
|
||||||
|
"binds": [{"wid": "self", "event": "change", "actiontype": "method", "target": "app.pipeline_editor", "method": "load_steps"}]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "DataSelector",
|
||||||
|
"id": "ds_step_types",
|
||||||
|
"options": {
|
||||||
|
"data_url": "{{entire_url('/pipeline_core/pipeline_steps/get_step_types.dspy')}}",
|
||||||
|
"valueField": "step_type",
|
||||||
|
"textField": "display_name",
|
||||||
|
"width": "240px",
|
||||||
|
"placeholder": "添加步骤类型..."
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "Button",
|
||||||
|
"options": {"label": "+ 添加步骤", "bgcolor": "#4ade80", "color": "#000"},
|
||||||
|
"binds": [{"wid": "self", "event": "click", "actiontype": "method", "target": "app.pipeline_editor", "method": "add_step"}]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "DataViewer",
|
||||||
|
"id": "dv_steps",
|
||||||
|
"options": {
|
||||||
|
"data_url": "",
|
||||||
|
"width": "100%",
|
||||||
|
"columns": ["id", "step_order", "step_name", "step_type"]
|
||||||
|
}
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "VBox",
|
||||||
|
"id": "steps_canvas",
|
||||||
|
"options": {"width": "100%", "gap": "8px", "padding": "0", "minHeight": "300px"},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "Text",
|
||||||
|
"options": {"text": "选择产线后，步骤将在此显示。可以拖拽排序、点击编辑。", "cfontsize": 1, "color": "#64748b", "padding": "40px", "alignItems": "center"}
|
||||||
|
}
|
||||||
|
]
|
||||||
|
},
|
||||||
|
{
|
||||||
|
"widgettype": "HBox",
|
||||||
|
"options": {"gap": "12px", "justifyContent": "flex-end", "padding": "16px 0 0 0", "borderTop": "1px solid #334155"},
|
||||||
|
"subwidgets": [
|
||||||
|
{
|
||||||
|
"widgettype": "Button",
|
||||||
|
"options": {"label": "保存排序", "bgcolor": "#3b82f6", "color": "#fff"},
|
||||||
|
"binds": [{"wid": "self", "event": "click", "actiontype": "method", "target": "app.pipeline_editor", "method": "save_order"}]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
|
]
|
||||||
|
}
|
||||||
47
wwwroot/pipeline_editor/save_steps.dspy
Normal file
47
wwwroot/pipeline_editor/save_steps.dspy
Normal file
@ -0,0 +1,47 @@
|
|||||||
|
"""
|
||||||
|
Pipeline Editor: Save step order after reordering
|
||||||
|
POST params: pipeline_id, steps (JSON array of {id, step_order})
|
||||||
|
"""
|
||||||
|
from sqlor.dbpools import DBPools
|
||||||
|
|
||||||
|
async def main():
|
||||||
|
userid = await get_user()
|
||||||
|
if not userid:
|
||||||
|
return {'error': 'unauthorized'}
|
||||||
|
|
||||||
|
pipeline_id = params_kw.pipeline_id
|
||||||
|
steps = params_kw.steps # JSON array
|
||||||
|
|
||||||
|
if not pipeline_id or not steps:
|
||||||
|
return {'error': 'missing pipeline_id or steps'}
|
||||||
|
|
||||||
|
if isinstance(steps, str):
|
||||||
|
import json
|
||||||
|
steps = json.loads(steps)
|
||||||
|
|
||||||
|
dbname = get_module_dbname('pipeline_core')
|
||||||
|
async with DBPools().sqlorContext(dbname) as sor:
|
||||||
|
for i, step in enumerate(steps):
|
||||||
|
await sor.U('pipeline_steps', {
|
||||||
|
'id': step['id'],
|
||||||
|
'step_order': i + 1,
|
||||||
|
'step_name': step.get('step_name', ''),
|
||||||
|
'step_type': step.get('step_type', ''),
|
||||||
|
'step_config': step.get('step_config', '{}'),
|
||||||
|
'timeout_seconds': step.get('timeout_seconds', 300),
|
||||||
|
'retry_count': step.get('retry_count', 0)
|
||||||
|
})
|
||||||
|
|
||||||
|
# Create version record
|
||||||
|
from appPublic.uniqueID import getID
|
||||||
|
vid = getID()
|
||||||
|
await sor.C('pipeline_versions', {
|
||||||
|
'id': vid,
|
||||||
|
'pipeline_id': pipeline_id,
|
||||||
|
'version': f"v{len(steps)}.0",
|
||||||
|
'publish_status': 'draft',
|
||||||
|
'changelog': 'Editor save',
|
||||||
|
'config_snapshot': json.dumps(steps, ensure_ascii=False) if 'json' in dir() else str(steps)
|
||||||
|
})
|
||||||
|
|
||||||
|
return {'success': True, 'version_id': vid, 'step_count': len(steps)}
|
||||||
@ -1,130 +1,14 @@
|
|||||||
|
|
||||||
ns = params_kw.copy()
|
from sqlor.dbpools import DBPools
|
||||||
|
|
||||||
|
async def main():
|
||||||
debug(f'get_pipeline_steps.dspy:{ns=}')
|
pipeline_id = params_kw.pipeline_id or params_kw.id
|
||||||
if not ns.get('page'):
|
dbname = get_module_dbname('pipeline_core')
|
||||||
ns['page'] = 1
|
async with DBPools().sqlorContext(dbname) as sor:
|
||||||
if not ns.get('sort'):
|
if pipeline_id:
|
||||||
|
recs = await sor.R('pipeline_steps', {'pipeline_id': pipeline_id})
|
||||||
|
else:
|
||||||
ns['sort'] = 'step_order'
|
recs = await sor.R('pipeline_steps', {})
|
||||||
|
# Sort by step_order
|
||||||
|
recs = sorted(recs, key=lambda r: r.step_order if hasattr(r,'step_order') else 0)
|
||||||
|
return recs
|
||||||
sql = '''select a.*, b.pipeline_id_text
|
|
||||||
from (select * from pipeline_steps where 1=1 [[filterstr]]) a left join (select id as pipeline_id,
|
|
||||||
name as pipeline_id_text from pipelines where 1 = 1) b on a.pipeline_id = b.pipeline_id'''
|
|
||||||
|
|
||||||
filterjson = params_kw.get('data_filter')
|
|
||||||
if filterjson and isinstance(filterjson, str):
|
|
||||||
try:
|
|
||||||
filterjson = json.loads(filterjson)
|
|
||||||
except (json.JSONDecodeError, TypeError):
|
|
||||||
filterjson = None
|
|
||||||
fields_str=r'''[
|
|
||||||
{
|
|
||||||
"name": "id",
|
|
||||||
"title": "id",
|
|
||||||
"type": "str",
|
|
||||||
"length": 32,
|
|
||||||
"nullable": "no"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "pipeline_id",
|
|
||||||
"title": "所属产线",
|
|
||||||
"type": "str",
|
|
||||||
"length": 32,
|
|
||||||
"nullable": "no"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "step_order",
|
|
||||||
"title": "步骤序号",
|
|
||||||
"type": "int",
|
|
||||||
"nullable": "no"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "step_name",
|
|
||||||
"title": "步骤名称",
|
|
||||||
"type": "str",
|
|
||||||
"length": 100,
|
|
||||||
"nullable": "no"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "step_type",
|
|
||||||
"title": "步骤类型",
|
|
||||||
"type": "str",
|
|
||||||
"length": 50,
|
|
||||||
"nullable": "no"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "model_name",
|
|
||||||
"title": "调用模型名称",
|
|
||||||
"type": "str",
|
|
||||||
"length": 100
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "step_config",
|
|
||||||
"title": "步骤配置JSON",
|
|
||||||
"type": "text"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "input_schema",
|
|
||||||
"title": "输入定义JSON",
|
|
||||||
"type": "text"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "output_schema",
|
|
||||||
"title": "输出定义JSON",
|
|
||||||
"type": "text"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "timeout_seconds",
|
|
||||||
"title": "超时秒数",
|
|
||||||
"type": "int",
|
|
||||||
"default": "300"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "retry_count",
|
|
||||||
"title": "重试次数",
|
|
||||||
"type": "int",
|
|
||||||
"default": "0"
|
|
||||||
},
|
|
||||||
{
|
|
||||||
"name": "created_at",
|
|
||||||
"title": "创建时间",
|
|
||||||
"type": "timestamp"
|
|
||||||
}
|
|
||||||
]'''
|
|
||||||
ori_fields = json.loads(fields_str)
|
|
||||||
if not filterjson:
|
|
||||||
fields = [ f['name'] for f in ori_fields ]
|
|
||||||
filterjson = default_filterjson(fields, ns)
|
|
||||||
|
|
||||||
filterdic = ns.copy()
|
|
||||||
filterdic['filterstr'] = ''
|
|
||||||
filterdic['userorgid'] = '${userorgid}$'
|
|
||||||
filterdic['userid'] = '${userid}$'
|
|
||||||
if filterjson:
|
|
||||||
dbf = DBFilter(filterjson)
|
|
||||||
conds = dbf.gen(ns)
|
|
||||||
if conds:
|
|
||||||
ns.update(dbf.consts)
|
|
||||||
conds = f' and {conds}'
|
|
||||||
filterdic['filterstr'] = conds
|
|
||||||
ac = ArgsConvert('[[', ']]')
|
|
||||||
vars = ac.findAllVariables(sql)
|
|
||||||
NameSpace = {v:'${' + v + '}$' for v in vars if v != 'filterstr' }
|
|
||||||
filterdic.update(NameSpace)
|
|
||||||
sql = ac.convert(sql, filterdic)
|
|
||||||
|
|
||||||
debug(f'{sql=}')
|
|
||||||
db = DBPools()
|
|
||||||
dbname = get_module_dbname('pipeline_core')
|
|
||||||
async with db.sqlorContext(dbname) as sor:
|
|
||||||
r = await sor.sqlPaging(sql, ns)
|
|
||||||
return r
|
|
||||||
return {
|
|
||||||
"total":0,
|
|
||||||
"rows":[]
|
|
||||||
}
|
|
||||||
|
|||||||
13
wwwroot/pipeline_steps/get_pipelines.dspy
Normal file
13
wwwroot/pipeline_steps/get_pipelines.dspy
Normal file
@ -0,0 +1,13 @@
|
|||||||
|
|
||||||
|
from sqlor.dbpools import DBPools
|
||||||
|
|
||||||
|
async def main():
|
||||||
|
dbname = get_module_dbname('pipeline_core')
|
||||||
|
async with DBPools().sqlorContext(dbname) as sor:
|
||||||
|
recs = await sor.R('pipelines', {'status': 'published'})
|
||||||
|
if not recs:
|
||||||
|
recs = await sor.R('pipelines', {})
|
||||||
|
result = []
|
||||||
|
for r in recs:
|
||||||
|
result.append({'id': r.id, 'name': r.name, 'text': r.name, 'value': r.id})
|
||||||
|
return result
|
||||||
18
wwwroot/pipeline_steps/get_step_types.dspy
Normal file
18
wwwroot/pipeline_steps/get_step_types.dspy
Normal file
@ -0,0 +1,18 @@
|
|||||||
|
|
||||||
|
from sqlor.dbpools import DBPools
|
||||||
|
|
||||||
|
async def main():
|
||||||
|
dbname = get_module_dbname('pipeline_core')
|
||||||
|
async with DBPools().sqlorContext(dbname) as sor:
|
||||||
|
recs = await sor.R('pipeline_step_types', {})
|
||||||
|
result = []
|
||||||
|
for r in recs:
|
||||||
|
result.append({
|
||||||
|
'step_type': r.step_type,
|
||||||
|
'display_name': r.display_name,
|
||||||
|
'text': f"{r.display_name} ({r.step_type})",
|
||||||
|
'value': r.step_type,
|
||||||
|
'category': r.category,
|
||||||
|
'is_interactive': r.is_interactive
|
||||||
|
})
|
||||||
|
return result
|
||||||
Loading…
x
Reference in New Issue
Block a user