JOJO/agent-Specialization
1
0
Fork 0
Code Issues Pull Requests 1 Actions Packages Projects Releases Wiki Activity
98 Commits 6 Branches 0 Tags 503 MiB
66fa90d6cc
Commit Graph

11 Commits

Author SHA1 Message Date
JOJO
e5808ea5be refactor(server,web): remove Socket.IO entirely, unify on REST polling 
- task event stream (_append_event) is now the sole realtime channel for web and CLI
- status snapshots: idle 5s polling of /api/status (was status_update push); operation initiator gets state from REST responses
- terminal panel: REST polling (list 5s, output 1.5s, prefix-matched incremental xterm writes)
- multi-tab passive sync deliberately degrades to polling-based perception
- delete socket_handlers/broadcast/useLegacySocket (2103-line dead file); extensions.py keeps only run_background
- remove socket token chain (/api/socket-token, prune/consume_socket_token, pending_socket_tokens)
- app.run(threaded=True) replaces socketio.run; reapers switched to plain threading
- drop flask-socketio/socket.io-client/websockets dependencies
- docs: AGENTS.md section 12.5 (replacement map + hard constraints), plus CLI rewrite companion doc updates

Co-authored-by: Astrion powered by Kimi-K3 <astrion-agent@users.noreply.github.com>
 2026-09-11 17:28:47 +08:00
JOJO
aa9bf377a3 feat(runtime): Gateway 收尾——session 传输暴露、host Bearer 通道、flask 依赖拆解、审批链路收口 
- session.* 传输暴露：新增 gateway_api 蓝图（list/create/history），RuntimeService 补 create_session
- host Bearer 通道：gateway_auth 双通道认证（host 模式+回环限定，token 存 DATA_DIR/host_api_token），tasks/approval 路由接入
- api_v1 会话路由转调公共入口消双轨，会话索引/列表补齐 run_mode/model_key/custom_prompt_name/personalization_name
- flask 包依赖拆解：_flask_bridge 延迟桥接 + context 子包 PEP 562 懒加载，import server.tasks/runtime 不再拉起 flask
- 审批链路：mark_expired 终态回写（超时/软停止/取消三路径）+ 终态 TTL 惰性清理（3600s）
- 测试 patch 点随迁；全量 75 测试失败恰为 4 项存量，独立启动验收 4/4 全绿

Co-authored-by: Astrion powered by Kimi-K3 <astrion-agent@users.noreply.github.com>
 2026-09-08 11:37:51 +08:00
JOJO
f43b03484d refactor(runtime): 拆除 session_data 兼容桥，任务上下文三层结构化直传 
- TaskRecord 去 session_data dict，直存 principal/task_params/directives
  + 可变 goal_progress 字段（__slots__）
- create_chat_task 签名改为收 RuntimeContext 必填，TaskRecord.__init__
  同步精简（身份/消息/模式等全部从 ctx 派生）
- _run_chat_task 身份还原/门闸认领/事件注入/terminal 属性设置
  全部改为三层属性访问；goal_progress 回写改独立可变字段
- RuntimeService.create_task 原样透传 ctx；to_session_data() 删除
- task_public_payload / api.py 单任务载荷改三层读取
- 契约/注释/i18n 文案同步去 session_data 化；测试重写为三层断言

验证：75 测试全量回归，失败恰为 4 项存量（host_workspace_manager /
skills_manager / token_usage_extractor / conversation_workspace_storage）
 2026-09-08 02:08:33 +08:00
JOJO
f77f1d67a8 refactor(runtime): 审核 F1-F4 收口——发现入口、范围校验、入口统一转调、验收加固 
- F1: RuntimeService.list_runs 公共 Run 发现（工作区/会话/状态筛选）；
  task_public_payload 序列化收敛至 models.py 核心层单一实现（Web/公共入口同构，
  helpers.py 旧实现删除，无新旧双轨）
- F2: tasks/api.py 7 处、api_v1.py 3 处、chat/approval.py 6 处全部转调
  runtime_service；HTTP 轮询透传 window_start 缺口水位；死导入清零
- F3: _resources_for_query 补 principal workspace_id 一致性校验
  （跨工作区查询必须重新认证）
- F4: config 新增 ASTRION_IGNORE_DOTENV 逃生门（.env 对 ASTRION_DATA_ROOT 的
  优先覆盖是刻意设计，保留）；验收测试自包含（假模型 127.0.0.1:9 快失败）+
  隔离生效断言；lifecycle 改 api_request_start 装配证据断言；
  新增审批等待链验收（approval 档真实工具循环：等待→公共入口批准→继续）；
  chain 首段改双客户端场景（B 经 list_runs 发现 A 的 Run 并观察/取消）
- execution_plane/base.py 注释修正：命令校验/路径授权仍在旧链路（审核 §4）
- 全量 75 测试：失败恰为 4 项存量，与改造无关
 2026-09-08 01:29:43 +08:00
JOJO
d9bd599c1c feat(runtime): Gateway 独立启动与公共协议落地（改造第 0-3 步） 
- 闭环修复：审批 task_id 显式化（N2）、通知回退路径门闸 finally 释放（N1）、
  personalization 原子写（S10，公共 atomic_write_json）
- server.tasks 拆解：__init__ 轻量化、Blueprint/路由移至 blueprint.py/web.py，
  app_legacy 装配点惰性挂载；models.py 循环依赖死导入移除
- 执行链 Web 解耦：emit_event/run_background 安全包装（socketio 未绑定静默），
  清除 4 处裸 socketio.emit（含 task_stopped 先写事件流再推送的顺序修复）
- RuntimeService 补建对话下沉：chat 任务无 conversation_id 时服务层装配，
  客户端无需复制 Web 两步流程
- 事件协议：get_task_events 返回 meta.window_start 缺口检测水位
- 验收：test_runtime_standalone_lifecycle 子进程隔离（config import 固化问题），
  独立启动 + 协议全链路 + 审批语义全绿；全量 74 测试失败恰为 4 项存量
 2026-09-07 23:00:15 +08:00
JOJO
652c160640 feat(runtime): 抽出 RuntimeService 公共任务入口，任务线程拆除 Flask 隐式上下文 
Gateway 化阶段一/二实施（公共任务入口），计划与验收记录见 cache_research/gateway/phase12_implementation_plan.md；契约文档 docs/runtime_contract.md 为本地文档按仓库惯例不入库

- 新增 server/runtime/：RuntimeContext 三层模型（TrustedPrincipal/TaskParams/InternalDirectives）+ RuntimeService（create_task/cancel/guidance/queue/get_task_events）
- create_chat_task 强制显式 session_data（缺失 ValueError，i18n key tasks.missing_session_data）；6 处调用点迁移至 runtime_service.create_task()（tasks/api、api_v1、workflow_runtime_api x2、chat_flow_task_main x2），门闸 token 移交与 notice 互斥豁免语义保留
- _run_chat_task 拆除 test_request_context 桥，任务线程全程 RuntimeIdentity 驱动
- 审批超时经 terminal._approval_timeout_seconds 透传至工具循环 4 个 _wait_* 调用点（默认 3600s 语义不变）
- 附带：config/_load_dotenv 容忍沙箱禁读 .env；AGENTS.md 同步结构

测试：改造相关 24/24 全绿（冒烟 6 + runtime_service 10 + model_persistence 4 + identity 路由 4）；真实环境验证已由用户人工完成

Co-authored-by: Astrion powered by Kimi-K3 <astrion-agent@users.noreply.github.com>
Co-authored-by: Codex powered by ChatGPT-6-Astra <codex@example.com>
 2026-09-07 16:16:12 +08:00
JOJO
0522414a6c fix(security): 第二轮全量 API 审计修复（角色穿越/宿主 GUI/限流收口） 
背景：对全部 206 个 HTTP 路由 + SocketIO 事件逐个排查（主审 + 2 个子
智能体初筛后复核），另按用户要求专项审计前端渲染面（无新发现）。
完整报告见 _experiments/security_audit_2026-09-02/REPORT.md 第八章。

新漏洞修复：
- 多智能体角色 role_id 路径穿越（高）：save_custom_role 直接拼接
  "{role_id}.md"，POST body 的 role_id 无任何校验，可 ../ 穿越覆盖
  其他用户角色文件（跨用户提示词注入），本地已复现写入成功。
  修复：新增 validate_role_id 白名单（^[a-z0-9][a-z0-9_-]{0,63}$），
  role_store 存储层 + multi_agent API 层（POST/PUT/DELETE）双保险
- open-in-file-manager 漏 _is_host_mode_request 检查（同文件其余三个
  端点都有）：docker 模式下任意登录用户可触发宿主 GUI 弹窗+探测路径。
  修复：补 host 检查，docker 下 403
- /api/admin/secondary/verify 无限流且 CSRF 豁免：admin 会话前提下
  可在线爆破二级密码（纵深防御缺失）。修复：5 次/300s 用户维度限流
- WS client_chunk_log / client_stream_debug_log 无连接认证检查且
  无限流（日志写盘放大面）。修复：必须已认证连接 + 30 次/60s 滑窗
  + 桶表万级上限回收
- _get_conversation_file_path 直接拼 "{id}.json"（conv_ 前缀恰好阻碍
  直接穿越，属防御深度缺失）。修复：^conv_[A-Za-z0-9_-]+$ 白名单，
  已核验全部 5 个调用点与 temp_ 前缀排除路径不受影响
- /api/conversations/media/<id> 采信 entry mime_type 并 inline 返回。
  修复：text/html、image/svg+xml、xhtml 强制 octet-stream + attachment
  （与 file/content 的 SVG 策略对齐，防存储型 XSS 一致性收口）
- /api/status 每次心跳返回宿主绝对 project_path（泄露系统用户名与
  目录布局）。修复：docker 模式脱敏为容器视角 /workspace，host 不变

LLM 成本攻击止血（第一轮发现 5 的端点级落地）：
- POST /api/tasks（GUI 发消息主入口）：30 次/60s/user
- POST /api/conversations/<id>/compress（调 api_client.chat 做摘要）：
  5 次/300s/user
- 注：对话回顾 review 端点实为纯本地 Markdown 生成（不调 LLM），
  其「发送给模型」模式走 /api/tasks，已被上述限流覆盖；
  按 token 计费的完整配额方案仍遗留待产品决策

验证：全部 py_compile 通过；冒烟测试 6/6；validate_role_id 8 个恶意
样本全拒 + 3 个合法样本放行 + 穿越写入拦截回归通过；conv_id 白名单
4 组样本符合预期。端点级行为待服务重启后实测。

Co-authored-by: Astrion powered by Kimi-K3 <astrion-agent@users.noreply.github.com>
 2026-09-02 19:37:34 +08:00
JOJO
1a4e5baa23 fix(security): Docker 多用户模式全面安全加固（安全审计修复） 
威胁模型：拥有普通账号的已登录用户攻击服务器。完整审计报告见
_experiments/security_audit_2026-09-02/（不入库），含实测复现记录。

严重/高危修复：
- 彻底移除文件夹打包下载（/api/download/folder 端点删除，gui/api_v1
  目录下载分支改 410）：文件型符号链接会被宿主进程解析，实测可读宿主
  任意文件（含 settings.json 全部 LLM 密钥），删除比补校验更彻底
- XFF 伪造防护：get_client_ip 仅信任 ASTRION_TRUSTED_PROXIES
  （默认空=不信 XFF）；登录新增账号维度锁定（5 次失败锁 300s）；
  注册邀请码加爆破锁定；限流桶/失败表加 2 万键上限+GC 回收
- auth_debug.log 接入大小轮转；/api/client_debug_log 加限流+长度截断
- /host-login 增加 LINUX_SAFETY 检查且仅回环地址可用

容器加固：
- 默认 cpus=1 / memory=1g，新增 pids-limit=512、memory-swap、
  no-new-privileges
- 新增每用户容器配额 MAX_ACTIVE_CONTAINERS_PER_USER（默认 3），
  防止单用户占满全局容器池

api_v1：
- prompts/personalizations 的 name 加白名单校验（^[A-Za-z0-9_-]{1,64}$），
  修复路径穿越写入；对话元数据中的引用名同步加白名单
- workspaces/conversations/messages/upload 四端点加用户维度限流
- 消息体加 MAX_MESSAGE_CHARS 上限（默认 200000，/api/tasks 同步）
- _path_within 加分隔符边界（修复 startswith 前缀碰撞）

其他：
- SVG 预览强制 application/octet-stream（修存储型 XSS 漏网）
- monitor_snapshot 缓存键加 username 维度（修跨用户快照读取）
- ensure/delete_workspace 加 workspace_id 白名单+父目录二次核验
- delete_folder 拒绝删除工作区根（crud_mixin 与容器代理同步修）
- GuiFileManager 死代码加名称校验防复活
- admin_dashboard 静态壳非 admin 访问一律 404
- /api/app/apk/latest 加登录校验+限流（原未认证可拉 133MB）

有意未修（见报告 7.3 遗留清单）：容器 egress 过滤（部署层）、
--cap-drop ALL（怕破坏容器内工作流，已先上 no-new-privileges）、
API 用户/子智能体 LLM 按 token 计费（待产品决策）、str(exc) 收口、
WebSocket 限流、network_permission=restricted 容器语义。

验证：全部文件 py_compile 通过；冒烟测试 6/6 通过；关键新逻辑
（名称校验/路径边界/容器代理删除防护/限流回收）已单测级验证；
端点级行为待服务重启后实测复核（清单见报告 7.5）。

Co-authored-by: Astrion powered by Kimi-K3 <astrion-agent@users.noreply.github.com>
 2026-09-02 18:31:00 +08:00
JOJO
a2cf547400 feat(i18n): 后端用户可见消息国际化（zh/en 双语 + ui_locale 偏好持久化） 
- 新增 modules/i18n.py：tr() + 进程级语言缓存 + modules/i18n_messages/ 域文案包自动聚合
- 新增 29 个域文案包，共 1153 条双语 key；90+ 源文件 1146 处用户可见消息 tr 化
- ui_locale 存入 personalization.json（用户级共享），前后端双向同步
- 前端匹配点双语兼容（history/shared/ChatArea/taskPolling/upload 等正则）
- 修复语言判等陷阱：审批等待加稳定 code 字段；conversation.py 不存在判等改双语 helper
- 边界：日志/prompt 注入/子智能体工具回填/容器内嵌脚本不迁移
 2026-08-29 07:58:29 +08:00
JOJO
f9f9032ce5 fix(tasks): 用户取消的主任务统一以 stopped 收尾，根治死任务事件重放导致的显示回退 
- 收尾不再按 has_bg 分流保持 cancel_requested 等待已废弃的「第二下点击」，
  cancel_requested 退化为 cancel_task 到收尾之间的秒级瞬态
- 此前有后台任务时按下停止，任务永久卡在活跃集合，被 bootstrap/running-status
  当作最新活跃主任务，前端对账每 2.5s 从事件 0 全量重放死任务事件流，
  表现为回复完成瞬间显示回退到旧回复、刷新空白卡死且无效
- cleanup_old_tasks 清理集修正："canceled" 是从未被赋值的拼写（实际终态为
  stopped），改为 {succeeded,failed,stopped,canceled,cancel_requested} 兜底
 2026-08-28 20:12:20 +08:00
JOJO
10654c407d release: sync from main @0f9fd1b2 (2026-08-22) 2026-08-22 12:27:19 +08:00