Files
dxdesigner-part-replacement/docs/testing/2026-10-15-multi-project-regression.md

8.8 KiB
Raw Permalink Blame History

2026-10-15 多工程执行与速率回归

本次在 DxDesigner 7.9.5 上使用 3 个不同真实工程的独立副本,实际执行了原生 Replace Part、保存关闭和重开回读;另以模拟 CAD 执行器检验多工程、多图页、多规则队列及压力场景。两类速率分开报告。

代码提交:0225787。真实 CAD 数据在短路径修复和计时接入后测得;此后继续优化了 Python 队列开销,并用自动回归验证。没有再次替换这 3 个已验证副本,不能把软件压力测试的改善比例当作 CAD 实际速度改善比例。

真实工程来自 Skyworth_CBB_Lib/CBB,测试副本仅将失效的 S:\mentor_lib.lmc 改为本机现有中央库的绝对路径。未用历史 CAF 或人工构造 UID 充当真实替换证据。下述为本机一次实测,部分测量与自动回归同时进行,不是重复采样的硬件基准。

真实多工程队列

顺序 工程 实际修改位号 旧料号 新料号 回读结果
1 1GPHY_8211 RL02 4100-CA3300-T7 4100-CA3300-2200 saved_ok / batch_closed
2 Audio_D2128 RV05 4100-CA0000-T7 4100-CA0000-T0 saved_ok / batch_closed
3 Audio_T605A RV05 4100-CA0000-T7 4100-CA0000-T0 saved_ok / batch_closed

3 个任务顺序结束,无暂停、失败或未确认状态。队列耗时 187.174 秒,即 0.962 个工程/分钟;包含前置库存采集与准备的运行总耗时 221.145 秒。每个工程本次只有一个启用的图页/规则步骤,不能据此推断所有工程规模的平均速度。

每一步耗时(秒)

工程 只读采集 图页枚举及队列准备 备份 替换步骤(含保存回读) 进度同步 本次任务执行合计
1GPHY_8211 10.191 12.851 1.211 62.814 0.012 77.059
Audio_D2128 12.586 8.851 0.981 42.971 0.011 52.910
Audio_T605A 10.222 11.012 0.958 44.812 0.012 56.894

任务合计包含枚举、备份、替换、进度和日志开销,不包含先前的只读采集;它与子步骤不能重复相加。整批队列另外包含任务切换和检查点开销。

保存后独立回读

工程 已验证的计划位号 实际改变 其余保留原料号 独立回读耗时(秒)
1GPHY_8211 13 1 12 10.530
Audio_D2128 2 1 1 9.993
Audio_T605A 2 1 1 11.254

所有比对均通过:按工程、图页、UID、位号和料号逐个核对,3 个目标变更,14 个未勾选匹配位号保留。两个 Audio 工程都含 RV05,结果分别归属于各自任务。上述独立回读在队列结束后另行执行,不包含在队列耗时中。

执行器内部阶段(秒)

进度监控按阶段切换计时,同名阶段多次出现时累计;这是互斥时间段,不是每个同名函数的完整调用时长。例如保存回读内再次打开工程的时间会累计到 open_project。非常短的阶段可显示为 0.000。

阶段 1GPHY_8211 Audio_D2128 Audio_T605A
starting 0.297 0.390 0.235
session_startup 1.109 0.985 0.843
check_project 0.032 0.015 0.047
open_project 15.374 12.719 13.563
open_sheet 2.438 2.876 2.359
session_ready 0.016 0.046 0.047
query_components 0.297 0.454 0.469
index_components 3.249 1.406 1.562
find_components 0.937 0.406 0.766
index_pins 2.906 1.859 1.704
snapshot_attributes 0.189 0.219 0.407
capture 2.515 1.500 1.390
before_native 0.079 0.062 0.063
native_replace 24.000 12.672 13.547
restore_preflight 2.624 1.406 1.608
before_restore_transaction 0.219 0.219 0.235
restore_attribute_fields 0.625 0.625 0.640
restore_attributes 0.031 0.000 0.000
verify_restoration 0.063 0.094 0.172
verify_attribute_fields 0.140 0.141 0.156
finished 1.750 1.077 1.218
save_and_close 3.891 3.751 3.720
verify_saved_project 0.000 0.015 0.031

软件队列回归与压力测试

模拟 CAD 场景仍使用真实 SQLite、XLSX、计划编译、命令/状态文件、备份及任务日志,模拟执行器只按收到的真实 UID 选择器修改内存器件模型并返回协议结果。其速率不能代表 DxDesigner 替换速度。

场景 工程数 实际执行步骤 修改模型器件数 保留的未选器件数 总流程耗时(秒)
failure_continue (case-failure_continue) 3 12 22 12 4.017
pause_resume (case-pause_resume) 3 12 24 12 3.275
success (case-success) 3 12 24 12 4.556
uncertain_stop (case-uncertain_stop) 3 1 0 12 1.730
success (scale-10-final) 10 120 240 120 38.722

3 工程场景覆盖:串行顺序、失败继续下一工程、未确认结果阻断后续工程、暂停续跑不重复、同名位号按工程/图页隔离、BOM 一行多个位号以及日志完整归属。10 工程场景为每工程 3 张图页、每图页 4 条规则,共 120 步;240 个选中模型器件改变、120 个未选模型器件保留。

1000 步兼容性压力场景使用历史单任务多工程队列(20 工程 × 5 图页 × 10 规则),开启 tracemalloc,真实备份由桩替代。它单独检查队列开销与内存,不是新版多任务调度或 CAD 吞吐量。最终全部 1000 步完成:91 步模拟保存成功、909 步未命中正常跳过,无重复调度;耗时 27.764 秒,速率 36.02 步/秒,tracemalloc 峰值 1.865 MiB。原有 <30 秒 和 <128 MiB 检查均通过,未放宽阈值。

本次发现和修复

  1. 监控握手路径长 264 字符时,Python 可见文件而 VBS FileSystemObject.FileExists 返回 False,造成约 20 秒后报 supervisor did not authorize startup。改用系统短路径后,真实项目枚举和替换均可执行;没有可用短路径的系统会在 CAD 启动前给出短目录提示。原有证据目录保持不变。
  2. 每步重复解析整份命令与状态文件,40 步检测到 41 次命令读取,1000 步耗时 228.154 秒。改为每会话缓存命令、按追加量读取状态;在每次启动 worker 前检查状态文件身份、大小及修改时间,外部插入状态会在下一次写入前阻断。
  3. 缓存工程备份根目录和项目 ID,避免在后续备份查找中重复解析文件路径;没有后续备份候选后不再反复扫描。每步计时合并到原执行结果事件中,避免重复刷写日志。

原始证据和复现

本机证据目录:F:\Sync Tool Skyworth\Work Maps\dxdesigner-part-replacement\build\multitask-regression-20261015。

  • native-live-results.json:3 个真实任务及队列状态。
  • native-timings.csv / native-timings.json:18 条真实阶段计时。
  • native-worker-stages.csv:69 条真实执行器阶段计时。
  • native-post-verification.json:17 个计划位号的独立回读比较。
  • native-data-live/tasks/<task-id>/quick-run/:每个真实任务的命令、状态、备份、快照及原生报告。
  • scale-10-final/timings.csv:10 工程、120 步及流程/任务统计;layer 标明流程计时和执行计时,二者不能重复相加。
  • case-*/report.json:故障、阻断、暂停续跑及成功场景的断言与每次调度。
  • stress-timings.csv / stress-final.json:1000 步逐项统计和内存峰值。
  • regression-before-queue-cache.xml:首次回归中的两个性能失败,保留用于回溯。

最终验证覆盖 188 个不同用例,全部通过:regression.xml 记录 187 项通过(单独排除已执行的压力项),performance-final.xml 记录压力项及 7 项相关检查通过;两个文件有 7 项重叠,去重为 188 项。包含串行调度、BOM、结果日志、长路径真实 VBS、监控超时清理、状态外部改动保护、失败/暂停/恢复及连接保护。

python -m pytest tests/v1_1 tests/trial_task_center/test_worker_monitor.py tests/trial_task_center/test_batch.py tests/trial_task_center/test_execution_safety.py tests/trial_task_center/test_recovery.py tests/part_replace/test_verification.py -q -k 'not thousand_item_multisheet_mixed_queue'
python -m pytest tests/trial_task_center/test_batch.py::test_thousand_item_multisheet_mixed_queue_has_bounded_runtime_and_memory tests/v1_1/test_execution_metrics.py tests/v1_1/test_replacement_logs.py -q

源码计时记录保存在任务事件中;真实数据 CSV 已逐项展开,模拟 120 步的 CSV 保留了每个 job_id、工程、图页、料号、结果、耗时及速率。测试期间未重新打包。真实中央库替换依赖现场库;本次未进行 Packager、ERC 或网表验收。