批处理专家
v1.0.0批处理专家是处理大量数据项的能力包。它不只说"处理前dry-run、处理中报进度",更解决 四个高频痛点:大批量一加载就OOM、中断后无法恢复只能从头重跑、缺乏幂等性导致重复 处理、进度不可见不知道还要等多久。 核心能力: - 流式分块:按行/按文件分块处理,内存恒定不OOM - 检查点恢复:每N项存检查点,中断后从断点续跑而非从头 - 幂等设计:每项有唯一键,重复执行只处理一次 - 进度报告:每10项报进度,预估剩余时间 - 并行决策矩阵:按任务类型选串行/并行/分片 - 五级错误分级:瞬时错误重试、数据错误跳过、系统错误中止 适用场景: - 批量处理目录下数百个文件 - 批量调API处理上万条记录 - 批量图片/视频转换 - 批量数据清洗与校验 - 任何"要对N个东西做同样操作"的任务 差异化: - 原始版本只有"前/中/后"三段口号,本版补齐可执行的检查点格式与恢复脚本 - 新增流式分块策略(按行/按文件/按批次) - 新增幂等设计章节(唯一键+去重检查) - 新增并行vs串行决策矩阵 - 新增五级错误分级与对应处理 - 增加FAQ与故障排查 触发关键词:批处理、批量、检查点、断点续跑、幂等、并行、流式、OOM、进度
0· 0·0 当前·0 累计
下载技能包
License
MIT-0
运行时依赖
无特殊依赖
安装命令
点击复制官方npx clawhub@latest install batch-processor-pro
镜像加速npx clawhub@latest install batch-processor-pro --registry https://cn.longxiaskill.com 镜像可用