imeepos
|
176ad61ac0
|
feat: 实现AI视频分类10个并发任务同时运行
- 重构VideoClassificationQueue支持并发处理架构
- 将max_concurrent_tasks从1提升到10（根据CPU核心数动态调整）
- 实现多worker并发处理机制，使用tokio::spawn创建独立worker
- 添加智能任务分发机制，使用原子操作避免任务重复分配
- 优化错误处理：连续错误限制、超时保护、渐进式重试
- 改进资源管理：CPU核心检测、内存使用优化
- 添加统计更新worker，实时监控处理进度
- 支持worker独立错误恢复，提高系统稳定性
性能提升：理论上可提升10倍处理速度，实际受网络和AI服务限制
|
2025-07-18 11:32:24 +08:00 |