| 文件 | 最后提交记录 | 最后更新时间 |
|---|---|---|
| 1 年前 | ||
优化本地测试脚本 Co-authored-by: Hcm03<chengminhua1@huawei.com> # message auto-generated for no-merge-commit merge: !782 merge master into master 优化本地测试脚本,添加datasets相关测试样例 Created-by: Hcm03 Commit-by: Hcm03 Merged-by: ascend-robot Description: 优化本地测试脚本 1) 添加本地测试单文件功能 2) 添加本地测试时间统计功能 3) 添加颜色输出功能 4) 提升了本地跑ut测试用例的速度,时间缩短为原先的20% 效果如下:  See merge request: Ascend/MindSpeed-RL!782 | 7 个月前 | |
| 3 个月前 | ||
修改qwen25-32b的长序列精度问题、以及推20k随机步数oom Co-authored-by: d00613215<daikang6@huawei.com> # message auto-generated for no-merge-commit merge: !894 merge master into master 修改qwen25-32b的长序列精度问题、以及推20k随机步数oom Created-by: daikang123 Commit-by: d00613215 Merged-by: ascend-robot Description: 修改qwen25-32b推20k,随机步数后oom 修改qwen25-32b的长序列精度问题 See merge request: Ascend/MindSpeed-RL!894 | 6 个月前 | |
TransferQueue 兼容TensorDock 方案 Co-authored-by: zhiqiang024<zhiqiang5@h-partners.com> Co-authored-by: jianingdong<jianingstat@outlook.com> # message auto-generated for no-merge-commit merge: !902 merge tq-merge into master TransferQueue 兼容TensorDock 方案 Created-by: zhiqiang024 Commit-by: zhiqiang024;jianingdong Merged-by: ascend-robot Description: 精度验证结果(GRPO、DAPO、PPO、GRPO多模、partial rollout(同步异步)): https://clouddocs.huawei.com/wapp/share/ac9ab6f8-3c47-4f46-b7c9-a44557fb6b29 特性: 1.支持现有transferdock的全部功能,可以通过配置的方式实现tq和td 切换,并实现对主流程的低侵入式修改。 2.新增可配置的分布式存储,使用Ray控制面+ZMQ数据面,兼容现有基于Ray的代码的同时,提供了ZMQ的快速数据传输能力。 TransferQueueClient: 线程安全的客户端,提供访问TransferQueue的全部接口。 TransferQueueManger: 提供控制面的分片、索引分配、状态位维护等功能,全局唯一,支持并发访问。 TransferQueueShard:数据存储后端,与Client通过ZMQ直连传输数据;统一存取接口,后续可提供外接Redis等存储后端的功能。 3.新增多topic数据存储,单一TransferQueue实例支持多套 schema 并存,服务多模态、动态采样、agent等场景。 transferdock、sampling_transferdock、mm_transferdock可以被一个TransferQueue替换。 基于topic的存储,支持多agent训练场景下的经验数据隔离 4.完成为partial rollout提供的not-exactly-once消费、data staleness(age)的通用支持。 5.支持init时配置所有RL阶段所需的column,TQ自动通过RL阶段名来取出对应column。 Contributor: 韦亦迅、党政、植强、董佳宁 See merge request: Ascend/MindSpeed-RL!902 | 5 个月前 | |
MSRL update vllm011 Co-authored-by: xiecheng_1<xiecheng22@h-partners.com> # message auto-generated for no-merge-commit merge: !783 merge master into master MSRL update vllm011 Created-by: xiecheng_1 Commit-by: xiecheng_1 Merged-by: ascend-robot Description: 1. 迭代vllm版本至011,PTA版本至271 https://wiki.huawei.com/domains/98166/wiki/300770/WIKI202511179050947 2. 移除仓库MM models 3. 修复 + 移除仓库暂不触发的相关ut See merge request: Ascend/MindSpeed-RL!783 | 7 个月前 | |
| 1 年前 |