已合并

add UT for utils/data APIs #37818

htchu创建于 6月8日从htchu/pytorch： v2.7.1 合入到 Ascend/pytorch： v2.7.1

add UT for utils/data APIs #37818

已合并

htchu创建于 6月8日

从htchu/pytorch v2.7.1合入到Ascend/pytorch v2.7.1

htchu成员

6月8日

【合入来源】

如有社区issue，请关联issue链接
请勿携带内部流程信息（需求链接、问题单、内部issue等）

需求
问题单
issue/工单
重构优化
资料更新

https://gitcode.com/Ascend/pytorch/issues/2296

【修改方案】

增加API用例

【资料变更】

不涉及

【接口变更】

不涉及

【功能验证】

【CheckList】

PR提交人对以下CheckList自检项进行全量自检，自检通过或不涉及，均修改 [ ] 为 [x]

代码注释完备，正确记录错误日志
代码实现进行了返回值、空指针等校验
PR标题正确使用类型标签，如：feat、fix、refactor、docs、test等
PR持续集成流水线（CI）执行通过，代码检查无异常

Pull Request已成功合入, 合并人@ascend-robot

（感谢 htchu 的贡献）

H htchu成员

6月8日创建了 pull request，commit 42fdd12d

H htchu成员

6月8日关联了issue：[Bug]:

ascend-robot成员

6月8日评论：

openLiBing可接管PR, PR详情链接:
https://www.openlibing.com/apps/transitionPrDetail?owner=Ascend&repo=pytorch&number=37818&platform=gitcode&codeHostingPlatformFlag=gitcode

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_ConcatDataset.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import Dataset, ConcatDataset

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_ConcatDataset.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import Dataset, ConcatDataset

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_DataLoader.py

21+"""

22+import torch

23+import torch_npu # noqa: F401

24+from torch.utils.data import Dataset, DataLoader

25+

26+try:

openLiBingCI6月8日评论：

此条代码评论区间+21至+26

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_DataLoader.py

21+"""

22+import torch

23+import torch_npu # noqa: F401

24+from torch.utils.data import Dataset, DataLoader

25+

26+try:

openLiBingCI6月8日评论：

此条代码评论区间+21至+26

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Dataset.py

17+"""

18+import torch

19+import torch_npu # noqa: F401

20+from torch.utils.data import Dataset

21+

22+try:

openLiBingCI6月8日评论：

此条代码评论区间+17至+22

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Dataset.py

17+"""

18+import torch

19+import torch_npu # noqa: F401

20+from torch.utils.data import Dataset

21+

22+try:

openLiBingCI6月8日评论：

此条代码评论区间+17至+22

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

ascend-robot成员

6月8日添加了label：ascend-cla/yes

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_RandomSampler.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import RandomSampler

23+

24+try:

openLiBingCI6月8日评论：

此条代码评论区间+19至+24

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_RandomSampler.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import RandomSampler

23+

24+try:

openLiBingCI6月8日评论：

此条代码评论区间+19至+24

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Sampler.py

17+"""

18+import torch

19+import torch_npu # noqa: F401

20+from torch.utils.data import Sampler

21+

22+try:

openLiBingCI6月8日评论：

此条代码评论区间+17至+22

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

ascend-robot成员

6月8日评论：

Thanks for your pull-request.
The full list of commands accepted by me can be found at here。
You can get sig-info at here

PR Approval Progress

✅ Congratulations! All modules have met the lgtm and approve requirements.

Module Approval Details

module	lgtm status	approve status
test	✅ ffmh, wangmin0104 (2/2)	✅ wangmin0104 (1/1)

💡 Tip:

Committer can comment /approve or /lgtm

Commenting /approve implies both code review (lgtm) and intent to merge (approve)

CLA Signature Pass

htchu, thanks for your pull request. All authors of the commits have signed the CLA. 👍

htchu成员

6月8日评论：

compile

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Sampler.py

17+"""

18+import torch

19+import torch_npu # noqa: F401

20+from torch.utils.data import Sampler

21+

22+try:

openLiBingCI6月8日评论：

此条代码评论区间+17至+22

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_SequentialSampler.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import SequentialSampler

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_SequentialSampler.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import SequentialSampler

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Subset.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import Dataset, Subset

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_Subset.py

18+"""

19+import torch

20+import torch_npu # noqa: F401

21+from torch.utils.data import Dataset, Subset

22+

23+try:

openLiBingCI6月8日评论：

此条代码评论区间+18至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_default_collate.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import default_collate

23+

24+try:

openLiBingCI6月8日评论：

此条代码评论区间+19至+24

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_default_collate.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import default_collate

23+

24+try:

openLiBingCI6月8日评论：

此条代码评论区间+19至+24

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

ascend-robot成员

6月8日评论：

当前仓库存在以下 保护分支 ：

Protected Branch	Version	Release
master
v2.9.0
v2.7.1
v2.10.0
v2.12.0-26.1.0
v2.11.0-26.1.0
v2.10.0-26.1.0
v2.9.0-26.1.0
v2.7.1-26.1.0
v2.12.0
v2.11.0
ci-test
sync-pr28113--to-v2.9.0

评论 /sync <branch1> <branch2> ... 可将当前 PR 修改同步到其它分支（创建同步 PR）：
a) 如果当前 PR 是 Open 状态，同步操作将延迟到 PR 被合并时执行
b) 如果当前 PR 已经 Merged，将立即执行同步操作

注意：

/sync 命令可以指定同步到多个分支，仅最后一个 /sync 命令生效

如果创建的同步 PR 不正确，可通过向同步 PR 的源分支提交轻量级 PR 完善，或使用 /close 命令关闭

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_distributed_DistributedSampler.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import Dataset

23+from torch.utils.data.distributed import DistributedSampler

openLiBingCI6月8日评论：

此条代码评论区间+19至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_distributed_DistributedSampler.py

19+"""

20+import torch

21+import torch_npu # noqa: F401

22+from torch.utils.data import Dataset

23+from torch.utils.data.distributed import DistributedSampler

openLiBingCI6月8日评论：

此条代码评论区间+19至+23

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_get_worker_info.py

16+"""

17+import torch

18+import torch_npu # noqa: F401

19+from torch.utils.data import get_worker_info

20+

21+try:

openLiBingCI6月8日评论：

此条代码评论区间+16至+21

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

openLiBingCI成员6月8日进行代码检视1

test/utils/test_utils_data_get_worker_info.py

16+"""

17+import torch

18+import torch_npu # noqa: F401

19+from torch.utils.data import get_worker_info

20+

21+try:

openLiBingCI6月8日评论：

此条代码评论区间+16至+21

【openlibing.ci】识别到代码检查告警抑制注释，匹配工具：flake8，请Committer检视其合理性。

ascend-robot成员

6月8日添加了label：ci-pipeline-running

ascend-robot成员

6月8日评论：

Ascend docs pipeline is running...

ascend-robot成员

6月8日添加了label：docs-ci-pipeline-running

ascend-robot成员

6月8日评论：

Ascend docs pipeline is running...

ascend-robot成员

6月8日评论：

✅ 跳过 docs ci 检查，没有需要检查的文档文件

ascend-robot成员

6月8日删除了label：docs-ci-pipeline-running

ascend-robot成员

6月8日添加了label：docs-ci-pipeline-success

ascend-robot成员

6月8日评论：

✅ 跳过 docs ci 检查，没有需要检查的文档文件

ascend-robot成员

6月8日删除了label：ci-pipeline-running

ascend-robot成员

6月8日添加了label：ci-pipeline-passed

ascend-robot成员

6月8日评论：

流水线 PR-pipeline_pytorch#30229 已完成

阶段	任务名	状态	详情
编译构建	Build_X86	✅	>>>
	Build_ARM	✅	>>>
	Build_LibTorch_x86	✅	>>>
	Build_LibTorch_ARM	✅	>>>
	Build_X86_torchair	🛑	>>>
	Build_ARM_torchair	🛑	>>>
	patch_test	🛑	>>>
恶意代码检查	Antipoison	✅	>>>
编码安全与规范检查	CodeCheck	✅	>>>
	check_error	✅	>>>
	CodeCheck_lintrunner	✅	>>>
开源片段检查	SCA	✅	>>>
开发者测试	UT_X86_Part_01	✅	>>>
	UT_X86_Part_02	✅	>>>
	UT_ARM_A3_Part_01	✅	>>>
	UT_ARM_A3_Part_02	✅	>>>
	UT_ARM_A2_Part_01	✅	>>>
	UT_ARM_A2_Part_02	✅	>>>
	UT_ARM_A2_Part_03	✅	>>>
	UT_inductor_Part_01	🛑	>>>
	UT_inductor_Part_02	🛑	>>>
	UT_inductor_Part_03	🛑	>>>
	UT_inductor_Part_04	🛑	>>>
	UT_DIST_ARM_Part_01	🛑	>>>
	UT_DIST_ARM_Part_02	🛑	>>>
	UT_DIST_ARM_Part_03	🛑	>>>
	UT_DIST_ARM_Part_04	🛑	>>>
	UT_ARM_A2_Select_Part_01	✅	>>>
	UT_ARM_A2_Select_Part_02	✅	>>>
流水线	PR-pipeline_pytorch	✅	>>>

ffmh成员

6月8日解决了最后一个问题

ffmh成员

6月8日评论：

/lgtm

wangmin0104成员

6月8日评论：

/approve

ascend-robot成员

6月8日添加了label：approvedlgtm

ascend-robot成员

6月8日关闭了关联的issue

ascend-robot成员

6月8日合入了pull request

ascend-robot成员

6月8日评论：

Pull Request 已合并或已关闭。

If you want to solve this problem, you can click here to do it in the FAQs.

ascend-robot成员

6月8日评论：

流水线 pytorch_gitcode_PR_multiVersion#10192 [ commitID：7cc1d849 ] 已完成