【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） #6887

decade-afk · 2024-09-22T02:12:10Z

No description provided.

CLAassistant · 2024-09-22T02:12:16Z

All committers have signed the CLA.

zhwesky2010

第8组只有这一个API吗

decade-afk · 2024-09-24T03:11:25Z

第8组只有这一个API吗
并不是，其他的还在弄

zhwesky2010 · 2024-09-24T09:09:56Z

第8组只有这一个API吗
并不是，其他的还在弄

那你在PR描述里，先标注一个 -PART1

zhwesky2010 · 2024-09-24T09:15:31Z

...vert_from_pytorch/api_difference/distributions/torch.distributions.constraints.Constraint.md

@@ -0,0 +1,7 @@
+## [功能缺失 ]torch.distributions.constraints.Constraint


这个不是功能缺失，仔细查阅paddle源码，以源代码为准

zhwesky2010 · 2024-09-24T09:19:33Z

...rch/api_difference/distributions/torch.distributions.transforms.PositiveDefiniteTransform.md

@@ -0,0 +1,7 @@
+## [ 功能缺失 ]torch.distributions.transforms.PositiveDefiniteTransform


这个找办法组合实现

判定为功能缺失需要慎重，只有确实需要在Paddle中新增API的才可判定功能缺失，尽可能要通过组合实现、或者paconvert的辅助函数aux_code实现

好的好的，目前正在修改

已经全都弄好了，请review

zhwesky2010 · 2024-09-27T08:08:42Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.cauchy_.md

+| --------- | ------------ | ------------------------------------------------------------------------------------ |
+| median    | loc          | 输入 Tensor，仅参数名不一致。                                                        |
+| sigma     | scale        | 输入 Tensor，仅参数名不一致。                                                        |
+| *         | -            | 其他参数                                                                             |


* 表示后面为指定关键字参数，不代表某个形参。这个去学习下相关的python语法。

zhwesky2010 · 2024-09-27T08:09:33Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.geometric_.md

+| ------- | ------------ | ----------------------------- |
+| p   | probs            | 输入 Tensor，仅参数名不一致。 |
+
+| *         | -            | 其他参数                                                                             |


同上，先查阅python相关语法

zhwesky2010 · 2024-09-27T08:10:23Z

...guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.is_inference.md

+### [paddle.Tensor._is_inference](https://www.paddlepaddle.org.cn/documentation/docs/zh/api/paddle/Tensor_cn.html)
+
+```python
+paddle.Tensor._is_inference


有这个API？？

抱歉，这个是我搞错了，他是CompiledProgram类的属性

zhwesky2010 · 2024-09-27T08:12:11Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.random_.md

+
+PaddlePaddle 目前无对应 API，可使用如下代码组合实现该 API。
+
+### 参数映射


组合实现有参数映射吗？？认真查阅模板

zhwesky2010 · 2024-09-27T08:14:17Z

...rt_from_pytorch/api_difference/distributions/torch.distributions.lkj_cholesky.LKJCholesky.md

+| dim | dim | 表示输入的参数。                                                        |
+| concentration | concentration | 表示输入的参数。                                                        |
+| validate_args | -             | 是否添加验证环节。Paddle 无此参数，一般对训练结果影响不大，可直接删除。 |
+| - | sample_method             | pytorch无此参数，保持默认即可。 |


paddle保持默认即可

zhwesky2010

开发注意事项：

务必按照映射文档模板编写，一比一对照编写（可适当补充内容但不能减少内容），提交review前先自查一遍
本次放出来的API，内部已初步分析过，基本上都有相关功能，功能缺失的可能性较小。需尽可能去寻找组合替代实现，判定为功能缺失要慎重，除非paddle完全无相类似功能
先写好映射文档，再根据合入的文档来实现Matcher，注意不要出现文档与Matcher的diff。如果后面实现Matcher时，发现文档有误，需及时返工更正文档

zhwesky2010 · 2024-10-08T10:19:20Z

...guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.is_inference.md

@@ -0,0 +1,15 @@
+## [ 无参数 ]torch.Tensor.is_inference


加一个 torch.is_inference.md 的文档吧，这两个API是一样的

有个问题：这个看起来和stop_gradient不是完全一致的，如果没有更好的替代实现，就在文档里注明是近似实现吧，至少让读者知道存在差异
https://www.cnblogs.com/ToryRegulus/p/18141257

zhwesky2010 · 2024-10-08T10:20:14Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.geometric_.md

@@ -0,0 +1,22 @@
+## [ 仅参数名不一致 ]torch.Tensor.geometric_


torch参数更多

zhwesky2010 · 2024-10-08T10:21:30Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.random_.md

+x.random_(from=0, to=10)
+
+# Paddle 写法
+paddle.assign(paddle.cast(paddle.randint(low=0, high=2, shape=x.shape), dtype='float32'), x)


paddle.Tensor.uniform_ 能否实现？

尽量找更好的组合

zhwesky2010 · 2024-10-08T10:23:01Z

...vert_from_pytorch/api_difference/distributed/torch.distributed.optim.DistributedOptimizer.md

+### [paddle.distributed.shard_optimizer](https://www.paddlepaddle.org.cn/documentation/docs/zh/api/paddle/distributed/shard_optimizer_cn.html)
+
+```python
+paddle.distributed.shard_optimizer(optimizer, shard_fn=None)


这个和 paddle.distributed.fleet.distributed_optimizer 哪个更能对应上？

zhwesky2010 · 2024-10-08T10:24:45Z

...odel_convert/convert_from_pytorch/api_difference/distributed/torch.distributed.rpc.remote.md

+### [paddle.distributed.rpc.rpc_async](https://www.paddlepaddle.org.cn/documentation/docs/zh/develop/api/paddle/distributed/rpc/rpc_async_cn.html#rpc-async)
+
+```python
+paddle.distributed.rpc.rpc_async(to, fn, args=None, kwargs=None, timeout=- 1)


timeout=-1)

zhwesky2010 · 2024-10-08T10:25:08Z

...vert_from_pytorch/api_difference/distributions/torch.distributions.constraints.Constraint.md

+paddle.distribution.constraint.Constraint()
+```
+
+功能一致，无参数。


上面的torch签名是无参数？？

zhwesky2010 · 2024-10-08T10:26:36Z

...rch/api_difference/distributions/torch.distributions.transforms.PositiveDefiniteTransform.md

+
+PaddlePaddle 目前无对应 API，可使用如下代码组合实现该 API。
+
+### 参数映射


组合替代实现不需要参数映射

decade-afk · 2024-10-15T07:13:12Z

PaddlePaddle/PaConvert#495
我新提了一个pr，除了分布式的两个转写还没交之外，其他都写好了的，然后我根据别人写的辅助函数进行转写，到那时ci那里一直报paddle_aux没有该函数，请问这是怎么回事，我在本地测试是都通过了的。请review
@zhwesky2010

decade-afk · 2024-10-15T08:00:18Z

就是这个样子，错的全是paddle_aux没有该函数

zhwesky2010 · 2024-10-16T04:41:19Z

就是这个样子，错的全是paddle_aux没有该函数

单测里你要加一个 is_aux=True，你看看其他有辅助函数的单测写法

zhwesky2010 · 2024-10-16T13:15:01Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.cauchy_.md

+
+| PyTorch   | PaddlePaddle | 备注                                                                                 |
+| --------- | ------------ | ------------------------------------------------------------------------------------ |
+| median    | loc          | 输入 Tensor，仅参数名不一致。                                                        |


参数功能简述，是不是都不对

zhwesky2010 · 2024-10-16T13:15:04Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.cauchy_.md

+| PyTorch   | PaddlePaddle | 备注                                                                                 |
+| --------- | ------------ | ------------------------------------------------------------------------------------ |
+| median    | loc          | 输入 Tensor，仅参数名不一致。                                                        |
+| sigma     | scale        | 输入 Tensor，仅参数名不一致。                                                        |


参数功能简述，是不是都不对

zhwesky2010 · 2024-10-16T13:15:13Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.geometric_.md

+
+| PyTorch | PaddlePaddle | 备注                          |
+| ------- | ------------ | ----------------------------- |
+| p   | probs            | 输入 Tensor，仅参数名不一致。 |


参数功能简述，是不是都不对

zhwesky2010 · 2024-10-16T13:17:13Z

...guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.is_inference.md

+paddle.Tensor.stop_gradient
+```
+
+两者功能一致，无参数。 `is_inference` 会强制关闭梯度记录。并且不能在中途设置梯度，`Paddle` 为近似实现。


stop_gradient也解释下。你需要证明清楚是近似实现

zhwesky2010 · 2024-10-16T13:17:30Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.random_.md

+
+| PyTorch | PaddlePaddle | 备注                                                        |
+| ------- | ------------ | ----------------------------------------------------------- |
+| from    | min         | 最小值 |


没写清楚

zhwesky2010 · 2024-10-16T13:17:32Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.random_.md

+| PyTorch | PaddlePaddle | 备注                                                        |
+| ------- | ------------ | ----------------------------------------------------------- |
+| from    | min         | 最小值 |
+| to       | max        | 最大值   |


没写清楚

zhwesky2010 · 2024-10-16T13:18:18Z

...vert_from_pytorch/api_difference/distributed/torch.distributed.optim.DistributedOptimizer.md

+| optimizer_class | optimizer    | 优化器。                                                    |
+| params_rref     | -            | 初始化方法，paddle 无此参数，需要转写方式。                 |
+| args            | -            | 优化器实例化参数。                                          |
+| kwargs          | -            | 优化器实例化参数                                            |


这个是字典参数

zhwesky2010 · 2024-10-16T13:20:07Z

docs/guides/model_convert/convert_from_pytorch/api_difference/torch/torch.is_inference.md

+torch.is_inference(input)
+```
+
+Paddle 无此 API，需要组合是实现。 `is_inference` 会强制关闭梯度记录。并且不能在中途设置梯度，`Paddle` 为近似实现。


写一下paddle的stop_gradient的功能及两者差异，证明是近似实现

zhwesky2010 · 2024-10-17T04:19:02Z

docs/guides/model_convert/convert_from_pytorch/api_difference/torch/torch.is_inference.md

@@ -0,0 +1,19 @@
+## [ 组合替代实现 ]torch.is_inference


你这个写得和torch.Tensor.is_inference的分类和内容不一样，两者应该都是 无参数

zhwesky2010 · 2024-10-17T04:34:33Z

...rch/api_difference/distributions/torch.distributions.transforms.PositiveDefiniteTransform.md

+y = PositiveDefiniteTransform()(tensor1)
+
+# Paddle 写法
+T = tensor1.tril(-1) + tensor1.diagonal(-2, -1).exp().diag_embed()


这个你还是用x来表示，不然与下面的.T容易混淆

zhwesky2010 · 2024-10-17T04:34:41Z

...rch/api_difference/distributions/torch.distributions.transforms.PositiveDefiniteTransform.md

+
+# Paddle 写法
+T = tensor1.tril(-1) + tensor1.diagonal(-2, -1).exp().diag_embed()
+y = T @ T.mT


paddle没有.mT

zhwesky2010 · 2024-10-21T03:45:21Z

...rt_from_pytorch/api_difference/distributions/torch.distributions.lkj_cholesky.LKJCholesky.md

+| concentration | concentration | 表示输入的参数。                                                        |
+| validate_args | -             | 是否添加验证环节。Paddle 无此参数，一般对训练结果影响不大，可直接删除。 |
+| -             | sample_method | pytorch 无此参数，paddle 保持默认即可。                                 |
+| 输出          | 输出          | pytorch 比 Paddle 多一个维度，需转写。                                  |


这个写返回值

zhwesky2010 · 2024-10-21T03:46:05Z

...rt_from_pytorch/api_difference/distributions/torch.distributions.lkj_cholesky.LKJCholesky.md

+
+### 转写示例
+
+```python


转写值需要写：转写的是谁

参考下其他API返回值的转写

zhwesky2010 · 2024-10-21T03:47:21Z

...t/convert_from_pytorch/api_difference/distributions/torch.distributions.studentT.StudentT.md

+| PyTorch       | PaddlePaddle | 备注                                                                                  |
+| ------------- | ------------ | ------------------------------------------------------------------------------------- |
+| df            | df           | 自由度，是一个正数。                                                                  |
+| loc           | loc          | 分布的均值位置， Paddle 中，若 df 为 Tensor 类型，则 loc 也应该为 Tensor 类型。       |


这里的描述不规范：

Paddle是什么样不重要，需要看torch是什么样，再看paddle的处理方案

zhwesky2010 · 2024-10-21T03:47:24Z

...t/convert_from_pytorch/api_difference/distributions/torch.distributions.studentT.StudentT.md

+| ------------- | ------------ | ------------------------------------------------------------------------------------- |
+| df            | df           | 自由度，是一个正数。                                                                  |
+| loc           | loc          | 分布的均值位置， Paddle 中，若 df 为 Tensor 类型，则 loc 也应该为 Tensor 类型。       |
+| scale         | scale        | 分布的标准差的比例， Paddle 中，若 df 为 Tensor 类型，则 scale 也应该为 Tensor 类型。 |


这里的描述不规范：

Paddle是什么样不重要，需要看torch是什么样，再看paddle的处理方案

zhwesky2010 · 2024-10-21T03:48:15Z

...guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.is_inference.md

+paddle.Tensor.stop_gradient
+```
+
+两者功能一致，无参数。 `is_inference` 会强制关闭梯度记录。并且不能在中途设置梯度，而 `stop_gradient` 仅为停止计算该算子梯度，可在中途重新设为 `True` ，`Paddle` 为近似实现。


给个转写示例

zhwesky2010 · 2024-10-21T03:48:45Z

docs/guides/model_convert/convert_from_pytorch/api_difference/torch/torch.is_inference.md

+torch.is_inference(x)
+
+# Paddle 写法
+not x.stop_gradient


这个和torch.Tensor.is_inference应该要对上，映射分类和转写示例都需要对上

zhwesky2010 · 2024-10-21T03:50:27Z

docs/guides/model_convert/convert_from_pytorch/api_difference/Tensor/torch.Tensor.random_.md

+
+| PyTorch   | PaddlePaddle | 备注                                                                                 |
+| --------- | ------------ | ------------------------------------------------------------------------------------ |
+| from      | min          | 随机数生成范围的起始值，仅参数名不一致。                                             |


from这个参数名确定吗？这个应该触发了python的关键字from，应该会报错

decade-afk · 2024-10-21T08:59:08Z

已经改了，请review

zhwesky2010 · 2024-10-22T04:32:21Z

...t/convert_from_pytorch/api_difference/distributions/torch.distributions.studentT.StudentT.md

+| PyTorch       | PaddlePaddle | 备注                                                                                  |
+| ------------- | ------------ | ------------------------------------------------------------------------------------- |
+| df            | df           | 自由度，是一个正数。                                                                  |
+| loc           | loc          | 分布的均值位置， Pytorch 中，可为 float 或 Tensor 类型，但在 Paddle 中， loc 应于 df 同类型。       |


这段话有错别字

zhwesky2010 · 2024-10-22T04:32:24Z

...t/convert_from_pytorch/api_difference/distributions/torch.distributions.studentT.StudentT.md

+| ------------- | ------------ | ------------------------------------------------------------------------------------- |
+| df            | df           | 自由度，是一个正数。                                                                  |
+| loc           | loc          | 分布的均值位置， Pytorch 中，可为 float 或 Tensor 类型，但在 Paddle 中， loc 应于 df 同类型。       |
+| scale         | scale        | 分布的标准差的比例， Pytorch 中，可为 float 或 Tensor 类型，但在 Paddle 中， scale 应于 df 同类型。 |


这段话有错别字

zhwesky2010 · 2024-10-22T04:33:16Z

...rt_from_pytorch/api_difference/distributions/torch.distributions.lkj_cholesky.LKJCholesky.md

+y = torch.distributions.lkj_cholesky.LKJCholesky(dim=3, concentration=torch.tensor([1.0])).sample()
+
+# Paddle 写法
+y = paddle.unsqueeze(paddle.distribution.LKJCholesky(dim=3, concentration=paddle.to_tensor([1.0]).sample(), axis=0)


可以分两行写

zhwesky2010 · 2024-10-22T04:33:30Z

...t/convert_from_pytorch/api_difference/distributions/torch.distributions.studentT.StudentT.md

+
+# Paddle 写法
+x = paddle.to_tensor(3)
+y = paddle.reshape(paddle.distribution.StudentT(df=x, loc = paddle.to_tensor(0.0), scale=paddle.to_tensor(1.0)).sample(), x.shape)


可以分多行写，目前写的不够直观

decade-afk · 2024-10-22T05:42:15Z

已经改好了，请review

zhwesky2010

LGTM

【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组）

362d79c

paddle-bot bot added the contributor label Sep 22, 2024

luotao1 added the PaddlePaddle Hackathon 飞桨黑客松活动issue与PR label Sep 23, 2024

luotao1 assigned luotao1, zhwesky2010 and sunzhongkai588 Sep 23, 2024

luotao1 mentioned this pull request Sep 23, 2024

【Hackathon 7th】开源贡献个人挑战赛 PaddlePaddle/Paddle#68244

Open

zhwesky2010 reviewed Sep 23, 2024

View reviewed changes

decade-afk added 2 commits September 24, 2024 09:53

update

0b1630e

update

c242c6b

zhwesky2010 changed the title ~~【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组）~~ 【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组）PRAT1 Sep 24, 2024

zhwesky2010 reviewed Sep 24, 2024

View reviewed changes

decade-afk added 2 commits September 25, 2024 21:36

update

ace0915

update

751a7de

decade-afk changed the title ~~【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组）PRAT1~~ 【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） Sep 26, 2024

zhwesky2010 reviewed Sep 27, 2024

View reviewed changes

Merge branch 'PaddlePaddle:develop' into distributions

4d1577b

decade-afk mentioned this pull request Oct 2, 2024

【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） PaddlePaddle/PaConvert#493

Closed

decade-afk added 5 commits October 4, 2024 15:05

update

64f6fea

update

c197639

update

3f2da7a

update

6401aef

update

ed7f684

zhwesky2010 reviewed Oct 8, 2024

View reviewed changes

decade-afk mentioned this pull request Oct 14, 2024

【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） PaddlePaddle/PaConvert#495

Merged

update

8885daa

update

aac796d

zhwesky2010 reviewed Oct 16, 2024

View reviewed changes

update

7e3acf0

zhwesky2010 reviewed Oct 17, 2024

View reviewed changes

update

237cd1f

zhwesky2010 reviewed Oct 21, 2024

View reviewed changes

decade-afk added 4 commits October 21, 2024 15:11

update is_inference

cefdf98

update distribution

c6ea9fd

update distributed

231f120

update

9eb1c74

zhwesky2010 reviewed Oct 22, 2024

View reviewed changes

update

cb9173a

update

96cf8ad

zhwesky2010 approved these changes Oct 22, 2024

View reviewed changes

zhwesky2010 merged commit dae1b4e into PaddlePaddle:develop Oct 22, 2024
2 checks passed

		@@ -0,0 +1,7 @@
		## [功能缺失 ]torch.distributions.constraints.Constraint

		@@ -0,0 +1,7 @@
		## [ 功能缺失 ]torch.distributions.transforms.PositiveDefiniteTransform


		PaddlePaddle 目前无对应 API，可使用如下代码组合实现该 API。

		### 参数映射

		@@ -0,0 +1,22 @@
		## [ 仅参数名不一致 ]torch.Tensor.geometric_

【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） #6887

【Hackathon 7th No.41】NO.41 为 Paddle 代码转换工具新增 API 转换规则（第 8 组） #6887

Conversation

decade-afk commented Sep 22, 2024

CLAassistant commented Sep 22, 2024 • edited Loading

zhwesky2010 left a comment

Choose a reason for hiding this comment

decade-afk commented Sep 24, 2024

zhwesky2010 commented Sep 24, 2024 • edited Loading

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

zhwesky2010 Sep 27, 2024 • edited Loading

Choose a reason for hiding this comment

zhwesky2010 Sep 27, 2024 • edited Loading

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

zhwesky2010 left a comment • edited Loading

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

decade-afk commented Oct 15, 2024

decade-afk commented Oct 15, 2024

zhwesky2010 commented Oct 16, 2024

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

decade-afk commented Oct 21, 2024

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

decade-afk commented Oct 22, 2024

zhwesky2010 left a comment

Choose a reason for hiding this comment

CLAassistant commented Sep 22, 2024 •

edited

Loading

zhwesky2010 commented Sep 24, 2024 •

edited

Loading

zhwesky2010 Sep 27, 2024 •

edited

Loading

zhwesky2010 Sep 27, 2024 •

edited

Loading

zhwesky2010 left a comment •

edited

Loading