Support backward during backward.

[hbwx24]

PR types

Others

PR changes

OPs

Describe

• 在backward中使用一个临时trace，而非全局的tracer，在backward中构建一个局部动态图时不对全局动态图造成影响。这样做的目的是：若用户需要在backward中再次backward（构建一个局部的动态图模型），不需要用户手动在backward中创建一个tracer。
  示例：

def test_backward_in_backward(self):
        class cus_tanh(PyLayer):
            @staticmethod
            def forward(ctx, x):
                temp = x.detach()
                ctx.inputs = temp
                return x.mean()

            @staticmethod
            def backward(ctx, dy):
                with paddle.enable_grad():
                    temp = ctx.inputs
                    temp.stop_gradient = False
                    z = paddle.tanh(temp)
                    z.backward()
                    return paddle.to_tensor(temp.grad)

        for i in range(2):
            data = paddle.ones([2, 3], dtype="float32") / (i + 1)
            data.stop_gradient = False
            data = paddle.nn.functional.relu(data)
            z = paddle.tanh(data)
            z = cus_tanh.apply(data)

[paddle-bot-old]

Thanks for your contribution!
Please wait for the result of CI firstly. See Paddle CI Manual for details.

[ForFishes]

LGTM