Use an unified FLAGS_check_nan_inf_level to control the result of checking infinite.

[Xreki]

PR types

Function optimization

PR changes

Others

Describe

在#47095 中，新增了FLAGS_abort_on_nan_inf和FLAGS_check_tensor_max_min，来控制FLAGS_check_nan_inf开启时的行为，便于进行精度排查。实现方式有2个弊端：

1. FLAGS数量太多，需要组合起来使用，配置相对麻烦
2. 无法扩展至更多的精度检查

本PR删除FLAGS_abort_on_nan_inf和FLAGS_check_tensor_max_min，新增FLAGS_check_nan_inf_level来统一控制FLAGS_check_nan_inf工具的行为，具体功能如下：

1. FLAGS_check_nan_inf_level = 0，只打印存在NAN、Inf的Tensor信息，并在检测到NAN、Inf之后退出进程。为默认配置。
2. FLAGS_check_nan_inf_level = 1，只打印存在NAN、Inf的Tensor信息，在检测到NAN、Inf后不会退出进程，而是一直训练，可用于观察不同iter出现NAN、Inf的op_type、位置是否一样。
3. FLAGS_check_nan_inf_level = 2，float专用，当Tensor的Max、Min值超出了float16的表示范围时，也会打印。用于amp精度排查。
4. FLAGS_check_nan_inf_level = 3，打印全部Tensor的Max、Min等信息。用于进行float、amp训练精度比对。

[paddle-bot]

你的PR提交成功，感谢你对开源项目的贡献!
请关注后续CI自动化测试结果，详情请参考Paddle-CI手册。
Your PR has been submitted. Thanks for your contribution!
Please wait for the result of CI firstly. See Paddle CI Manual for details.

[zhangting2020]

LGTM