[百度网盘]使用大分片时，偶发 Client.Timeout exceeded while awaiting headers

[ljcbaby]

Please make sure of the following things

• I have read the documentation.
  我已经阅读了文档。

• I'm sure there are no duplicate issues or discussions.
  我确定没有重复的issue或讨论。

• I'm sure it's due to AList and not something else(such as Network ,Dependencies or Operational).
  我确定是AList的问题，而不是其他原因（例如网络，依赖或操作）。

• I'm sure this issue is not fixed in the latest version.
  我确定这个问题在最新版本中没有被修复。

AList Version / AList 版本

v3.41.0(cf58ab3)

Driver used / 使用的存储驱动

baidu_netdisk

Describe the bug / 问题描述

如题，在 会员/超级会员 的情况下，上传过程中一直会有超时重试的信息在stdout中输出，并且有概率恶化导致文件传输失败。

做了一些简单的测试，此问题在指定分片为4M的情况下可以明显缓解，不确定是大分片导致网络层面的问题（传输时间增加、重传）还是服务端层面的问题（计算md5耗时增加），或者兼而有之。

可能的修复方式：

• 增大 Client.Timeout 或者使用 ResponseHeaderTimeout 替代，避免上行耗时过长触发超时 百度网盘并发上传时有大概率出错 #5628
• 根据文件大小，使用尽可能小的分片（如 4G 以内维持使用4M的分片）
• 动态获取上传端点 https://pan.baidu.com/union/doc/nksg0s9vi 百度网盘动态上传域名 #6518 （一定是负载相对较低的吗？）
• 小文件使用单步上传 https://pan.baidu.com/union/doc/olkuuy5kz

其他关联：#5392

Reproduction / 复现链接

我无法给出复现链接因为这在我的内网，但我可以积极配合测试。

Config / 配置

Logs / 日志

[ljcbaby]

补充说明：我确定这不是网络问题，在抓包过程中能看到有来自服务器的包到Alist（所在主机）之后被回复RST，应该就是超时时间后上游回包了

[pongfcnkl]

百度那边是30秒没传完分片就直接超时

[ljcbaby]

百度那边是30秒没传完分片就直接超时

请求来源

[pongfcnkl]

百度那边是30秒没传完分片就直接超时

请求来源

你自己翻issuse 或者直接问百度

[pongfcnkl]

百度那边是30秒没传完分片就直接超时

请求来源

你的日志是webdav本身的超时吧

[ljcbaby]

百度那边是30秒没传完分片就直接超时

请求来源

你自己翻issuse 或者直接问百度

翻到了，迟点复现一下估计

[ljcbaby]

百度那边是30秒没传完分片就直接超时

请求来源

你的日志是webdav本身的超时吧

webdav超时我给了一天，图片右边的是alist容器stdout

[pongfcnkl]

百度那边是30秒没传完分片就直接超时

请求来源

你的日志是webdav本身的超时吧

webdav超时我给了一天，图片右边的是alist容器stdout

你的文件有点大，试试直接给 0

[ljcbaby]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。

我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

[ljcbaby]

另外根据实测，分片数量限制也不是 1024 了现在。昨晚用4M的分片传了一个 7.41 G 的文件

[pongfcnkl]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。

我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

[ljcbaby]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。
我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

现在是就这一个文件，分片设置 0（自动（SVIP 32M）），线程设置是4。
从跳出来的partseq来看，是隔几个分片会跳出来重试

[pongfcnkl]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。
我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

现在是就这一个文件，分片设置 0（自动（SVIP 32M）），线程设置是4。 从跳出来的partseq来看，是隔几个分片会跳出来重试

那你改成4194304

[ljcbaby]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。
我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

现在是就这一个文件，分片设置 0（自动（SVIP 32M）），线程设置是4。 从跳出来的partseq来看，是隔几个分片会跳出来重试

那你改成4194304

昨晚试过了，4M传不了22G，会出 31299。

[pongfcnkl]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。
我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

现在是就这一个文件，分片设置 0（自动（SVIP 32M）），线程设置是4。 从跳出来的partseq来看，是隔几个分片会跳出来重试

那你改成4194304

昨晚试过了，4M传不了22G，会出 31299。

线程改1

[ljcbaby]

你的文件有点大，试试直接给 0

就剩这一个文件，2h也传的完了。只是四线程+SVIP分片的情况下，右边一直看着有重试。
我家上传运营商写的是40Mbps，实际峰值 4~5 MB/s

你现在分片是多少？

现在是就这一个文件，分片设置 0（自动（SVIP 32M）），线程设置是4。 从跳出来的partseq来看，是隔几个分片会跳出来重试

那你改成4194304

昨晚试过了，4M传不了22G，会出 31299。

线程改1

大文件手动监护的情况下是考虑这么干了。回头看看代码上能不能优化一下吧，毕竟常见场景是配合rclone做自动备份

[ljcbaby]

有个问题，中间有一个分片传输失败了，也是要所有分片上传完才丢出报错啊

[ljcbaby]

另外根据实测，分片数量限制也不是 1024 了现在。昨晚用4M的分片传了一个 7.41 G 的文件

准确测试了，最大是2000个分块