国内下载国外数据集(库)方案整理

2023-12-14 10:51:19

在有外网权限的条件下,使用终端下载下面的数据集时,速度慢的只有十几k,同时过久的下载很可能会中断,导致一直下载失败

中断原因

无论是浏览器还是终端工具(curl,wget),它们都依赖于网络连接来下载文件。如果在下载过程中网络连接不稳定,可能会导致下载中断或文件损坏。这种情况下,下载工具本身并不会有太大的区别,因为它们都受制于相同的网络问题。

解决方案

解决方案一:colab + google drive(有存储容量限制)


使用 colab 将数据集下载到 colab 上,然后再从谷歌网盘上下载。这个方法的限制是网盘大小,如果网盘容量不够可能就得开会员

1、登录 colab
https://colab.research.google.com/
登录账号
2、加载谷歌网盘

from google.colab import drive
drive.mount('/content/drive')

需要验证邮箱
3、进入到谷歌网盘的路径下

cd /content/drive/MyDrive

4.下载数据集

!wget ?http://datasets.d2.mpi-inf.mpg.de/MPIIGaze/MPIIFaceGaze.zip -O /content/drive/MyDrive/fresino.zip

解决方案二:下载管理器(失败)

下载管理器通常具有更强大的下载和恢复功能,可以帮助用户更容易地处理中断的下载。尝试迅雷(失败)或者百度网盘的离线下载(失败)

百度网盘怎么建立离线下载-百度经验 (baidu.com)

解决方案三:申请服务器(未尝试)

国内下载国外数据集(库)方案整理 - mkxiong's blog (mingkangxiong.github.io)

文章来源:https://blog.csdn.net/qq_41413211/article/details/134988253
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。