薅羊毛 Colab使用外部数据的7种方法！

野性酷女 2022-09-12 11:59 309阅读 0赞

![088982968dfd6dc666978ced136657ff.png][]

> > > > 文 | Coggle  
> > > > 源 | Coggle数据科学  
> > > >

Colab作为非常强大且优惠的计算平台，一直广受大家喜爱。可以随时随地使用，还有免费的GPU可以薅羊毛。那么如何在Colab中使用外部数据集，来完成竞赛呢，本文将给出几种常见的方法。

## 方法1：通过Files explorer上传 ##

点击Notebook的`Files explorer`面板：![656e8578967b7310ac82f849e5cf2b12.png][]然后点击上传按钮：![cf6c9aacc6a4bf942b5d70f205a3a9b0.png][]当上传结束后，就可以直接读取：![a58d88aca07321d3a09db9633f34feef.png][]

## 方法2：使用Colab `files`上传 ##

输入并运行下面代码：

from google.colab import filesuploaded = files.upload()

![a49a10ad0adde1258eda92e851768a06.png][]然后就可以选择对应的文件，完成上传：![32fdf2c50201fdeac88ca8c8e335f9b4.png][]

## 方法3：读取Github链接 ##

在github页面找到对应的文件路径，注意是文件的`Raw`链接：![49b8f75293426c7eb4cbb1abea794889.png][]然后将链接写到对应的位置。

## 方法4：克隆Github项目 ##

先从命令行下载项目：

!git clone https://github.com/BindiChen/machine-learning.git

然后从对应的路径完成数据读取。![d7759e06c52046307a217f98da8e1dbb.png][]

## 方法5：使用wget/axel下载文件 ##

在Notebook中可以使用Linux系统命令，可以使用`wget`或`axel`下载数据：![5e7bb9a39c4c4e86ddd2ec2dd029578a.png][]

## 方法6：读取谷歌硬盘数据 ##

挂载了谷歌硬盘后，写好路径完成读取：![7863f054fa6148f2e598fb5cc3085974.png][]![cc4c2092dff8db52f84f345ddaaba5af.png][]

## 方法7：Kaggle API完成数据下载 ##

首先在Kaggle账户的Kaggle API，点击Create New API Token，会下载一个`kaggle.json`文件。![576925ab1fa0385bcbcdea99259e29ef.png][]将`kaggle.json`文件上传后，就可以使用kaggle-api下载比赛数据或者数据集。

!kaggle competitions download -c titanic!kaggle datasets download -d alexanderbader/forbes-billionaires-2021-30

![5b7e37f9a83a0e20b44f1ec0c7046e0b.png][]

> > ![0e601f1d6ff553292fb3c20f611703b7.png][]后台回复关键词【**入群**】
> > 
> > **加入卖萌屋NLP/IR/Rec与求职讨论群**
> > 
> > 后台回复关键词【**顶会**】
> > 
> > **获取ACL、CIKM等各大顶会论文集！**
> > 
> > ![d93bb478e0efed6edf2bf81a9e1a4d6d.gif][]

[088982968dfd6dc666978ced136657ff.png]: /images/20220828/4e59acf9f8984c769d9848fc594d6a2e.png
[656e8578967b7310ac82f849e5cf2b12.png]: https://img-blog.csdnimg.cn/img_convert/656e8578967b7310ac82f849e5cf2b12.png
[cf6c9aacc6a4bf942b5d70f205a3a9b0.png]: https://img-blog.csdnimg.cn/img_convert/cf6c9aacc6a4bf942b5d70f205a3a9b0.png
[a58d88aca07321d3a09db9633f34feef.png]: /images/20220828/806c0584f0fb4b8f9a3a4d8f3a7876ca.png
[a49a10ad0adde1258eda92e851768a06.png]: https://img-blog.csdnimg.cn/img_convert/a49a10ad0adde1258eda92e851768a06.png
[32fdf2c50201fdeac88ca8c8e335f9b4.png]: /images/20220828/2138761ae5484bba85b914952d470513.png
[49b8f75293426c7eb4cbb1abea794889.png]: /images/20220828/ac061e284ea849d0b663a7a397e0365e.png
[d7759e06c52046307a217f98da8e1dbb.png]: /images/20220828/e43772a9233a4b1383cddeb0119ab0f0.png
[5e7bb9a39c4c4e86ddd2ec2dd029578a.png]: /images/20220828/3a356ebd800d425ca8c6cc20d0330e79.png
[7863f054fa6148f2e598fb5cc3085974.png]: https://img-blog.csdnimg.cn/img_convert/7863f054fa6148f2e598fb5cc3085974.png
[cc4c2092dff8db52f84f345ddaaba5af.png]: /images/20220828/897838f051e746f6b5ec84cf7145801f.png
[576925ab1fa0385bcbcdea99259e29ef.png]: /images/20220828/99813a7a537e4fac92ab9cb4145988d3.png
[5b7e37f9a83a0e20b44f1ec0c7046e0b.png]: /images/20220828/e3c673ef80624f4d9e470c0ee7f24cc0.png
[0e601f1d6ff553292fb3c20f611703b7.png]: /images/20220828/d8ee4bba3f774af99aab427e1bc2c9e4.png
[d93bb478e0efed6edf2bf81a9e1a4d6d.gif]: /images/20220828/1b8026d90ad44d73a2aea5537d9c3cfc.png