最近误入一个免费资源的分享群（正经脸），群里每天都在刷资源链接。但是大家都知道，百度云的分享链接是很容易被河蟹的，群里除了分享链接外，就是各种抱怨 "怎么又失效了"，"又河蟹了..."。本着学习技术的初心，于是我就开始研究怎样自动爬取微信群的消息并自动转存到自己的云盘。

需求： 1、爬取微信群里的百度云分享链接2、将资源转存到自己的网盘

涉及： 1、正则表达式2、如何分析cookie和api3、selenium（webdriver）

寻找并分析百度云的转存api

这个部分是我们的重点，首先你得有一个百度云盘的账号，然后登录，用浏览器（这里用火狐浏览器做示范）打开一个分享链接。F12打开控制台进行抓包。手动进行转存操作：全选文件->保存到网盘->选择路径->确定。点击【确定】前建议先清空一下抓包记录，这样可以精确定位到转存的api。

可以看到上图中抓到了一个带有 "transfer" 单词的 post 请求，这就是我们要找的转存（transfer）api 。接下来很关键，就是分析它的请求头和请求参数，以便用代码模拟。

点击它，再点击右边的【Cookies】就可以看到请求头里的 cookie 情况。

cookie分析： 因为转存是登录后的操作，所以需要模拟登录状态，将与登录有关的 cookie 设置在请求头里。我们继续使用【控制变量法】，先将浏览器里关于百度的 cookie 全部删除（在右上角的设置里面，点击【隐私】，移除cookies。具体做法自己百度吧。）

然后登录，右上角进入浏览器设置->隐私->移除cookie，搜索 "bai" 观察 cookie 。这是所有跟百度相关的 cookie ，一个个删除，删一个刷新一次百度的页面，直到删除了 BDUSS ，刷新后登录退出了，所以得出结论，它就是与登录状态有关的 cookie 。

同理，删除掉 STOKEN 后，进行转存操作会提示重新登录。所以，这两个就是转存操作所必须带上的 cookie 。

弄清楚了 cookie 的情况，可以像下面这样构造请求头。

除了上面说到的两个 cookie ，其他的请求头参数可以参照手动转存时抓包的请求头。

参数分析： 接下来分析参数，点击【Cookies】右边的【Params】查看参数情况。如下：

两个与分享的资源有关，bdstoken与登录的账号有关。下面的form data里的两个参数分别是资源在分享用户的网盘的所在目录和刚刚我们点击保存指定的目录。

所以，需要我们另外填写的参数为： shareid、from、bdstoken、filelist 和 path ，bdstoken 可以手动转存抓包找到，path 根据你的需要自己定义，前提是你的网盘里有这个路径。其他三个需要从分享链接里爬取，这个将在后面的 【爬取shareid、from、filelist，发送请求转存到网盘】 部分中进行讲解。

搞清楚了参数的问题，可以像下面这样构造转存请求的 url 。