全球主机交流论坛

标题: 请教怎么批量下载文件(下载时需要登陆)(已搞定) [打印本页]

作者: 柳眉儿    时间: 2016-11-12 17:29
标题: 请教怎么批量下载文件(下载时需要登陆)(已搞定)
本帖最后由 柳眉儿 于 2016-11-13 01:34 编辑

PS:多谢addtool兄鼎力帮助,已搞定。。。





我有批量的下载地址,直接点击下载地址时,弹出浏览器需要网站登陆,此时就算先打开浏览器,提前进行网站登陆,点击下载链接后,还是需要登陆。

但是如果先打开浏览器,进行网站登陆,然后将下载地址复制至浏览器地址栏,然后再回车或者点击“粘贴并打开”,此时就可以直接下载,不需要登陆。



问题:
1、这个直接点击和粘贴链接再运行有什么区别?(这个问题不重要,我只是好奇)
2、由于我有很多链接,如何能进行批量下载,而不是下载一个需要复制粘贴链接或者下载一个登陆一次。


请有经验的坛友指点,如果真能解决我的问题,我愿意支付50RMB烟钱作为感谢。


下载链接举例:我想批量下载以下链接(当然,这只是一部分,正式下载时可能会有上百个这样的链接):

http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821070
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821062
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821055
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821048
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821043
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821034
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821027
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821024
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821014
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1821005
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820996
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820984
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820971
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820965
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820954
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820948
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820941
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820933
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820926
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820919
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820903
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820894
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820881
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820871
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820863
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820855
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820850
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820845
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820838
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820832
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820822
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820815
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820809
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820803
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820795
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820786
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820777
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820771
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820762
http://pub.alimama.com/favorites/item/export.json?scenes=1&adzoneId=57994304&siteId=14892152&groupId=1820757


作者: 斜阳晚暮    时间: 2016-11-12 17:34
我觉得还是楼主再整理一下语言。
作者: 天九    时间: 2016-11-12 17:36
IE记住密码再来个 批量打开试试
作者: 柳眉儿    时间: 2016-11-12 17:38
天九 发表于 2016-11-12 17:36
IE记住密码再来个 批量打开试试

行不通,记住密码也只能自动填写,还得手工去点击“下载”,而且网站还时不时有图形,进度条等验证方式。
作者: 今晚我是你的    时间: 2016-11-12 17:41
写脚本每次自动带上登录名和 密码
作者: 天九    时间: 2016-11-12 17:43
柳眉儿 发表于 2016-11-12 17:38
行不通,记住密码也只能自动填写,还得手工去点击“下载”,而且网站还时不时有图形,进度条等验证方式。 ...

记住密码,会自动登录,用命令行批量打开IE,就会自动下载,这个方式有验证码就找个学生,包一个月每天点下
作者: 柳眉儿    时间: 2016-11-12 17:46
本帖最后由 柳眉儿 于 2016-11-12 17:47 编辑
今晚我是你的 发表于 2016-11-12 17:41
写脚本每次自动带上登录名和 密码


有偿求脚本!谢谢!最好是能批量下载,而不是需要手工一条一条点击。
作者: cdwyd    时间: 2016-11-12 23:49
没人接的话可以联系我,左侧有QQ,抓取这个应该不成问题
作者: 柳眉儿    时间: 2016-11-13 00:05
cdwyd 发表于 2016-11-12 23:49
没人接的话可以联系我,左侧有QQ,抓取这个应该不成问题

还没睡吧,呵。
作者: 柳眉儿    时间: 2016-11-13 00:14
cdwyd 发表于 2016-11-12 23:49
没人接的话可以联系我,左侧有QQ,抓取这个应该不成问题

我把需要批量下载的链接放上面了,您先试下,可否进行批量下载。
作者: addtool    时间: 2016-11-13 00:19
你的意思是下载多个报表文件呢?
作者: 柳眉儿    时间: 2016-11-13 00:20
addtool 发表于 2016-11-13 00:19
你的意思是下载多个报表文件呢?

是的,最好是自动的,但这些文件链接我都是已经有了的。
作者: 柳眉儿    时间: 2016-11-13 00:21
addtool 发表于 2016-11-13 00:19
你的意思是下载多个报表文件呢?

目前我的方式是一条一条复制到浏览器地址栏中进行下载,上百条的话,太麻烦了。




欢迎光临 全球主机交流论坛 (https://fd.vvwvv.eu.org/) Powered by Discuz! X3.4