微慑信息网

wget批量下载

针对https,添加参数–no-check-certificate  限制下载目录级数:-l1 (小写的L )

wget –no-check-certificate -c -r -l1 -i onlyList.txt

wget --no-check-certificate -c -r -l1 -i onlyList.txt

wget –no-check-certificate -c -r -l6 -np -nv -i onlyList.txt


wget -c -r -npH -k -nv http://www.baidu.com
 
参数说明
 
-c:断点续传
 
-r:递归下载
 
-np:递归下载时不搜索上层目录
 
-nv:显示简要信息
 
-nd:递归下载时不创建一层一层的目录,把所有文件下载当前文件夹中
 
-p:下载网页所需要的所有文件(图片,样式,js文件等)
 
-H:当递归时是转到外部主机下载图片或链接
 
-k:将绝对链接转换为相对链接,这样就可以在本地脱机浏览网页了
 
-L:     只扩展相对连接,该参数对于抓取指定站点很有用,可以避免向宿主主机
 
启用地址伪装
 
-user-agent="Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.104 Safari/537.36 Core/1.53.4482.400 QQBrowser/9.7.13001.400"

 

 

赞(0) 打赏
转载请附本站链接,未经允许不得转载,,谢谢:微慑信息网-VulSee.com » wget批量下载

评论 抢沙发

微慑信息网 专注工匠精神

微慑信息网-VulSee.com-关注前沿安全态势,聚合网络安全漏洞信息,分享安全文档案例

访问我们联系我们

觉得文章有用就打赏一下文章作者

非常感谢你的打赏,我们将继续提供更多优质内容,让我们一起创建更加美好的网络世界!

支付宝扫一扫打赏

微信扫一扫打赏

登录

找回密码

注册