wget curl不检查证书认证、断点续传、切片下载文件

目录

背景

实例

wget

curl

分块下载、切片下载

curl

---

背景

Linux命令行下载文件时，经常遇到https证书认证的网站，需要忽略证书认证，否则报错无法下载文件，特此记录。

实例

wget

wget https://192.168.100.58/uploads/835538633.jpeg --no-check-certificate

重命名

wget -O miniconda.sh https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

断点续传

wget -c https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

伪装浏览器下载

wget --user-agent="Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.16 (KHTML, like Gecko) Chrome/10.0.648.204 Safari/534.16" https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

匿名FTP下载

wget ftp-url

认证FTP下载

wget --ftp-user=USERNAME --ftp-password=PASSWORD url

下载多个文件 

wget -i urlList.txt

> cat urlList.txt
url1
url2
url3
url4

curl

参数说明

-k/--insecure                  允许不使用证书到SSL站点
-1/--tlsv1                        使用TLSv1（SSL）
-o/--output                     把输出写到该文件中
-O/--remote-name         把输出写到该文件中，保留远程文件的文件名
-r/--range <range>        检索来自HTTP/1.1或FTP服务器字节范围

curl -k --tlsv1 -O https://192.168.100.58/uploads/835538633.jpeg

分块下载、切片下载

curl -r 0-100 -o dodo1_part1.JPG http://www.linux.com/dodo1.JPG
curl -r 101-200 -o dodo1_part2.JPG http://www.linux.com/dodo1.JPG
curl -r 201-300 -o dodo1_part3.JPG http://www.linux.com/dodo1.JPG
cat dodo1_part* > dodo1.JPG

注：

• 用-o(小写)指定分块名，用-O（大写） 会覆盖
• 注意分块数: 第一块0-100,第二块101-200是对的;
• 不能写成,第一块0-100,第二块100-200这样块重复了,如果是压缩包会提示不"不可预料的文件末端"