常用參數如下:
使用示例:
例1:抓取頁面到指定文件,如果有亂碼可以使用iconv轉碼
例2:模擬瀏覽器頭(user-agent)
例3:處理重定向頁面
例4:模擬用戶登陸,保存Cookie信息到cookies.txt文件,再使用cookie登陸
例5:獲取HTTP響應頭headers
例6:訪問HTTP認證頁面
例7:通過ftp上傳和下載文件
wget(文件下載工具)
常用參數如下:
使用示例:
例1:下載單個文件到當前目錄下,也可以-P指定下載目錄
例2:對于網絡不穩定的用戶可以使用-c和–tries參數,保證下載完成
例3:下載大的文件時,我們可以放到后臺去下載,這時會生成wget-log文件來保存下載進度
例4:可以利用—spider參數判斷網址是否有效
例5:自動從多個鏈接下載文件