詳解puppeteer使用代理

更新時間：2018年12月27日 15:17:37 作者：面向未來的歷史

這篇文章主要介紹了詳解puppeteer使用代理，小編覺得挺不錯的，現在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧

背景

在使用puppeteer進行訪問頁面的時候，有時候需要用到代理。

環(huán)境： centos 7

chrome 安裝

puppeteer使用chrome。參考chrome的命令行使用方式。在官網中沒看到說明，不過一般的執(zhí)行文件都是支持help的。
在服務器上安裝chrome ：

vim /etc/yum.repos.d/google-chrome.repo

添加內容

[google-chrome]
name=google-chrome
baseurl=http://dl.google.com/linux/chrome/rpm/stable/$basearch
enabled=1
gpgcheck=1
gpgkey=https://dl-ssl.google.com/linux/linux_signing_key.pub

安裝瀏覽器

yum -y install google-chrome-stable

說明： yum search chrome 可以查看供安裝的包

chrome 命令行代理

在shell中執(zhí)行命令：

google-chrome -h

即可看到所有的命令選項，其中 OPTION 下面有代理添加的介紹以及示例：

 --proxy-server=host:port
    Specify the HTTP/SOCKS4/SOCKS5 proxy server to use for requests.
    This overrides any environment variables or settings picked via
    the options dialog. An individual proxy server is specified
    using the format:

    [<proxy-scheme>://]<proxy-host>[:<proxy-port>]

    Where <proxy-scheme> is the protocol of the proxy server, and is
    one of:

    "http", "socks", "socks4", "socks5".

    If the <proxy-scheme> is omitted, it defaults to "http". Also
    note that "socks" is equivalent to "socks5".

    Examples:

    --proxy-server="foopy:99"
     Use the HTTP proxy "foopy:99" to load all URLs.

    --proxy-server="socks://foobar:1080"
     Use the SOCKS v5 proxy "foobar:1080" to load all URLs.

    --proxy-server="socks4://foobar:1080"
     Use the SOCKS v4 proxy "foobar:1080" to load all URLs.

    --proxy-server="socks5://foobar:66"
     Use the SOCKS v5 proxy "foobar:66" to load all URLs.

    It is also possible to specify a separate proxy server for dif‐
    ferent URL types, by prefixing the proxy server specifier with a
    URL specifier:

    Example:

    --proxy-server="https=proxy1:80;http=socks4://baz:1080"
     Load https://* URLs using the HTTP proxy "proxy1:80". And
    load http://*
     URLs using the SOCKS v4 proxy "baz:1080".


  --no-proxy-server
    Disables the proxy server. Overrides any environment variables
    or settings picked via the options dialog.


  --proxy-auto-detect
    Autodetect proxy configuration. Overrides any environment vari‐
    ables or settings picked via the options dialog.


  --proxy-pac-url=URL
    Specify proxy autoconfiguration URL. Overrides any environment
    variables or settings picked via the options dialog.

其中 –proxy-server= 的值的格式是 [<proxy-scheme>://]<proxy-host>[:<proxy-port>]

其中 http 代理是不需要加 proxy-scheme ,以上的示例中顯示 socks 代理是需要添加scheme。

比如：

在本機建立一個 socks5 代理服務器，本地端口是 1088

復制代碼代碼如下:

google-chrome --headless --disable-gpu --proxy-server="socks5://127.0.0.1:1088" --print-to-pdf https://www.chromestatus.com/

上面的示例中并沒有需要密碼（用戶）驗證的。

puppeteer 添加代理

在以上命令行中，代理 option 添加方式是：

--proxy-server="socks5://127.0.0.1:1088"

在 puppeteer 中，啟動瀏覽器時添加代理：

復制代碼代碼如下:

const browser = await puppeteer.launch({headless:true, args:['--no-sandbox','--proxy-server=socks5://127.0.0.1:1088']});

具體puppeteer使用參考網上實例。

說明

有關使用賬戶密碼credentials 的代理使用：

1 新建代理
可以在本地新建一個不用密碼的代理，該代理訪問有密碼的代理。然后puppeteer 中使用該無密碼代理

2 頁面添加代理
具體使用可以參考： https://github.com/GoogleChrome/puppeteer/blob/master/docs/api.md#pageauthenticatecredentials

自己還沒使用過.

參考文章：

chrome 安裝 http://www.dhdzp.com/article/153596.htm

puppeteer api 說明 https://github.com/GoogleChrome/puppeteer/blob/master/docs/api.md

代理問題 https://github.com/GoogleChrome/puppeteer/issues/336

puppeteer 官方文檔 https://pptr.dev/#?product=Puppeteer&version=v1.5.0&show=api-class-page

以上就是本文的全部內容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。

您可能感興趣的文章:

node.js中Util模塊作用教程示例詳解
這篇文章主要為大家介紹了node.js中Util模塊的教程示例詳解，帶大家充分的了解node.js的util模塊，有需要的朋友可以借鑒參考下，希望能夠有所幫助
2021-11-11
node微信小程序登錄實現登錄的項目實踐
登陸流程是指小程序用戶進行授權登陸,即獲取用戶的微信賬號等信息本文就來介紹一下node微信小程序登錄實現登錄,具有一定的參考價值,感興趣的可以了解一下
2023-09-09
詳解nodejs微信公眾號開發(fā)——2.自動回復
這篇文章主要介紹了詳解nodejs微信公眾號開發(fā)——2.自動回復,非常具有實用價值，需要的朋友可以參考下
2017-04-04
mac中利用NVM管理不同node版本的方法詳解
這篇文章主要給大家介紹了關于在mac中利用NVM管理不同node版本的相關資料，文中詳細介紹了nvm的安裝和卸載、nvm安裝node的方法，以及nvm如何管理node版本，需要的朋友可以參考借鑒，下面隨著小編來一起學習學習吧。
2017-11-11
Node.js?express中的身份認證的實現
本文主要介紹了Node.js?express中的身份認證的實現，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧
2023-01-01
Node.JS循環(huán)刪除非空文件夾及子目錄下的所有文件
這篇文章主要介紹了Node.JS循環(huán)刪除非空文件夾及子目錄下的所有文件及node.js遞歸刪除非空文件夾的實例代碼，需要的朋友可以參考下
2018-03-03
npm?ERR!Cannot?read?properties?of?null(reading?'p
這篇文章主要給大家介紹了關于npm?ERR!Cannot?read?properties?of?null(reading?'pickAlgorithm')報錯問題的解決方法,文中通過圖文介紹的非常詳細,需要的朋友可以參考下
2023-03-03
利用node.js實現反向代理的方法詳解
在實際工程開發(fā)中，會有前后端分離的需求。為了平滑的完成前端請求到后端各個獨立服務，需要一個中間件實現請求轉發(fā)的功能，利用Nginx可以實現，在這里使用nodejs實現一個反向代理服務器。本文主要介紹了關于利用node.js實現反向代理的相關資料，需要的朋友可以參考下。
2017-07-07
nodejs實例解析（輸出hello world）
本文主要介紹nodejs實例解析：輸出hello world的完整過程。具有一定的參考價值，下面跟著小編一起來看下吧
2017-01-01
使用Node.js腳本自動統(tǒng)計代碼量的實現代碼
手動統(tǒng)計代碼行數通常會耗費大量時間和精力,為了提高統(tǒng)計效率并減少人為錯誤,我們可以借助自動化工具來完成這項任務,本文將介紹如何使用 Node.js 腳本來自動化統(tǒng)計項目代碼行數,讓我們能夠輕松快捷地獲取項目的代碼量信息,需要的朋友可以參考下
2023-12-12