如何在puppeteer中使用代理-创新互联
本篇文章给大家分享的是有关如何在puppeteer中使用代理,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。
创新互联公司服务项目包括锦江网站建设、锦江网站制作、锦江网页制作以及锦江网络营销策划等。多年来,我们专注于互联网行业,利用自身积累的技术优势、行业经验、深度合作伙伴关系等,向广大中小型企业、政府机构等提供互联网行业的解决方案,锦江网站推广取得了明显的社会效益与经济效益。目前,我们服务的客户以成都为中心已经辐射到锦江省份的部分城市,未来相信会继续扩大服务区域并继续获得客户的支持与信任!背景
在使用puppeteer进行访问页面的时候,有时候需要用到代理。
环境: centos 7
chrome 安装
puppeteer使用chrome。 参考chrome的命令行使用方式。 在官网中没看到说明,不过一般的执行文件都是支持help的。
在服务器上安装chrome :
vim /etc/yum.repos.d/google-chrome.repo
添加内容
[google-chrome] name=google-chrome baseurl=http://dl.google.com/linux/chrome/rpm/stable/$basearch enabled=1 gpgcheck=1 gpgkey=https://dl-ssl.google.com/linux/linux_signing_key.pub
安装浏览器
yum -y install google-chrome-stable
说明: yum search chrome 可以查看供安装的包
chrome 命令行代理
在shell中执行命令:
google-chrome -h
即可看到所有的命令选项,其中 OPTION 下面有代理添加的介绍以及示例:
--proxy-server=host:port Specify the HTTP/SOCKS4/SOCKS5 proxy server to use for requests. This overrides any environment variables or settings picked via the options dialog. An individual proxy server is specified using the format: [://] [: ] Where is the protocol of the proxy server, and is one of: "http", "socks", "socks4", "socks5". If the is omitted, it defaults to "http". Also note that "socks" is equivalent to "socks5". Examples: --proxy-server="foopy:99" Use the HTTP proxy "foopy:99" to load all URLs. --proxy-server="socks://foobar:1080" Use the SOCKS v5 proxy "foobar:1080" to load all URLs. --proxy-server="socks4://foobar:1080" Use the SOCKS v4 proxy "foobar:1080" to load all URLs. --proxy-server="socks5://foobar:66" Use the SOCKS v5 proxy "foobar:66" to load all URLs. It is also possible to specify a separate proxy server for dif‐ ferent URL types, by prefixing the proxy server specifier with a URL specifier: Example: --proxy-server="https=proxy1:80;http=socks4://baz:1080" Load https://* URLs using the HTTP proxy "proxy1:80". And load http://* URLs using the SOCKS v4 proxy "baz:1080". --no-proxy-server Disables the proxy server. Overrides any environment variables or settings picked via the options dialog. --proxy-auto-detect Autodetect proxy configuration. Overrides any environment vari‐ ables or settings picked via the options dialog. --proxy-pac-url=URL Specify proxy autoconfiguration URL. Overrides any environment variables or settings picked via the options dialog.
其中 –proxy-server= 的值的格式是 [
其中 http 代理是不需要加 proxy-scheme ,以上的示例中显示 socks 代理是需要添加scheme。
比如:
在本机建立一个 socks5 代理服务器, 本地端口是 1088
复制代码 代码如下:
google-chrome --headless --disable-gpu --proxy-server="socks5://127.0.0.1:1088" --print-to-pdf https://www.chromestatus.com/
上面的示例中并没有 需要密码(用户)验证的。
puppeteer 添加代理
在以上命令行中, 代理 option 添加方式是:
--proxy-server="socks5://127.0.0.1:1088"
在 puppeteer 中,启动浏览器时添加代理:
复制代码 代码如下:
const browser = await puppeteer.launch({headless:true, args:['--no-sandbox','--proxy-server=socks5://127.0.0.1:1088']});
以上就是如何在puppeteer中使用代理,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注创新互联行业资讯频道。
名称栏目:如何在puppeteer中使用代理-创新互联
当前URL:http://scjbc.cn/article/cesjpi.html