博客
关于我
puppeteer(headless chrome)实现网站登录
阅读量:430 次
发布时间:2019-03-06

本文共 2033 字,大约阅读时间需要 6 分钟。

puppeteer简介

puppeteer是Chrome团队开发的一个node库,可以通过api来控制浏览器的行为,比如点击,跳转,刷新,在控制台执行js脚本等等。有了这个神器,写个爬虫,自动签到,网页截图,生成pdf,自动化测试什么的,都不在话下。

puppeteer的简单例子

代码来自官网:

const puppeteer = require('puppeteer'); (async () => {  const browser = await puppeteer.launch();//打开浏览器  const page = await browser.newPage();//打开一个空白页  await page.goto('https://example.com');//在地址栏输入网址并等待加载  await page.screenshot({path: 'example.png'});//截个图   await browser.close();//关掉浏览器})();

阅读上述代码,我们可以发现,1,代码中每一步都是异步操作,2,每一步操作都对应实际使用浏览器的一个行为。理解这两点对使用这个库有很大帮助。另外,比较常用的两个对象就是browser和page对象,对象上有一堆用来操作两个对象的方法。接下来,我们就写一个登录网站的小demo。

没有验证码的网站

对于没有验证码的网站,基本上就是输入账号,输入密码,点击登录这三步,需要用到page对象的两个方法:type用来在输入框中输入信息,click用来点击登录。下面以登录豆瓣为例来举个例子:

const puppeteer = require('puppeteer');const account = `123456@qq.com`;const password = `123456`;(async () => {  const browser = await puppeteer.launch();//打开浏览器  const page = await browser.newPage();//打开一个空白页  await page.goto('https://www.douban.com/');//打开豆瓣网站  await page.type('#form_email', account);      await page.type('#form_password', password);  await page.click('.bn-submit');  await page.waitForNavigation({    waitUntil: 'load'  });//等待页面加载出来,等同于window.onload  await page.screenshot({path: 'example.png'});//截个图  await browser.close();//关掉浏览器})();

有人说,我怎么知道到底有没有登录成功呢,一种调试的办法就是使用screenshot,如果你看到的是一个验证码页面,说明没有登录成功,还有一种办法像下面这样:

const browser = await puppeteer.launch({headless: false});//打开有界面的浏览器

传入headless:false后会真的打开一个浏览器的界面,这样你就可以实时看到代码执行到什么地方了。接下来我们说说碰到验证码时怎么办。

有验证码的网站

碰到有验证码的网站,可以将headless设成false,借助界面输入验证码,同时监听页面加载事件,实现登录,代码如下:

...  await page.waitForNavigation({    waitUntil: 'load'  });//等待页面加载出来,等同于window.onload//代码中监听跳转事件if(page.url() === 'https://www.douban.com/accounts/login'){       //登录不成功    console.log('需要输入验证码');    //等待再一次跳转    while(true){        await page.waitForNavigation({            waitUntil: 'load'        })        console.log(page.url())        if(page.url() === 'https://www.douban.com/'){            console.log('登录成功');            break;        }    }  }

整体思路就是写也个循环,不断监听页面跳转,直到浏览器登录成功后跳转到首页为止。

转载地址:http://ioguz.baihongyu.com/

你可能感兴趣的文章
Nginx的集群与负载均衡
查看>>
Vue中利用Object.defineProperty实现数据更新
查看>>
nginx看这一篇文章就够了
查看>>
Nginx知识详解(理论+实战更易懂)
查看>>
Nginx简单介绍
查看>>
Nginx系列6之-rewirte功能使用案例总结
查看>>
nginx线程模型理解
查看>>
nginx自动摘除和恢复后端服务,进行自动检测
查看>>
NGINX自动清理180天之前的日志
查看>>
Nginx虚拟主机配置
查看>>
Nginx虚拟目录配置文件(包含PHP配置与重写)
查看>>
Nginx访问控制_登陆权限的控制(http_auth_basic_module)
查看>>
nginx访问控制配置
查看>>
nginx负载均衡
查看>>
Nginx负载均衡
查看>>
Nginx负载均衡与动静分离架构实现
查看>>
Nginx负载均衡和F5的区别---系统运维工作笔记001
查看>>
nginx负载均衡和反相代理的配置
查看>>
nginx负载均衡器处理session共享的几种方法(转)
查看>>
nginx负载均衡的5种策略
查看>>