PhantomJS:是一个无头(headless)浏览器。它会把网站加载到内存并施行页面上的Java，可是它不会向用户展现网页的图形界面。把Selenium和PhantomJS 连系在一路，就能够运转一个很是强大的收集爬虫了，能够处置cookie、Java、header，以及任何你需要做的工作。

　　大师好，《手把手教你写收集爬虫》连载起头了!在笔者的职业生活生计中，几乎没有发觉像收集爬虫如许的编程实践，能够同时吸引法式员和外行人的留意。本文由浅入深的把爬虫手艺和盘托出，为初学者供给一种轻松的入门体例。请跟从我们一路踏上爬虫进修的打怪升级之路吧!

　　BeautifulSoup供给一些简单的、Python式的函数用来处置导航、搜刮、点窜阐发树等功能。它是一个东西箱，通过解析文档为用户供给需要抓取的数据，由于简单，所以不需要几多代码就能够写出一个完整的使用法式。怎样样，是不是感觉只需复制粘贴就能够写爬虫了?简单的爬虫确实是能够的!

　　Selenium 本人不带浏览器，它需要与第三方浏览器连系在一路利用。例如，若是你在Firefox 上运转Selenium，能够间接看到一个Firefox 窗口被打开，进入网站，然后施行你在代码中设置的动作。虽然如许能够看得更清晰，但不合用于我们的爬虫法式，爬一页就打开一页效率太低，所以我们用一个叫PhantomJS的东西取代实在的浏览器。

　　Selenium:是一个强大的收集数据采集东西，其最后是为网站主动化测试而开辟的。近几年，它还被普遍用于获取切确的网站快照，由于它们能够间接运转在浏览器上。Selenium 库是一个在WebDriver 上挪用的API。WebDriver 有点儿像能够加载网站的浏览器，可是它也能够像BeautifulSoup对象一样用来查找页面元素，与页面上的元素进行交互(发送文本、点击等)，以及施行其他动作来运转收集爬虫。安装体例与其他Python第三方库一样。