1、需求目标 ： 进去淘宝页面，搜索耐克关键词，抓取 商品的标题，链接，价格，城市，旺旺号，付款人数，进去第二层，抓取商品的销售量，款号等。 2、结果展示 3、源代码 # encoding: utf-8import sysreload(sys)sys.setdefaultencoding('utf-8')import timeimport pandas as pd

随时随地技术实战干货，获取项目源码、学习资料，请关注源代码社区公众号(ydmsq666) Callback Triggers These functions call callbacks, used for tests… closing(page)initialized()javaScriptAlertSent(message)javaScriptConsoleMessageSent(m

随时随地技术实战干货，获取项目源码、学习资料，请关注源代码社区公众号(ydmsq666) addCookie addCookie(Cookie) {boolean} Introduced: PhantomJS 1.7 Add a Cookie to the page. If the domain does not match the current page, the Cookie w

随时随地技术实战干货，获取项目源码、学习资料，请关注源代码社区公众号(ydmsq666) canGoBack Examples var webPage = require('webpage');var page = webPage.create();// @TODO: Finish page.canGoBack example. canGoForward Examples va

运行环境python2.7 相关模块需要自行下载安装 将phontomjs插件放入环境变量所在的路径 （提示：1.因为phontomjs是无界面浏览器，所以可以通过截图来直观展示  2.selenium类似于按键精灵，代替手动点击网页） 模拟访问百度并截图 #coding:utf8# 导入包from selenium import webdriver# 使用插件pho

python2.7版本 #coding:utf8import unittestfrom selenium import webdriverfrom bs4 import BeautifulSoup as bsclass douyu(unittest.TestCase):# 初始化方法，必须是setUp()def setUp(self):self.driver = webdriver.P