扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
爬虫工具Scrapy在Mac和Linux环境下都相对好装，但是在Windows上总会碰到各种莫名其妙的问题。本文记录下Scrapy在Window上的安装过程。
本文是基于Python2.7及Windows 10安装Scrapy及各种爬虫相关库。
创新互联公司是专业的邛崃网站建设公司，邛崃接单;提供网站设计、成都网站制作,网页设计,网站设计,建网站,PHP网站建设等专业做网站服务;采用PHP框架,可快速的进行邛崃网站开发网页制作和功能扩展;专业做搜索引擎喜爱的网站,专业的做网站团队,希望更多企业前来合作!
Scrapy官方文档
按照官网建议下载安装Anaconda,使用这个安装比直接pip安装会少很多问题。
下载地址
conda install -c conda-forge scrapy下载并安装mysql官方的驱动程序。下载地址
pip install mysql-connector-python封装了MySQL C驱动的Python驱动
安装Python版C++编译程序。下载地址
拷贝mysql驱动(32位不需要这一步)，将"C:\Program Files\MySQL" 拷贝到 "C:\Program Files (x86)\MySQL"。
目的是为了防止下一步的错误"Cannot open include file: 'config-win.h': No such file or directory"
安装驱动
pip install MySQL-python安装数据库连接池工具
pip install DBUtilsBeautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。
pip install beautifulsoup4PyQuery库也是一个非常强大又灵活的网页解析库。
pip install pyquery
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
微信二维码
移动版官网