【每日一记8】+第3天+win10如何安装python虚拟环境以及爬虫环境？

1. 我们学习使用爬虫的时候，有时会在linux下使用，但是有时候我们想在windows下面使用fiddler等其他辅助工具写爬虫感觉会更方便，但是windows下面安装python环境就比较坑，下面我们来讲一下避免这些坑。

复制代码

以win10环境为例

•     windows安装虚拟环境

  
  
  安装python解释器建议直接安装python3版本，根据操作系统版本32位还是64位下载对应的版本python解释器,仅仅安装python解释器其他的包不要安装
  启动cmd终端准备开始安装虚拟环境,执行一下命令：pip install virtualenv
  安装 windows 版本的virtualenvwrapper，这个要比我们原始的virtualenv好用很多，执行命令：pip install virtualenvwrapper-win
  如果不做配置默认是C:\Users\用户\Envs
  配置完成后重新启动cmd命令窗口，因为新配置的环境变量对当前dos窗口不生效
• 配置爬虫虚拟环境

  
  
  创建爬虫虚拟环境（python项目一定要创建虚拟环境），执行命令：mkvirtualenv spider_py3,创建好的虚拟环境将会再我们上面设置的目录里面
  进入创建好虚拟环境workon spider_py3
  使用pip安装常用的爬虫包
  pip install requests
  pip install lxml
  pip install bs4
  pip install selenium
  
  安装srapy框架
  
  
  pip install scrapy 安装框架可能会出现下面的这个问题，如果没有请跳过，我安装的时候没有报错。
  
  你需要单独安装twisted，不要使用pip install twsited 去安装还是会出现上面这个问题，windows平台上面所以需要安装windows版本的twisted 使用命令：pip install Twisted[windows_platform] 安装会安装windows相关编译的相关工具，如果还是失败，看第三步。
  离线安装Twisted
  
  
  安装wheel工具  pip install wheel
  下载对应版本Twisted 下载链接 https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
  使用pip安装下载好的文件  例如： pip install Twisted-17.9.0-cp36-cp36m-win_amd64.whl
  安装完成twisted后再次使用 pip install scrapy 安装scrapy框架
  安装scrapy相关的包：
  pip install scrapyd
  pip install scrapy-redis
• scrapy安装完成后 启动scrapy项目的时候可能出现类似的问题 import win32api ImportError DLL load failed
  解决方案：http://blog.csdn.net/github_35160620/article/details/53347807
• pip安装的时候可能出现类似的问题UnicodeDecodeError: 'utf-8' codec can't decode byte 0xd5 in position 2: invalid continuation byte
  解决方案：

      D:\Envs\spider_py3\Lib\site-packages\pip\compat修改里面的__init__.py把return s.decode(‘utf-8’)编码格式替换成gbk
• win10下面有一个powershell 如果想使用virtualenvwrapper那么 需要但是安装支持wrapper的包，而且这个包不支持python3，仅仅支持python2 请查看文档：http://virtualenvwrapper.readthedocs.io/en/latest/install.html  
• 安装软件包遇到问题的时候建议查看官方文档的安装文档，如果安装官方文档安装还出现问题再查找解决方案
  
  

pip : 无法将“pip”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。请检查名称的拼写，如果包括路径，请确保路径正确，然后再试一次。

感谢分享

楼主分享的案例很实用，具有典型性，希望有更多这样的干货供我们学习参考，非常感谢！

每天一点新知识

感谢分享

感谢分享

感谢分享

感谢分享

感谢分享