信息采集_爬虫

发表于 | 分类于 | | 阅读次数:
字数统计: 181

Scrapy框架：

安装Scrapy需要安装lxml、Twisted、scrapy和pypiwin32包。只需要pip install 对应包即可安装。

如何查找与本机符合的whl文件的版本？

有些时候，我们需要利用whl文件安装python的包。whl文件本质上是一个压缩包，里面包含了py文件和经过编译的pyd文件。使得可以在不具备编译环境的情况下进行安装。

利用pip工具取查询本机对应的安装标签，在命令行中打开python，输入如下代码，即可得到对应安装的标签（如cp37-cp37m-win_amd64）。

1
2
import pip._internal.pep425tags
print(pip._internal.pep425tags.get_supported())

如果是32位系统，则输入如下指令

1
2
import pip.pep425tags
print(pip.pep425tags.get_supported())
0%