在第一章中,我们了解了Web抓取的全部内容。在本章中,让我们看看如何使用Python实施Web抓取。

Python是用于抓取Web数据的流行工具, Python编程语言还用于与网络安全,渗透测试以及数字取证应用程序相关的其他有用项目,使用Python的基本编程,无需使用任何其他第三方工具即可执行Web抓取。

安装Python

Python发行版可用于Windows,MAC和Unix/Linux等平台,我们只需要下载适用于我们平台的二进制代码即可安装Python,但是,如果无法使用我们平台的二进制代码,则必须使用C编译器,以便可以手动编译源代码。

我们可以在以下各种平台上安装Python-

在Unix和Linux上安装Python

您需要按照下面给出的步骤在Unix/Linux机器上安装Python-

第1步 - 转到链接 https://www.python .org/downloads/

第2步 - 在上述链接上下载可用于Unix/Linux的压缩源代码。

第3步 - 将文件提取到计算机上。

第4步 - 使用以下命令完成安装- 

run ./configure script
make
make install

您可以在标准位置/usr/local/bin 中找到已安装的Python,并在/usr/local/lib/pythonXX 中找到其库,其中XX是Python的版本。

在Windows上安装Python

您需要按照以下给出的步骤在Windows机器上安装Python-

第1步 - 转到链接 https://www.python .org/downloads/

第2步 - 下载Windows安装程序 python-XYZ.msi 文件,其中XYZ是我们需要安装的版本。

第3步 - 现在,将安装程序文件保存到本地计算机并运行MSI文件。

第4步 - 最后,运行下载的文件以打开Python安装向导。

在Macintosh上安装Python

我们必须使用 Homebrew 在Mac OS X上安装Python3,Homebrew易于安装并且是出色的软件包安装程序。

也可以使用以下命令安装Homebrew-

$ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"

为了更新包管理器,我们可以使用以下命令-

$brew update

借助以下命令,我们可以在我们的MAC机器上安装Python3-

$brew install python3

设置路径

您可以按照以下说明在各种环境中设置路径-

在Unix/Linux上设置路径

使用以下命令来使用各种命令shell设置路径-

setenv PATH "$PATH:/usr/local/bin/python".

对于bash shell(Linux)

ATH="$PATH:/usr/local/bin/python".

对于sh或ksh shell

PATH="$PATH:/usr/local/bin/python".

在Windows上设置路径

要在Windows上设置路径,我们可以在命令提示符下使用路径%path%; C:\Python ,然后按Enter。

运行Python

我们可以使用以下方式之一启动Python-

CLI控制台运行

可以使用提供命令行解释器或Shell的操作系统(如UNIX和DOS)来启动Python。

链接:https://www.learnfk.com/article-python_web_scraping/python_web_scraping_getting_started_with_python

来源:LearnFk无涯教程网

步骤1 -在命令行中输入 python 。

步骤2 -然后,我们可以立即在交互式解释器中开始编码。

$python # Unix/Linux
or
python% # Unix/Linux
or
C:> python # Windows/DOS

命令行脚本

我们可以通过调用解释器在命令行执行Python脚本,可以理解如下-

无涯教程网

$python script.py # Unix/Linux
or
python% script.py # Unix/Linux
or
C: >python script.py # Windows/DOS

这一章你学到了什么?做个笔记,好记忆不如烂笔头! 如果觉得对您有帮助,请分享给您的朋友。

祝学习愉快! (您也可以 选中需要修改的内容->右键->进行编辑)

点我分享笔记