警惕行使！从入门到能干，一文带你学会Python面向牢狱爬虫

API (应用措施接口)是为了以尺度的方法在差异的体系之间互换数据。可是，大大都时辰，网站全部者并不提供任何 API。在这种环境下，我们只能行使 web 抓取提取数据了。

根基上，每个 web 页面都以 HTML 名目从处事器返回，这意味着我们的现实数据被很好地包装在 HTML 元素中。这使得检索特定命据的整个进程很是简朴和直接。

本教程将是一个自始至终的指南，让你可以尽也许简朴的行使 Python进修爬虫。起首，我将向你先容一些根基的示例，让你认识 web 抓取。稍后，我们将行使这些常识从 Livescore.cz 中提取足球角逐的数据。

开始

为了让我们开始，你必要启动一个新的 Python3 项目，并安装 Scrapy (一个用于 Python 的 web 爬虫库)。我在本教程中行使了 pipenv，可是你也可以行使 pip 和 venv，或 conda。

pipenv install scrapy # Pipenv 安装 scrap 

此刻，你已经有了 Scrapy，可是你如故必要建设一个新的 web 抓取项目，为此 Scrapy 提供了一个呼吁行，可觉得我们完成这项事变。

此刻，让我们行使 scrapy clii 建设一个名为 web _ scraper 的新项目。

假如你像我一样行使 pipenv，请行使：

pipenv run scrapy startproject web_scraper 

可能在你本身的假造情形中，行使：

scrapy startproject web_scraper 

这将在事变目次中建设一个根基项目，其布局如下:

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!