零基础21天学Python分布爬虫

python爬虫是什么？我们首先需要知道什么是爬虫。

爬虫，即网络爬虫，大家可以理解为在网络上爬行的一只蜘蛛，互联网就比作一张大网！

而爬虫便是在这张网上爬来爬去的蜘蛛，如果它遇到自己需要的资源，那么它就会将其抓取下来。