大家好，关于python3 爬虫正则表达式很多朋友都还不太明白，今天小编就来为大家分享关于想自己动手写网络爬虫，但是不会python，可以么的知识，希望对各位有所帮助！

一、想自己动手写网络爬虫，但是不会python，可以么

网络爬虫只是一种按一定规则自动获取互联网数据的方式，不仅仅只是Python，其他编程语言，像Java、Php、Node等都可以轻松实现，只不过相比较Python来说，开发工具包比较少而已，下面我简单介绍一下学习Python爬虫的过程，感兴趣的朋友可以尝试一下：

这里主要是针对没有任何Python编程基础的朋友，要学习Python爬虫，首先，最基本的就是要掌握Python常见语法，包括变量、元组、字典、列表、函数、类、文件处理、正则表达式等，这个网上教程非常多，直接搜索就能找到，包括菜鸟教程、慕课网、网易云课堂等，花个三四天时间学习一下，非常容易入门，也好掌握：

Python基础掌握差不多后，就是爬虫入门，初学的话，可以使用urllib、requests、bs4、lxml等基础爬虫库，简单易学，容易掌握，而且官方自带有非常详细的入门教程，非常适合初学者，对于爬取一些常见的web页面或网站来说，可以说是手到擒来，非常简单，先请求数据，然后再解析就行：

爬虫基础掌握差不多后，就可以学习爬虫框架了，比较流行的就是scrapy，一个免费、开源、跨平台的Python爬虫库，在业界非常受欢迎，可定制化程度非常高，只需添加少量代码就可轻松开启一个爬虫程序，相比较requests、bs4等基础库来说，可以明显提高开发效率，避免重复造轮子，建议学习一下，非常不错，很快你就会爱上这个框架：

目前就分享这3个方面吧，初学Python爬虫的话，建议还是多看多练习，以积累经验为主，后期熟悉后，可以结合pandas、matplotlib对数据做一些简单的处理和可视化，网上也有相关教程和资料，介绍的非常详细，感兴趣的话，可以搜一下，希望以上分享的内容能对你有所帮助吧，也欢迎大家评论、留言进行补充。

二、学习Python爬虫需要多久

爬虫需要掌握Python基础，re正则模块，Beatifulsoup，pyquery，xpath，selenium，scrapy等一些知识点，能爬取任何网站，包括某宝，某东。建议先去一些Python网站学习基础教程，然后再去深入学习python爬虫。蚁小二python小课就不错，零基础也能学习。

三、python爬虫如何设置爬取页数

1.确定爬取页数的方法：在进行爬虫时，我们可以使用循环来控制爬取的页数。一般来说，我们可以通过获取页面的总页数或者设置一个具体的页数来确定爬取的页数。

2.获取页面的总页数：有些网站会在页面上显示总页数，我们可以通过解析页面的内容，找到总页数的位置并提取出来。一种常见的方法是使用正则表达式或beautifulsoup库来解析html页面，并根据页面的结构和规律来提取出总页数。

3.设置具体的页数：如果网站没有显示总页数，我们可以根据需求自己设置具体的页数。在循环中通过设置一个变量，例如"page_count"，来控制爬取的页数。在每次爬取完一页后，将"page_count"加1，然后继续下一次循环，直到达到设定的页数。

需要注意的是，为了防止对网站造成过大的负担或被封ip，我们在爬取时应该设置合理的时间间隔，并合理控制爬取的页数。

关于python3 爬虫正则表达式，想自己动手写网络爬虫，但是不会python，可以么的介绍到此结束，希望对大家有所帮助。

——————————————小炎智能写作工具可以帮您快速高效的创作原创优质内容，提高网站收录量和各大自媒体原创并获得推荐量，点击右上角即可注册使用