python如何用python爬取数据
如何用python爬取数据
1、find_all()的爬取
find_all():提取所有符合要求的数据,搜索当前tag的所有tag子节点,并判断是否符合过滤器的条件。
2、用法
bs对象.find_all(标签,属性)
3、注意
bs对象、标签和属性使用都与find()一致。但是,从find_all()中提取的数据类型与find()是不同的。通过find()方法提取的数据类型通常是Tag,而通过find_all提取的数据类型通常是ResultSet。碰到了Tag类型的数据,我们可以通过Tag.text()来进一步提取纯文本格式的内容,通过Tag['PropertyName']来提取特定属性的值。当遇到了ResultSet类型的数据时,我就会想办法通过遍历进一步提取所有符合条件的数据。
4、实例
#最灵活的使用方式
li_quick=soup.find_all(attrs={'class':'item-1'})
forli_quickinli_quick:
print('最灵活的查找方法:',li_quick)
以上就是用python爬取数据的方法,在之前我们已经对find方法有所学习,那么本篇find_all()也是比较简单和快速的爬取方法之一。更多Python学习教程请关注IT培训机构:千锋教育。
相关推荐HOT
更多>>pythonfor循环是什么
pythonfor循环是什么在做遍历的时候,对于一些数据的反复循环执行,我们会用到for循环的语句。可以说这是新手入门必学的语句之一,在很多基础循...详情>>
2023-11-13 07:46:36pythoncontextmanager()的转换
python中contextmanager()的转换1、说明当发出请求时,requests库会在将请求实际发送到目标服务器之前准备该请求。请求准备包括像验证头信息和...详情>>
2023-11-13 06:34:35python使用items()遍历键值对
python使用items()遍历键值对字典可以用来存储各种方式的信息,所以有很多方式可以通过字典的所有键值对、键或值。说明1、即使通过字典,键值对...详情>>
2023-11-13 04:24:15python实例方法中self的作用
python实例方法中self的作用说明1、无论是创建类的构造方法还是实例方法,最少要包含一个参数self。2、通过实例的self参数与对象进行绑定,程序...详情>>
2023-11-13 03:46:48