10个python爬虫入门实例(小结)

时间:2021-05-22

昨天带伙伴萌学习python爬虫,准备了几个简单的入门实例

涉及主要知识点:

  • web是如何交互的
  • requests库的get、post函数的应用
  • response对象的相关函数,属性
  • python文件的打开,保存
  • 代码中给出了注释,并且可以直接运行哦

    如何安装requests库(安装好python的朋友可以直接参考,没有的,建议先装一哈python环境)

    windows用户,Linux用户几乎一样:

    打开cmd输入以下命令即可,如果python的环境在C盘的目录,会提示权限不够,只需以管理员方式运行cmd窗口

    pip install -i https://pypi.tuna.tsinghua.edu.cn/simple requests

    Linux用户类似(ubantu为例): 权限不够的话在命令前加入sudo即可

    sudo pip install -i https://pypi.tuna.tsinghua.edu.cn/simple requests

    1.爬取强大的BD页面,打印页面信息

    # 第一个爬虫示例,爬取百度页面import requests #导入爬虫的库,不然调用不了爬虫的函数response = requests.get("http:///img/baidu_jgylogo3.gif") #get方法的到图片响应file = open("D:\\爬虫\\baidu_logo.gif","wb") #打开一个文件,wb表示以二进制格式打开一个文件只用于写入file.write(response.content) #写入文件file.close()#关闭操作,运行完毕后去你的目录看一眼有没有保存成功

    到此这篇关于10个python爬虫入门实例(小结)的文章就介绍到这了,更多相关python爬虫入门内容请搜索以前的文章或继续浏览下面的相关文章希望大家以后多多支持!

    声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。

    相关文章