爬虫 - 赵苦瓜のBlog

【点滴记录】Python爬虫实战测试 - 爬取教务处的课程表

时间：2021-6-17 作者：赵苦瓜分类：点滴记录热度：134°

时间：2021-6-17 分类：点滴记录热度：134

前言：最近在学习Python的爬虫，于是就想趁这个机会自己实战一下=w= 想到小爱同学可以通过教务系统自动获取课程表，我们学校还有其它一些公众号也可以获取，于是我也尝试用Python把课程表爬下来。 (学校教务处还有官网都没有robots.txt文件，就当它默认让我爬了吧=w= 记录：为了方便数据的处理还有锻炼一下之前学的知识，我是采用分析接口的方...

阅读全文>>

阅读全文»

【点滴记录】爬虫基础 - Ⅱ（requests库、xpath解析）

时间：2021-5-31 作者：赵苦瓜分类：点滴记录热度：112°

时间：2021-5-31 分类：点滴记录热度：112

上一篇主要讲述了Python自带的urllib库以及正则表达式的使用方法，戳链接：https://blog.jixiaob.cn/?post=53 ———————————————————————————————————————— 从urllib到requests urllib库是Python自带的一个库，虽然是自带的，但是里面有很多地方不太方便。为了方便诸如登录还有网页验证、Cookies等操作，我们使用一个非常好用的库——requests库。 ...

阅读全文>>

阅读全文»

【点滴记录】爬虫基础（urllib库、正则表达式）

时间：2021-4-18 作者：赵苦瓜分类：点滴记录热度：243°

时间：2021-4-18 分类：点滴记录热度：243

最近要学爬虫（web crawler）啦~这篇文章来记录我学习的知识点。另外，我做了一个测试请求的接口方便我自己的练习，支持显示GET请求和POST请求，返回Json数据。 API地址：https://oneteam.jixiaob.cn/urltest GET请求示例：https://oneteam.jixiaob.cn/urltest?sample=喵&num=1 返回示例： {"method": "G...

阅读全文>>

阅读全文»

【点滴记录】Python爬虫实战测试 - 爬取教务处的课程表

【点滴记录】爬虫基础 - Ⅱ（requests库、xpath解析）

【点滴记录】爬虫基础（urllib库、正则表达式）

搜索