简单python爬虫案例(爬取慕课网全部实战课程信息) 技术选型 下载器是Requests 解析使用的是正则表达式 效果图: 准备好各个包 # -*- coding: utf-8 -*- import requests #第三方下载器 import re #正则表达式 import json #格式化数据用 from requests.exceptions import RequestException #做异常处理 from ...
pip3installrequest 接着来分析慕课网的网页结构: 可以看到每一门课都对应一个简单的网址,如"JAVA遇见HTML——Servlet篇"课程对应的网址为:http://www.imooc.com/learn/269。且目前的最大课程编号为888,因此这里可以用一个简单的循环获得所有课程链接: baseUrl ="http://www.imooc.com/learn/"k =0whilek <1...
最近,我发现了一种神奇的技能,那就是通过Python爬虫来获取慕课网的课程信息。这让我感到非常激动和兴奋,就好像在海洋中寻找宝藏一样。 探险的开始——了解Python爬虫 在踏上这次探险之前,我深入研究了Python爬虫的基本知识。就像准备一个精心计划的探险行动一样,我学会了编写代码,使用各种库和工具。这些工具就像我的航...
a) Coursera: Coursera 合作了世界顶级大学，提供广泛的计算机科学和编程课程。这些课程由经验丰富的教授和专业人士授课，内容深入浅出。b) Udemy: Udemy 是一个自由职业者和专家共享他们的知识的平台。您可以在 Udemy 上找到各种编程课程，从基础到高级，涵盖各种编程语言和技术。c) Codecademy: Codecademy 是一个以...
1. Re:python爬取慕课网课程信息 您好 这是每个课程只爬取一个人的评论吗? --mangotongs 2. Re:爬虫之Urllib 代码运行正常,建议多些对代码的注释。 --Leslie_Chan 3. Re:迭代器, 生成器 了解迭代器和生成器,最重要的是理解他们存在的意义,即为何要使用迭代器生成器,使用他们的好处是什么,之后才是多多在项...
技术选型 下载器是Requests 解析使用的是正则表达式 效果图: 准备好各个包 开始编写代码,new一个py文件 1.requests下载页面 这里需要注意编码的问题; 就像下面这样: 这样返回的就是一个string类型的数据 2.except RequestException:捕捉异常 为了代