Python爬虫-蜗牛学苑

首页 / Python数据科学 · 第二阶段 / Python爬虫

发布于 2022-02-17 · 6221 次观看

课时列表
评论
课程介绍
资料列表
教师笔记

01-课程介绍及环境配置

31分钟 · 1425次播放

02-爬虫基础知识介绍

63分钟 · 925次播放

03-用chrome进行抓包

49分钟 · 238次播放

04-requests库的使用

75分钟 · 181次播放

05-xpath库的使用

15分钟 · 312次播放

06-beautifulsoup库的使用

33分钟 · 199次播放

07-正则表达式的基本使用

52分钟 · 113次播放

08-蜗牛官网note抓取实战

74分钟 · 155次播放

09-简单爬虫框架讲解

67分钟 · 110次播放

10-常见反爬手段的介绍

17分钟 · 76次播放

11-身份验证1

56分钟 · 104次播放

12-身份验证2

21分钟 · 61次播放

13-验证码识别

65分钟 · 83次播放

14-IP代理基础知识

15分钟 · 62次播放

15-异步请求

33分钟 · 61次播放

16-JS混淆加密

60分钟 · 63次播放

17-代理池知识点讲解1

36分钟 · 44次播放

18-迭代器及生成器介绍

81分钟 · 687次播放

19-协程基本概念及实例

66分钟 · 120次播放

20-IP代理池结构及源码解读

28分钟 · 46次播放

21-scrapy框架介绍

24分钟 · 162次播放

22-scrapy安装

10分钟 · 48次播放

23-scrapy创建项目及结构介绍

41分钟 · 61次播放

24-scrapy selector的使用

14分钟 · 54次播放

25-scrapy抓取蜗牛官网note文章

32分钟 · 58次播放

26-请求间参数传递

15分钟 · 44次播放

27-scrapy pipeline组件

33分钟 · 46次播放

28-scrapy middleware

11分钟 · 39次播放

29-数据分析基本概念和流程介绍

38分钟 · 38次播放

30-数据分析简单例子演示

32分钟 · 30次播放

31-Series对象简介

42分钟 · 32次播放

32-dataframe简介和基本操作

51分钟 · 24次播放

33-缺失值的处理方式

41分钟 · 26次播放

34-数据清理实战

29分钟 · 180次播放

35-数据格式转换及重塑

40分钟 · 24次播放

36-数据统计及可视化操作

54分钟 · 290次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

主要是针对不了解爬虫、数据分析的学员，用案例实战的形式带领大家了解和入门爬虫和数据分析可视化这个行业，为以后进入机器学习、数据挖掘行业打下基础

知识要点

day4.zip

Pythone爬虫第四天资料

12.72MB · 0次下载

day3-2scrapy_projects.zip

day3-1代理IP池实现架构中的主要技术点

0.08MB · 0次下载

day3-1代理IP池实现架构中的主要技术点.zip

day3-1代理IP池实现架构中的主要技术点

0.01MB · 0次下载

爬虫基础实战课程直播第2天资料.zip

爬虫基础实战课程直播第2天资料

0.49MB · 0次下载

爬虫基础实战课程直播第1天资料.zip

爬虫基础实战课程直播第1天资料.

0.85MB · 0次下载

授课讲师

卿淳俊

蜗牛学苑资深导师，19年测试开发及项目管理经验，认证敏捷项目Scrum Master，精通各种测试及开发工具、框架的设计和实现，在移动互联网、敏捷项目管理、电商测试等领域有丰富的项目经验。对大数据、机器学习、区块链等新兴技术均有深入研究。6年讲师经验铸就了深入浅出的授课风格，秉持着“授人以鱼不如授人以渔”的理念，让学员达到“知其然更要知其所以然”，真正掌握技术的本质。

看看TA的主页

推荐课程

Windows操作系统进阶

杨文财 · 4592人观看 · 741分钟

Windows操作系统进阶

1、能够在Windows操作系统下完成IIS服务器、邮件服务器、AD域控、DHCP服务器、VMWare虚拟机等环境和系统配置 2、能够在Windows环境中熟练使用Powershell完成批处理脚本开发，掌握各类Windows环境下的漏洞、病毒与防护处理 3、基于Windows系统平台和Powershell等脚本语言，结合前面所学内容，对网络安全的基本攻防有初步的认知和实战能力

配置AD域控服务器、域组策略、Windows防火墙配置、netsh命令配置防火墙、Powershell ISE开发工具、Powershell基础语法、控制语句、函数、管道、文件操作，Powershell实验场景：定时备份数据，站点可用性监控，性能指标监控，端口与进程监控，敏感文件监控，防火墙安全应急

加入收藏

系统测试方法与应用

邓强 · 2271人观看 · 1410分钟

系统测试方法与应用

理解软件工程的各类实际问题，树立清晰的学习目标，掌握测试用例设计的常用方法和综合运用

软件工程，软件质量，系统测试流程，方法，软件测试专业术语，测试用例设计，测试报告，缺陷管理

加入收藏

tsung性能测试实战

梁爽 · 208人观看 · 133分钟

tsung性能测试实战

熟练掌握性能测试工具tusng的使用

熟悉性能测试原理和实施准则。掌握性能测试点的提取和性能测试实施方法

加入收藏

系统测试基础

邓家军 · 968人观看 · 724分钟

系统测试基础

3. 熟悉软件测试的常用模型，理解其在企业中实施的要点、熟悉配置管理标准变更过程 4. 掌握同行评审的流程规范、技巧、工具，熟悉软件测试计划方案的模板，熟练编写系统测试报告

1. 熟悉软件功能的核心概念和方法论、软件开发和测试流程、敏捷研发和测试的流程规范、方法、工具 2. 掌握软件测试用例设计方法的定义、适用范围、使用步骤、优缺点及注意事项

加入收藏

想要吊打高并发？你必须知道的底层原理

徐朝波 · 468人观看 · 158分钟

想要吊打高并发？你必须知道的底层原理

volatile的使用场景和内存屏障的产生原因与性能优化。

1、synchronized锁的使用和注意事项。 2、对象创建过程与对象字节码信息。

加入收藏

React框架开发

徐朝波 · 10673人观看 · 1826分钟

React框架开发

熟练使用react全家桶完成项目开发

组件、props、state、事件、表单、生命周期、hooks、React Router

加入收藏

MySQL数据库

杨波 · 6501人观看 · 1073分钟

MySQL数据库

数据库知识，范式，MySQL配置，命令，建库建表，数据CRUD操作，约束，视图，存储过程，函数，触发器，事务，游标，建模工具课程目标：深入理解数据库管理系统通用知识及MySQL数据库的使用与管理。为软件测试和测试开发打下基础

加入收藏

Jenkins持续集成

王斌 · 3452人观看 · 247分钟

Jenkins持续集成

持续集成概念，Jenkins介绍，Jenkins使用，日程表，邮件通知，Jenkins+Jmeter+ant

加入收藏

photoshop

张瑞 · 24329人观看 · 336分钟

photoshop

熟练运用HTML和CSS样式属性完成页面的布局和美化，基于PSD原稿完成页面像素级还原布局和设计

PhotoShop抠图、切片技巧、pxcook标注、Web前端开发环境、HTML常用标签、表单元素、CSS基础样式使用、字体图标设计

加入收藏

Jenkins框架布署自动化测试

齐美玉 · 285人观看 · 159分钟

Jenkins框架布署自动化测试

Jenkins是目前持续集成方案中较为流行的工具, 是一个开源项目，提供了一种易于使用的持续集成系统，使开发和测试者从繁杂的集成中解脱出来，专注于更为重要的业务逻辑实现上。同时 Jenkins 能实施监控集成中存在的错误，提供详细的日志文件和提醒功能.

持续集成是软件开发过程中非常重要的一个环节，不仅仅是影响软件开发的效率，也会对软件开发的流程产生一定的影响。

加入收藏

PHP编程与系统开发

邓强 · 4183人观看 · 1930分钟

PHP编程与系统开发

蜗牛笔记系统实战开发、PHP处理XML文档、处理JSON、文件操作、爬虫开发、安全平台开发、面向对象、反序列化、ThinkPHP框架开发

PHP开发环境配置、HTML基础、前端页面布局、JavaScript编程基础、PHP基础语法、数组、函数、正则表达式、PHP处理POST和GET请求、AJAX与JQuery、利用MySQLi操作数据库、处理Session和Cookie

加入收藏

自动化测试开发的体系架构

邓强 · 217人观看 · 162分钟

自动化测试开发的体系架构

测试开发代替测试工具的可行性分析，测试框架开发的价值，测试框架的关键技术及原理，基于持续集成的测试开发技术与流程应用。

自动化测试解决什么问题，自动化测试和测试开发区别在哪里，什么情况下需要测试开发，测试开发的价值和应用场景，测试开发的技术体系构成及实现原理。

加入收藏

基本信息

联系信息

上传资料