Python网络爬虫实战直播课-蜗牛学苑

首页 / 软件研发专题 · Python开发专题 / Python网络爬虫实战直播课

发布于 2022-04-21 · 602 次观看

展开剩余

课时列表
评论
课程介绍
资料列表
教师笔记

1-课程介绍及环境配置

31分钟 · 155次播放

2-爬虫基础知识介绍

63分钟 · 19次播放

3-用chrome进行抓包

49分钟 · 12次播放

4-requests库的使用

75分钟 · 254次播放

5-xpath库的使用

15分钟 · 9次播放

6-beautifulsoup库的使用

33分钟 · 10次播放

7-正则表达式的基本使用

52分钟 · 7次播放

8-蜗牛官网note抓取实战

74分钟 · 24次播放

day2-1-简单爬虫框架讲解

67分钟 · 14次播放

day2-2-常见反爬手段的介绍

17分钟 · 8次播放

day2-3-身份验证1

56分钟 · 9次播放

day2-4-身份验证2

21分钟 · 6次播放

day2-5-验证码识别

65分钟 · 5次播放

day2-6-IP代理基础知识

15分钟 · 4次播放

day2-7-异步请求

33分钟 · 4次播放

day2-8-JS混淆加密

60分钟 · 6次播放

day2-9-代理池知识点讲解1

36分钟 · 5次播放

day3-1-迭代器及生成器介绍

81分钟 · 1次播放

day3-2-协程基本概念及实例

66分钟 · 1次播放

day3-3-IP代理池结构及源码解读

28分钟 · 3次播放

day3-4-scrapy框架介绍

24分钟 · 5次播放

day3-5-scrapy安装

10分钟 · 2次播放

day3-6-scrapy创建项目及结构介绍

41分钟 · 4次播放

day3-7-scrapy selector的使用

14分钟 · 2次播放

day3-8-scrapy抓取蜗牛官网note文章

32分钟 · 5次播放

day3-9-请求间参数传递

15分钟 · 5次播放

day3-10-scrapy pipeline组件

33分钟 · 3次播放

day3-11-scrapy middleware

0分钟 · 0次播放

day3-11-scrapy middleware

11分钟 · 3次播放

day4-1-数据分析基本概念和流程介绍

38分钟 · 4次播放

day4-2-数据分析简单例子演示

32分钟 · 3次播放

day4-3-Series对象简介

42分钟 · 1次播放

day4-4-dataframe简介和基本操作

51分钟 · 2次播放

day4-5-缺失值的处理方式

41分钟 · 2次播放

day4-6-数据清理实战

29分钟 · 2次播放

day4-7-数据格式转换及重塑

40分钟 · 1次播放

day4-8-数据统计及可视化操作

54分钟 · 2次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

为以后进入机器学习、数据挖掘行业打下基础

知识要点

主要是针对不了解爬虫、数据分析的受众，用案例实战的形式带领大家了解和入门爬虫和数据分析可视化这个行业

授课讲师

卿淳俊

蜗牛学苑资深导师，19年测试开发及项目管理经验，认证敏捷项目Scrum Master，精通各种测试及开发工具、框架的设计和实现，在移动互联网、敏捷项目管理、电商测试等领域有丰富的项目经验。对大数据、机器学习、区块链等新兴技术均有深入研究。6年讲师经验铸就了深入浅出的授课风格，秉持着“授人以鱼不如授人以渔”的理念，让学员达到“知其然更要知其所以然”，真正掌握技术的本质。

看看TA的主页

推荐课程

JAVA技术面试辅导公开课

吴聪聪 · 377人观看 · 165分钟

JAVA技术面试辅导公开课

展望未来，分析企业需求变化趋势。

1.精准切出企业技术需求命脉。 2.超级效率的复习和刷题方法。

加入收藏

Web前端

谭岚 · 3510人观看 · 2155分钟

Web前端

利用表格，DIV+CSS完成HTML计算器和倒计时程序的布局，并利用JavaScript编程实现计算器和倒计时程序的完整功能。为后续编程学习打下基础。

Web页面元素，布局，CSS样式，盒模型，JavaScript程序设计，函数，基础算法，正则表达式。

加入收藏

Jmeter性能测试工具

邓强 · 10345人观看 · 1376分钟

Jmeter性能测试工具

性能测试基本原理，Python采集性能测试数据，数据分析，Tomcat与Mysql优化

加入收藏

性能测试与JMeter

王国林 · 14179人观看 · 1674分钟

性能测试与JMeter

熟悉性能测试实施过程和规范，理解性能测试指标体系,掌握性能测试场景设计,熟练运用Python开发性能测试脚本，熟练运用Jmeter性能测试工具

性能测试原理，指标体系，场景设计，实施过程，指标监控，Web前端性能分析

加入收藏

网络协议与攻击模拟

杨文财 · 9392人观看 · 1434分钟

网络协议与攻击模拟

1、熟练使用Wireshark进行协议监控与分析，掌握Wireshark抓包与过滤规则和语法，熟练运用Wireshark重要功能 2、熟练掌握TCP和IP协议簇核心协议，如TCP、UDP、IP、ARP、ICMP、Ping、SNMP等，对对其进行监控与分析 3、深入理解核心的应用层协议，如HTTP、HTTPS、WebSocket、SMTP、POP3、IMAP、SSH、DNS、DHCP等，并配置相应实验环境

Wireshark高级应用、Mac地址泛洪攻击、ARP协议与攻击原理、ARP欺骗、ICMP协议、ICMP泛洪攻击、TCP、UDP、SYN泛洪攻击、部署DHCP服务器、DHCP攻击、部署DNS服务器、DNS欺骗、部署IIS服务器、HTTP协议、HTTP暴力破解、wrk泛洪攻击、HTTPS协议与部署、部署邮件服务器、SMTP/IMAP/POP3邮件协议、网络流量安全分析、无线WIFI协议与攻击

加入收藏

系统测试

卿淳俊 · 5313人观看 · 1209分钟

系统测试

能够利用Python开发基于网络协议如HTTP，TCP，WebService等接口测试自动化，能应用JMeter或SoapUI等接口测试工具

对软件系统测试的方法，流程和测试用例设计方法有深刻理解，对缺陷管理及黑盒测试方法有深刻体会

加入收藏

Linux操作系统

高鹏 · 908人观看 · 1267分钟

Linux操作系统

Linux作为一个主流的服务器操作系统，是每一个开发工程师必须掌握的重点技术，并且能够熟练运用

Linux安装配置，文件目录操作，VI命令，管理，用户与权限，环境部署，Shell编程

加入收藏

自定义框架原理及实战-ORM

刘颖聪 · 240人观看 · 245分钟

自定义框架原理及实战-ORM

并通过此过程熟练掌握框架设计思想及实现

深入理解ORM框架实现原理，全程使用原生JAVA代码实现自定义ORM框架

加入收藏

MySQL数据库

胡名海 · 24378人观看 · 881分钟

MySQL数据库

深入理解数据库管理系统通用知识及MySQL数据库的使用与管理。梳理WoniuBooks系统业务关系，并建立数据表和填补数据，为WoniuBooks系统测试打下基础

数据库知识，范式，MySQL配置，命令，建库建表，数据的增删改查，约束，存储过程，函数，触发器，事务，游标

加入收藏

RFT自动化测试工具

邓强 · 832人观看 · 559分钟

RFT自动化测试工具

RTF安装，GUI/CS架构介绍，RTF配置，录制与回放，RFT及Java自动化测试脚本开发，基础框架开发等

某电脑运营商内部培训内容，包括GUI自动化测试技术体系详解

加入收藏

前后端分离实战

邓乃文 · 3957人观看 · 781分钟

前后端分离实战

掌握高级特性概念以及运用，熟练使用ES6的新增特性

JavaScript高级特性：闭包、作用域链、递归、IIFE、立即函数等，ES6新增特性：解构赋值、扩展运算符，箭头函数等

加入收藏

寇海燕 · 4909人观看 · 865分钟

UI预科视频初步熟悉PS工具在平面设计中的常用功能及具体用法，能够使用PS进行基本的图片处理。

界面介绍，基本设置，新建文件，视图操作、保存，导出，移动工具

加入收藏

基本信息

联系信息

上传资料