Python网络爬虫实战直播课-蜗牛学苑

首页 / 软件研发专题 · Python开发专题:Python开发专题 / Python网络爬虫实战直播课

发布于 2022-04-21 · 2127 次观看

展开剩余

视频列表
评论
课程介绍
资料列表
教师笔记

1-课程介绍及环境配置

31分钟 · 258次播放

2-爬虫基础知识介绍

63分钟 · 38次播放

3-用chrome进行抓包

49分钟 · 40次播放

4-requests库的使用

75分钟 · 1068次播放

5-xpath库的使用

15分钟 · 45次播放

6-beautifulsoup库的使用

33分钟 · 45次播放

7-正则表达式的基本使用

52分钟 · 43次播放

8-蜗牛官网note抓取实战

74分钟 · 67次播放

day2-1-简单爬虫框架讲解

67分钟 · 50次播放

day2-2-常见反爬手段的介绍

17分钟 · 44次播放

day2-3-身份验证1

56分钟 · 50次播放

day2-4-身份验证2

21分钟 · 42次播放

day2-5-验证码识别

65分钟 · 41次播放

day2-6-IP代理基础知识

15分钟 · 39次播放

day2-7-异步请求

33分钟 · 39次播放

day2-8-JS混淆加密

60分钟 · 47次播放

day2-9-代理池知识点讲解1

36分钟 · 11次播放

day3-1-迭代器及生成器介绍

81分钟 · 6次播放

day3-2-协程基本概念及实例

66分钟 · 6次播放

day3-3-IP代理池结构及源码解读

28分钟 · 8次播放

day3-4-scrapy框架介绍

24分钟 · 15次播放

day3-5-scrapy安装

10分钟 · 12次播放

day3-6-scrapy创建项目及结构介绍

41分钟 · 13次播放

day3-7-scrapy selector的使用

14分钟 · 8次播放

day3-8-scrapy抓取蜗牛官网note文章

32分钟 · 11次播放

day3-9-请求间参数传递

15分钟 · 10次播放

day3-10-scrapy pipeline组件

33分钟 · 8次播放

day3-11-scrapy middleware

0分钟 · 0次播放

day3-11-scrapy middleware

11分钟 · 8次播放

day4-1-数据分析基本概念和流程介绍

38分钟 · 9次播放

day4-2-数据分析简单例子演示

32分钟 · 8次播放

day4-3-Series对象简介

42分钟 · 5次播放

day4-4-dataframe简介和基本操作

51分钟 · 6次播放

day4-5-缺失值的处理方式

41分钟 · 5次播放

day4-6-数据清理实战

29分钟 · 5次播放

day4-7-数据格式转换及重塑

40分钟 · 3次播放

day4-8-数据统计及可视化操作

54分钟 · 14次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

为以后进入机器学习、数据挖掘行业打下基础

知识要点

主要是针对不了解爬虫、数据分析的受众，用案例实战的形式带领大家了解和入门爬虫和数据分析可视化这个行业

课程详情

授课讲师

卿淳俊

20年+Python全栈开发、安全测试开发及项目管理经验，认证敏捷项目Scrum Master。长期专注Python开发，熟悉各种常见渗透测试工具及攻击手段与防护策略，同时在移动互联网、敏捷项目管理、电商测试等领域有丰富的项目经验。对大数据、机器学习、区块链等新兴技术均有深入研究。10年+讲师经验铸就了深入浅出的授课风格，秉持着“授人以鱼不如授人以渔”的理念，让学员达到“知其然更要知其所以然”，真正掌握技术的本质，出版“ Python爬虫开发实战教程”。

看看TA的主页

推荐课程

基于图像识别的自动化测试框架

邓强 · 1321人观看 · 412分钟

基于图像识别的自动化测试框架

主要为大家讲解算法实现和框架开发的思路与具体代码实现。同时为大家讲解基于OpenCV的Java版和Python版代码实现。

本课程将基于Java原生代码，来实现一套基于图像识别的自动化测试框架，以应用于PC端和移动端各类GUI自动化测试。

加入收藏

java预习（武汉）

高鹏 · 686人观看 · 3406分钟

java预习（武汉）

加入收藏

Java面向对象编程-预科

陈云 · 7463人观看 · 627分钟

Java面向对象编程-预科

理解Java面向对象编程，掌握Java核心关键字的意义

类与对象，方法，重写，重载，抽象类，接口，多态，Java核心关键字

加入收藏

Java WEB开发

范程皓 · 49008人观看 · 1879分钟

Java WEB开发

完成项目分层开发，事物控制，首页数据及商品详情页数据展示

动态代理，注解，统一异常处理，实现业务方法事务的控制，Servlet与JSP开发，MVC架构模式

加入收藏

小程序开发

江岚 · 14195人观看 · 498分钟

小程序开发

uni-app：开发工具、基本使用、vuex、地图功能

微信小程序：基本介绍、开发工具、wxml和wxss、全局配置和页面配置、自定义组件、本地存储、网络请求、导航、云开发、小程序发布

加入收藏

MySQL与Redis数据库

邓强 · 13485人观看 · 1234分钟

MySQL与Redis数据库

1、掌握关系型数据库的基础理论，如三范式、约束、数据库、表和列的定义，以及安装和配置MySQL数据库管理系统 2、能够熟练应用DDL、DML、DCL、DQL等SQL语句完成对数据库中对象和数据的各类操作，包括CRUD操作等 3、理解MySQL数据库的日志文件、数据库备份操作、权限管理、常见配置项、SQL注入等跟网络和安全有关的各类操作 4、熟练使用Redis非关系型数据库，并进行各类Redis数据的CRUD操作及应用，了解Redis数据库的各类安全项

MySQL安装、命令行操作、远程登录、关系型数据库核心要素、SQL操作数据库和表、利用SQL完成CRUD操作、高级查询语句、Navicat使用、MySQL高级对象、主从复制、数据库安全，Redis安装配置、核心操作命令、Redis缓存策略、数据库日志文件、补充Oracle数据库的使用与SQL语句差异等

加入收藏

系统测试预科

胡名海 · 35297人观看 · 1394分钟

系统测试预科

理解软件工程的各类实际问题，理解系统测试的理论、方法与过程，熟练运用测试用例设计方法高效设计测试用例

软件工程，软件质量，系统测试流程，方法，专业术语，测试用例设计，禅道管理工具，测试报告，缺陷管理

加入收藏

数据操作与可视化

卿淳俊 · 3966人观看 · 564分钟

数据操作与可视化

Pandas数据读写、数据清理、数据整理、Matplotlib各种绘图功能

Pandas的Series对象的操作与运算、DataFrame操作、行和列的操作、数据的清理、数据转换、统计运算、各种文件读写、Matplotlib基础绘图、多层绘图、各种统计图形绘制、Seaborn绘图操作

加入收藏

Spring Boot+VUE

向伟 · 22486人观看 · 1655分钟

Spring Boot+VUE

完成项目中的核心功能开发

SpringBoot开发Web项目，使用VUE作为前端技术实现前后端分离开发

加入收藏

MySQL数据库

杨波 · 11848人观看 · 1073分钟

MySQL数据库

数据库知识，范式，MySQL配置，命令，建库建表，数据CRUD操作，约束，视图，存储过程，函数，触发器，事务，游标，建模工具课程目标：深入理解数据库管理系统通用知识及MySQL数据库的使用与管理。为软件测试和测试开发打下基础

加入收藏

Linux操作系统

邓强 · 28906人观看 · 1694分钟

Linux操作系统

1、掌握Linux操作系统的常用命令行、文件结构、用户权限、网络配置、Xampp配置、系统服务和防火墙配置策略 2、熟练应用Linux Shell、Cron、CURL、SSH、SCP、Expect等命令，完成各类常见网络及安全场景的批处理脚本开发 3、能够对Linux环境下的各类脆弱项和系统日志进行分析与加固，并理解Linux系统下的关键文件系统与核心文件 4、掌握Android移动端环境及各类潜在的安全威胁，熟练使用ADB命令，并熟练使用Shell脚本完成安全脚本开发。

Linux安装与配置、核心命令、网络配置、文件与文件夹操作、用户权限、进程与服务管理、网络相关命令、Tcudump流量监控，应用程序安装、Firewalld及IPTables防火墙配置、Shell脚本开发、Cron定时任务、字符串处理、Awk与Sed、Xampp环境配置、Nmon性能监控工具、Android移动端环境与命令、Windows命令对比、Shell实验场景：定时备份数据，站点可用性监控，性能指标监控，端口与进程监控，敏感文件监控，防火墙安全应急

加入收藏

6小时带你玩转unittest测试框架

卿淳俊 · 1129人观看 · 377分钟

6小时带你玩转unittest测试框架

加入收藏

基本信息

联系信息

上传资料