Python爬虫-蜗牛学苑

首页 / Python数据分析 · 第二阶段:Python系统开发 / Python爬虫

发布于 2022-02-17 · 13550 次观看

视频列表
评论
课程介绍
资料列表
教师笔记

01-课程介绍及环境配置

31分钟 · 2039次播放

02-爬虫基础知识介绍

63分钟 · 1496次播放

03-用chrome进行抓包

49分钟 · 459次播放

04-requests库的使用

75分钟 · 389次播放

05-xpath库的使用

15分钟 · 440次播放

06-beautifulsoup库的使用

33分钟 · 363次播放

07-正则表达式的基本使用

52分钟 · 205次播放

08-蜗牛官网note抓取实战

74分钟 · 284次播放

09-简单爬虫框架讲解

67分钟 · 206次播放

10-常见反爬手段的介绍

17分钟 · 151次播放

11-身份验证1

56分钟 · 187次播放

12-身份验证2

21分钟 · 213次播放

13-验证码识别

65分钟 · 155次播放

14-IP代理基础知识

15分钟 · 143次播放

15-异步请求

33分钟 · 114次播放

16-JS混淆加密

60分钟 · 125次播放

17-代理池知识点讲解1

36分钟 · 1774次播放

18-迭代器及生成器介绍

81分钟 · 737次播放

19-协程基本概念及实例

66分钟 · 170次播放

20-IP代理池结构及源码解读

28分钟 · 104次播放

21-scrapy框架介绍

24分钟 · 219次播放

22-scrapy安装

10分钟 · 105次播放

23-scrapy创建项目及结构介绍

41分钟 · 1092次播放

24-scrapy selector的使用

14分钟 · 135次播放

25-scrapy抓取蜗牛官网note文章

32分钟 · 402次播放

26-请求间参数传递

15分钟 · 113次播放

27-scrapy pipeline组件

33分钟 · 127次播放

28-scrapy middleware

11分钟 · 114次播放

29-数据分析基本概念和流程介绍

38分钟 · 296次播放

30-数据分析简单例子演示

32分钟 · 266次播放

31-Series对象简介

42分钟 · 96次播放

32-dataframe简介和基本操作

51分钟 · 76次播放

33-缺失值的处理方式

41分钟 · 80次播放

34-数据清理实战

29分钟 · 233次播放

35-数据格式转换及重塑

40分钟 · 71次播放

36-数据统计及可视化操作

54分钟 · 371次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

主要是针对不了解爬虫、数据分析的学员，用案例实战的形式带领大家了解和入门爬虫和数据分析可视化这个行业，为以后进入机器学习、数据挖掘行业打下基础

知识要点

day4.zip

Pythone爬虫第四天资料

12.72MB · 0次下载

day3-2scrapy_projects.zip

day3-1代理IP池实现架构中的主要技术点

0.08MB · 0次下载

day3-1代理IP池实现架构中的主要技术点.zip

day3-1代理IP池实现架构中的主要技术点

0.01MB · 0次下载

爬虫基础实战课程直播第2天资料.zip

爬虫基础实战课程直播第2天资料

0.49MB · 0次下载

爬虫基础实战课程直播第1天资料.zip

爬虫基础实战课程直播第1天资料.

0.85MB · 0次下载

授课讲师

卿淳俊

蜗牛学苑资深导师，19年测试开发及项目管理经验，认证敏捷项目Scrum Master，精通各种测试及开发工具、框架的设计和实现，在移动互联网、敏捷项目管理、电商测试等领域有丰富的项目经验。对大数据、机器学习、区块链等新兴技术均有深入研究。6年讲师经验铸就了深入浅出的授课风格，秉持着“授人以鱼不如授人以渔”的理念，让学员达到“知其然更要知其所以然”，真正掌握技术的本质。

看看TA的主页

推荐课程

Web系统前后端漏洞

邓强 · 16961人观看 · 2030分钟

Web系统前后端漏洞

1、熟练掌握XSS漏洞的实现原理与利用方法，并结合各类XSS漏洞利用平台和XSS靶场实现复杂应用 2、对CSRF、SSRF、跨域漏洞等各类前后端漏洞原理与利用方式有深刻的理解，并在真实场景中灵活运用 3、对常规的Web系统漏洞如文件上传、文件下载、文件包含、绕过技巧及靶场环境等，有充分的实战能力 4、综合利用前后端技术和通信协议等，结合相应靶场环境完成各类高级漏洞的原理与实战学习

XSS漏洞实现原理、XSS漏洞利用平台、XSS漏洞攻击与防御、XSS闯关挑战、Kali BeefXSS平台，CSRF漏洞原理与攻防、同源策略与跨域漏洞、CSP内容安全策略、SSRF漏洞利用、文件上传漏洞原理、前端绕过、MIME类型绕过、黑名单绕过、解析机制绕过、00截断绕过、图片马绕过、二次渲染绕过、其他绕过方式、文件包含漏洞原理、本地包含与远程包含、文件包含获取Shell、PHP伪协议处理、文件下载漏洞、Upload-Lab靶场实战

加入收藏

素描和插画

罗斌 · 15196人观看 · 847分钟

素描和插画

1、理解手绘板绘与鼠绘的基本规律，以及ui设计的手绘特点；2、初步建立图形创意的基本规律意识和基本审美意识；3、能对站酷等设计网站视觉图片进行理性分析；

素材收集与整理、透视、比例、结构、光影

加入收藏

MySQL数据库与JDBC

范程皓 · 20206人观看 · 873分钟

MySQL数据库与JDBC

将项目中的用户信息及对战信息通过数据库保存及操作

数据库概念，MySQL配置，命令，建库建表，约束，数据的增删改查，视图，函数，事务，建模工具 JDBC操作数据库，开源工具DbUtils的使用

加入收藏

Linux系统编程

邓乃文 · 109人观看 · 1558分钟

Linux系统编程

完成《蜗牛智慧社区门禁系统》IO文件版

Linux环境搭建，常用命令，静态库，IO文件操作，多进程编程，进程通信（共享内存，消息队列），多线程编程

加入收藏

运营设计

陈中明 · 3790人观看 · 717分钟

运营设计

·理解插画在UI界面中的作用 ·能熟练使用PS、AI、Sketch等软件绘制运营插画 ·理解Banner图在界面中的作用，以及其设计规范、原则 ·理解瓷片区的定义、设计要点 ·理解H5的定义、设计流程、设计要点 ·能对不同弹窗进行不同维度的分类，区分模态弹窗与非模态弹窗 ·理解情感化设计在UI界面设计中的作用

·UI界面中的插画运用 ·UI界面中的Banner与瓷片区设计 ·H5的认知与设计流程 ·弹窗设计 ·情感化页面设计：启动页、引导页、缺省页

加入收藏

MySQL与Redis数据库

邓强 · 9023人观看 · 1234分钟

MySQL与Redis数据库

1、掌握关系型数据库的基础理论，如三范式、约束、数据库、表和列的定义，以及安装和配置MySQL数据库管理系统 2、能够熟练应用DDL、DML、DCL、DQL等SQL语句完成对数据库中对象和数据的各类操作，包括CRUD操作等 3、理解MySQL数据库的日志文件、数据库备份操作、权限管理、常见配置项、SQL注入等跟网络和安全有关的各类操作 4、熟练使用Redis非关系型数据库，并进行各类Redis数据的CRUD操作及应用，了解Redis数据库的各类安全项

MySQL安装、命令行操作、远程登录、关系型数据库核心要素、SQL操作数据库和表、利用SQL完成CRUD操作、高级查询语句、Navicat使用、MySQL高级对象、主从复制、数据库安全，Redis安装配置、核心操作命令、Redis缓存策略、数据库日志文件、补充Oracle数据库的使用与SQL语句差异等

加入收藏

数据结构

吴聪聪 · 279人观看 · 1030分钟

数据结构

加入收藏

Java网络编程

范程皓 · 20014人观看 · 818分钟

Java网络编程

通过和开发人员的共同工作，深入理解软件测试在项目实施过程中的迭代方式，提高对项目实施过程，开发流程，测试流程的理解，提高个人核心竞争力

基于敏捷开发过程协作完成项目，模拟项目的版本迭代过程与，完整体验真实项目实施过程

加入收藏

JavaScript基础编程

邓乃文 · 41828人观看 · 1677分钟

JavaScript基础编程

了解JavaScript的发展，熟练掌握JavaScript的基础知识

JavaScript发展及组成、变量、数据类型、控制结构、数组和函数

加入收藏

Linux操作系统

邓强 · 3525人观看 · 1401分钟

Linux操作系统

Linux作为一个主流的服务器操作系统，是每一个测试开发工程师必须掌握的重点技术，并且能够熟练运用。

Linux安装配置，文件目录操作，VI命令，管理，用户与权限，环境部署，Shell编程

加入收藏

统计推断

周一 · 9617人观看 · 1154分钟

统计推断

熟悉掌握独立样本均值差的假设检验、独立样本比例差的假设检验、成对样本的假设检验

数据分布-总体分布、数据分布-样本分布、数据分布-抽样分布、参数估计-点估计、参数估计-区间估计。假设检验概念、假设检验的生活实例、假设检验基本步骤、不同的假设检验。

加入收藏

IP形象

罗斌 · 3988人观看 · 549分钟

IP形象

1、掌握logo设计流程和方法；2、理解常见的logo提报的模块以及各个模块的特点并进行展示

logo设计流程、logo设计方法、logo展示设计

加入收藏

基本信息

联系信息

上传资料