锤子简历品牌推广师
Python爬虫个人简历模板范文
作者:锤子简历 2022/02/04 23:30:00
阅读 149

求职意向

Python爬虫 北京 薪资面议 随时到岗

教育背景

2020.x -2020x 锤子简历大学 计算机

工作经验

2020.x -2020x 一米信息 爬虫

负责各类网站或者图片的爬虫,筛选数据,然后根据公司提供的数据库格式存入数据。

项目经验

2020.x -2020x 网站分类资讯 新浪网

1.首先利用XPath匹配数据爬取分类首页下的各小类标题以及url 2.利用 scrapy.Request方法,建立回调函数爬取小类标题下的子类标题和链接,在爬取小类标题的方法里面继续使用回调函数,爬取子链接页面的新闻详细内容,然后所有的缓存数据存入redis数据库。 3.通过编写python脚本,将redis数据库里的数据存入mysql数据库。

2020.x -2020x 图片下载 图片

1.创建scrapy框架,利用XPath匹配数据获取电影信息。 2.利用scrapy.Request方法和回调函数分页获取电影列表以及电影详情,直到最后一页再结束。 3.筛选出电影标题、评分和简介等,通过pymongo模块存储于mongoDB数据库中。

2020.x -2020x 爱奇艺网站电影模块爬取 

1.创建数据库工具类,封装数据库连接,通过requests请求来建立http请求,封装下载模块。 2.利用BS.getElementByFind匹配数据爬取电影分类下的链接以及标题。 2.建立模型层,分别将电影详情信息和演员详情信息存入本地建立的mysql数据库里。

自我评价

熟练掌握python编程语言,并具有良好的编程风格和习惯; 

熟练掌握数据结构、算法、设计模式编程技术; 
熟悉多线程、网络编程,精通网络抓取原理及技术; 熟练使用scrapy爬虫框架以及scrapy-redis分布式组件;
 熟练掌握网页爬取原理,熟悉基于cookie的登录原理; 
熟练使用MySQL数据库
 熟悉Linux系统
熟悉Django框架; 
熟悉各种反爬虫的策略; 
了解各种web前端技术,包括XML/CSS/JavaScript等
 熟练使用Fiddler抓包工具;

内容来源说明:本文章来自网络收集,如侵犯了你的权益,请联系QQ:2772182309进行删除。