技能标签
专业技能
精通Python编程语言,熟练掌握Scrapy框架进行网络爬虫开发,具备MongoDB与MySQL数据库设计及优化能力,熟悉Selenium自动化测试工具。掌握HTML/CSS/JavaScript基础语法,正在系统学习Vue.js前端框架。熟悉Linux命令行操作,具备基础的服务器部署能力。熟悉数据清洗、数据存储及可视化分析流程,了解分布式存储架构。
工作履历(脱敏处理)
作为数据采集实习生,主要负责网络数据采集系统的开发与维护。主导完成多个数据采集项目,包括LOL英雄数据采集系统、双色球开奖数据采集平台等。采用Scrapy框架实现高效的数据抓取,通过Selenium处理动态渲染页面,结合MongoDB与MySQL实现数据存储与分析。优化数据采集流程,提升数据采集效率30%。参与数据清洗与可视化分析工作,使用Pandas进行数据预处理,通过Matplotlib实现数据可视化展示。持续学习Vue.js前端框架,提升全栈开发能力。
项目经验(脱敏处理)
LOL英雄数据采集系统:基于Scrapy框架开发英雄数据采集系统,处理动态渲染页面采用Selenium,实现对英雄出场次数、KDA等12项数据的采集。采用MongoDB进行非结构化数据存储,MySQL进行结构化数据存储,通过数据聚合分析英雄强度分布。双色球开奖数据采集平台:开发双色球开奖数据采集系统,实现红球/蓝球号码采集与存储,采用MongoDB进行分布式存储,通过数据分片提升存储效率。设计数据清洗流程,处理重复数据与异常值,确保数据准确性。房源数据采集项目:开发房产信息采集系统,处理反爬虫机制,采用代理IP池和请求频率控制,实现房源信息的自动化采集与存储。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
1年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接