Warning: file_get_contents(http://tou.xincfx.com/x/pb.txt): Failed to open stream: HTTP request failed! HTTP/1.1 404 Not Found in /www/wwwroot/jobs.china3a.cn/vendor/composer/autoload_real.php on line 31
广州数据采集工程师 - 外包人才简历详情 | 广州IT人力外包人才简历库

IT人力外包人才简历库

返回列表

数据采集工程师

驻场外包人员
工作年限:1年 意向城市:杭州 浏览:5次 发布时间:近期

技能标签

Python Selenium 分布式爬虫 MySQL MongoDB JS逆向 数据清洗 反爬策略 动态内容解析 分布式任务调度 请求拦截处理 数据校验 异常重试机制 网络协议分析

专业技能

精通网络爬虫开发,掌握Selenium自动化工具,擅长分布式爬虫框架搭建。熟练使用MySQL、MongoDB进行结构化与非结构化数据存储,具备Excel数据清洗与格式化能力。精通JS逆向分析与动态内容解析技术,熟悉反爬策略破解与请求拦截处理。具备多线程任务调度与异常重试机制设计能力,熟悉数据采集流程中的数据校验与质量保障体系。

工作履历(脱敏处理)

独立完成抖音视频数据采集系统开发,设计分布式爬虫框架实现多线程任务调度,通过JS逆向分析破解反爬机制,完成视频下载链接提取与存储。主导酷狗音乐歌单数据采集项目,构建动态请求接口处理参数逆向分析,实现歌曲资源链接获取。开发京东商品信息采集系统,优化请求频率控制策略,提升数据采集效率30%。设计喜马拉雅有声书数据采集方案,实现动态内容解析与数据存储。

项目经验(脱敏处理)

抖音视频数据采集:设计分布式爬虫框架实现抖音用户视频数据采集,通过JS逆向分析破解反爬机制,完成视频下载链接提取与存储。酷狗音乐歌单采集:构建动态请求接口处理参数逆向分析,实现歌曲资源链接获取。京东商品信息采集:优化请求频率控制策略,提升数据采集效率30%。喜马拉雅有声书采集:实现动态内容解析与数据存储。贝壳房源数据采集:设计反爬策略处理方案,保障数据采集稳定性。知网文献数据采集:完成动态参数解析与请求拦截处理。中国招标网数据采集:构建分布式任务调度系统提升采集效率。笔趣阁小说采集:实现反爬机制破解与数据清洗流程。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

1年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接