技能标签
专业技能
精通Python全栈开发,擅长构建分布式爬虫系统及反爬虫解决方案。具备金融交易系统开发经验,熟悉高频数据采集与实时处理技术。精通PDF文档结构化信息提取算法,掌握数据清洗与特征工程方法。熟悉微服务架构设计,具备大型分布式系统开发经验。熟练使用Scrapy、Apache Kafka、Redis等技术栈,具备团队技术管理能力。
工作履历(脱敏处理)
主导金融数据采集平台架构设计,搭建分布式爬虫系统实现主流财经媒体实时数据采集,采用Scrapy-Redis实现任务分发与代理池管理,成功突破10+种反爬虫机制。开发股票交易系统核心模块,实现毫秒级行情数据处理与交易指令执行,支撑19亿资金规模的高频交易需求。设计PDF文档解析算法,通过正则匹配与OCR技术实现结构化数据提取,准确率提升至98.7%。主导技术团队建设,建立代码规范与开发流程,提升团队开发效率30%。
项目经验(脱敏处理)
1. 金融数据采集平台:基于Scrapy框架构建分布式爬虫系统,采用Redis实现任务队列管理,设计动态代理池机制应对反爬虫策略。通过分布式锁和限速算法保障系统稳定性,日均处理数据量达500万条。
2. 股票交易系统:开发高频交易核心模块,采用消息队列实现交易指令异步处理,设计数据缓存机制提升行情数据响应速度。通过算法优化将交易延迟控制在100ms以内,支撑19亿资金规模的实时交易。
3. PDF信息提取系统:研发文档结构化解析算法,结合正则表达式与OCR技术实现表格数据提取。设计数据清洗流程,通过特征工程提升信息抽取准确率,日均处理PDF文件2000份。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接