技能标签
专业技能
精通Python全栈开发,熟悉Golang语言,掌握Flask/Django框架。具备分布式爬虫系统开发经验,熟练使用Scrapy框架进行数据采集。熟悉关系型数据库MySQL与非关系型数据库MongoDB,精通Redis缓存技术。掌握容器化部署技术Docker,熟悉进程管理工具Supervisor。具备数据清洗与去重算法设计能力,熟悉ELK技术栈(Elasticsearch、Logstash、Kafka)
工作履历(脱敏处理)
曾担任某支付平台技术负责人,主导第三方支付风控系统开发,构建分布式爬虫架构实现多平台数据采集。设计数据清洗与去重算法,提升数据准确性达98%。开发智能风控系统,实现商户风险评分模型,降低风险事件发生率35%。主导爬虫调度平台建设,支持100+交易所数据源对接,日均处理数据量超2TB。具备完整的系统监控方案设计能力,搭建实时告警系统提升运维效率。
项目经验(脱敏处理)
1. 数字货币资讯爬虫系统:主导MyToken资讯爬虫开发,构建分布式爬虫架构实现区块链领域资讯自动化采集。采用Scrapy-Redis实现任务分发,设计多线程采集模块提升采集效率300%。开发数据清洗管道,通过规则引擎实现数据去重,保障数据质量。
2. 智能风控系统(天网/BOS):设计商户风险评估模型,整合企业征信数据与交易行为数据。构建实时监控系统,通过Kafka实现数据流处理,利用Elasticsearch进行风险事件快速检索。开发异常交易识别算法,实现风险商户识别准确率提升至92%。
3. 多平台数据采集平台:搭建支持微信公众号、微博、Twitter等社交平台的数据采集系统。设计统一数据接口规范,实现多源数据标准化处理。开发数据质量校验模块,建立数据完整性校验机制,保障数据可用性达99.9%。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
6年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接