IT人力外包人才简历库

精通Python语言及Requests、Selenium、Scrapy等爬虫框架，擅长分布式爬虫架构设计与IP池管理。掌握异步IO编程及协程技术，熟悉Scrapy-Redis等分布式爬虫组件。具备大规模数据处理能力，熟练使用numpy、pandas进行数据清洗与分析，精通matplotlib数据可视化。熟悉自然语言处理技术，掌握LSTM、BERT等深度学习模型在文本分类与情感分析中的应用。精通HTML/CSS/JavaScript前端技术，具备全栈开发能力。

专注Python开发领域，主要负责数据采集系统架构设计与实现。主导设计分布式爬虫系统，采用Scrapy-Redis框架实现百万级数据采集，通过IP池管理和账号池技术保障爬虫稳定性。开发数据处理流水线，利用numpy和pandas进行数据清洗与特征工程，通过matplotlib实现多维度数据可视化分析。构建自然语言处理系统，基于BERT模型实现评论情感分析，支持多维度文本分类。具备全栈开发能力，独立完成前后端系统架构设计与实现。

1. 设计知乎问答数据采集系统，采用Selenium实现多进程爬虫，成功采集10,000+条特定主题问答数据，通过异步协程技术提升采集效率30%。2. 构建微博评论分析平台，基于Scrapy框架实现分布式爬虫，结合IP池和账号池技术完成百万级评论数据采集，通过Redis缓存机制优化数据处理流程。3. 开发基于BERT的评论情感分析系统，利用深度学习模型对海量文本进行分词、词性标注和情感倾向判断，实现95%以上的分类准确率。