技能标签
专业技能
精通Hadoop生态技术(HDFS、MapReduce、Hive),熟悉分布式数据库(MySQL、HBase),具备Java/Python全栈开发能力,掌握Linux系统运维及服务器部署,擅长数据中台架构设计与实时计算框架应用
工作履历(脱敏处理)
作为核心开发工程师参与企业级数据中台建设,主导数据采集、存储与计算架构设计,采用Hadoop+Spark技术栈实现日均10TB数据处理。设计分布式数据库架构,通过HBase+MySQL组合解决高并发写入与查询性能问题。开发实时数据处理系统,基于Kafka实现数据流式计算,使数据响应时效从小时级缩短至秒级。优化ETL流程,通过数据建模与索引优化,将数据查询效率提升40%。
项目经验(脱敏处理)
主导数据中台产品开发,构建统一数据资产管理体系,采用HDFS存储结构化数据,Hive进行数据仓库建模,实现多业务系统数据整合。设计实时计算架构,基于Spark Streaming处理日均500万条业务数据,通过窗口函数实现分钟级数据统计。开发数据质量监控系统,利用HBase存储异常数据,结合Prometheus实现监控告警,确保数据准确性达99.99%。优化数据同步流程,采用Kafka+Canal实现MySQL数据实时同步,使数据延迟从15分钟降低至30秒。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
2年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接