技能标签
专业技能
精通Hadoop生态体系（HDFS/Hive/HBase）与Spark实时计算框架，掌握Kafka、Zookeeper分布式组件，熟悉Flink流处理技术。精通Java/Scala编程语言，具备高并发、高可用系统设计能力，熟悉JVM调优与内存管理。掌握Linux系统运维与Shell脚本开发，熟悉Oracle/MySQL/GBase等关系型数据库及NoSQL数据库。具备ETL数据清洗与转换经验，熟悉数据仓库建模与OLAP分析。熟悉Storm、Flume等实时数据采集工具，具备大数据平台架构设计与调优能力。
工作履历（脱敏处理）
主导大数据平台架构设计与实施，完成ERP系统实时计算能力提升项目，通过Spark+Kafka架构实现海量数据秒级响应，优化数据同步效率提升300%。参与统一数据中心数据仓库建设项目，搭建基于GBase8A的MPP架构，实现PB级数据存储与分析，支撑企业级BI报表开发。具备从需求分析到系统部署的全流程开发经验，熟悉Linux系统运维、Shell脚本开发及数据库性能调优，能够快速学习新技术并应用于实际项目。
项目经验（脱敏处理）
1、ERP实时计算平台优化项目：基于Spark+Kafka构建实时计算架构，解决传统HANA内存计算瓶颈问题。设计数据采集管道实现分钟级数据同步，通过Hive与HBase联合查询提升报表响应速度。采用GBase8A替代Hive完成内存计算，优化数据分区策略使查询效率提升200%。解决数据倾斜问题，通过动态分区与数据分桶技术实现负载均衡。
2、统一数据中心数据仓库建设项目：搭建基于Kafka+Spark的实时数据处理平台，实现日均PB级数据的清洗与存储。设计星型架构数据模型，使用Hive+HBase构建多维分析视图。开发数据质量监控系统，通过Prometheus+Grafana实现指标可视化。优化YARN资源调度策略，使集群利用率提升40%，支撑企业级BI系统稳定运行。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
3年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接