技能标签
专业技能
精通Java语言及大数据开发框架,擅长分布式系统架构设计。熟悉Hadoop生态体系,包括Hive、Spark SQL、Flume、HBase、ClickHouse等组件,具备海量数据处理经验。掌握Spring Boot、MyBatis Plus等后端开发框架,熟悉Vue.js前端技术栈(Element UI、Ant Design)。具备数据仓库设计能力,熟悉星型/雪花模型构建,熟悉数据可视化技术。熟悉Oracle、MySQL等关系型数据库,具备高并发系统开发经验。
工作履历(脱敏处理)
历任某知名互联网企业大数据开发工程师,主导数据仓库取数工具开发,支持Hive/Spark/ClickHouse多引擎查询。设计日志清洗分析系统,实现从Flume采集到HDFS存储、Spark处理、Oracle落库的全链路数据处理。开发企业级数据可视化平台,采用Vue.js构建前端交互界面。参与微服务架构改造,基于Spring Cloud搭建服务注册中心与网关体系,实现服务解耦与负载均衡。持续优化数据处理性能,提升系统吞吐量30%以上。
项目经验(脱敏处理)
1. 数据仓库取数工具开发:基于星型/雪花模型构建数据仓库架构,开发支持Hive/Spark/ClickHouse的多引擎查询工具。采用Scala/Java混合开发,通过Spring Boot实现服务端接口,MyBatis Plus完成数据映射,Vue.js构建可视化操作界面。实现SQL自动拼接与执行,提升数据获取效率40%。
2. 日志大数据清洗分析系统:设计日志采集-清洗-存储-分析全流程架构。使用Flume采集日志数据,通过Spark进行实时清洗与统计分析,HDFS存储原始数据,Oracle存储结构化结果。采用Vue.js实现数据可视化看板,支持多维度数据钻取分析,系统日均处理日志量达50TB。
3. 企业级数据可视化平台:基于Vue.js开发数据看板系统,集成ECharts实现动态数据展示。设计统一数据接口规范,支持多源数据接入。优化数据查询性能,通过缓存机制和索引优化,将查询响应时间缩短至500ms以内。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
4年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接