个人信息
个人信息
- 李恩贺/男/1995
- 本科/沈阳航空航天大学-计算机科学与技术(2013~2017)
- 工作年限:7年
- 联系方式:18641714160/ lieh_666@foxmail.com
工作经历
华晨宝马-物流高级IT专员(2024年6月 ~ 至今)
场内物流高级专员,负责场内物流JAVA相关的产品设计和部分研发工作。
字节跳动-数据平台( 2021年8月 ~ 2024年5月底 )
Pontus数据治理平台
- 工作描述:参与Pontus数据治理平台的设计和开发,基本完整的参与了所有治理相关模块的设计和研发,包括规划诊断、操作、工作台&治理看板。抽象出通用的治理流程,设计并实现了第一版开放治理能力,支持快速接入新的治理对象类型。同时支持数据治理平台的私有化、公有云的改造和部署。
- 使用技术栈:springboot、bmq、spark、es
Manta数据质量平台
- 工作描述:参与数据质量平台模块的设计和研发,并支持Manta平台在不同环境的部署。基于开源的griffin进行改造,提供了在大数据场景下关于数据质量相关的一系列工具,包括数据探查、质量监控、数据对比等能力。
- 使用技术栈:springboot、mysql、spark
小米大数据部 ( 2019年8月 ~ 2021年7月 )
数据工场-资源管理
- 工作描述:设计并开发资源管理部分模块的功能,包括hive数据表管理、数据接入、adhoc数据查询以及隐私脱敏处理等相关功能。对老数据工场的模块进行梳理,部分不合理的地方重新抽象进行重构。使用parboiled构造thrift解释器,改善了HIVE表创建的速度和建表的稳定性问题。
- 使用技术栈:springboot、mysql、redis、zk
数据工场-调度平台
- 工作描述:参与了公司自研调度平台的设计及开发,是基于公司情况设计的一个分布式调度服务。以workflow为粒度进行作业的调度,同时在下层cloud模块提供了和hadoop集群异步交互的能力,可以实现大规模、多集群的作业调度能力。
- 使用技术栈:talos、springboot、mysql、redis、zk
北京37数字技术有限公司(2019年6月 ~ 2019年7月)
- 高级JAVA研发工程师,使用SpringBoot、SpringCloud等技术,完成公司相关java产品的设计和开发工作。
顺丰同城科技 ( 2018年6月 ~ 2019年5月 )
数据调度平台
- 工作描述:公司内部自研数据调度平台开发,主要是针对公司内的场景,对当时公司内比较多的hive sql、spark、sqoop和kylin build的任务进行可配置的自动化调度。在此前,则是通过shell脚本来控制整个数据产出的流程。可以明显改善数据产出的稳定性、时效性;降低了作业运维的复杂度,并可以将部分数据处理工作交由业务完成。
- 使用技术栈:springboot、mysql
KFC推荐系统数据处理
- 工作描述:负责搭建KFC推荐系统的Hadoop集群环境(Cloudera Manager),根据KFC的机器数量规划并部署服务。同时根据kfc推荐系统的情况,提供实时、离线的指标计算的能力。离线计算主要以hive sql作为计算引擎、hdfs作为存储;实时计算则使用在线的web服务作为计算引擎,mysql、kafka、hbase作为底层存储。
- 使用技术栈:SpringBoot、kafka、mysql、hbase
格力电器大数据中心 ( 2017年6月 ~ 2018年6月 )
数据收集、处理及部分数据平台的开发。