性别:女
生日:1995.05
所在地:广东省珠海市
电话:188-8888-8888
邮箱:email@jianli1.com
数据仓库工程师
基础信息
学历:本科
学校:四川大学
专业:医学信息工程
身体状况:健康
求职意向
意向城市:广东省珠海市
教育经历
四川大学
医学信息工程
2014.09 ~ 2018.06
本科
主修课程:医药学、模拟电子技术、数字电子技术、信号与系统、人体解剖与生理学、生物医学信号处理、数字化医学、医学传感检
测、医学仪器、医学信号及图像、生物系统及建模、临床医学工程实践、电路、电磁场与电磁波、数字信号处理、数据结构、操作系
统、微机原理及应用、程序设计语言、数据库技术、生理解剖、医学信息、计算机网络与通信、控制系统培养目标。
工作经历
新华人寿保险股份有限公司
2017-1-1 ~ 2020-1-1
数据仓库工程师
参与搭建基于 Hadoop+Hive+Presto 的大数据平台。
利用 HiveSQL 开发 ETL,并利用 AirFlow 调度 ETL。
参与设计,开发基于全新业务系统的数据仓库。
参与设计,开发 DataMart(PostgreSQL)。
利用 C#,SSIS 开发,维护 ETL 框架,使用 XML 文件作为配置,可以在不同的数据库之间转移数据,比如常见的 RDBMS,文件
系统,WebAPI 等等。
利用 SSAS 开发 Cube。
设计,改进 ETL 流程,如增量加载,缓慢渐变维,数据源物理删除数据等等的问题。
对数据仓库,ETL,报表的查询进行性能优化(SQLServer)。
开发报表(Tableau,SSRS,PowerBI)。
数据库升级,从 SQLServer20xx 升级到 SQLServer20xx。
九州通医药集团股份有限公司
2020-2-1 ~ 2022-12-1
数据仓库工程师
中国移动一级经营分析系统通过获取省端数据,为后段业务增长提供指导。
EAST 监管报送系统模型设计、ETL 开发以及日常维护工作,在银行卡数据仓库上主要实现了基于关联规则的异构商户检测。
负责相关业务线(车源线索,保单管理)和金融类移动端产品的交互设计。
WTAP 计会统报表,实现数据正常传输。
项目经验
新华人寿相关项目
2017-1-1 ~ 2020-1-1
新华人寿保险股份有限公司
数据仓库工程师
该项目是为百丽国际的业务提供数据支撑,为百丽国际战略发展提供数据支持,实现传统行业的数字化转型,从而进行业务的扩
展与更好的销售。该项目是在大数据平台上构建数据仓库,包含来自线上、线下的数据,线下的数据主要来自于各个门店,线上
的数据来自于淘宝、京东等平台。线下批处理数据用 sqoop 从业务库抽取到 hive 中,用 impala 去查询,通过 azkaban 调度,
用 python 和 shell 脚本监控数据。线上数据利用 cdh streamset 抽取到 kudu 中,用 impala 分析查询。最终结果以报表的形式
进行展示。日志收集离线方式使用的是 flume+kafka,最终落地到 hive 中。日志实时收集是先用 flume 收集到 kafka 里,在使
用 spark 落地到 hbase 中。
九州通医药相关项目
2020-2-1 ~ 2022-12-1
九州通医药集团股份有限公司
数据仓库工程师
将公司 ERP 系统日常进销存业务数据同步至数据仓库 ODS 层,清洗沉淀至 DW 层,供业务部门以及数据分析师做业务成果展
示。
从事数据仓库部分业务的 HUE 展示工作。
参与了数据仓库 T+0 日业务的开发工作。前线销售,订货,进货,废弃、库存等实时信息在数据仓库反映。
数据仓库数据日常工作使用工具,用 PAYTHON 脚本进行共通规范,简化数据仓库项目组自身的工作流程,提高工作效率。
对接业务产品经历日常频繁的数据需求。
技能列表
Hive:一般
Mysql:熟练
Databases:良好
PPT:精通
自我评价
熟悉 Hive、MySQL,能够根据业务逻辑提取出所需的数据;
熟练掌握 Tableau/Quick BI/Excel 进行数据分析及可视化,生成数据报告;
熟悉使用 python 进行数据的清洗及分析,熟悉 numpy、pandas、seaborn 等常用库;
良好的实验设计及统计学基础,熟悉假设检验、回归分析等方法。