姓名： 簡(jiǎn)歷本
性別： 女
年齡： 23歲
經(jīng)驗(yàn)： 2年
手機(jī)： 131****2630
郵箱： 700106****@qq.com
意向： 軟件工程師/軟件研發(fā)工程
學(xué)歷： 本科
| 教育背景 |
|
2011/09 - 2015/07
簡(jiǎn)歷本財(cái)經(jīng)大學(xué)
本科 - 計(jì)算機(jī)科學(xué)與技術(shù)
主修課程：盡量填寫(xiě)和應(yīng)聘崗位相關(guān)的主修課程
成績(jī)排名：成績(jī)優(yōu)異的話(huà)可在這里填寫(xiě)成績(jī)排名及GPA信息 |
| 工作經(jīng)歷 |
|
2015/10 - 2017/08
簡(jiǎn)歷本信息科技有限公司
大數(shù)據(jù)工程師
進(jìn)行數(shù)據(jù)導(dǎo)入導(dǎo)出 sqoop，mr數(shù)據(jù)清洗，hive，spark分析統(tǒng)計(jì)，以及hadoop集群維護(hù)，日常數(shù)據(jù)維護(hù)等
|
| 項(xiàng)目經(jīng)歷 |
|
2016/03 - 2017/08
聯(lián)通黑指紋系統(tǒng)
職責(zé)/工具
項(xiàng)目介紹
基于聯(lián)通各地區(qū)短信數(shù)據(jù)進(jìn)行分析和挖掘： 1.聯(lián)通短信數(shù)據(jù)日常離線分析： 將短信從黑指紋庫(kù)（黑指紋數(shù)據(jù)庫(kù)為Mysql）導(dǎo)入到 hadoop集群中(使用Sqoop工具),使用Spark分析每日新 增垃圾短信特征，從而調(diào)整算法，和增加新特征，從而劃分人工核優(yōu)選級(jí)。 2.月度分析、年度分析、各地區(qū)分析（分鐘實(shí)時(shí)）： 能過(guò)Saprk_rdd與Hadoop_mr分析每月、每年短信的變化，如指紋的月使用率，年使用率，各地區(qū)黑指紋通用率，垃圾短信的變種率等 我的職責(zé) 1.利用sqoop工具對(duì)mysql數(shù)據(jù)庫(kù)的增量抽取到HDFS 2.利用hive整合把得到的有效數(shù)據(jù)進(jìn)行導(dǎo)入導(dǎo)出 3.將數(shù)據(jù)映射到hive中進(jìn)行歸類(lèi)、劃分、合并、定性分析、對(duì)關(guān)鍵字的分 析任務(wù)等 4.在Hive中根據(jù)業(yè)務(wù)需求參與相關(guān)表設(shè)計(jì) 5.對(duì)HDFS、Hive等進(jìn)行調(diào)優(yōu)，HQL語(yǔ)句進(jìn)行編寫(xiě)、調(diào)優(yōu) 6.根據(jù)業(yè)務(wù)的要求使用spark進(jìn)行分鐘實(shí)時(shí)分析 7.將數(shù)據(jù)的分析結(jié)果備份到HDFS中和業(yè)務(wù)層的數(shù)據(jù)庫(kù)中（mysql） 8.web端或者報(bào)表的的形式進(jìn)行展示。 |
| 自我評(píng)價(jià) |
|
熟悉hadoop生態(tài)圈一些開(kāi)源組件flume、sqoop、zookeeper等，熟悉Java，Linux，熟悉關(guān)
系型數(shù)據(jù)庫(kù)mysql、oracle，熟悉數(shù)據(jù)倉(cāng)庫(kù)hive，會(huì)寫(xiě)SQL語(yǔ)句，熟悉yarn工作原理及 mapreduce原理，了解hbase，spark，spark_rdd 性格開(kāi)朗，為人細(xì)心，做事一絲不茍，能吃苦耐勞，工作腳踏實(shí)地，有較強(qiáng)的責(zé)任心， 具有團(tuán)隊(duì)合作精神，又具有較強(qiáng)的獨(dú)立工作能力，思維活躍。 |
| 技能描述 |
|
熟練掌握Hadoop相關(guān)組件、HDFS/HBase/mapreduce/Hive/Spark
熟練使用sqoop導(dǎo)入導(dǎo)出和flume抽取數(shù)據(jù) 熟練sql的編寫(xiě) 熟悉Mysql，Oracle關(guān)系型數(shù)據(jù)庫(kù) 熟悉java語(yǔ)言以及開(kāi)發(fā)工具M(jìn)yEclise 熟悉spark以及scala語(yǔ)言 |
