久久精品国产一区二区电影,久久精品国产亚洲av瑜伽,精品无人区一码卡二卡三,久草热8精品视频在线观看 ,久久99精品久久久久麻豆

基本信息

姓名：錘子簡歷

年齡：23歲

電話：155****6142

郵箱：676835****@qq.com

經(jīng)驗(yàn)：1年

意向：大數(shù)據(jù)開發(fā)工程師

教育背景

時(shí)間：2011-09 - 2015-07

學(xué)校：錘子簡歷信息大學(xué) | 專業(yè)：計(jì)算機(jī)科學(xué)與技術(shù) | 學(xué)歷：本科

工作經(jīng)歷

工作時(shí)間：2015-07 - 2016-02

公司名稱：錘子簡歷招聘咨詢有限公司 | 所在部門： | 所在崗位：風(fēng)險(xiǎn)控制

工作描述：

根據(jù)有關(guān)標(biāo)的客戶的信息數(shù)據(jù)，適用相應(yīng)的模型對其進(jìn)行風(fēng)險(xiǎn)識別并分級。同時(shí)根據(jù)技術(shù)的發(fā)展及相關(guān)監(jiān)管部門政策的調(diào)整而研發(fā)相適應(yīng)的風(fēng)險(xiǎn)識別模型，同時(shí)就新的模型與技術(shù)部溝通、推進(jìn)、實(shí)現(xiàn)，與運(yùn)營部溝通、協(xié)調(diào)并推向市場，與設(shè)計(jì)部協(xié)調(diào)、調(diào)整、重新設(shè)計(jì)網(wǎng)頁、APP界面。

工作時(shí)間：2015-09 - 至今

公司名稱：錘子簡歷人才咨詢有限公司 | 所在部門：數(shù)據(jù)部 | 所在崗位：大數(shù)據(jù)開發(fā)工程師

工作描述：

1參與公司大數(shù)據(jù)平臺的搭建與配置。

2.根據(jù)業(yè)務(wù)需求對移動設(shè)備數(shù)據(jù)和社交數(shù)據(jù)進(jìn)行多維度分析，得出用戶行為與游戲運(yùn)營的各項(xiàng)指標(biāo)。

3.將分析處理后的數(shù)據(jù)落地到RDBMS中，接入業(yè)務(wù)使用，為公司產(chǎn)品部門和高層決策在廣告領(lǐng)域的創(chuàng)新應(yīng)用、商業(yè)效果改進(jìn)等提供數(shù)據(jù)服務(wù)支持。

4.使用SparkSQL高效分析處理用戶行為數(shù)據(jù)。

5.平臺的日常維護(hù)與優(yōu)化。

項(xiàng)目經(jīng)歷

項(xiàng)目時(shí)間：2016-01 - 至今

項(xiàng)目名稱：移動互聯(lián)網(wǎng)內(nèi)容規(guī)則庫自優(yōu)化系統(tǒng)

項(xiàng)目描述：

項(xiàng)目介紹

基于企業(yè)數(shù)據(jù)中心用戶上網(wǎng)日志數(shù)據(jù)，通過URL過濾、規(guī)則庫匹配、爬蟲爬取、內(nèi)容復(fù)原，文本數(shù)據(jù)挖掘等方法，實(shí)現(xiàn)內(nèi)容分析配置管理可視化以及內(nèi)容規(guī)則庫的自優(yōu)化等功能，利用爬蟲技術(shù)并融合DPI復(fù)原技術(shù)，以及標(biāo)簽規(guī)則庫的流程管理，對客戶的手機(jī)上網(wǎng)行為、訪問內(nèi)容、訪問應(yīng)用進(jìn)行深入識別，精細(xì)化支撐客戶數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)的分析需求，并結(jié)合數(shù)據(jù)整合和數(shù)據(jù)建模、數(shù)據(jù)挖掘、數(shù)據(jù)清洗等手段，建設(shè)基于細(xì)分行業(yè)的大數(shù)據(jù)及用戶深入洞察分析能力。

本項(xiàng)目包括：

1.URLCLASSIFIER URL分類模塊，輸入是采樣的DPI URL ,使用用應(yīng)用規(guī)則，欄目規(guī)則，搜索規(guī) 則，元數(shù)據(jù)規(guī)則，噪音規(guī)則，元數(shù)據(jù)等規(guī)則庫，清洗為樣本數(shù)據(jù)，供規(guī)則分析人員使用。

2.URLGENERATOR 爬蟲URL 生成模塊，可輸入全量的DPI URL，使用用應(yīng)用規(guī)則，元數(shù)據(jù)規(guī)則，噪音規(guī)則，元數(shù)據(jù)等規(guī)則庫, 自動生成爬蟲URL, 供爬蟲使用。

3.URLFOCUS 重點(diǎn)應(yīng)用的URL 提取模塊，可輸入全量的DPI URL，使用應(yīng)用規(guī)則，欄目規(guī)則，搜索規(guī)則，元數(shù)據(jù)規(guī)則，噪音規(guī)則等規(guī)則庫，清洗為重點(diǎn)應(yīng)用的數(shù)據(jù)，供規(guī)則分析人員使用

4.SPIDER 讀取爬蟲URL，爬去相關(guān)頁面，生成相關(guān) URL索引文件和對應(yīng)的頁面文件，提供給PP使用。

5.PPPage Parser的簡寫，讀取SPIDER或PR的ＵＲＬ索引文件和頁面內(nèi)容文件，使用頁面規(guī)則庫，生成內(nèi)容元數(shù)據(jù)，導(dǎo)入相應(yīng)的APP的元數(shù)據(jù)庫。

6. CRMANAGER 內(nèi)容規(guī)則庫管理系統(tǒng)的用戶操作可視化界面。

我的職責(zé)

本人在項(xiàng)目中參與系統(tǒng)架構(gòu)和數(shù)據(jù)庫表結(jié)構(gòu)的設(shè)計(jì)，主要負(fù)責(zé)的模塊：網(wǎng)頁內(nèi)容分析模塊（PP）和爬蟲復(fù)原URL生成模塊（URLGenerator）。

網(wǎng)頁內(nèi)容分析模塊（PP）:網(wǎng)頁內(nèi)容分析，通過對網(wǎng)頁內(nèi)容提取規(guī)則，將提取的內(nèi)容與內(nèi)容元數(shù)據(jù)對應(yīng)，建立內(nèi)容元數(shù)據(jù)規(guī)則庫。可以支持對網(wǎng)頁/APP應(yīng)用更新狀態(tài)進(jìn)行判斷、對網(wǎng)頁/APP應(yīng)用編碼進(jìn)行識別 、對網(wǎng)頁/APP應(yīng)用標(biāo)題進(jìn)行獲取、對網(wǎng)頁/APP應(yīng)用內(nèi)容的獲取 。

爬蟲復(fù)原URL生成模塊（URLGenerator）：基于應(yīng)用（APP）欄目動作規(guī)則庫，內(nèi)容規(guī)則庫，內(nèi)容元數(shù)據(jù)規(guī)則庫和噪音庫，從全量輸入的DPI XDR中提取并基于規(guī)則生成供爬蟲爬取的URL。

項(xiàng)目時(shí)間：2008-09 - 至今

項(xiàng)目名稱：定點(diǎn)醫(yī)療系統(tǒng)后臺數(shù)據(jù)處理

項(xiàng)目描述：

項(xiàng)目介紹

該項(xiàng)目為參加醫(yī)療保險(xiǎn)人員的住院收費(fèi)系統(tǒng)，包括門診，藥店的管理，住院的管理，報(bào)表，信息維護(hù)，統(tǒng)計(jì)查詢，權(quán)限維護(hù)

我的職責(zé)

前期研發(fā)人員負(fù)責(zé)詳細(xì)設(shè)計(jì)，代碼實(shí)現(xiàn)，住院報(bào)銷結(jié)算和藥店結(jié)算核心算法的編程,使用plsql對Oracle存儲過程編寫，醫(yī)療系統(tǒng)數(shù)據(jù)轉(zhuǎn)換與遷移，負(fù)責(zé)對數(shù)據(jù)庫表的維護(hù)及sql優(yōu)化

個(gè)人評價(jià)

本人熱愛編程，并對從事計(jì)算機(jī)IT行業(yè)的工作擁有濃厚的興趣

具有良好的團(tuán)隊(duì)合作能力，能有效的與隊(duì)友溝通

具有強(qiáng)烈的責(zé)任心

本人接受適應(yīng)的能力和自學(xué)的能力較強(qiáng)，能盡快的熟悉工作環(huán)境克服困難

本人性格外向隨和，能接受一定強(qiáng)度的加班和出差

個(gè)人技能

了解數(shù)據(jù)建模相關(guān)知識

熟悉Flume、Logstash數(shù)據(jù)采集工具的原理，熟悉Elasticsearch

熟悉消息系統(tǒng)Kafka工作機(jī)制，能獨(dú)立完成Kafka集群部署

熟練使用Sqoop進(jìn)行關(guān)系型數(shù)據(jù)庫與Hdfs/Hive/Hbase之間進(jìn)行數(shù)據(jù)導(dǎo)入導(dǎo)出；了解Azkaban任務(wù)調(diào)度系統(tǒng)

熟練使用Spark RDD/ Spark SQL/Spark-Streaming算子，熟悉Spark架構(gòu)及框架原理，熟悉Spark中的一些優(yōu)化

掌握Hbase數(shù)據(jù)庫工作機(jī)制，能獨(dú)立完成Hbase集群環(huán)境搭建

熟練使用Hive進(jìn)行數(shù)據(jù)的查詢分析處理及ETL相關(guān)操作，了解Hive優(yōu)化

熟悉HDFS文件存儲系統(tǒng)、Map/Reduce離線計(jì)算模型、YARN資源管理的工作機(jī)制以及Hadoop生態(tài)體系相關(guān)技術(shù)

熟練Scala、Java編程語言、Shell腳本