




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡介
大數(shù)據(jù)平臺(tái)及在推薦廣告方面應(yīng)用第1頁何為大數(shù)據(jù)第2頁大數(shù)據(jù)平臺(tái)架構(gòu)數(shù)據(jù)存放實(shí)時(shí)離線FTPHDFSMRSqoopFumeNG數(shù)據(jù)采集數(shù)據(jù)處理存放層建模KafkaZookeeperStorm/SparkstreamingHbaseMysqlRedis數(shù)據(jù)可視化GangliaSparkNagiosOzzie監(jiān)控管理調(diào)度特征工程機(jī)器學(xué)習(xí)算法庫Mahout/MLlib應(yīng)用搜索BI推薦廣告分類/回歸聚類主題預(yù)測(cè)LogServer商品庫用戶庫用戶行為非結(jié)構(gòu)化結(jié)構(gòu)化降維優(yōu)化PUSHHIVESparksql離線實(shí)時(shí)第3頁從Hadoop1.0到Y(jié)arn單點(diǎn)資源管理和調(diào)度分離資源劃分:slot到container第4頁從Hadoop到SparkInputIter.1Iter.2HadoopSpark第5頁大數(shù)據(jù)生態(tài)圈onestacktorulethemallStorm流計(jì)算Impalad(Ad-hocquery/迭代)Hive/MR(批處理)Hadoop第6頁crawler搜索引擎HBaseMQ1、writeLog2、write商品pic(insert/update/delete)3、indexLog4、finish(可靠)數(shù)據(jù)平臺(tái)數(shù)據(jù)源Sdk(插件/App/b5m)爬蟲LogserverMR/SparkYARN離線計(jì)算實(shí)時(shí)計(jì)算用戶行為數(shù)據(jù)數(shù)據(jù)平臺(tái)應(yīng)用FlumeNGStormsparksteaming推薦廣告mysql商品、訂單應(yīng)用平臺(tái)監(jiān)控第7頁平臺(tái)應(yīng)用-爬蟲數(shù)據(jù)處理平臺(tái)第8頁爬蟲數(shù)據(jù)處理平臺(tái)StormSparkStreaming第9頁推薦系統(tǒng)典故啤酒與尿布老板、首頁、性保健品第10頁推薦舉例—商品詳情第11頁推薦舉例—購物車結(jié)算第12頁推薦舉例—首頁/支付完成頁第13頁推薦價(jià)值流量用戶粘性CTRGMV降低購物路徑用戶體驗(yàn)多樣性新奇性流量投放給目標(biāo)用戶精準(zhǔn)轉(zhuǎn)化率CVRROI第14頁推薦(廣告、搜索)架構(gòu)候選集待推薦商品索引過離線檢索(相關(guān)性)過實(shí)體實(shí)體特征實(shí)時(shí)model訓(xùn)練過離線實(shí)時(shí)排序、過濾過推薦列表第15頁算法介紹候選集店鋪信譽(yù)更新時(shí)間人氣價(jià)格評(píng)價(jià)退貨率scoreTCL手機(jī)0.20.540.20.7聯(lián)想手機(jī)0.320.61.20.5…..相關(guān)性協(xié)同過濾
關(guān)聯(lián)推薦
分類興趣
聚類排序預(yù)估點(diǎn)擊率pCTR
邏輯回歸GBDT
第16頁推薦系統(tǒng)架構(gòu)特征-內(nèi)容用戶-特征離線Jacarrd/cosine/CF/contentBase/FPGrowth/LDA/LR/DT算法庫場(chǎng)景在線觸點(diǎn)PC無線意圖(聚焦、發(fā)散)+畫像融合過濾排序用戶行為(反饋)推薦效果驗(yàn)證A/BTestingF1RMSEAUC數(shù)據(jù)存放中心
HadoopHiveHbaseMysqlredis索引構(gòu)建內(nèi)容質(zhì)量評(píng)分model訓(xùn)練ruleUser(f1,f2,f3,…)內(nèi)容候選用戶行為應(yīng)用庫(類別、標(biāo)簽)語義分析關(guān)聯(lián)計(jì)算配置管理監(jiān)控候選排序相同度協(xié)同相關(guān)性第17頁用戶畫像體系基本維度性別、年紀(jì)、地域、終端、網(wǎng)絡(luò)、渠道、興趣、標(biāo)簽維度商業(yè)維度品類、品牌、、、新老用戶、頻次、購置頻次、ARPU、購置時(shí)間語義挖掘行為標(biāo)注引擎網(wǎng)絡(luò)爬蟲引擎知識(shí)庫自我學(xué)習(xí)結(jié)構(gòu)化電商數(shù)據(jù)開放智能推薦廣告經(jīng)分預(yù)測(cè)用戶畫像非結(jié)構(gòu)化短期
瀏覽、購置、搜索、、、長久數(shù)據(jù)合作第18頁廣告廣告聯(lián)盟搜索推廣廣告主業(yè)務(wù)平臺(tái)營銷推廣定向投放檢索統(tǒng)計(jì)監(jiān)控分析計(jì)費(fèi)CPC數(shù)據(jù)存放同時(shí)相關(guān)性排序pCtr*Bid
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 2025年商業(yè)照明燈具項(xiàng)目合作計(jì)劃書
- 銀行管理系統(tǒng)項(xiàng)目展示
- 幼教財(cái)務(wù)培訓(xùn)
- 社區(qū)團(tuán)購供應(yīng)鏈與社區(qū)物業(yè)管理公司合作協(xié)議
- 抖音PUGC內(nèi)容孵化與市場(chǎng)拓展合作協(xié)議
- 2025年山梨酸及山梨酸鉀項(xiàng)目建議書
- 獨(dú)家定制私人直升機(jī)航拍任務(wù)空域申請(qǐng)與管理合同
- 外科痔瘡護(hù)理要點(diǎn)與流程
- 網(wǎng)紅零食品牌連鎖加盟區(qū)域獨(dú)家運(yùn)營管理及培訓(xùn)協(xié)議
- 大專院校教務(wù)行政人員派遣服務(wù)協(xié)議
- 2024年中國農(nóng)業(yè)銀行安徽蚌埠支行春季校招筆試題帶答案
- 食品原料報(bào)廢管理制度
- 國家開放大學(xué)漢語言文學(xué)本科《中國現(xiàn)代文學(xué)專題》期末紙質(zhì)考試第一大題選擇題庫2025春期版
- 2025年高級(jí)政工師理論考試題庫(濃縮500題)
- 鄉(xiāng)村振興學(xué)習(xí)課件
- 2025年施工現(xiàn)場(chǎng)質(zhì)量員繼續(xù)教育考試題庫(繼續(xù)教育)含答案
- 飼料企業(yè)安全生產(chǎn)工作計(jì)劃
- 臨時(shí)用地方案
- 山東大學(xué)《軍事理論》考試試卷及答案解析
- 2025年重慶市合川區(qū)事業(yè)單位招考聘用鄉(xiāng)村振興人才高頻重點(diǎn)模擬試卷提升(共500題附帶答案詳解)
- 2025年陜能榆林清潔能源開發(fā)有限公司招聘筆試參考題庫含答案解析
評(píng)論
0/150
提交評(píng)論