5G通信大數(shù)據(jù)分析與應用 習題及參考答案匯 第1-7章

1.大數(shù)據(jù)技術各國都加大了投入，具體表現(xiàn)有哪些？參考答案：美國把大數(shù)據(jù)研究和生產(chǎn)計劃提高到國家戰(zhàn)略層面；英國在五年內投資1000萬英鎊建立世界上首個“開放數(shù)據(jù)研究所”；法國投入3億歐元資金用于推動大數(shù)據(jù)領域的發(fā)展；日本公布了新IT戰(zhàn)略——“創(chuàng)建最尖端IT國家宣言”；印度在數(shù)據(jù)開放方面效仿美國政府的做法，制定了一個一站式政府數(shù)據(jù)門戶，把政府收集的所有非涉密數(shù)據(jù)集中起來等。2.NHBigdata大數(shù)據(jù)平臺的特點有哪些？參考答案：1.多源數(shù)據(jù)的高效集成2.異構數(shù)據(jù)的海量存儲3.場景豐富的計算框架4.海量數(shù)據(jù)的實時分析挖掘5.統(tǒng)一的平臺化管理監(jiān)控6.便捷易用的數(shù)據(jù)操作7.立體化的數(shù)據(jù)安全8.多樣化的通信實訓案例9.實時的案例結果數(shù)據(jù)可視化顯示3.大數(shù)據(jù)技術在通信領域目前已存在的典型的應用有哪些？參考答案：大數(shù)據(jù)技術可對移動通信用戶進行有效管理；對移動通信計費的高效管理；四合作變現(xiàn)；提升網(wǎng)絡質量。4.通訊大數(shù)據(jù)課程的特點？參考答案：通信大數(shù)據(jù)這門課程將通過大數(shù)據(jù)技術融合云網(wǎng)的基礎理論，覆蓋網(wǎng)絡的規(guī)劃設計與網(wǎng)絡部署、網(wǎng)絡運維和運營、網(wǎng)絡優(yōu)化等多個維度鍛煉和提升學生的數(shù)據(jù)分析、數(shù)據(jù)處理能力。5.通信大數(shù)據(jù)產(chǎn)業(yè)的關注點有哪些？參考答案：規(guī)范數(shù)據(jù)交易模式；積極樹立數(shù)據(jù)應用成熟行業(yè)標桿；探索新的數(shù)據(jù)應用模式。1、Hadoop發(fā)展至現(xiàn)在經(jīng)歷了幾個大版本的更新，分別是什么？參考答案：3個，hadoop1.0、hadoop2.0、hadoop3.0。2、大數(shù)據(jù)組件中，提供數(shù)據(jù)存儲的組件叫什么，主要包含了哪些實例（服務），實例的作用是什么？參考答案：HadoopDistributedFileSystem，簡稱HDFS，是一個分布式文件系統(tǒng)。包含了NameNode和DataNode兩個實例；NameNode存儲文件的元數(shù)據(jù)，如文件名，文件目錄結構，文件屬性（生成時間、副本數(shù)、文件權限），以及每個文件的塊列表和塊所在的DataNode等；DataNode在本地文件系統(tǒng)存儲文件塊數(shù)據(jù)，以及存儲數(shù)據(jù)塊等。3、YARN的作用是什么，主要包含什么實例（服務），什么作用？參考答案：主要負責集群資源的協(xié)調管理；ResourceManager(RM)：負責整個集群資源（內存、CPU等）的管理；NodeManager(NM)：負責單個節(jié)點服務器資源的管理。4、MapReduce架構用于計算的階段是什么？參考答案：分為Map、Reduce兩個截斷，Map過程將輸入數(shù)據(jù)拆分成多個小塊分別進行處理，Reduce過程主要負責匯聚結果值。列舉幾項Hive的優(yōu)缺點？參考答案：優(yōu)點：操作接口采用類SQL語法，提供快速開發(fā)的能力（簡單、容易上手）；避免了去寫MapReduce，減少開發(fā)人員的學習成本。Hive支持用戶自定義函數(shù)，用戶可以根據(jù)自己的需求來實現(xiàn)自己的函數(shù)。缺點：實現(xiàn)算法比較局限，迭代式算法無法表達；Hive調優(yōu)比較困難，粒度較粗。該章節(jié)介紹的計算法框架有哪些？哪個更優(yōu)秀一些？參考答案：Spark和MapReduce兩種；Spark的計算更加優(yōu)秀。消息隊列的組件是哪個？參考答案：KafkaZookeeper的主要作用？參考答案：ZooKeeper的主要作用是提供一種可靠的、分布式的協(xié)調服務，使得分布式系統(tǒng)中的各個節(jié)點能夠協(xié)同工作，保持一致性，實現(xiàn)可靠的分布式應用。問答：簡述sql中的插入數(shù)據(jù)操作語句。inserintotable表名[(字段列表)]values（值列表);查詢字段非空的寫法有哪些？Isnotnull和<>’’對表tables的字段sname進行模糊查詢，查詢出姓”張”的數(shù)據(jù)的寫法？Select*fromtablesWheresnamelike‘張%’；對表tables的字段sname進行模糊查詢，查詢出姓”張”，名字是三個字的數(shù)據(jù)，的數(shù)據(jù)的寫法？Select*fromtablesWheresnamelike‘張__’；列舉去重查詢的兩種sql寫法，表名tablename，對字段sname進行去重查詢；第一種：selectdistinctsnamefromtablename；第二種：selectsnamefromtablenamegroupbysname；查詢工資總和大于9000的部門編號以及工資和，工資信息表表名emp，部門編號字段為deptno，工資信息字段sal？selectdeptno,SUM(sal)FROMempGROUPBYdeptnoHAVINGSUM(sal)>9000;兩個表關聯(lián)產(chǎn)生笛卡爾積時，關聯(lián)后的數(shù)據(jù)數(shù)據(jù)量跟兩個表的關系？當產(chǎn)生笛卡爾積后，關聯(lián)后的數(shù)據(jù)是兩表數(shù)據(jù)量的乘機。寫出三種內連接的sql，實現(xiàn)表名t1t2的內連接Select*fromt1,t2;Select*fromt1joint2;Select*fromt1innerjoint2;sql語言主要分類有哪幾種？數(shù)據(jù)定義語言（DDL）、數(shù)據(jù)操作語言（DML）、數(shù)據(jù)查詢語言（DQL）、數(shù)據(jù)控制語言（DCL）列舉Python的幾個標準的數(shù)據(jù)類型Numbers（數(shù)字）、String（字符串）、List（列表）、Tuple（元組）、Dictionary（字典）Python支持多少種數(shù)字類型？分別列舉共4種。分別為：int（有符號整型）、long（長整型）、float（浮點型）、complex（復數(shù)）字典和列表是python中最靈活的兩種內置數(shù)據(jù)結構類型，他們之間的區(qū)別是什么?列表是有序的對象集合，字典是無序的對象集合。字典當中的元素是通過鍵來存取的，而不是通過偏移存取。python中的循環(huán)語句有哪些，舉例說明。while判斷條件(condition)：執(zhí)行語句(statements)……foriterating_varinsequence:執(zhí)行語句(statements)……循環(huán)中break和continue語句均可停止循環(huán)，他們之間的區(qū)別在哪里？continue語句跳出本次循環(huán)，而break跳出整個循環(huán)。Python位運算符代表和運算、或運算的符號是什么？和運算：&或運算：|python語言寫一個判斷，判斷當變量a等于0，且當變量b等于1或變量c不等于2時，打印輸出變量d。ifa==0and(b==1orc!=2):print(d)用python寫一個for循環(huán)，初始i=0，循環(huán)當i=100跳出循環(huán)foriinrange(101):#循環(huán)范圍從0到100，包括100ifi==100:#當i等于100時break#跳出循環(huán)print(i)#輸出當前i的值定義一個列表a，并對a逐個增加原始，1,2,3,4,5,6#定義一個空列表aa=[]#逐個增加元素a.append(1)a.append(2)a.append(3)a.append(4)a.append(5)a.append(6)print(a)1、5G主要性能指標有哪些？答案：共有8個，分別是峰值速率、用戶體驗速率、頻譜效率、移動性、時延、連接密度、網(wǎng)絡能效、區(qū)域業(yè)務容量。2、列舉幾個智能網(wǎng)優(yōu)關鍵KPI指標？答案：無線接通率指標、RRC連接建立成功率、切換成功率、無線掉線率。3、通信數(shù)據(jù)源有哪些？答案：DT（Drivetest）數(shù)據(jù)，MR測量報告，CDR呼叫詳細記錄、基站工參、性能數(shù)據(jù)、DPI數(shù)據(jù)、告警數(shù)據(jù)、投訴數(shù)據(jù)。4、nr網(wǎng)絡質量分析有哪幾大類？答案：覆蓋類、干擾累、CSFB、移動性、nr速率。5、根據(jù)MR觸發(fā)方式的不同，MR測量報告主要分為哪些？答案：周期性觸發(fā)的MRO、事件觸發(fā)的MRE、統(tǒng)計計算測量數(shù)據(jù)的MRS。6、搭建通信大數(shù)據(jù)平臺需要登錄多個服務后臺修改相關配置操作嗎？答案：不需要。將大數(shù)據(jù)平臺安裝包放到要部署的網(wǎng)段內的任意電腦上，雙擊安裝根據(jù)提示操作即可。7、通信大數(shù)據(jù)平臺的特色功能有哪些？答案：一鍵初始化、一鍵備份、一鍵刪除、一鍵還原、一鍵授權、一鍵緊急修復、一鍵下電、支持用戶名單導入/導出等。傳統(tǒng)的室內分布系統(tǒng)的組成和分類？參考答案：室內分布系統(tǒng)通常由信號源和分布系統(tǒng)組成。無源室內分布系統(tǒng)、有源室內分布系統(tǒng)、宏蜂窩接入室內分布系統(tǒng)、微蜂窩室內分布系統(tǒng)、分布式室內分布系統(tǒng)、直放站室內分布系統(tǒng)、單通道室內分布系統(tǒng)、雙通道室內分布系統(tǒng)。室分的典型場景舉例？參考答案：機場的候機廳、出發(fā)廳、到達廳；火車站、汽車站的候車廳、售票處、過道、站臺；地鐵站點、換乘通道及隧道；體育場館、會展中心、圖書館、博物館等。弱覆蓋的判斷標準是什么？參考答案：在GSM網(wǎng)絡RxLev_DL功率小于-90dBm，或者RSCP小于-90dBm的屬于弱覆蓋；在nr網(wǎng)絡RSRP低于-110dBm屬于弱覆蓋；在5GNR網(wǎng)絡RSRP低于-105dBm屬于弱覆蓋。覆蓋類問題判斷手段有哪些？參考答案：①通過路測方式。路測分為DT、CQT兩種，DT主要針對道路，了解“線”的連續(xù)覆蓋情況。CQT主要針對室內，了解“點”的深度覆蓋情況。②KPI指標統(tǒng)計。主要對重定向次數(shù)及5G/4G向2G、3G高倒流比例進行統(tǒng)計。假如4G小區(qū)向2G小區(qū)發(fā)起重定向，一般認為是nr網(wǎng)絡弱覆蓋所致。③MR數(shù)據(jù)分析。通過對MR數(shù)據(jù)的采集、解析、可柵格化的顯示全網(wǎng)弱覆蓋的區(qū)域。④站點覆蓋仿真。結合基站站高、方位角、下傾角、地理環(huán)境等，應用仿真工具，可仿真出現(xiàn)無線網(wǎng)絡可能存在弱覆蓋的區(qū)域。本章節(jié)分析任務的主要步驟是什么？參考答案：①創(chuàng)建Hive結果表（或中間表）并完善表結構提交；②創(chuàng)建Hive算法并編輯調試算法內容；③創(chuàng)建mysql數(shù)據(jù)庫結果表并完善表結構提交；④創(chuàng)建同步算法，配置同步的庫名表名參數(shù)，提交算法；⑤添加可視化模塊，連接數(shù)據(jù)庫，配置可視化，調試呈現(xiàn)結果。本章節(jié)分析任務的分析過程我們接觸了哪幾類數(shù)據(jù)庫，作用有何不同之處？參考答案：兩類；第一類為hive數(shù)據(jù)庫，是集群數(shù)據(jù)庫，用于計算和存放過程數(shù)據(jù)用；第二類mysql數(shù)據(jù)庫，是關系型數(shù)據(jù)庫，用于存放和展示業(yè)務分析結果數(shù)據(jù)用的。本章節(jié)分析任務的算法主要涉及的幾個數(shù)據(jù)庫的數(shù)據(jù)，介紹各庫存數(shù)據(jù)的特征分別是什么？參考答案：所有任務算法涉及了5個數(shù)據(jù)庫的數(shù)據(jù)，4個hive庫和1個mysql數(shù)據(jù)庫。4個hive庫分別為：edu_odsdata、edu_middata、edu_tmpdata、edu_resdata，1個mysql庫為：data_sync。edu_odsdata這個庫存了源數(shù)據(jù)，我們這里的算法只做讀取使用；edu_middata這個庫是我們生成匯總大的數(shù)據(jù)表存放的中間庫，這個庫里的表是我們創(chuàng)建的，可以供后面多個算法取用數(shù)據(jù)；edu_tmpdata這個庫為臨時庫，存了我們計算過程中臨時存放的數(shù)據(jù)的臨時表；edu_resdata這個庫是結果庫，最終我們計算分析的結果表都存放于此；不同于上面4個庫data_sync這個庫是mysql的數(shù)據(jù)庫，主要存放從hive庫同步過來的數(shù)據(jù)（可以是源數(shù)據(jù)、結果數(shù)據(jù)等）。分析基于大數(shù)據(jù)技術弱覆蓋問題，分析問題的源數(shù)據(jù)有哪些？生成的表有哪些？參考答案：源數(shù)據(jù)是：質差路段表、采樣點表、工參表（nr_poorquality_points、nr_cover_servingcell、nr_siteinfo）。生成的表是：質差路段小區(qū)采樣信息匯總的中間表、弱覆蓋問題質差路段表（mid_nr_servingcellinfo_XX_XXX、res_nr_pq_poorcover_XX_XXX）。分析切換問題大數(shù)據(jù)過程中使用的到源數(shù)據(jù)有哪些？參考答案：質差路段表、切換事件表（也可以是表名稱nr_poorquality_points、nr_event_handover）。10、hive數(shù)據(jù)庫的數(shù)據(jù)是如何同步到mysql數(shù)據(jù)庫的？參考答案：通過創(chuàng)建同步任務，配置對應正確的庫名、表名然后執(zhí)行。目前主要的衛(wèi)星定位系統(tǒng)有哪些？參考答案：美國全球定位系(GPS)、俄羅斯格洛納斯(GLONASS)、歐洲伽利略(GALILEO)系統(tǒng)、中國北斗衛(wèi)星導航系統(tǒng)。什么原因導致基站定位精度無法很高？參考答案：基站定位時，信號很容易受到干擾，所以先天就決定了它定位的不準確性?；诘乩砦恢玫姆沼心男繀⒖即鸢福旱貓D、打車、外賣、團購、社交、物流等。熱點區(qū)域的定義是什么，舉例說明？參考答案：熱點區(qū)域，即關注時段內人流量密集的區(qū)域，如周杰倫演唱會當晚的演唱會現(xiàn)場、春運期間的火車站/機場、早晚高峰的地鐵口/公交站、節(jié)假日的游樂園等等；關注這樣的區(qū)域可以對該類熱點區(qū)域的無線網(wǎng)絡、交通指揮、園區(qū)管理和人員安排等都有很好的指導作用，如演唱會現(xiàn)場可以采用安排緊急通訊車輛加大無線網(wǎng)絡的支撐力度、演唱會附近交通進行適當管制和紅綠燈策略調整等等。所以定義好熱點區(qū)域就顯得相當重要。我們將一天內單位區(qū)域內的活躍人流數(shù)量達到一定門限的區(qū)域定義為熱點區(qū)域。在本章節(jié)分析基于位置信息的熱點區(qū)域使用什么代碼語言實現(xiàn)的，為了可視化呈現(xiàn)分析的結果使用了什么模塊？參考答案：Python3+hql（主要處理和分析代碼都是Python3、過程中獲取表數(shù)據(jù)時用到了少了hivesql）。使用了folium加載地圖和渲染結果數(shù)據(jù)。在本章節(jié)分析基于位置信息的熱點區(qū)域的分析代碼中，調用的geopy模塊下的distance目的是什么？參考答案：計算不同經(jīng)緯度點之間的距離。在本章節(jié)分析基于位置信息的熱點區(qū)域任務中，代碼頂端有什么注意事項？參考答案：加入定義代碼的執(zhí)行環(huán)境的參數(shù)，即添加%python，否則代碼可能因為執(zhí)行環(huán)境不明確導致任務無法執(zhí)行。移動互聯(lián)網(wǎng)業(yè)務感知數(shù)據(jù)的獲取主要有哪些方式？參考答案：方式1為測試APP方式，方式2為信令及DPI（DeepPacketInspection深度報文監(jiān)測）監(jiān)測方式。業(yè)務監(jiān)測數(shù)據(jù)采集方式有哪些？參考答案：①業(yè)務行為信息采集功能：在不干擾用戶正常使用網(wǎng)絡和業(yè)務的前提下，在用戶使用手機進行各種數(shù)據(jù)業(yè)務的過程中，對手機上發(fā)生的業(yè)務感知信息進行采集，并同時記錄業(yè)務發(fā)生時的無線環(huán)境信息。②數(shù)據(jù)連接信息采集功能：在用戶使用手機APP進行數(shù)據(jù)業(yè)務使用時，記錄手機由無數(shù)據(jù)連接狀態(tài)轉換為進入數(shù)據(jù)連接狀態(tài)的成功率和所用時間。熱門app算法設計邏輯？參考答案：篩選出入庫時間為當天且測試業(yè)務正常的抖音業(yè)務，存放入臨