大數(shù)據(jù)時(shí)代還需要現(xiàn)場調(diào)查嗎

大數(shù)據(jù)時(shí)代還需要現(xiàn)場調(diào)查嗎大數(shù)據(jù)時(shí)代還需要現(xiàn)場調(diào)查嗎1.什么是大數(shù)據(jù)大數(shù)據(jù)顧名思義數(shù)據(jù)量很大，也稱之為巨量資料，指所涉及的數(shù)據(jù)資料量規(guī)模巨大到無法通過人腦甚至主流軟件工具，在合理的時(shí)間內(nèi)達(dá)到擷取，管理，處理并整理成為幫助各個(gè)行業(yè)經(jīng)營決策更積極目的的資料。個(gè)人理解：網(wǎng)絡(luò)的出現(xiàn)（2G-3G-4G……），手機(jī)的誕生，尤其是智能手機(jī)及各類APP的應(yīng)用推進(jìn)了大數(shù)據(jù)時(shí)代的來臨。例如；淘寶（其他網(wǎng)上購物平臺等），外賣，快遞，微博，社交軟件（微信，QQ等），短視頻軟件（抖音，快手等），各種網(wǎng)頁（百度等）。2.大數(shù)據(jù)的特征（4個(gè)“V”）數(shù)據(jù)量大(Volume)大數(shù)據(jù)的起始計(jì)量單位至少是P(1000個(gè)T)、E(100萬個(gè)T)或Z(10億個(gè)T)。（1024個(gè)G=1T,想想我們的手機(jī)電腦內(nèi)存加一起也沒有1個(gè)T吧）類型繁多(Variety)包括網(wǎng)絡(luò)日志、音頻、視頻、圖片、地理位置信息等等，多類型的數(shù)據(jù)對數(shù)據(jù)的處理能力提出了更高的要求。（每個(gè)人每天都要發(fā)好多信息，視頻等等）價(jià)值密度低(Value)如隨著物聯(lián)網(wǎng)的廣泛應(yīng)用，信息感知無處不在，信息海量，但價(jià)值密度較低，如何通過強(qiáng)大的機(jī)器算法更迅速地完成數(shù)據(jù)的價(jià)值"提純"，是大數(shù)據(jù)時(shí)代亟待解決的難題。（沙堆里找金粒的意思？篩選，過濾）速度快、時(shí)效高(Velocity)時(shí)效性要求高。這是大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)挖掘最顯著的特征。數(shù)據(jù)實(shí)時(shí)處理，遵循“1秒定律”。（昨天和今天的信息已發(fā)生很大的變化）3.那么還需不需要進(jìn)行現(xiàn)場調(diào)查呢？目前我們個(gè)人實(shí)時(shí)的消費(fèi)習(xí)慣、資產(chǎn)配置、出行模式、地理定位、社交關(guān)系、娛樂活動等，都被編碼成不同形式的信息儲存在各大商業(yè)公司的數(shù)據(jù)庫中，為市場營銷、金融咨詢、甚至政治選舉這樣重大事件的預(yù)測提供了海量的信息基礎(chǔ)。這股潮流近年來也漸漸地蔓延至了學(xué)術(shù)界，涌現(xiàn)出了很多頗為新穎的研究話題。在學(xué)術(shù)價(jià)值上，大數(shù)據(jù)寶貴的一點(diǎn)就是極大程度將數(shù)據(jù)的收集化繁為簡，省去了冗長的問卷調(diào)查過程，為研究者節(jié)省了不少精力和時(shí)間。首先，入戶調(diào)查注重個(gè)體和家戶行為的成因，而大數(shù)據(jù)更多的分析只是局限于相關(guān)性。研究者利用住戶調(diào)查的問卷信息，探究某兩個(gè)變量之間是否存在因果機(jī)制。比如，子女外出務(wù)工對留在家的老人精神狀況的影響。而大數(shù)據(jù)的亮點(diǎn)之一，就是包含了某固定群體的全樣本，這有助于精準(zhǔn)地分析某固定群體的總體特征。比如，大眾點(diǎn)評網(wǎng)的用戶有五成以上是女性，年齡段聚集中在15至40歲之間，或者民謠歌手歌詞中念叨“南方”比“北方”的頻率高出六個(gè)百分點(diǎn)等等類似這樣的描述性統(tǒng)計(jì)。大數(shù)據(jù)的收集主要來自可觀察的表面行為和現(xiàn)象。但對于需要深度訪談才能獲取的數(shù)據(jù)（比如了解動機(jī)、想法、感受），恐怕還是得抽樣。這樣的分析揭示的，僅僅是某種趨勢和規(guī)律。其次，現(xiàn)場調(diào)查涉及的個(gè)人信息維度更廣更深。問卷會收集個(gè)體及其家庭的生活條件、福利狀況、教育歷史、工作信息以及近年來逐漸增加的各種心理認(rèn)知和健康方面的測度。同時(shí)，家庭中所有成員的特征、成員之間的關(guān)系和活動也會被收集。研究者不僅可以利用個(gè)人信息探索個(gè)人行為的成因，也可以探索代際的家戶決策的成因，如教育投資、轉(zhuǎn)移支付、老人照料等。而大數(shù)據(jù)，雖然目前社會上存在的數(shù)據(jù)集很多，但都只有各自側(cè)重的維度。攜程的出行數(shù)據(jù)、淘寶的交易數(shù)據(jù)、微信的社交數(shù)據(jù)，在目前的商業(yè)環(huán)境和數(shù)據(jù)保密協(xié)定的規(guī)制下，它們彼此很難完全融合，使得研究者可以全方位地了解個(gè)體。再次，住戶調(diào)查能確保訪問到當(dāng)前大數(shù)據(jù)中遺漏的個(gè)體對象，同時(shí)進(jìn)行逐年追蹤。農(nóng)村人口和城市外來務(wù)工人口，正是中國經(jīng)濟(jì)發(fā)展和城市化進(jìn)程的學(xué)術(shù)研究中需要高度重視的兩部分勞動力。這當(dāng)中的許多人并不是互聯(lián)網(wǎng)的頻繁使用者，他們的家庭情況如何，需要我們抽取有代表性的樣本進(jìn)行問卷調(diào)查才能了解全貌。更重要的是，他們的流動性很大，必須通過訪員孜孜不倦的聯(lián)系和溝通，才能保證我們可以追蹤其家庭經(jīng)濟(jì)和社會狀況的演變。大數(shù)據(jù)不是萬能的，當(dāng)然，入戶調(diào)查也不是。受訪者拒訪率的提高，越發(fā)增加了執(zhí)行調(diào)查團(tuán)隊(duì)的工作難度。的確，傳統(tǒng)的住戶調(diào)查可以提升的空間還有很多。目前利用平板進(jìn)行調(diào)查問卷也越來越普遍了。因此，擁抱新的變化，對傳統(tǒng)的入戶調(diào)查著實(shí)重要。4.總結(jié)目前充分利用大數(shù)據(jù)的平臺，利用各種數(shù)據(jù)進(jìn)行相關(guān)研究是一種比較簡約快速的方法，但同時(shí)現(xiàn)場