《航運大數(shù)據(jù)導(dǎo)論》課件-3.1 航運和大數(shù)據(jù)概述

航運大數(shù)據(jù)導(dǎo)論第三章概述引言

本章主要介紹航運大數(shù)據(jù)的基本情況及上海自貿(mào)區(qū)航運的建設(shè)情況。在本章中簡要介紹了航運的定義、大數(shù)據(jù)的定義，以及大數(shù)據(jù)對航運業(yè)的影響。在“國際航運數(shù)據(jù)庫簡介”中主要介紹了目前國際航運業(yè)中五個影響力較大的航運數(shù)據(jù)庫的內(nèi)容、數(shù)據(jù)規(guī)模及功能。在“國內(nèi)航運數(shù)據(jù)庫簡介”中主要介紹了目前國內(nèi)航運業(yè)中三個影響力較大的航運數(shù)據(jù)庫的內(nèi)容、數(shù)據(jù)規(guī)模及功能。在“自貿(mào)區(qū)的航運建設(shè)現(xiàn)狀”中，“上海國際航運中心建設(shè)現(xiàn)狀”部分是在上海建交委的報告基礎(chǔ)上總結(jié)而成；“上海自貿(mào)區(qū)建設(shè)現(xiàn)狀”部分是在上海自貿(mào)區(qū)年度報告的基礎(chǔ)上總結(jié)而成；“自貿(mào)區(qū)與航運中心建設(shè)相結(jié)合”則主要介紹了上海自貿(mào)區(qū)的航運建設(shè)與上海航運中心結(jié)合的內(nèi)容。3.1航運和大數(shù)據(jù)概述3.1.1航運的定義航運(shipping)包括通過船運和空運來運送人或貨物，而本書的航運統(tǒng)指水路運輸(即船運)。水路運輸可以利用任何類型的輪船、帆船或駁船，在運河、湖泊、江流及海洋上運送旅客和貨物，是有史以來最大的貨運承載方式。一般而言，水路運輸?shù)某杀颈瓤者\與陸路運輸?shù)?；同時間水路運輸一次運送的貨物數(shù)量也比空運和陸路多,這些都是航運的優(yōu)勢所在。因此在國際貿(mào)易上，航運是非常普遍的運送方式，一般分為內(nèi)河航運、沿海航運和遠洋航運。3.1.2航運的概述發(fā)展航運業(yè)對中國經(jīng)濟的發(fā)展和實力的壯大具有極為重要的意義，體現(xiàn)在以下兩個層面：

（一）從國內(nèi)層面看

（二）從國際層面看一、

從國內(nèi)層面來看從國內(nèi)層面來看，航運業(yè)是國民經(jīng)濟的基礎(chǔ)產(chǎn)業(yè)之一，是推動經(jīng)濟結(jié)構(gòu)調(diào)整、發(fā)展國際貿(mào)易、推動經(jīng)濟全球化的重要基礎(chǔ)，為中國的對外貿(mào)易發(fā)展、鞏固世界主要貿(mào)易大國的地位提供了有力的支持，其興衰榮辱與我國經(jīng)濟發(fā)展、進出口貿(mào)易、社會發(fā)展和政策法規(guī)的發(fā)展都密切相關(guān)。我國擁有遼闊的海洋國土，這其中蘊藏著豐富的石油、天然氣等戰(zhàn)略資源,海洋經(jīng)濟在國民生產(chǎn)總值(GrossDomesticProduct，GDP）所占比重也在逐年提高。大力發(fā)展海洋經(jīng)濟已被納入國家經(jīng)濟社會發(fā)展的重要戰(zhàn)略，作為海洋經(jīng)濟重要組成部分和重要載體的航運業(yè)則有著舉足輕重的地位，是需要優(yōu)先發(fā)展的戰(zhàn)略行業(yè)。二、

從國際層面來看從國際層面來看，傳統(tǒng)的世界強國和經(jīng)濟發(fā)達的地區(qū)都是依靠海洋資源，發(fā)展海洋經(jīng)濟，從海洋走向繁榮和強大，發(fā)展航運業(yè)是海洋經(jīng)濟強國的必由之路。航運業(yè)是海洋經(jīng)濟的重要載體，對一個國家的經(jīng)濟、政治、軍事等各個方面都具有不可低估的作用。作為發(fā)展海洋經(jīng)濟的重要組成部分，大力發(fā)展航運業(yè)對中國的發(fā)展壯大具有極為重要的意義，應(yīng)當(dāng)?shù)玫阶銐虻闹匾?，并為之發(fā)展提供便利，如制定一系列優(yōu)惠措施來扶持航運業(yè)發(fā)展。3.1.3大數(shù)據(jù)的定義“大數(shù)據(jù)(bigdata)指的是所涉及的數(shù)據(jù)量規(guī)模巨大到無法通過人工,在合理時間內(nèi)進行截取、管理、處理、并整理成為人類所能解讀的信息。”工業(yè)和信息化部電信研究院在其公布的《大數(shù)據(jù)白皮書(2014)》中對大數(shù)據(jù)的定義如下：“大數(shù)據(jù)是具有體量大、結(jié)構(gòu)多樣、時效強等特征的數(shù)據(jù);處理大數(shù)據(jù)需采用新型計算架構(gòu)和智能算法等新技術(shù);大數(shù)據(jù)的應(yīng)用強調(diào)以新的理念應(yīng)用于輔助決策、發(fā)現(xiàn)新的知識，更強調(diào)在線閉環(huán)的業(yè)務(wù)流程優(yōu)化。”3.1.4大數(shù)據(jù)的特點大數(shù)據(jù)的特點常用4個“V”來體現(xiàn)，即大量（volume）、高速（velocity）、多樣（variety）和價值（value）。這4個“V”代表著以下四個層面：（1）數(shù)據(jù)的體量和規(guī)模巨大。從TB級，躍升到PB級甚至EB級。（2）數(shù)據(jù)類型繁多。不僅是數(shù)據(jù)量的爆炸性增長，還涉及數(shù)據(jù)類型的改變。例如前文提到的傳感器數(shù)據(jù)、呼叫記錄、互聯(lián)網(wǎng)信息等。（3）處理速度快。從各種類型的數(shù)據(jù)中快速獲取信息。（4）價值回報高。合理利用數(shù)據(jù)，對其進行正確、準(zhǔn)確的分析，可以從數(shù)據(jù)中得到很高的價值回報。3.1.5大數(shù)據(jù)的意義大數(shù)據(jù)的意義和關(guān)鍵不在于信息的收集，而在于如何對這些數(shù)據(jù)進行分析挖掘，從這些收集到的含有意義的數(shù)據(jù)中最終獲得實際的價值。隨著互聯(lián)網(wǎng)的興起，像大數(shù)據(jù)這種針對海量數(shù)據(jù)的處理技術(shù)很快在眾多行業(yè)領(lǐng)域得到了大范圍的應(yīng)用，并取得了巨大的成功。在電子商務(wù)領(lǐng)域，大數(shù)據(jù)技術(shù)可以用于定向投放廣告和智能推薦;在金融領(lǐng)域，企業(yè)可以應(yīng)用大數(shù)據(jù)技術(shù)來做基于客戶行為分析的大數(shù)據(jù)營銷和供應(yīng)鏈管理，滿足管理者的分析決策及定位預(yù)測的需求，從而進行風(fēng)險預(yù)測；在醫(yī)療領(lǐng)域，提高醫(yī)療和研發(fā)質(zhì)量，優(yōu)化機器和設(shè)備性能；在公共安全領(lǐng)域，大數(shù)據(jù)技術(shù)可用于改善執(zhí)法和打擊犯罪；在交通領(lǐng)域，可以基于城市實時交通信息利用社交網(wǎng)絡(luò)和天氣數(shù)據(jù)來優(yōu)化最新的交通情況等。這些應(yīng)用取得的成功啟發(fā)全社會開始重新審視數(shù)據(jù)的巨大價值。3.1.5大數(shù)據(jù)的意義從技術(shù)上來看，大數(shù)據(jù)和云計算一直是密不可分的。大數(shù)據(jù)在從數(shù)據(jù)源獲取并經(jīng)過分析挖掘到最終獲得價值的過程中面臨著一系列的挑戰(zhàn)，其中包括數(shù)據(jù)的準(zhǔn)備、存儲與管理、計算處理、數(shù)據(jù)分析和可視化展現(xiàn)。這些挑戰(zhàn)促使大數(shù)據(jù)與云計算相互搭配，共同完成整個流程。大數(shù)據(jù)有著龐大的數(shù)據(jù)量，而且對處理速度有較高的要求，無法只用單臺的計算機進行處理，必須采用分布式架構(gòu)，對海量數(shù)據(jù)進行分布式數(shù)據(jù)挖掘。依托云計算的分布式處理、分布式數(shù)據(jù)庫和云存儲、虛擬化技術(shù)，這些海量非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)，可以通過使用類似于MapReduce的框架向較大規(guī)模的計算機集群分配工作，進行實時的大型數(shù)據(jù)集分析，使用大規(guī)模并行處（massivelyparallelprocessing，MPP）數(shù)據(jù)庫、分布式文件系統(tǒng)、分布式數(shù)據(jù)庫、云計算平臺、互聯(lián)網(wǎng)和可擴展的存儲系統(tǒng)等技術(shù)，在用戶所能容忍的時間內(nèi)有效地處理大量數(shù)據(jù)。3.1.6大數(shù)據(jù)對于航運業(yè)的影響大數(shù)據(jù)的發(fā)展對各行業(yè)的影響和帶來的價值，以及在數(shù)據(jù)處理分析上體現(xiàn)出來的強大能力，為航運業(yè)的信息化帶來了希望。通過對各大班輪聯(lián)盟從中國出口到全球港口的船期的掛靠頻次的大數(shù)據(jù)中進行一系列提取、整理、分析和轉(zhuǎn)化后，得到港口熱力圖，從中可以看到各大班輪聯(lián)盟在全球的網(wǎng)絡(luò)布點情況。形象化的大數(shù)據(jù)可以為航運業(yè)班輪公司提供一系列的預(yù)測分析，為班輪聯(lián)盟運力分析提供形象的支持；也可以一目了然地看出中國出口貿(mào)易的熱點分布，為航線開發(fā)的規(guī)劃提供依據(jù)。3.1.7大數(shù)據(jù)對于航運業(yè)的應(yīng)用(1）預(yù)測港口熱度?？梢栽谖磥砗骄€上利用大數(shù)據(jù)對國際貿(mào)易貨量進行預(yù)測分析，預(yù)知各個港口的熱度。（2）天氣預(yù)警。利用氣象水文等情況預(yù)報大霧、臺風(fēng)等不利天氣，對運力的投放進行提前預(yù)警,以便在不利情況下及時進行操作調(diào)配。（3)客戶分析。實時識別客戶的行為，對客戶行為進行分析，對目的港棄箱行為進行預(yù)警，防止不必要的損失發(fā)生;也可以基于艙位及市場狀況，進行實時調(diào)價行為。3.1.8大數(shù)據(jù)對于航運業(yè)的優(yōu)勢隨著航運市場的電子信息化將會產(chǎn)生大量的數(shù)據(jù)和信息，航運業(yè)對數(shù)據(jù)管理和處理的需求也變得越來越明顯，航運市場也將出現(xiàn)一體化的電子商務(wù)網(wǎng)絡(luò)平臺。各種平臺公司可以利用大數(shù)據(jù)對客戶進行分析歸類，根據(jù)不同客戶提供有針對性的服務(wù)。航運電商可以利用大數(shù)據(jù)對外貿(mào)貨代公司行為進行分析，使客戶能準(zhǔn)確地選擇合適的承運人、船期及合適的貨運代理，比較成功的例子有現(xiàn)已加入阿里巴巴集團的外貿(mào)綜合服務(wù)平臺——深圳一達通，借助大數(shù)據(jù)平臺，從外貿(mào)咨詢到外貿(mào)交易，為客戶提供金融、鈞流等一站式服務(wù)。僅在2012年，這一平臺進出口總額突破18億美元，位居全國一般貿(mào)易出口企業(yè)第9位，是前十位的企業(yè)中唯一的一家平臺型企業(yè)。3.1.9大數(shù)據(jù)對于航運業(yè)的優(yōu)勢大數(shù)據(jù)的應(yīng)用遠遠不只是電商，在航運業(yè)，數(shù)據(jù)服務(wù)有著很好的發(fā)展前景。在國內(nèi)，從數(shù)以百萬計的班輪船期信息，到由此衍生的動態(tài)船舶地理位置，還有全球總數(shù)高達1700多萬TEU(1wenty-footequivalentunit,長20英尺