大數(shù)據與數(shù)據挖掘

1、大數(shù)據與數(shù)據挖掘,華藝園林股份有限公司2017.6.23,阿里(菜鳥)與順豐之爭,2017.3-4月 菜鳥要求順豐返回所有快遞柜(豐巢)包裹信息，即所有的快遞柜信息的觸發(fā)必須通過菜鳥裹裹，取件碼信息要無條件給菜鳥，豐巢要返回所有包裹信息給菜鳥，無論此件是否來自淘寶系平臺，順豐不同意2017.5.27 菜鳥郵件通知順豐自 5.31 日停用數(shù)據接口，下線順豐接口。 （5月31日晚上6點，接到順豐發(fā)來的數(shù)據接口暫停告知。6

2、月1日凌晨，順豐就關閉了自提柜的數(shù)據信息回傳）2017.6.1 菜鳥稱收到順豐發(fā)來數(shù)據接口暫停通知（順豐突然關閉了物流數(shù)據接口）2017.6.1 順豐稱豐巢接口信息是菜鳥方面于 6 月 1 日 0 點下線的。（菜鳥之所以封殺順豐，背后原因是阿里方面希望順豐放棄使用騰訊云改用阿里云。）2017.6.2 順豐連發(fā)兩條告示，指責菜鳥未披露實情2017.6.3 菜鳥和順豐在中國郵政局主持下和解。,背后數(shù)據之爭,①

3、順豐：我的快遞業(yè)務以商務件為主，不完全依賴淘寶件，且我從未放棄過電商，順豐優(yōu)選仍然是生鮮電商中的領導者，我不愿意將數(shù)據拱手讓人。②阿里(菜鳥)：我已經擁有巨大的電商數(shù)據積累，要物流數(shù)據是為了客戶服務體驗和數(shù)據商業(yè)化，沒有數(shù)據我這種輕資產公司就什么都不是了。,大數(shù)據是什么?,大數(shù)據(Big Data): 指無法在一定時間范圍內用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據集合，是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)

4、力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產。簡單一點的說，就是用現(xiàn)有一般技術難以管理的數(shù)據。,大數(shù)據的典型特征,Volume（容量） 數(shù)據量大，包括采集、存儲和計算的量都非常大。 Variety（多樣性） 種類和來源多樣化。包括結構化、半結構化和非結構化數(shù)據，具體表現(xiàn)為網絡日 志、音頻、視頻、圖片、地理位置信息等等，多類型的數(shù)據對數(shù)據的處理能力提出了更高的要求 Velocity（速度）

5、 數(shù)據增長速度快，處理速度也快，時效性要求高。數(shù)據產生和更新的頻率Value （價值） 數(shù)據價值密度相對較低，或者說是浪里淘沙卻又彌足珍貴Veracity（真實性） 數(shù)據的質量,大數(shù)據的緯度,數(shù)據,技術,創(chuàng)意,個人數(shù)據,比如A用戶通過菜鳥從北京給遠在上海的朋友B寄了一箱櫻桃，首先最直觀的就是發(fā)件/收件人的姓名、電話、住址，這個就鎖定了兩個人的基本數(shù)據。然后通過用戶淘寶消費明細，我們發(fā)現(xiàn)A經常在某女裝店買

6、衣服，那么就出現(xiàn)第二個信息，A可能是女性。通過大量淘寶訂單，阿里會發(fā)現(xiàn)，這個姑娘A經常購物的店是針對25-35女性的，可以得出結論A年齡為25-35歲。再通過電話反向檢索淘寶/天貓數(shù)據庫，發(fā)現(xiàn)姑娘A每月淘寶消費2000以上，可以基本判斷出這是個中等收入小資。然后，再搜索余額寶，發(fā)現(xiàn)姑娘A還有18萬塊放在余額寶里面，哦哦，阿里現(xiàn)在知道這姑娘有閑錢。繼續(xù)檢索，發(fā)現(xiàn)姑娘A最近瀏覽了很多嬰幼兒產品頁面，都是針對新生兒童的，得出結論姑娘要生寶

7、寶了其他。。。。。。,數(shù)據做什么？,能干的太多了，用戶畫像、精準營銷、用戶體驗提升、決策輔助等等，我們就說說個簡單的：用戶畫像上面整個過程中，系統(tǒng)已經給用戶做了畫像。姑娘A，家住北京，電話，地址，25-35歲，女性，消費能力中等，資產情況好，準備生小孩。。。,精準營銷、體驗提升,當這個姑娘下次打開淘寶的時候（手機/PC），系統(tǒng)頁面自動會將下面產品放在首頁：母嬰用品，中高端（孕婦裝、兒童裝、紙尿褲、奶粉統(tǒng)統(tǒng)來一套）服裝，中高化妝品

8、，國內知名品牌。。。。。。剩下的事情你懂得，淘寶頁面可是很有限的，為了提高廣告效率，你看把我家淘寶累成啥樣了？所以賣貨的筒子，趕緊掏錢啊，引流效果很好的。。。。還可以這樣：當姑娘A登陸蝦米音樂的時候，阿里就直接給他推送25-35歲女性的歌曲，順便把A常聽的歌曲也加入數(shù)據庫。。。打開支付寶的時候，順手推薦下理財產品，反正A也有閑錢，放著多浪費啊，來看看這些。。。順手還能推薦一下兒童的0歲保險^_^.,對用戶：不用打電話不用發(fā)問

9、卷，不用騷擾用戶，通過大數(shù)據抓取的信息我都清楚，用戶想到想不到的，通通替用戶想到，只說一句：您就掏錢吧，擱哪兒都要買，不是么。。。對商家：我知道誰需要你的產品，誰出的錢多，我就把誰的產品展示給用戶，趕緊麻利掏錢，別跟我BB。那邊的窮鬼死一邊去。。。,數(shù)據挖掘是什么,數(shù)據挖掘（英語：Data mining），又譯為資料探勘、數(shù)據采礦。它是數(shù)據庫知識發(fā)現(xiàn)（KDD)中的一個步驟。數(shù)據挖掘一般是指從大量的數(shù)據中通過算法搜索隱藏于其中信息的過

10、程。數(shù)據挖掘通常與計算機科學有關，并通過統(tǒng)計、在線分析處理、情報檢索、機器學習、專家系統(tǒng)和模式識別等諸多方法來實現(xiàn)上述目標。,各種來源數(shù)據,數(shù)據庫或者數(shù)據倉庫,數(shù)據挖掘引擎,模式評估,,,,,用戶界面,,,知識庫,數(shù)據挖掘做什么,數(shù)據庫技術,統(tǒng)計學,信息科學,可視化,機器學習,數(shù)據挖掘,概念性描述：用戶畫像；高度自動化地分析，做出歸納性的推理，從中挖掘出潛在的模式，可以幫助企業(yè)、商家、用戶調整市場政策、減少風險、理性面對市場，并做出正