Big Data是什麼? 對於SEO有何關係?

Big Data是在近年被大家熱列討論的話題，有些翻譯成「大數據」、「巨量資料」或是「海量資料」，Big Data不是指一項技術，而是一個複雜的大量資料，要處理這個資料需要許多技術的集合，以進行如此大量的資料處理，去得到需要的訊息或是結果。這個Big Data對於SEO或是搜尋技術上有什麼關係呢? 讓我們來看下去 …

我們先來釐清Big Data的定義，Wikipedia解釋Big Data如下:

In information technology, big data is a collection of data sets so large and complex that it becomes difficult to process using on-hand database management tools. 在資訊技術中，big data是一個非常大而複雜的資料集的集合，因此非常困難以現有的資料庫來進行處理。

The challenges include capture, storage, search, sharing, analysis, and visualization. 這個挑戰包括抓取、儲存、搜尋、分享、分析、以及視覺化。

The trend to larger data sets is due to the additional information derivable from analysis of a single large set of related data, as compared to separate smaller sets with the same total amount of data, allowing correlations to be found to “spot business trends, determine quality of research, prevent diseases, link legal citations, combat crime, and determine real-time roadway traffic conditions.” 之所以會有更大量資料的趨勢是因為分析單一大量資料的相關資料會比只從較小的資料，更可以找到相關性，以便抓到商業趨勢、決定搜尋品質、預防疾病、連結合法的引文、對抗犯罪、決定即時的道路交通狀況。

至於為什麼資料會越來越多呢? 以2012年來說，每天2.5 quintillion (2.5×10¹⁸) bytes被產生出來，根據IBM的資料說~ 世界上90%的資料是在近兩年產生出來的。

quintillion是多大? 1 EB =  10¹⁸ bytes =1000000000 gigabytes = 1000000 terabytes，也就是一百萬TB。

Big Data會讓許多人搞不清楚，在”一次搞懂Big data“文章說到: 它是雲端的一種趨勢。巨大資料量會存放在雲端裡。其實有些錯誤，Big Data之所以跟Cloud Computing有關係，是因為Cloud的架構很適合處理Big Data，並不是在雲端的都是Big Data，也不是Big Data只存放在雲端裡。例如這篇”Big data in the cloud“就提到許多可以處理Big Data的Cloud服務，如Amazon與Google等等。

這篇 “Big Data: An Introduction for Search Marketers“也說到: Cloud does not equal big data although big data technologies are often only available through cloud delivery. 雲端不等於Big Data，雖然Big Data技術經常由雲端來提供。

並且還提到了我們要說的重點，Big Data的技術剛好可以用在搜尋行銷上。

這篇”When Machines Start Writing Back: My Problem With DataPop & Automated Content Creation“則更清楚的說明了Big Data的應用。文中提到了DataPop的服務，可以讓你的服務結合使用者的需求，產生相關性的廣告。

DataPop的概念其實也沒有太新奇 (如下圖)，新奇的是竟然已經可以變成商品。

為什麼DataPop沒有太新奇? 因為使用的都是舊技術，例如機器學習(Machine Learning)、語意技術(Semantics)等等。但是這些技術要真正能夠用在行銷上，並且要能夠準確，就不是一件容易的事情。真正把Big Data玩得很純熟的，Google應該是當之無愧的，例如這篇”Google, Big Data & What it Means for SEO“就說到，Google就是一家Big Data Company。

以下是DataPop的說明影片:

DataPop的核心就是一套Big Data與分析技術，透過分析Big Data而讓客戶可以推出精準的廣告，這個就值得密切關注，我們後續會再來持續討論DataPop與Big Data更多相關的議題。