我們與最新的大數(shù)據(jù)項(xiàng)目集背后的人進(jìn)行了交談，以簡(jiǎn)化從數(shù)據(jù)中獲取分析的整個(gè)過(guò)程。

在過(guò)去的幾年中，數(shù)據(jù)格局發(fā)生了根本性的變化，這部分不歸功于Hadoop的成功。Apache項(xiàng)目已成為數(shù)據(jù)倉(cāng)庫(kù)的金標(biāo)準(zhǔn)，并且使用它的大量客戶(hù)證明了它的成熟性和穩(wěn)定性。 

這么多企業(yè)都在宣傳Hadoop的功能，因此當(dāng)您實(shí)際上正在尋找完全不同的東西時(shí)（無(wú)論是圖形數(shù)據(jù)庫(kù)，NoSQL數(shù)據(jù)存儲(chǔ)還是其他），就很容易被它的明星能力所吸引。如果您選擇使用Hadoop，那么如果您嘗試將其變成并非如此，那么您可能會(huì)陷入麻煩。

在過(guò)去的一年中，我們看到了許多“大數(shù)據(jù)”風(fēng)格的項(xiàng)目出現(xiàn)，但是從來(lái)沒(méi)有像 Precog這樣的項(xiàng)目能夠簡(jiǎn)化整個(gè)過(guò)程。大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺(tái)于上個(gè)月進(jìn)入公眾測(cè)試階段，廣受贊譽(yù)，其目標(biāo)是彌合可供公司使用的一系列數(shù)據(jù)資產(chǎn)之間的差距。

“我認(rèn)為Precog是一個(gè)數(shù)據(jù)科學(xué)平臺(tái)，可以幫助公司利用其數(shù)據(jù)資產(chǎn)來(lái)構(gòu)建新的數(shù)據(jù)項(xiàng)目以及現(xiàn)有產(chǎn)品的數(shù)據(jù)驅(qū)動(dòng)功能，” Precog的創(chuàng)始人兼首席執(zhí)行官兼CTO John De Goes說(shuō)。他繼續(xù)說(shuō)：“如果您想考慮其他技術(shù)，Precog是一種數(shù)據(jù)庫(kù)，但它專(zhuān)注于非常特定的用例?！?/span>

該用例是測(cè)量數(shù)據(jù)和數(shù)據(jù)科學(xué)領(lǐng)域。從成為社交媒體廣告平臺(tái)SocialMedia.com的工程副總裁開(kāi)始，De Goes就厭倦了依靠低級(jí)開(kāi)源工具構(gòu)建分析功能的“艱巨任務(wù)”，并決定為此做些事情。帶著開(kāi)發(fā)人員雜亂無(wú)章的團(tuán)隊(duì)一起去 丹佛創(chuàng)業(yè)周末，播種了Precog的種子。從那以后，該公司于去年5月被加入加速器TechStars計(jì)劃，使他們能夠進(jìn)一步追求自己的想法。

“ Precog與（與其他數(shù)據(jù)庫(kù)）完全不同，因?yàn)槲覀儗?zhuān)注于存儲(chǔ)和倉(cāng)儲(chǔ)測(cè)量數(shù)據(jù)，” De Goes說(shuō)。“這通常是行為數(shù)據(jù)，例如人們點(diǎn)擊和購(gòu)買(mǎi)東西，因此是交易數(shù)據(jù)，歷史數(shù)據(jù)和面向事件的數(shù)據(jù)。這就是我們關(guān)注的數(shù)據(jù)。”

“我們不專(zhuān)注于為您提供獲取和存儲(chǔ)數(shù)據(jù)的工具，我們專(zhuān)注于為您提供深度數(shù)據(jù)科學(xué)工具，以在非常深的層次上分析數(shù)據(jù)，并在該數(shù)據(jù)中心內(nèi)進(jìn)行任意分析，統(tǒng)計(jì)和機(jī)器學(xué)習(xí)。 ”

因此，從本質(zhì)上講，Precog并非企業(yè)學(xué)習(xí)Hadoop（其中有很多）或非關(guān)系數(shù)據(jù)庫(kù)（如MongoDB）的來(lái)龍去脈的繁瑣過(guò)程，而是為企業(yè)提供了重要的幫助，以獲取重要的見(jiàn)解，然后對(duì)它們的數(shù)據(jù)進(jìn)行“生產(chǎn)”努力。

Precog的 “實(shí)時(shí)Twitter選舉分析” 儀表板展示了Precog融合各種來(lái)源的能力的一個(gè)很好的例子。與合作伙伴AlchemyAPI一起，Precog通過(guò)顯示推文的逐個(gè)州情感分析來(lái)展示其平臺(tái)的功能和潛力。

“說(shuō)實(shí)話(huà)，簡(jiǎn)直太簡(jiǎn)單了，”德戈斯說(shuō)?！?[我們]只是將來(lái)自Twitter的數(shù)據(jù)插入到Precog中，[在Labcoat中進(jìn)行Quirrel分析，將其導(dǎo)出為代碼，將其打入HTML文檔中，然后就可以對(duì)Twitter數(shù)據(jù)進(jìn)行實(shí)時(shí)情緒分析?！?/span>

De Goes認(rèn)為，沒(méi)有足夠的企業(yè)看到其數(shù)據(jù)的真正功能。他說(shuō)：“我認(rèn)為，在當(dāng)今時(shí)代，公司在存儲(chǔ)和整合他們擁有的海量數(shù)據(jù)方面變得越來(lái)越自在?！?/span>

“現(xiàn)在，每個(gè)人都有大數(shù)據(jù)。好吧，那又如何呢？下一步有趣的步驟是弄清楚如何處理大數(shù)據(jù)。那是真正困難的部分。任何人都可以購(gòu)買(mǎi)數(shù)據(jù)倉(cāng)庫(kù)或大型Hadoop集群，然后開(kāi)始在其中存儲(chǔ)數(shù)據(jù)。這就是您從擁有大量數(shù)據(jù)，到根據(jù)這些數(shù)據(jù)實(shí)際賺錢(qián)的方式，這是下一個(gè)合乎邏輯的步驟?！?/span>

從他們的私人Beta版開(kāi)始，Precog似乎已經(jīng)考慮了所有途徑。通過(guò)其支持JSON的 REST API集 （帳戶(hù)，接收，元數(shù)據(jù)，分析和安全性），用戶(hù)可以設(shè)置工作來(lái)創(chuàng)建自己的解決方案，或向現(xiàn)有服務(wù)中添加內(nèi)容。.NET，Ruby，Python，PHP，JavaScript和Java（當(dāng)然還有Java）中的客戶(hù)端庫(kù)已經(jīng)包含了核心編程語(yǔ)言，De Goes表示，他們想要定位的對(duì)象占90％。另外兩個(gè)產(chǎn)品在Precog平臺(tái)中扮演著重要的角色–為我們中的數(shù)據(jù)科學(xué)家設(shè)計(jì)的Labcoat IDE和用于可視化您所使用的所有數(shù)據(jù)的ReportGrid。在最近的Gigaom文章中，

有人引用De Goes的話(huà)說(shuō)：“哈多普很愚蠢”。不是技術(shù)本身，而是某些人將其作為解決“天真”問(wèn)題的想法。

“我顯然不認(rèn)為Hadoop技術(shù)是愚蠢的，” De Goes解釋說(shuō)?！安恍业氖?，企業(yè)和大公司使用Hadoop作為解決其所有數(shù)據(jù)問(wèn)題的靈丹妙藥的方式。這種心態(tài)非常愚蠢，其原因是在大數(shù)據(jù)世界中，這全都是妥協(xié)。當(dāng)您能夠存儲(chǔ)TB或PB的數(shù)據(jù)時(shí)，您將不得不做出某些讓步–您將在某些方面妥協(xié)。您選擇的特定技術(shù)正是您要妥協(xié)的條件?！?/span>

“這里有很多錯(cuò)誤信息，許多供應(yīng)商都在試圖把Hadoop壓倒在人們的喉嚨上，或者說(shuō)是他們?yōu)镠adoop束手無(wú)策的創(chuàng)可貼。我的想法是使用正確的工具完成正確的工作?！?/span>

這是一個(gè)簡(jiǎn)單的概念，但在這個(gè)世界上，沒(méi)有一個(gè)人被錢(qián)財(cái)所了解。Precog本身會(huì)成為這種思維轉(zhuǎn)變的驅(qū)動(dòng)力嗎？如果本周的跡象過(guò)去了，那很有可能。就在昨天， 該公司宣布實(shí)施MongoDB，允許用戶(hù)在其MongoDB數(shù)據(jù)庫(kù)之上運(yùn)行更深入的分析，而無(wú)需做出任何妥協(xié)（自定義代碼或額外的ETL）。

隨著Precog走向適當(dāng)?shù)陌l(fā)布，與數(shù)據(jù)源背后的公司的這些聯(lián)系和伙伴關(guān)系對(duì)于打破大數(shù)據(jù)的復(fù)雜性至關(guān)重要。從外觀上看，他們正朝著正確的方向前進(jìn)，并可能會(huì)領(lǐng)導(dǎo)下一代大數(shù)據(jù)應(yīng)用程序開(kāi)發(fā)。