我們與最新的大數(shù)據(jù)項目集背后的人進(jìn)行了交談，以簡化從數(shù)據(jù)中獲取分析的整個過程。

在過去的幾年中，數(shù)據(jù)格局發(fā)生了根本性的變化，這部分不歸功于Hadoop的成功。Apache項目已成為數(shù)據(jù)倉庫的金標(biāo)準(zhǔn)，并且使用它的大量客戶證明了它的成熟性和穩(wěn)定性。 

這么多企業(yè)都在宣傳Hadoop的功能，因此當(dāng)您實際上正在尋找完全不同的東西時（無論是圖形數(shù)據(jù)庫，NoSQL數(shù)據(jù)存儲還是其他），就很容易被它的明星能力所吸引。如果您選擇使用Hadoop，那么如果您嘗試將其變成并非如此，那么您可能會陷入麻煩。

在過去的一年中，我們看到了許多“大數(shù)據(jù)”風(fēng)格的項目出現(xiàn)，但是從來沒有像 Precog這樣的項目能夠簡化整個過程。大數(shù)據(jù)基礎(chǔ)架構(gòu)平臺于上個月進(jìn)入公眾測試階段，廣受贊譽，其目標(biāo)是彌合可供公司使用的一系列數(shù)據(jù)資產(chǎn)之間的差距。

“我認(rèn)為Precog是一個數(shù)據(jù)科學(xué)平臺，可以幫助公司利用其數(shù)據(jù)資產(chǎn)來構(gòu)建新的數(shù)據(jù)項目以及現(xiàn)有產(chǎn)品的數(shù)據(jù)驅(qū)動功能，” Precog的創(chuàng)始人兼首席執(zhí)行官兼CTO John De Goes說。他繼續(xù)說：“如果您想考慮其他技術(shù)，Precog是一種數(shù)據(jù)庫，但它專注于非常特定的用例?！?/span>

該用例是測量數(shù)據(jù)和數(shù)據(jù)科學(xué)領(lǐng)域。從成為社交媒體廣告平臺SocialMedia.com的工程副總裁開始，De Goes就厭倦了依靠低級開源工具構(gòu)建分析功能的“艱巨任務(wù)”，并決定為此做些事情。帶著開發(fā)人員雜亂無章的團(tuán)隊一起去 丹佛創(chuàng)業(yè)周末，播種了Precog的種子。從那以后，該公司于去年5月被加入加速器TechStars計劃，使他們能夠進(jìn)一步追求自己的想法。

“ Precog與（與其他數(shù)據(jù)庫）完全不同，因為我們專注于存儲和倉儲測量數(shù)據(jù)，” De Goes說?！斑@通常是行為數(shù)據(jù)，例如人們點擊和購買東西，因此是交易數(shù)據(jù)，歷史數(shù)據(jù)和面向事件的數(shù)據(jù)。這就是我們關(guān)注的數(shù)據(jù)?！?/span>

“我們不專注于為您提供獲取和存儲數(shù)據(jù)的工具，我們專注于為您提供深度數(shù)據(jù)科學(xué)工具，以在非常深的層次上分析數(shù)據(jù)，并在該數(shù)據(jù)中心內(nèi)進(jìn)行任意分析，統(tǒng)計和機器學(xué)習(xí)。 ”

因此，從本質(zhì)上講，Precog并非企業(yè)學(xué)習(xí)Hadoop（其中有很多）或非關(guān)系數(shù)據(jù)庫（如MongoDB）的來龍去脈的繁瑣過程，而是為企業(yè)提供了重要的幫助，以獲取重要的見解，然后對它們的數(shù)據(jù)進(jìn)行“生產(chǎn)”努力。

Precog的 “實時Twitter選舉分析” 儀表板展示了Precog融合各種來源的能力的一個很好的例子。與合作伙伴AlchemyAPI一起，Precog通過顯示推文的逐個州情感分析來展示其平臺的功能和潛力。

“說實話，簡直太簡單了，”德戈斯說。“ [我們]只是將來自Twitter的數(shù)據(jù)插入到Precog中，[在Labcoat中進(jìn)行Quirrel分析，將其導(dǎo)出為代碼，將其打入HTML文檔中，然后就可以對Twitter數(shù)據(jù)進(jìn)行實時情緒分析?！?/span>

De Goes認(rèn)為，沒有足夠的企業(yè)看到其數(shù)據(jù)的真正功能。他說：“我認(rèn)為，在當(dāng)今時代，公司在存儲和整合他們擁有的海量數(shù)據(jù)方面變得越來越自在?！?/span>

“現(xiàn)在，每個人都有大數(shù)據(jù)。好吧，那又如何呢？下一步有趣的步驟是弄清楚如何處理大數(shù)據(jù)。那是真正困難的部分。任何人都可以購買數(shù)據(jù)倉庫或大型Hadoop集群，然后開始在其中存儲數(shù)據(jù)。這就是您從擁有大量數(shù)據(jù)，到根據(jù)這些數(shù)據(jù)實際賺錢的方式，這是下一個合乎邏輯的步驟?！?/span>

從他們的私人Beta版開始，Precog似乎已經(jīng)考慮了所有途徑。通過其支持JSON的 REST API集 （帳戶，接收，元數(shù)據(jù)，分析和安全性），用戶可以設(shè)置工作來創(chuàng)建自己的解決方案，或向現(xiàn)有服務(wù)中添加內(nèi)容。.NET，Ruby，Python，PHP，JavaScript和Java（當(dāng)然還有Java）中的客戶端庫已經(jīng)包含了核心編程語言，De Goes表示，他們想要定位的對象占90％。另外兩個產(chǎn)品在Precog平臺中扮演著重要的角色–為我們中的數(shù)據(jù)科學(xué)家設(shè)計的Labcoat IDE和用于可視化您所使用的所有數(shù)據(jù)的ReportGrid。在最近的Gigaom文章中，

有人引用De Goes的話說：“哈多普很愚蠢”。不是技術(shù)本身，而是某些人將其作為解決“天真”問題的想法。

“我顯然不認(rèn)為Hadoop技術(shù)是愚蠢的，” De Goes解釋說。“不幸的是，企業(yè)和大公司使用Hadoop作為解決其所有數(shù)據(jù)問題的靈丹妙藥的方式。這種心態(tài)非常愚蠢，其原因是在大數(shù)據(jù)世界中，這全都是妥協(xié)。當(dāng)您能夠存儲TB或PB的數(shù)據(jù)時，您將不得不做出某些讓步–您將在某些方面妥協(xié)。您選擇的特定技術(shù)正是您要妥協(xié)的條件?！?/span>

“這里有很多錯誤信息，許多供應(yīng)商都在試圖把Hadoop壓倒在人們的喉嚨上，或者說是他們?yōu)镠adoop束手無策的創(chuàng)可貼。我的想法是使用正確的工具完成正確的工作?！?/span>

這是一個簡單的概念，但在這個世界上，沒有一個人被錢財所了解。Precog本身會成為這種思維轉(zhuǎn)變的驅(qū)動力嗎？如果本周的跡象過去了，那很有可能。就在昨天， 該公司宣布實施MongoDB，允許用戶在其MongoDB數(shù)據(jù)庫之上運行更深入的分析，而無需做出任何妥協(xié)（自定義代碼或額外的ETL）。

隨著Precog走向適當(dāng)?shù)陌l(fā)布，與數(shù)據(jù)源背后的公司的這些聯(lián)系和伙伴關(guān)系對于打破大數(shù)據(jù)的復(fù)雜性至關(guān)重要。從外觀上看，他們正朝著正確的方向前進(jìn)，并可能會領(lǐng)導(dǎo)下一代大數(shù)據(jù)應(yīng)用程序開發(fā)。