快來認識Uber、Netflix都愛用的企業數據搜尋利器 Elastic

elastic-logo-H-full color

圖片來源:Elastic 官方媒體庫

我們常用Google、Yahoo搜尋公開資料,但像是App、軟體應用、IT設備所產生的log資料、位置資訊這類企業內部資料又該如何搜尋呢?

別擔心!這個問題就交給全球總下載次數已超過5億次的Elastic幫你解決吧。

Elastic資深架構總監Andy Karandikar指出,在15年前,企業的數據都是非常清楚、有架構的被整理在資料庫裡。但隨著部落格、社群媒體貼文、機器人、物聯網裝置、感應器裝置等非結構化的資料,或是有維度地理資料的爆發性增長,如何整合非結構化資料與結構化數據,成為大數據發揮其價值的關鍵。同時,累積下的大數據也衍伸出搜尋的問題,而Elastic不只能搜尋,更是有用的分析工具,能有效整理數據,幫助企業看到數據背後的意義。

Elastic資深架構總監Andy Karandikar

Elastic產品及特色

Elastic主要產品稱為「Elastic Stack」,由以下四個開源軟體產品組合而成:

  1. Elasticsearch:是一個以Apache Lucene為基礎建設的開放原始碼、分散式、RESTful開源搜索與分析引擎,因它所擁有的叢集能力(簡易的水平擴充性與高可用性),且查詢速度可在毫秒內完成,因此在企業用戶中相當受到推崇。
  2. Logstash:日誌數據處理系統,可同時從多個來源獲取資料,將這些資料在內部統一成JSON格式再將其轉換發送到 Elasticsearch 的「儲存」系統。
  3. Kibana:可將Elasticsearch中的圖表進行數據可視化呈現在用戶面前。
  4. Beats:輕量型數據收集器,能從機器、系統中收集數據發送到Logstash或Elasticsearch

Elastic產品擁有三大特點:速度、規模、相關度,這讓Elastic面對PB等級的海量數據,也都能在毫秒之間完成搜尋等動作(最快可達0.46秒),且不論搜尋數字或非數字資料都能擁有極高的準確度。

Elastic產品及功能

Elastic除能搜尋、分析數據,進階版讓企業快速建置機器學習模型

Elastic合作夥伴暨商業開發副總裁Craig Griffin表示,Elasticsearch的應用非常多元,舉凡找地點、稅務資料、檔案、系統日誌,涵蓋企業每天會需要用到搜尋的使用場景。

Elastic建立開源社群,讓每個人都可以免費下載產品。若用戶尋求更進階的功能,例如安全(Security)、警報(Alerting)、監控(Monitoring)、報告(Reporting)、機器學習(Machine Learning)等等,都可以付費購買X-Pack套件。

舉例來說,免費版本沒有安全設定,因此公司內部所有員工都可以檢視、刪除資料。因此當資料被刪除時,你無法知道是誰刪除、哪時刪除的相關資訊。因此,若想有效管理公司的存取層級、想要將資料加密的話,便需要進階服務。

Andy Karandikar指出,企業對機器學習功能最感興趣,因為Elastic讓企業不需建置機器學習的基本建設及人力,就可以直接在雲端上處理;也不需要自行建立模型,透過Elastic的服務就可以快速建立。更可以隨時更改變數設定,資料改變時,它會自動學習調適,自動建立模型。再龐大的資料,也不需要耗費幾小時跑出數據。

透過機器學習,Elastic幫助企業做好DNS攻擊防禦、觀察用戶行為、機器。當系統找到資料異常狀況後,就會自動警示,協助企業做出正確判斷。

使用進階版本的用戶還能獲得Elastic技術支援,同時能獲得Elastic合作夥伴的服務。而CloudMile成為Elastic核心策略合作夥伴,雙方將共同提供用戶更優質的服務。Craig Griffin表示,Elastic很高興能與熟稔雲端技術與資料分析的CloudMile萬里雲共同前進亞太市場,尤其能給予台灣用戶更完善的解決方案,幫助用戶從數據中產生更多洞見。

Elastic合作伙伴暨商業開發副總裁Craig Griffin(左二)特別從美國矽谷來台與台灣超過百位企業用戶交流,並宣佈CloudMile萬里雲成為Elastic核心策略合作夥伴,共同服務台灣及亞太用戶

想知道Elastic怎麼幫助更多企業客戶探索數據、挖掘新商機嗎?下一篇文章我們來談談Elastic的成功案例吧。

About CloudMile

成立於 2016 年,致力於 B2B 雲端與人工智慧應用,為客戶建立國際級雲端架構,並以機器學習及大數據分析技術為核心,協助企業進行商業預測與產業升級。

Website: https://www.mile.cloud/
Facebook: https://www.facebook.com/CloudMileFans/
Linkedin: https://www.linkedin.com/company/cloudmile/
Youtube: https://www.youtube.com/c/CloudMile
Contact Us: [email protected]