本文來源是Searcher Seismic的數據與分析副總裁Joshua Thorp的博客

在這個大數據世界中，沒有解決任何數據問題的靈丹妙藥。

在Searcher Seismic改善數據管理的過程中，這種不言而喻的現象反復出現。我們意識到，每個選擇都有其折衷之處，而可靠的解決方案必定會集成許多單獨的技術和業務流程。

話雖如此，但有一些解決方案無疑比其他解決方案要好。關鍵是預先非常清楚地了解您的功能需求，以便您選擇最適合您需求的供應商和承包商。

更有效地訪問和探索我們的數據

與許多行業一樣，石油和天然氣正在采用機器學習和數字化計劃。成功的實施取決于高質量、組織良好的數據，這些數據保存在支持這些新技術的數據平臺上。

Searcher擁有大量全球地震數據，我們的客戶在計劃新的石油和天然氣勘探地點時將其用于制定關鍵任務決策。

傳統上，為客戶編譯數據集的過程非常耗時且緩慢，需要由三到四名Searcher人員組成的團隊從一系列來源中提取大量信息。典型的時間表是幾周后才能通過郵寄方式傳遞信息。

借助我們的新系統，現在Searcher中的一個人只需單擊鼠標三到四次，即可為我們的客戶提供對所需數據的直接訪問，他們可以通過Saismic?門戶查看這些數據或將其傳輸到自己的分析系統。

靈活增長，不影響性能

在開始數據管理項目之前，我們進行了大量研究，以使我們的要求和現有解決方案更加清晰。

我們研究了石油和天然氣行業以及其他行業如何進行數據管理。從那里，我們確定了我們需要一個使用開源軟件的數據平臺，尤其是像Hadoop和Spark這樣的開源分布式計算軟件。

我們發現Cloudera（當時為Hortonworks）擁有Hadoop生態系統的唯一完全開源發行版，現在稱為Cloudera數據平臺（CDP）。這極具吸引力，因為它支持許多行業已經使用的諸如Apache Spark之類的技術，這些技術使我們能夠快速追蹤成功，而不必從頭開始構建一切。它們的分布還使部署具有靈活性，我們可以在其中部署公共云、私有云或混合云解決方案。

另一個主要供應商Pure Storage為我們的數據平臺提供了存儲組件。我們希望利用Cloudera平臺的獨立計算和存儲功能，將性能極高的Pure Storage Flashblade與Cloudera工具包的強大數據工具集成在一起，以兼得兩者。

我們的軟件團隊與Pure Storage銷售工程師和Cloudera專業服務團隊合作，構建了一個集成的混合云解決方案，最終使我們擁有了一個可以以非常靈活的方式增長而又不影響性能的數據平臺。我們對這種部署模型的TCO分析顯示，它比純公共云部署少了2至10倍，同時可以提高整體性能。

集成團隊提供量身定制的解決方案

我們發現，接觸Cloudera的專業服務團隊具有巨大的價值。這使我們能夠與世界一流的數據工程師接觸，他們可以與我們的領域專家一起建立最適合我們業務運作方式和我們想要實現的數據平臺。通過這種方式，我們可以為我們的公司提供早期的成功，同時隨著我們的努力而將平臺的知識基礎遷移到我們的內部開發中。

通過與Cloudera的合作，我們發現他們渴望了解我們的業務和數據，然后根據我們的要求和預算創建量身定制的解決方案。此外，他們與我們的員工進行了包容性合作，幫助確定項目中出現的風險并解決問題。這有助于我們專注于項目成果并構建最佳的數據平臺。

挑戰與回報

這是Searcher進行的最大的技術項目，因此，在我們不斷前進的過程中，我們學到了很多東西，但我們對結果感到滿意，并對數據平臺的持續開發感到興奮。在Cloudera專業服務團隊的支持下，我們正在建立關鍵的技術優勢，例如能夠在我們的數據平臺內以及為客戶應用大規模的深度學習培訓和預測。

如果您以前沒有做過，那么軟件開發就不容易，因此做功課至關重要。選擇合適的項目供應商和合作伙伴也很重要。如果您的供應商不了解您的問題并且無法幫助您實現目標，即使他們擁有出色的產品或技術，也可能破壞項目。

關于Cloudera

在 Cloudera，我們相信數據可以使今天的不可能，在明天成為可能。我們使人們能夠將復雜的數據轉換為清晰而可行的洞察力。Cloudera 為任何地方的任何數據從邊緣到人工智能提供企業數據云平臺服務。在開源社區不懈創新的支持下， Cloudera推動了全球最大型企業的數字化轉型歷程。了解更多，請聯系。

慧都大數據專業團隊為企業提供Cloudera大數據平臺搭建，免費業務咨詢，定制開發等完整服務，快速、輕松、低成本將任何Hadoop集群從試用階段轉移到生產階段。

歡迎撥打慧都熱線023-68661681或咨詢慧都在線客服，我們有專業的大數據團隊，為您提供免費大數據相關業務咨詢！