DKhadoop大數據平臺基礎框架的簡單介紹

DKhadoop大數據平臺基礎框架的簡單介紹

大數據做爲當下最爲熱門的事件之一，其實已經不算是很新鮮的事情了。若是是三五年前在討論大數據，那可能會給人一種很新鮮的感受。大數據做爲當下最爲重要的一項戰略資源，已是愈來愈獲得國家和企業的高度重視，咱們從大數據被上升到國家戰略層面就可窺見一二！

如今關於大數據的知識分享能夠說已是鋪天蓋地了，做爲新手入門想查詢的信息基本均可以經過網絡查詢到一些。我對的大數據的瞭解其實也不是特別豐富，畢竟學習的時間也不是特別長。僅以我熟悉的DKhadoop爲例給你們分享一些小知識，往對初學者有點小幫助就能夠了。

大數據平臺基礎框架是不少初學者必然要掌握的內容，大數據太過抽象，有時候寫分享的時候不免感受寫的不少困難。仍是經過具體的案例來寫會比較好理解。關於大數據平臺基礎框架我仍是用本身熟悉的DKhadoop爲例。

在此以前仍是對DKhadoop作一個簡單的說明：DKhadoop大快大數據平臺，由大快搜索開發的爲了打通大數據生態系統與傳統非大數據公司之間的通道而設計的一站式搜索引擎級大數據通用計算平臺（寫的這麼專業，確定是我從大快宣傳冊上搬運過來的啦）。對於有大量數據須要處理的傳統型企業而言，經過DKhadoop這樣的大數據處理平臺能夠很輕鬆的跨越大數據技術鴻溝，實現搜索引擎級的大數據平臺性能。既然有如此大的優點，那麼樣的大數據平臺的基礎框架又是如何的呢？

咱們先來看一張圖片：這張圖是DKH標準平臺技術架構圖

DKhadoop大數據平臺基礎框架設計方案概述：

1. 若是你對原生hadoop較爲熟悉的，你就會發現dkhadoop是集成了整個hadoop生態系統的所有組建，固然不單單是集成這麼簡單，而是作了深度的優化，從新編寫成的一個完整的更高性能的大數據經過計算平臺。這一點跟其餘國產發行本大數據平臺仍是有着很是的區別的，DKH是作的原生態開發，其餘的國產發行版僅僅是簡單的二次開發。
2. DKhadoop經過中間件技術，將複雜的大數據集羣配置簡化至三種節點（主節點、管理節點、計算節點），很大程度上簡化了集羣的管理運維，加強了集羣的高可用性、高可維護性、高穩定性。（數據中間件是大快DKH數據交換層的核心）

三、DKH在原生態的基礎上開發，而且保持了開源系統的所有優勢，與開源系統100%兼容。這樣，那些基於開源平臺開發的大數據應用就不要通過任何改動，就能夠在DKH上高效運行了。