大數據工程師需要學習哪些技術?

"大數據"是一個體量特別大,數據類別特別大的數據集,並且這樣的數據集無法用傳統數據庫工具對其內容進行抓取、管理和處理。     1、 數據體量巨大。從TB級別,躍升到PB級別。 2、 數據類型繁多,涉及網絡日誌、視頻、圖片、地理位置等信息。 3、 價值密度低。以視頻爲例,連續不間斷監控過程中,可能有用的數據僅僅有一兩秒。 4、 處理速度快。1秒定律。最後這一點也是和傳統的數據挖掘技術有着本質的不同
相關文章
相關標籤/搜索