MongoDB系列教程(八):GridFS存儲詳解

MongoDB系列教程(八):GridFS存儲詳解

GridFS簡介

mongoDB的文檔以BSON格式存儲,支持二進制的數據類型,當咱們把二進制格式的數據直接保存到mongoDB的文檔中。可是當文件太大時,例如圖片和視頻等文件,每一個文檔的長度是有限的,因而mongoDb會提供了一種處理大文件的規範--GridFS。

GridFS實現原理

在GridFS數據庫中,默認使用fs.chunks 和fs.files來存儲文件,其中fs.files集合存放文件的信息,fs.chunks存放文件的數據,一個fs.files集合中的一條記錄內容以下,即一個file信息以下所示:

html

{   

"_id" : ObjectId("4f4608844f9b855c6c35e298"),       //惟一id,能夠是用戶自定義的類型  

"filename" : "CPU.txt",      //文件名  

"length" : 778,      //文件長度  

"chunkSize" : 262144,    //chunk的大小  

"uploadDate" : ISODate("2012-02-23T09:36:04.593Z"), //上傳時間  

"md5" : "e2c789b036cfb3b848ae39a24e795ca6",      //文件的md5值  

"contentType" : "text/plain"     //文件的MIME類型  

"meta" : null    //文件的其它信息,默認是沒有」meta」這個key,用戶能夠本身定義爲任意BSON對象  

}


對應fs.chunks中的chunk(中文意思數據塊),以下所示:

java

{   

"_id" : ObjectId("4f4608844f9b855c6c35e299"),    //chunk的id  

"files_id" : ObjectId("4f4608844f9b855c6c35e298"),  //文件的id,對應fs.files中的對象,至關於fs.files集合的外鍵  

"n" : 0,     //文件的第幾個chunk塊,若是文件大於chunksize的話,會被分割成多個chunk塊  

"data" : BinData(0,"QGV...")     //文件的二進制數據,這裏省略了具體內容  

}


默認大小是256k,因此把文件存入到GridFS過程當中,若是文件大於chunksize,則把文件分割多個chunk,再把這些chunk保存在fs.chunks中,最後再把文件信息存入fs.files中。

在讀取文件的時候,先根據查詢的條件,在fs.files中找到一個合適的記錄,獲得「_id」的值,再根據這個值到fs.funks中查找全部files_id 爲 _id 的chunk,並按照「n」排序,最後依次讀取chunk中的「data」對象的內容,還原成原來的文件。

注:

一、GridFS不自動處理md5相同的文件,對於md5相同的文件,若是想在GridFS中只有一個存儲,要用戶處理,md5值的計算由客戶端完成。

二、由於GridFS在上傳文件過程當中是先把文件數據保存到fs.chunks,最後再把文件的信息保存到fs.files中,因此若是上傳文件過程當中失敗,有可能在fs.chunks中出現垃圾數據,這些垃圾數據,能夠按期清理掉。 

mysql

參考來源: 
MongoDB系列教程(八):GridFS存儲詳解
http://www.lai18.com/content/409594.htmlsql

延伸閱讀

《MongoDB技術知識》系列技術文章整理收藏 
mongodb

1mongoDB入門須要瞭解的基本知識
數據庫

2MongoDB入門教程(包含安裝、經常使用命令、相關概念、使用技巧、常見操做等)
安全

3MongoDB入門教程之分片技術詳解
數據結構

4MongoDB入門教程之經常使用的運維技術介紹
架構

5MongoDB入門教程之C#驅動操做實例
運維

6MongoDB入門教程之主從複製配置詳解

7MongoDB入門教程之聚合和遊標操做介紹

8MongoDB入門教程之細說MongoDB數據庫的增刪查改操做

9MongoDB入門教程之索引操做淺析

10MongoDB入門教程之Windows下的MongoDB數據庫安裝圖解

11MongoDB查詢字段沒有建立索引致使的鏈接超時異常解案例分享

12MongoDB日誌文件過大的解決方法

13MongoDB社區版和企業版的差異對照表

14MongoDB中文社區發起人帶你學習mongoDB

15對MongoDB數據庫性能瓶頸分析

16MongoDB 分頁查詢的方法及性能

17MongoDB分片存儲的集羣架構實現

18Mongodb批量刪除gridfs文件實例

19Mongodb增長、移除Shard Server實例

20Mongodb增長、移除Arbiter節點實例

21CentOS系統下MongoDB安裝及配置教程

22MongoDB修改、刪除文檔的域屬性實例

23Python中的MongoDB基本操做:鏈接、查詢實例

24MongoDB導出查詢結果到文件例子

25MongoDB中建立索引須要注意的事項

26MongoDB中的一些坑(最好不要用)

27給MongoDB添加用戶權限方法分享

28Linux系統下MongoDB的簡單安裝與基本操做

29MongoDB教程之基本管理命令

30MongoDB教程之聚合(count、distinct和group)

31MongoDB教程之索引介紹

32MongoDB教程之數據操做實例

33MongoDB教程之入門基礎知識

34MongoDB教程之查詢操做實例

35MongoDB系列教程(四):設置用戶訪問權限

36MongoDB系列教程(八):GridFS存儲詳解

37MongoDB數據庫的特點和優勢介紹

38MongoDB簡介 MongoDB五大特點

39MongoDB系列教程(六):java操做mongodb實例

40MongoDB系列教程(七):MongoDb數據結構詳解

41MongoDB系列教程(五):mongo語法和mysql語法對比學習

42MongoDB系列教程(二):MongoDB簡介

43MongoDB系列教程(一):NoSQL起源

44MongoDB中的MapReduce簡介

45MongoDB系列教程(三):Windows中下載和安裝MongoDB

46淺談MongoDB的備份方式

47MongoDB 經常使用命令總結

48MongoDB與MySQL的操做對比表及區別介紹

49MongoDB安全配置詳解

50MongoDB中的bson介紹和使用實例

相關文章
相關標籤/搜索