MongoDB系列教程(八):GridFS存儲詳解
GridFS簡介
mongoDB的文檔以BSON格式存儲,支持二進制的數(shù)據(jù)類型,當(dāng)我們把二進制格式的數(shù)據(jù)直接保存到mongoDB的文檔中。但是當(dāng)文件太大時,例如圖片和視頻等文件,每個文檔的長度是有限的,于是mongoDb會提供了一種處理大文件的規(guī)范--GridFS。
GridFS實現(xiàn)原理
在GridFS數(shù)據(jù)庫中,默認(rèn)使用fs.chunks 和fs.files來存儲文件,其中fs.files集合存放文件的信息,fs.chunks存放文件的數(shù)據(jù),一個fs.files集合中的一條記錄內(nèi)容如下,即一個file信息如下所示:
{
"_id" : ObjectId("4f4608844f9b855c6c35e298"), //唯一id,可以是用戶自定義的類型
"filename" : "CPU.txt", //文件名
"length" : 778, //文件長度
"chunkSize" : 262144, //chunk的大小
"uploadDate" : ISODate("2012-02-23T09:36:04.593Z"), //上傳時間
"md5" : "e2c789b036cfb3b848ae39a24e795ca6", //文件的md5值
"contentType" : "text/plain" //文件的MIME類型
"meta" : null //文件的其它信息,默認(rèn)是沒有”meta”這個key,用戶可以自己定義為任意BSON對象
}
對應(yīng)fs.chunks中的chunk(中文意思數(shù)據(jù)塊),如下所示:
{
"_id" : ObjectId("4f4608844f9b855c6c35e299"), //chunk的id
"files_id" : ObjectId("4f4608844f9b855c6c35e298"), //文件的id,對應(yīng)fs.files中的對象,相當(dāng)于fs.files集合的外鍵
"n" : 0, //文件的第幾個chunk塊,如果文件大于chunksize的話,會被分割成多個chunk塊
"data" : BinData(0,"QGV...") //文件的二進制數(shù)據(jù),這里省略了具體內(nèi)容
}
默認(rèn)大小是256k,所以把文件存入到GridFS過程中,如果文件大于chunksize,則把文件分割多個chunk,再把這些chunk保存在fs.chunks中,最后再把文件信息存入fs.files中。
在讀取文件的時候,先根據(jù)查詢的條件,在fs.files中找到一個合適的記錄,得到“_id”的值,再根據(jù)這個值到fs.funks中查找所有files_id 為 _id 的chunk,并按照“n”排序,最后依次讀取chunk中的“data”對象的內(nèi)容,還原成原來的文件。
注:
1、GridFS不自動處理md5相同的文件,對于md5相同的文件,如果想在GridFS中只有一個存儲,要用戶處理,md5值的計算由客戶端完成。
2、因為GridFS在上傳文件過程中是先把文件數(shù)據(jù)保存到fs.chunks,最后再把文件的信息保存到fs.files中,所以如果上傳文件過程中失敗,有可能在fs.chunks中出現(xiàn)垃圾數(shù)據(jù),這些垃圾數(shù)據(jù),可以定期清理掉。
相關(guān)文章
mongo數(shù)據(jù)集合屬性中存在點號(.)的解決方法
這篇文章主要給大家介紹了關(guān)于mongo數(shù)據(jù)集合屬性中存在點號(.)的相關(guān)資料,文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-10-10
MongoDB系列教程(四):設(shè)置用戶訪問權(quán)限
這篇文章主要介紹了MongoDB系列教程(四):設(shè)置用戶訪問權(quán)限,本文講解了在Windows環(huán)境下如何創(chuàng)建用戶認(rèn)證,需要的朋友可以參考下2015-05-05
關(guān)于mongoDB數(shù)據(jù)庫添加賬號的問題
這篇文章主要介紹了mongoDB數(shù)據(jù)庫添加賬號的問題,本文給大家介紹的非常詳細,對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-02-02
MongoDB固定集合(capped collection)的知識小結(jié)
固定集合指的是事先創(chuàng)建,并且大小固定的集合。下面這篇文章主要給大家總結(jié)介紹了MongoDB固定集合(capped collection)的知識,文中介紹的非常詳細,需要的朋友可以參考借鑒,下面來一起學(xué)習(xí)學(xué)習(xí)吧2018-10-10
關(guān)于Mongodb 認(rèn)證鑒權(quán)你需要知道的一些事
最近因為mongodb被黑了,早先我就疑惑過怎么這東西開啟服務(wù)就能用了,后來找了各方資料,知道MongoDB默認(rèn)是沒有鑒權(quán)的,所以這篇文章主要給大家介紹了關(guān)于Mongodb認(rèn)證鑒權(quán)你需要知道的一些事,需要的朋友可以參考下。2017-10-10
MongoDB學(xué)習(xí)筆記之分組(group)使用示例
這篇文章主要介紹了MongoDB學(xué)習(xí)筆記之分組(group)使用示例,本文直接給出一組測試數(shù)據(jù),然后練習(xí)分組的基本使用,需要的朋友可以參考下2015-07-07
MongoDB的聚合框架Aggregation Framework入門學(xué)習(xí)教程
MongoDB中的聚合aggregate主要用于處理數(shù)據(jù)計算,這里我們就來詳細整理MongoDB的聚合框架Aggregation Framework入門學(xué)習(xí)教程,需要的朋友可以參考下2016-07-07

