MongoDB GridFS 使用 存储特点

GridFS简介

• 1，GridFS是用于存储和检索超过16MB的BSON文档大小限制的文件的解决方案。

• 2，GridFS是MongoDB用来存储大型二进制文件的一种存储机制。

• 3，GridFS 不是讲文件存储在单个文档中，而是将文件分为块，并将每个块作为单独的文档存储，默认情况下，GridFS使用的块大小为256kb,最后一个块除外。

• 4， GridFS 使用两个集合存储文件，一个集合文件的块，另一个存储文件的原始数据。
  
  

GridFS 优缺点

优点

• 1:能够简化技术栈,如果已经使用了MongoDB,那么使用GridFS,就不需要其它独
  立的存储工具了

• 2:GridFS会自动平衡已有的复制,或者为MongoDB设置的自动分片,所以对文件存
  储做故障转移或者是横向扩展会更容易 。

• 3:GridFS的功能不错,能自动解决一些其他文件系统遇到的问题,如在同一个目录
  下存储大量的文件

缺点

• 1: 性能较低，不如直接访问文件系统快。

• 2：无法修改文档。如果要修改GridFS里面的文档，只能是先删除再添加

mongofiles 命令使用

语法

mongofiles <options> <commands> <filename>

• mongofiles 的命令 和mongo mongod 在同一级目录中。
  
  

常用的 options

option 描述 –host mongodb地址 –port 端口号 –username 用户名 –password 密码 –db mongodb 数据库 –local 本地的文件名称 用于 put/get

* 双 ‘-’

commands 命令

command 描述 list 列出GridFS存储的文件 以xxx 开头的文件 search 搜索 包含 xxx的文件 put 将本地文件保存于 GridFS get 下载文件 get_id “” 获取到指定id的文件 delete 删除指定的文件 delete_id 删除指定id的文件

上传一个文件到mongodb put

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1 --local /Users/lihao/Downloads/cart2.jpg put cart.jpg2017-08-13T20:22:21.586+0800    connected to: 127.0.0.1:20001added file: cart.jpg

• -d 表示数据库

• –local 要上传的本地文件

• put 存储在mongodb 中的文件名
  
  

查看存储的所有的文件 list

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1 list2017-08-13T20:26:45.426+0800    connected to: 127.0.0.1:20001/Users/lihao/Downloads/rsa.txt  2777rsa3.txt    2777cart.jpg    21421

搜索文件 search

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  search cart2017-08-13T20:28:44.750+0800    connected to: 127.0.0.1:20001cart.jpg    21421

下载文件 get

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  --local  /Users/lihao/Desktop/rsa/cart.jpg get cart.jpg2017-08-13T20:39:22.282+0800    connected to: 127.0.0.1:20001finished writing to /Users/lihao/Desktop/rsa/cart.jpg

—local 下载到本地文件名全路径

删除mongodb 存储文件

bin/mongofiles --port 20001 --host 127.0.0.1 -d dbs\db1  delete cart.jpg2017-08-13T20:45:35.762+0800    connected to: 127.0.0.1:20001successfully deleted all instances of 'cart.jpg' from GridFS

GridFS 基本原理

GridFS 会将大文件分割为多个块，将每个块作为独立的文档进行存储，另外用一个文档来讲这些块组织到一起，并存储该文件的元信息。

GridFS中的块被存储到专用的集合中,默认是fs.chunks

    bin/mongo 127.0.0.1:20001    use dbsdb1    db.fs.chunks.find();    {     "_id" : ObjectId("598fc1c11194fce1dbcd57a5"),     "files_id" : ObjectId("598fc1c11194fce1dbcd57a4"),     "n" : 0.0,     "data" : BinData(0, "xxxx")    }

• 1:files_id:块所属文件的元信息

• 2:n:块在文件中的相对位置

• 3:data:块所包含的二进制数据

GridFS中每个文件的元信息被存储到单独的集合中,默认是fs.files

    db.fs.files.find()    {     "_id" : ObjectId("598fc1c11194fce1dbcd57a4"),     "chunkSize" : 261120.0,     "uploadDate" : ISODate("2017-08-13T03:04:33.114+0000"),     "length" : 2777.0,     "md5" : "fd12ab0bd883a9530331f35c9e04006c",     "filename" : "rsa3.txt"}

• 1:_id:文件唯一的id,就是前面的files_id

• 2:length:文件包含的字节数

• 3:chunkSize:组成文件的每个快的大小,单位是字节,这个值默认是256k

• 4:uploadDate:文件被上传到GridFS的日期 5:md5:文件内容的md5校验值

参考文章

https://docs.mongodb.com/manual/reference/program/mongofiles/

https://docs.mongodb.com/manual/core/gridfs/#gridfs-collections