MongoDB GridFS 分布式文件存储系统

最新推荐文章于 2024-01-02 15:45:21 发布
最新推荐文章于 2024-01-02 15:45:21 发布
阅读量1.2k 收藏
点赞数
分类专栏： MongoDB 文章标签： mongodb 分布式 存储系统
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/w_x_z_/article/details/62038127
版权
本文介绍了如何使用mongofiles命令行工具进行文件的上传、下载及搜索等操作。通过具体的命令示例，展示了如何将文件存储到GridFS文件系统，并说明了MongoDB如何自动将大文件分割并存储。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

mongofiles命令行工具导入

[root@mongodb bin]# ./mongofiles –port 27017 –db mydocs –local /usr/local/01_ NoSQL理论基础01.avi put NoSQL理论基础01.avi
2017-03-14T18:11:49.674+0800 connected to: localhost:27017
added file: NoSQL理论基础01.avi
[root@mongodb bin]#

这里写图片描述

命令mongofiles更多选项可以通过mongofiles –help查询

–port 27017

–db mydocs 要将文件存储到的数据库；

–local /usr/local/01_NoSQL理论基础01.avi 本地文件系统上的文件；

put 此命令操作是要上传本地文件到GridFS文件系统上；

put NoSQL理论基础01.avi 存储到集合fs.files中的字段filename的值

这里写图片描述

这里写图片描述

当上传一个大文件到GridFS系统时，MongoDB 自动将文件分割成默认大小为255KB的小块，然后将这些小块插入到数据库默认的集合fs.chunks中，同时将整个大文件的元数据信息插入到数据库的fs.files集合中。

从GridFS上读取文件到本地文件系统

./mongofiles --port 27017 --db mydocs --local /usr/NoSQL.avi get NoSQL理论基础01.avi

查询某个文件是否存在

./mongofiles --port 27017 --db mydocs search NoSQL理论基础01.avi

这里写图片描述

MongoDB分布式文件存储系统
悟已往之不谏，知来者之可追
11-28 1052
MongoDB分布式文件存储系统
MongoDB与分布式文件系统GridFS
Feng_ZiYou的博客
08-02 561
mongodb介绍 Mongodb是非关系型数据库，存储Json格式数据 ,数据格式灵活。 在win7系统安装mongodb需要vc++运行库，如果没有则会提示“无法启动此程序，因为计算机中丢失 VCRUNTIME140.dll”。 安装完mongodb之后 启动mongodb 在bin目录的同级下创建几个文件夹具体如下：数据库路径（data目录）、日志路径（logs目录）并在logs目录下添加日志文件（mongo.log文件） 创建配置文件mongo.conf，文件内容如下： #数据库路径 dbpath
Linux下使用MongoDB+GridFS实现备份作业的优化和监视
02-21
：基于可靠性的需求，各个公司对容灾的要求也是越来越高。单在数据中心备份副本明显已经跟不上用户的需求，这里LogicMonitor首席架构师兼运营副总监JeffBehl给我们带来了Linux环境下优化Rsync作业的思想。其中涉及到备份作业状态的存储、简易备份操作的实现及监视等。JeffBehl——LogicMonitor首席架构师兼运营副总监，拥有20多年的监管经验，为多家基于SaaS公司提供架构和监管支持。灾难恢复计划中不可或缺的一部分就是确保用户数据储存在多个位置。LogicMonitor——用于实体、虚拟以及云环境基于SaaS的监视方案，我们希望用户数据文件的副本在数据中心内外都有储存。
MongoDB基于GridFS实现文件的分布式存储
weixin_33717298的博客
06-10 228
GridFS是一种在MongoDB中存储大二进制文件的机制。使用GridFS存文件有如下几个原因： 利用Grid可以简化需求。要是已经用了MongoDB，GridFS就可以不需要使用独立文件存储架构。GridFS会直接利用业已建立的复制或分片机制，所以对于文件存储来说故障恢复和扩展都很容易。GridFS可以避免用于存储用户上传内容的文件系统出现的某些问题。例如，GridFS在同一个目录下放置大量的...
MongoDB提供的GridFS分布式文件存储系统
russle的专栏
12-14 1739
简介： 什么是GridFS GridFS 是基于MongoDB的分布式文件存储系统。 它是Mongo的一个子模块, 使用GridFS可以基于MongoDB来持久存储文件并且支持分布式应用(文件分布存储和读取)。 GridFS不是MongoDB自身特性，只是一种将大型文件存储在MongoDB的文件规范，所有官方支持的驱动均实现了GridFS规范。GridFS制定大文件在数据库中如何处理，通过开发语言...
GridFS:基于MongoDB的分布式文件存储系统
06-12 2807
GridFS是MongoDB之上的分布式文件系统，其利用了MongoDB的分布式存储机制并通过MongoDB来存储文件数据和文件元数据，兼具文档型数据库和文件系统的优势。GridFS是当前大数据潮流和复杂数据分析需求的产物。 简单来说，GridFS通过将文件数据和文件元数据保存在MongoDB里来实现文件系统，通过复制(Replication)来应对故障切换，数据集成，还可以用来做读扩展，热备份
12.GridFS文件系统
12-08 862
1.概念GridFS是mongoDB自带的文件系统，它以二进制的形式存储文件 大型文件系统的绝大多数特性GridFS全可以完成两个明确： 1.GridFS并非MongoDB的内部特性，它是所有官方驱动用来在数据库中管理大型二进制对象的一个惯例 2.GridFS没有真实文件系统那样丰富的语义。它没有锁和并发的协议，这就把GridFS接口限制在了简单的提交（put）、获取（get）和删除（delete）
Mongodb GridFS图片文件存储解决方案
08-05
GridFS 是 MongoDB 提供的一种用于存储和检索大文件的标准方法，如图片、视频或大型文档。在本文中，我们将深入探讨 GridFS 图片文件存储解决方案及其工作原理。 **GridFS 概述** GridFS 是 MongoDB 的一部分，它将...
基于Golang和GridFS的分布式文件服务设计源码
最新发布
02-27
分布式文件系统能够将数据分散存储在多个物理节点上，通过分布式技术实现高可用性和可扩展性，为用户提供高速的数据读写服务。 本项目采用Go语言（Golang）作为开发语言，利用其高效的并发处理能力和简洁的语法特性...
MongoDB GridFS：管理大型文件存储的高效方案
07-05
MongoDB是一个基于文档的NoSQL数据库，由C++语言编写，旨在为大量分布式数据提供高性能、高可用性和高灵活性的数据存储解决方案。MongoDB的主要特点包括： 1. **文档导向**：MongoDB存储BSON（二进制JSON）格式的...
基于MongoDB的分布式地质灾害数据存储策略.docx
06-03
通过采用基于MongoDB的分布式存储策略，可以有效地解决地质灾害相关数据的存储、管理和访问问题。这种方式不仅可以提高数据处理效率，还能简化文件管理流程，对于处理大规模地质灾害数据尤其有益。此外，MongoDB还...
MongoDB分布式存储——GridFS
Aldeo
01-28 2927
GridFS是一个规范的存储和检索文件超过16 mb的bson文档大小限制。 而不是将文件存储在一个文档中,GridFS文件分为部分,或块,每个块作为一个单独的文档。使用FridFS与使用分片无 关。在默认情况下网格文件系统块大小限制为255 k。GridFS文件系统使用两个集合存储文件。一个收集存储文件块, 其他商店文件元数据。
MongoDB分布式存储GridFS
xiao-啸
11-15 459
MongoDB分布式存储GridFS 项目结构图 配置文件 pom.xml <!-- mongodb依赖包 --> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-mongodb</artifactId> </dependency> application.yml s
GridFS：基于MongoDB的分布式文件存储系统
Tyrion Lannister's Special column
07-08 5051
基本原理 GridFS是MongoDB之上的分布式文件系统，其利用了MongoDB的分布式存储机制并通过MongoDB来存储文件数据和文件元数据，兼具文档型数据库和文件系统的优势。GridFS是当前大数据潮流和复杂数据分析需求的产物。 简单地来说，GridFS通过将文件数据和文件元数据保存在MongoDB里来实现文件系统，通过复制(Replication)来应对故障切换、数据集成，还可
GridFS一个分布式文件系统
绿龙术士的专栏
07-19 4860
分布式文件系统 MongoDB内置一套文件系统名为GridFS（Grid File System） 我们可以使用它来存储大于16M的文件。 它具有多机器存储备份，可以突破一般文件系统对file的限制，分段存储，不像普通file system是整个存储的。这样读取大型文件时就不会占用大量的内存。 支持多种驱动，如Java，C#等 GridFS会将文件存储在两个Document里： Chu...
MongoDB GridFS框架
weixin_45684171的博客
04-20 189
MongoDB GridFS框架 GridFS基本操作 1.打开cmd,输入mongofiles 2.把要执行的文件（GridFS存储.ppt）放到C:\Users\Administrator路径下 3.上传文件 mongofiles -d gridfs put GridFS存储.ppt 4.查看文件信息 先切换到mongo,在命令行输入mongo,回车 切换到gridfs use gridfs db.fs.files.find() 5.查看块信息 db.fs.chunks.find().
GridFS（MongoDB文件系统）与OCS对象存储的取舍
weixin_54622246的博客
01-02 1600
GridFS是MongoDB提供的一种存储和检索大型文件（如图片、音频文件、视频文件等）的机制。由于MongoDB的文档大小限制为16MB，对于大文件来说，无法将它们直接存储为一个单一的文档。GridFS通过将大文件分割成多个较小的部分(chunks)，并将它们存储在多个文档中来绕过这个限制。GridFS实际上是一种规范，包含了两个主要的集合：chunks 集合：用于存储文件的二进制数据的分块，每个分块(chunk)的默认大小是255KB（可以配置）。整个文件被分成这样多个大小的分块，并顺序存储。
Mongodb 文件存储 GridFs
lizhengyu891231的博客
06-29 975
转载自：https://jacoobwang.github.io/2017/12/30/Mongodb%E7%9A%84%E6%96%87%E4%BB%B6%E5%AD%98%E5%82%A8GridFs/ 叙述 MongoDB是一种文档导向的数据库管理系统，由C++撰写而成，以此来解决应用程序开发社区中的大量现实问题。2007年10月，MongoDB由10gen团队所发展。2009年2月首度推出。 MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系
如何备份mongodb中gridFs中部分数据
qq_42723556的博客
09-19 534
【代码】如何备份mongodb中gridFs中部分数据。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值