mongodb 使用心得

最近刚开始学MongoDB 想用它写一个爬虫,但是构建URL优先级队列的时候卡住了我,,好像BerkeleyDB存储的时候可以根据key自动排序,这样想要的数据会很容易取到,,(没有亲身实践过,并不太清楚,只是看了博客)但是MongoDB是不可以的,它默认的好像是按照插入时间排序,,,然而为了取出优先级比较高的URL,我不得不每次做排序并且Limit(n)返回数据,,但是尤其在多线程大数据下尤其影响性能!因此困扰了我一天,最后终于想出了一种折中的办法,,因为想到MongoDB会默认创建_id并生成索引,,我在构建优先URL 的时候把优先级储存到这个字段在做排序,性能会不会相对好很多?


于是我做了实验,db.collectionName.find({_id:1}).sort({_id:1}).explain()发现果然执行策略不是SORT!(具体参数含义请自行百度)这样性能应该会大幅提升,但是肯定性能也不会好~~具体情况等我写完后再来分享。。

另外,本人大三软件系菜狗一枚,最近在研究一些JAVA开源爬虫框架的源码,想自己写一个爬虫的框架,,也当是学点东西了。。有兴趣的可以一起交流。

企鹅:396995269  (单身微笑

### MongoDB 数据库基本操作实验心得总结 #### ### 数据库的基本概念与操作 MongoDB 是一种非关系型数据库,适用于海量数据的访问和存储。默认情况下,MongoDB 使用 `test` 数据库来存储未指定数据库的集合[^4]。在进行数据库操作时,需注意数据库名称的规则,例如不能包含空格、点号、美元符号等特殊字符,并且长度不得超过 64 字节。 创建或切换数据库可以通过以下命令实现: ```bash use myDatabase ``` 如果数据库不存在,MongoDB 会在插入第一条数据时自动创建该数据库[^4]。 #### ### 集合的操作 集合是 MongoDB 中存储文档的基本单位。可以使用以下命令创建集合: ```bash db.createCollection("myCollection") ``` 删除集合可以通过以下命令完成: ```bash db.myCollection.drop() ``` #### ### 文档的增删改查 文档是 MongoDB 的核心数据单元,支持嵌套结构和丰富的数据类型。以下是常用的文档操作命令: - **插入文档**: ```javascript db.col.insertOne({ title: "MongoDB 教程", by: "菜鸟教程" })[^2] ``` - **查询文档**: ```javascript db.col.find({ by: "菜鸟教程" }).pretty()[^2] ``` 若需要联合查询,可以使用 `$or` 和 `$and` 操作符: ```javascript db.col.find({ $or: [{ "by": "菜鸟教程" }, { "title": "MongoDB 教程" }] }).pretty()[^2] ``` - **更新文档**: ```javascript db.col.updateOne({ by: "菜鸟教程" }, { $set: { title: "MongoDB 学习指南" } })[^5] ``` - **删除文档**: ```javascript db.col.deleteOne({ by: "菜鸟教程" })[^5] ``` #### ### 数据库的删除 当不再需要某个数据库时,可以通过以下命令删除: ```bash db.dropDatabase()[^4] ``` #### ### 查询优化与高级操作 为了提高查询效率,可以为常用字段创建索引: ```javascript db.col.createIndex({ title: 1 })[^3] ``` 此外,还可以通过聚合框架执行复杂的分析任务: ```javascript db.col.aggregate([ { $match: { by: "菜鸟教程" } }, { $group: { _id: "$title", count: { $sum: 1 } } } ])[^3] ``` #### ### 心得体会 通过实验操作,可以发现 MongoDB 提供了灵活的数据存储方式和强大的查询功能。掌握基本的增删改查操作后,还需进一步学习索引优化、聚合操作以及集群管理等内容。数据库操作虽然繁琐,但通过不断实践,能够逐步熟悉并掌握其使用技巧,为后续开发工作奠定坚实基础。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值