MongoDB系列一(查询).

本文涉及的产品
云数据库 MongoDB,独享型 2核8GB
推荐场景:
构建全方位客户视图
简介: 一、简述     MongoDB中使用find来进行查询。查询就是返回一个集合中文档的子集,子集合的范围从0个文档到整个集合。默认情况下,"_id"这个键总是被返回,即便是没有指定要返回这个键。("_id"是一个集合中每个文档的唯一标识)     查询的使用上有限制,传递给数据库的查询文档必须是常量。

一、简述

    MongoDB中使用find来进行查询。查询就是返回一个集合中文档的子集,子集合的范围从0个文档到整个集合。默认情况下,"_id"这个键总是被返回,即便是没有指定要返回这个键。("_id"是一个集合中每个文档的唯一标识)

    查询的使用上有限制,传递给数据库的查询文档必须是常量。(当然,在你的代码里可以是正常的变量)

    一个键可以有任意多个条件,但是一个键不能对应多个更新修改器。

    条件语句是内层文档的键,而修改器是外层文档的键。

二、使用find或者findOne函数和查询文档数据库执查询

1、db.userInfo.find()
--查询所有数据,相当于 select * from userInfo

2、db.userInfo.find({age:22})
--查询 age = 22 的记录,相当于 select * from userInfo where age = 22

3、db.userInfo.find({age:22,name:'zhangsan'})
--查询 age = 22 并且name = 'zhangsan' 的记录,相当于  select * from userInfo where age = 22 and name = 'zhangsan'

tips:匹配正则表达式(4、5):

4、db.userInfo.find({name:/mongo/})
--查询 name 中包含 mongo 的数据, 相当于 select * from userInfo where name like '%mongo%'

5、db.userInfo.find({name:/^mongo/})
--查询 name 中以mongo开头的,相当于 select * from userInfo where name like 'mongo%'

6、db.userInfo.findOne()
--查询第一条数据,相当于 select top 1 * from userInfo 与 db.userInfo.find().limit(1)

7、db.userInfo.distinct("name")
--查询后去掉当前集合中的某列的重复数据,相当于 select distinct name from userInfo

tips:find 查询的第一个大括号表示查询条件,第二个大括号表示要显示的字段(默认全显示 ):

8、db.userInfo.find({},{name:1,age:1})
--查询指定列name、age的数据,相当于 select name,age from userInfo

9、db.userInfo.find({},{name:0})
--不希望结果集中显示 name 这个字段

tips:排序分页

10、db.userInfo.find().sort({age:1})
--按照年龄升序
11、db.userInfo.find().sort({age:-1})
--按照年龄降序

12、db.userInfo.find().limit(5)
--查询前5条数据,相当于 select top 5 * from userInfo

13、db.userInfo.find().skip(10)
--查询 10条以后的数据 select * from userInfo where id not in (select top 10 * from userInfo)

14、db.userInfo.find().limit(5).skip(0)
--可用于分页 limit是pageSize,skip是 第几页*pageSize(从第0页开始)

15、db.userInfo.find({sex:null}) 

-- 特定类型的查询,比如 null 。它确实可以匹配自身,但是它不仅可以匹配这个键为 null 的文档,也能匹配不包含这个键的文档。如果仅想匹配这个键位 null 的文档,需要修改如下:

-- db.userInfo.find({sex:{'$in':[null],'$exists':true}})

三、使用$条件查询实现围查询、数据集包含查询、不等式查询,以及其他一些查询

1、$lt(小于)、$lte(小于等于)、$ge(大于)、$gte(大于等于)、$ne 不等于

db.userInfo.find({age:{$gt:22}})
    --查询age > 22 的记录,相当于 select * from userInfo where age > 22
db.userInfo.find({age:{$lt:22}})
    --查询age < 22 的记录,相当于 select * from userInfo where age < 22
db.userInfo.find({age:{$gte:22}})
   --查询 age >= 22 的记录,相当于 select * from userInfo where age >= 22
db.userInfo.find({age:{$lte:22}})
   --查询 age <= 22 的记录 ,相当于 select * from userInfo where age <= 22
db.userInfo.find({age:{$gte:23,$lte:26}})
   --查询 age >= 23 并且 age <=26 的记录 , 相当于 select * from userInfo where age >= 23 and age <=26

db.userInfo.find({age:{$ne:23}})
    --查询 age != 23 的记录 , 相当于 select * from userInfo where age != 23

tips:很遗憾,并没有 $eq(等于)这个操作符。

2、元条件句 $and 、$or、$not

         元条件句:即可以用在任何其他条件之上 。

$and 总是希望尽可能用最少的条件来限定结果的范围

db.userInfo.find({"$and" : [{x : {"$lt" : 1}}, {x : 4}]})
    --会匹配那些"x"字段的值小于1并且等于4的文档。虽然这两个条件看起来是矛盾的,但是这是完全有可能的,比如,如果"x"字段的值是这样一个数组{"x" : [0,4]},那么这个文档就与查询条件相匹配。
    --查询优化器不会对"$and"进行优化,这与其他操作符不同。如果把上面的查询改成下面这样,效率会更高:db.userInfo.find({x : {"$lt" : 1, "$in" : [4]}})

$or 第一个条件应该尽可能匹配更多的文档,这样才是最为高效的

db.userInfo.find({$or:[{age:22},{age:25}])
    --or与查询,相当于select * from userInfo where age = 22 or age = 25

$not 用在其他条件上的取反,虽然是元条件句,但是不能放在外层文档(否则:unknown top level operator: $not),并且后面必须跟正则表达式或者文档(否则:$not needs a regex or a document)。

db.userInfo.find({age:{'$not':{$gt:23}}});
    -- 对于 age>23 返回的文档取反集
db.product.find({name:{$not:/ang/}});
   -- 对 name 与正则匹配的结果取反集合

3、$in、$nin、$all、$size、$slice 、$elemMatch

$in 可以用来查询一个键的多个值
 db.userInfo.find({age : {"$in" : [22, 23, 24]}})
    --查询年龄等于22、23、24的文档
$nin$in 相反,用来查询一个键不属于多个值的文档。

$all (匹配数组)
db.food.find({fruit : {$all : ["apple", "banana"]}})
   -- 查询 fruit 既含有 apple,又含有banana 的文档。
   -- 当然,也可以不使用$all 匹配数组,比如 db.food.find({fruit : ["apple", "banana","orange"]}) 但是,这样子只能唯一匹配数组为["apple", "banana","orange"] 的文档,而且查询数组条件还要保证相同的元素顺序。
   --可以使用 key.index 查询数组特定位置的元素。db.food.find({"fruit.2" : "peach"})

$size(匹配数组)
    --db.food.find({"fruit" : {"$size" : 3}})
    --匹配数组长度为3的文档 

$slice(匹配数组)
  --$slice 用在find的第二个参数,用来查找某个键匹配的数组元素的一个子集。
  --使用"$slice"时将返回文档中的所有键。
  --db.blog.findOne({},{comments:{"$slice":2}}) 返回 结果文档中comments数组的前两个子集
  --db.blog.findOne({},{comments:{"$slice":[23,10]}}) 返回 结果文档中comments数组的 24-33 子集,不够则全返回。
  --db.blog.findOne({},{comments:{"$slice":-1}}) 返回 结果文档中comments数组的最后一个子集 

$elemMatch(匹配数组)
  --查询匹配有两种。数组匹配和非数组匹配。非数组匹配必须键的值满足每一条查询条件才行。数组匹配只要键的数组元素分别满足查询条件即可。比如:

            

     

                         -- $elemMatch 可以让数组的元素分别要满足查询条件,但是 $elemMatch 不会匹配非数组元素!!

                         -- db.test.find({"x" : {"$elemMatch" : {"$gt" : 10, "$lt" : 20}}) 

4、其他 $exists 、$mod

$exists
   --查询某个键时候存在
  -- db.userInfo.find({sex:{$exists:true}}) 返回键名含有sex的文档
  -- db.userInfo.find({sex:{$exists:false}}) 返回键名不含有sex的文档

$mod
  --$mod会将查询的值除以第一个给定值,若余数等于第二个给定值则匹配成功
  -- db.userInfo.find({id : {"$mod" : [5, 1]}}

四、查询将会返回一个数据,游只会在你需要才将需要的文档批量返回 

数据库使用游标返回find的执行结果。客户端对游标的实现通常能够对最终结果进行有效的控制。可以限制结果的数量,略过部分结果,根据任意键按任意顺序的组合对结果进行各种排序,或者是执行其他一些强大的操作。

var cursor = db.driverLocation.find();
while (cursor.hasNext()){
     var object = cursor.next();
     print(object.type);
    }

游标类还实现了JavaScript的迭代器接口,所以可以在forEach循环中使用:

var cursor = db.driverLocation.find();
cursor.forEach(function(x){
    print(x.type);
    });    

    调用find时,shell并不立即查询数据库,而是等待真正开始要求获得结果时才发送查询,这样在执行之前可以给查询附加额外的选项。几乎游标对象的每个方法都返回游标本身,这样就可以按任意顺序组成方法链。例如,下面几种表达是等价的:
> var cursor = db.foo.find().sort({"x" : 1}).limit(1).skip(10);
> var cursor = db.foo.find().limit(1).sort({"x" : 1}).skip(10);
> var cursor = db.foo.find().skip(10).limit(1).sort({"x" : 1});

此时,查询还没有真正执行,所有这些函数都只是构造查询。当执行 cursor.hasNext() 的时候,查询才真正被执行。这时,查询被发往服务器。shell立刻获取前100个结果或者前4 MB数据(两者之中较小者),这样下次调用next或者hasNext时就不必再次连接服务器取结果了。客户端用光了第一组结果,shell会再一次联系数据库,使用getMore请求提取更多的结果。getMore请求包含一个查询标识符,向数据库询问是否还有更多的结果,如果有,则返回下一批结果。这个过程会一直持续到游标耗尽或者结果全部返回。

游标的生命周期:首先,游标完成匹配结果的迭代时,它会清除自身。另外,如果客户端的游标已经不在作用域内了,驱动程序会向服务器发送一条特别的消息,让其销毁游标。最后,即便用户没有迭代完所有结果,并且游标也还在作用域中,如果一个游标在10分钟内没有使用的话,数据库游标也会自动销毁。

五、还有很多针对游标执行的元操作,包括忽略一定数量的结果,或者限定返回结果的数量,以及对结果排序。 

   -- MongoDB处理不同类型的数据是有一定顺序的。有时一个键的值可能是多种类型的,例如,整型和布尔型,或者字符串和null。如果对这种混合类型的键排序,其排序顺序是预先定义好的。优先级从小到大,其顺序如下:

1. 最小值;
2. null;
3. 数字(整型、
4. 字符串;
5. 对象/文档;
6. 数组;
7. 二进制数据
8. 对象ID;
9. 布尔型;
10. 日期型;
11. 时间戳;
12. 正则表达式
13. 最大值 。

    -- 不用 skip 进行分页

    如前文提到的,一般分页我们用 db.userInfo.find().limit(pageSize).skip(第n页 * pageSize) 来实现。但是我们注意到,如果数据量大的话,我们总是先取出前 n*pageSize 的条数然后再舍弃掉,显得很不合算。为此,《MongoDB权威指南》向我们介绍了一种方式:利用时间进行排序,拿到前一页的最后时间,取出时间大于上一页最后时间的 pageSize 条记录,如下:

var latest = null;
//显示第一页
var page1 = db.foo.find().sort({"date" : -1}).limit(100)
while (page1.hasNext()) {
latest = page1.next();
display(latest);
}
// 获取下一页
var page2 = db.foo.find({"date" : {"$gt" : latest.date}});
page2.sort({"date" : -1}).limit(100);

 但是,我发现这样写还是会存在很多问题,比如说:

1、跟上一页最后一个文档的时间一样的文档如果有多个呢?那这样不是会导致一些文档被漏掉了吗?

2、上一页、下一页或许可以解决。那么如果用户点击第四页、第五页呢?

    -- 获取一致结果

    数据处理通常的做法是先将数据从数据库中取出来,做一些变换以后,再保存回数据库。但是,MongoDB这边有个机制就是,如果拿出来处理的数据处理后导致体积比原先大很多,会导致数据放不回原来的位置,而把这个数据挪至集合的末尾处。从而引发的隐患就是:分页查询到最后一页的时候,又取到了原来的数据。

    应对这个问题的方法就是对查询进行快照(snapshot)。如果使用了这个选项,查询就在"_id"索引上遍历执行,这样可以保证每个文档只被返回一次。

    db.foo.find().snapshot()
    快照会使查询变慢,所以应该只在必要时使用快照。例如,mongodump默认在快照上使用查询。

相关实践学习
MongoDB数据库入门
MongoDB数据库入门实验。
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。 &nbsp; 相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
目录
相关文章
|
16天前
|
存储 NoSQL MongoDB
掌握MongoDB索引优化策略:提升查询效率的关键
在数据库性能调优中,索引是提升查询效率的利器。本文将带你深入了解MongoDB索引的内部工作原理,探讨索引对查询性能的影响,并通过实际案例指导如何针对不同的查询模式建立有效的索引。不仅将涵盖单一字段索引,还会探讨复合索引的使用,以及如何通过分析查询模式和执行计划来优化索引,最终实现查询性能的最大化。
|
5天前
|
存储 NoSQL MongoDB
MongoDB 查询分析
10月更文挑战第21天
6 1
|
5天前
|
NoSQL MongoDB 索引
MongoDB 覆盖索引查询
10月更文挑战第21天
11 1
|
11天前
|
SQL NoSQL MongoDB
MongoDB 查询文档
10月更文挑战第15天
12 1
|
13天前
|
人工智能 NoSQL 机器人
MongoDB Atlas与YoMio.AI近乎完美适配:推理更快速、查询更灵活、场景更丰富
随着MongoDB的新发布和革新,YoMio.AI的“闪电式发展”值得期待。
|
5月前
|
NoSQL 定位技术 MongoDB
解锁MongoDB索引的秘密:优化查询效率与应对限制的策略
解锁MongoDB索引的秘密:优化查询效率与应对限制的策略
|
2月前
|
SQL NoSQL JavaScript
04 MongoDB各种查询操作 以及聚合操作总结
文章全面总结了MongoDB中的查询操作及聚合操作,包括基本查询、条件筛选、排序以及聚合管道的使用方法和实例。
63 0
|
3月前
|
JSON NoSQL MongoDB
MongoDB Schema设计实战指南:优化数据结构,提升查询性能与数据一致性
【8月更文挑战第24天】MongoDB是一款领先的NoSQL数据库,其灵活的文档模型突破了传统关系型数据库的限制。它允许自定义数据结构,适应多样化的数据需求。设计MongoDB的Schema时需考虑数据访问模式、一致性需求及性能因素。设计原则强调简洁性、查询优化与合理使用索引。例如,在构建博客系统时,可以通过精心设计文章和用户的集合结构来提高查询效率并确保数据一致性。正确设计能够充分发挥MongoDB的优势,实现高效的数据管理。
54 3
|
3月前
|
存储 NoSQL MongoDB
【掌握MongoDB】轻松精通MongoDB查询,从基础到高级一网打尽!
【8月更文挑战第24天】在数据驱动的时代,数据库的性能与灵活性对企业至关重要。MongoDB作为一种高性能、无模式的文档数据库,为开发者提供了灵活的数据存储方案。尤其在处理半结构化或多变数据时展现出强大优势。本文重点介绍MongoDB中的查询操作,包括基本查询、条件查询、复杂查询以及字段选择、排序和限制等功能。通过掌握这些基本查询技巧,开发者能够有效从MongoDB中检索数据,支持复杂的业务逻辑。
56 1
|
3月前
|
监控 NoSQL MongoDB
mongodb查询100万数据如何查询快速
综上,提高MongoDB百万级数据的查询性能需要综合多项技术,并在实际应用中不断调优和实践。理解数据的特征,合理设计索引,优化查询语句,在数据访问、管理上遵循最佳的实践,这样才能有效地管理和查询大规模的数据集合。
183 1