MongoDB 資料分頁和排序 limit,skip,sort使用者

來源:互聯網
上載者:User

排序用sort,相當於order by,升序用1表示,降序用-1
比如,按age欄位升序排列:

 代碼如下 複製代碼

db.user.find().sort({"age":1})

如果有多個欄位,按姓名降序,年齡升序

 代碼如下 複製代碼

db.user.find().sort({"name":-1,"age":1})

limit和skip一起用,相當於mysql裡的limit:

 代碼如下 複製代碼

b.user.find().skip(1).limit(1)

相當於mysql裡的limit(1,1),即跳過第0條,從第1條開始返回,只返回1條
skip和limit就能實現分頁,但是skip太多的話,會影響效能,應該盡量避免,比如說,擷取當前頁最後一個文檔的某個值作為條件(如日期)來查詢,就可以不用skip.


無論是採用什麼資料庫,通常都有一些常規的做分頁和排名的方法。本文就通過一些測試資料來向大家介紹MongoDB在這方面的效能。

分頁首先我們來做一個分頁,在MongoDB中樣本資料如下所未:

 代碼如下 複製代碼
db.scores.find();
{lid: ObjectId("4fe506dabb2bfa742d000001"), score: 1, name: 'user_1'}
{lid: ObjectId("4fe506dabb2bfa742d000001"), score: 2, name: 'user_2'}
{lid: ObjectId("4fe506dabb2bfa742d000001"), score: 3, name: 'user_3'}
{lid: ObjectId("4fe506dabb2bfa742d000001"), score: 4, name: 'user_4'}

其中lid欄位用於區分不同的緯度,主要用在篩選上,在測試collection中,一共有五個不同的lid值,每一個對應1,200,000條資料,一共6,000,000條資料。索引在lid 和 score上。(下面的查詢能使用到索引)

然後我們進行下面的效能測試:

 代碼如下 複製代碼
collection = Mongo::Connection.new.db('test').collection('scores')
Benchmark.bmbm do |x|
  x.report("mongo small") do
    100.times do |i|
      collection.find({:lid => lids.sample}, {:fields => {:_id => false, :score => true, :user => true}}).sort({:score => -1}).limit(20).skip(i * 20).to_a
    end
  end
  x.report("mongo medium") do
    100.times do |i|
      collection.find({:lid => lids.sample}, {:fields => {:_id => false, :score => true, :user => true}}).sort({:score => -1}).limit(20).skip(i * 1000).to_a
    end
  end
  x.report("mongo large") do
    100.times do |i|
      collection.find({:lid => lids.sample}, {:fields => {:_id => false, :score => true, :user => true}}).sort({:score => -1}).limit(20).skip(i * 10000).to_a
    end
  end
end

上面分別對skip條數比較小,中等大小和非常大三種情況進行了測試。而limit指定擷取的資料都一樣是20條。這三種情況下的測試結果分別是:0.6 秒, 17 秒,173 秒。

我們可以看到,對MongoDB來說,skip的大小嚴重影響效能,應該嚴格避免特別大的skip操作。

排名排名功能與分頁功能類似,不同的是排名是通過計算大於某個值的條數來做的。

比如:

 代碼如下 複製代碼
//sql
select count(*) from scores where lid = $1 and score > $2
//mongo
db.scores.find({lid: lid, score: {$gt: score}}).count()

由於排名和分頁實現原理上類似,所以結果實際上差不多。測試結果如下:

mongo top rank   1.155847
mongo average    22.291007

結論上面做了對比,那麼本文要說一個什麼問題呢?

首先,在MongoDB中,盡量避免進行比較大的skip操作,比如在分頁中,如果你能知道需要擷取資料的上一條score是多少,那麼可能能夠用下面的方法來擷取你要的資料,而不是通過一次很大的skip操作。

  db.scores.find({lid: lid, score: {$lt: last_score}}).sort({score: -1}).limit(20)另外,如果你需要進行比較大的skip操作或者count比較大的數量,那麼可以考慮採用Redis的Sorted Sets來做

相關文章
阿里云产品大规模降价
  • 最高幅度達59%,平均降幅23%
  • 核心產品降價
  • 多地區降價
undefined. /
透過 Discord 與我們聯繫
  • 安全、匿名的群聊,不受干擾
  • 隨時了解活動、活動、新產品等訊息
  • 支持您的所有問題
undefined. /
免費試用
  • 開啟從ECS到大數據的免費試用之旅
  • 只需三步 輕鬆上雲
  • 免費試用ECS t5 1C1G
undefined. /

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.