Elasticsearch 實(shí)現(xiàn)分頁(yè)的 3 種方式，還有誰(shuí)不會(huì)？？
一、from + size 淺分頁(yè)
"淺"分頁(yè)可以理解為簡(jiǎn)單意義上的分頁(yè)。
它的原理很簡(jiǎn)單，就是查詢前20條數(shù)據(jù)，然后截?cái)嗲?0條，只返回10-20的數(shù)據(jù)。這樣其實(shí)白白浪費(fèi)了前10條的查詢。
GET test_dev/_search
{
"query": {
"bool": {
"filter": [
{
"term": {
"age": 28
}
}
]
}
},
"size": 10,
"from": 20,
"sort": [
{
"timestamp": {
"order": "desc"
},
"_id": {
"order": "desc"
}
}
]
}
做過(guò)測(cè)試，越往后的分頁(yè)，執(zhí)行的效率越低。總體上會(huì)隨著from的增加，消耗時(shí)間也會(huì)增加。而且數(shù)據(jù)量越大，就越明顯！
二、scroll 深分頁(yè)
from+size查詢?cè)?0000-50000條數(shù)據(jù)（1000到5000頁(yè)）以內(nèi)的時(shí)候還是可以的，但是如果數(shù)據(jù)過(guò)多的話，就會(huì)出現(xiàn)深分頁(yè)問(wèn)題。最新 elasticsearch 面試題也整理好了，大家可以在Java面試庫(kù)小程序在線刷題。
為了解決上面的問(wèn)題，elasticsearch提出了一個(gè)scroll滾動(dòng)的方式。
scroll 類似于sql中的cursor，使用scroll，每次只能獲取一頁(yè)的內(nèi)容，然后會(huì)返回一個(gè)scroll_id。根據(jù)返回的這個(gè)scroll_id可以不斷地獲取下一頁(yè)的內(nèi)容，所以scroll并不適用于有跳頁(yè)的情景。
GET test_dev/_search?scroll=5m
{
"query": {
"bool": {
"filter": [
{
"term": {
"age": 28
}
}
]
}
},
"size": 10,
"from": 0,
"sort": [
{
"timestamp": {
"order": "desc"
},
"_id": {
"order": "desc"
}
}
]
}
scroll=5m表示設(shè)置scroll_id保留5分鐘可用。使用scroll必須要將from設(shè)置為0。 size決定后面每次調(diào)用 _search搜索返回的數(shù)量
然后我們可以通過(guò)數(shù)據(jù)返回的_scroll_id讀取下一頁(yè)內(nèi)容，每次請(qǐng)求將會(huì)讀取下10條數(shù)據(jù)，直到數(shù)據(jù)讀取完畢或者scroll_id保留時(shí)間截止：
GET _search/scroll
{
"scroll_id": "DnF1ZXJ5VGhlbkZldGNoBQAAAAAAAJZ9Fnk1d......",
"scroll": "5m"
}
注意：請(qǐng)求的接口不再使用索引名了，而是 _search/scroll，其中GET和POST方法都可以使用。
點(diǎn)擊關(guān)注公眾號(hào)，Java干貨及時(shí)送達(dá)
scroll刪除
根據(jù)官方文檔的說(shuō)法，scroll的搜索上下文會(huì)在scroll的保留時(shí)間截止后自動(dòng)清除，但是我們知道scroll是非常消耗資源的，所以一個(gè)建議就是當(dāng)不需要了scroll數(shù)據(jù)的時(shí)候，盡可能快的把scroll_id顯式刪除掉。
清除指定的scroll_id：
DELETE _search/scroll/DnF1ZXJ5VGhlbkZldGNo.....
清除所有的scroll：
DELETE _search/scroll/_all
三、search_after 深分頁(yè)
scroll 的方式，官方的建議不用于實(shí)時(shí)的請(qǐng)求（一般用于數(shù)據(jù)導(dǎo)出），因?yàn)槊恳粋€(gè) scroll_id 不僅會(huì)占用大量的資源，而且會(huì)生成歷史快照，對(duì)于數(shù)據(jù)的變更不會(huì)反映到快照上。
search_after 分頁(yè)的方式是根據(jù)上一頁(yè)的最后一條數(shù)據(jù)來(lái)確定下一頁(yè)的位置，同時(shí)在分頁(yè)請(qǐng)求的過(guò)程中，如果有索引數(shù)據(jù)的增刪改查，這些變更也會(huì)實(shí)時(shí)的反映到游標(biāo)上。但是需要注意，因?yàn)槊恳豁?yè)的數(shù)據(jù)依賴于上一頁(yè)最后一條數(shù)據(jù)，所以無(wú)法跳頁(yè)請(qǐng)求。
為了找到每一頁(yè)最后一條數(shù)據(jù)，每個(gè)文檔必須有一個(gè)全局唯一值，官方推薦使用 _uid 作為全局唯一值，其實(shí)使用業(yè)務(wù)層的 id 也可以。最新 elasticsearch 面試題也整理好了，大家可以在Java面試庫(kù)小程序在線刷題。
GET test_dev/_search
{
"query": {
"bool": {
"filter": [
{
"term": {
"age": 28
}
}
]
}
},
"size": 20,
"from": 0,
"sort": [
{
"timestamp": {
"order": "desc"
},
"_id": {
"order": "desc"
}
}
]
}
使用 search_after必須要設(shè)置from=0。這里我使用timestamp和 _id作為唯一值排序。我們?cè)诜祷氐淖詈笠粭l數(shù)據(jù)里拿到sort屬性的值傳入到 search_after。
使用sort返回的值搜索下一頁(yè)：
GET test_dev/_search
{
"query": {
"bool": {
"filter": [
{
"term": {
"age": 28
}
}
]
}
},
"size": 10,
"from": 0,
"search_after": [
1541495312521,
"d0xH6GYBBtbwbQSP0j1A"
],
"sort": [
{
"timestamp": {
"order": "desc"
},
"_id": {
"order": "desc"
}
}
]
}
你都學(xué)會(huì)了嗎？
版權(quán)聲明：本文為CSDN博主「zhexiao27」的原創(chuàng)文章，遵循CC 4.0 BY-SA版權(quán)協(xié)議，轉(zhuǎn)載請(qǐng)附上原文出處鏈接及本聲明。原文鏈接：https://blog.csdn.net/andybegin/article/details/83864171
關(guān)注Java技術(shù)棧看更多干貨
