记一次查询性能优化,原30s+,现0.5s~20s
記一次查詢性能優化,原30s+,現0.5s~20s
原查詢sql是 兩張大表(用戶合同表二百多萬,合同信息表三百萬)聯查并按用戶id分組,再左連接上6張小表(小表先根據日期查詢并按用戶id分組),查詢條件是用戶或機構,再根據機構排序分頁。
優化過程:
0.給相關列添加索引是首先的。
1.因為該查詢接口最終返回的是總記錄數和當前頁的人員信息,所以首先考慮查詢總記錄時沒必要這么多張表關聯查詢。
2.原查詢分頁是用的sql語句中的分頁,而sql中的分頁是需要將全量數據摟出來,再返回分頁對應的數據,此處考慮在代碼中做分頁——Java8 Stream流的skip和limit方法組合使用
3.分析查詢條件是人員或機構,所以在查詢總記錄數時,只要影響查詢總記錄數的表(用戶合同表和用戶機構表),此處有兩種方式:一種是先根據查詢條件(人員或機構)查詢用戶機構表(幾千小表),查詢出來符合條件的用戶,并根據機構排序,再根據用戶查詢用戶合同表(二百多萬大表),則返回的記錄大小即總記錄數;另一種是用戶機構表(幾千小表)和用戶合同表(二百多萬大表)根據用戶id關聯,再根據查詢條件(人員或機構)查詢,并根據機構排序,則返回的記錄大小即總記錄數。通過在程序中打印耗時,發現方式一更快,耗時更少。
4.排序:接3的方式一,使用用戶機構表查詢出來符合條件的用戶集合和用戶合同表查詢出來符合條件的用戶集合整
總結
以上是生活随笔為你收集整理的记一次查询性能优化,原30s+,现0.5s~20s的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Java语言开发在线音乐推荐网 音乐推荐
- 下一篇: 教学|3DSMAX的mental ray