python处理百万级数据如何提高检索速率?
生活随笔
收集整理的這篇文章主要介紹了
python处理百万级数据如何提高检索速率?
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
2.請檢查系統的軟硬件瓶頸,根據這些因素可以檢查出細節層面上的問題,比如經過日志染色分析發現瓶頸是在python中間件對數據庫連接的頻繁開閉上。
我們用 Postgres 作數據存儲,性能方面 Python 這邊需要關注的比較少,只需要注意
如果用 Python 作為業務系統,對一些查詢結果做緩存
即可滿足大部分場景的需求了
1.請描述業務場景、業務需求、性能需求、數據量等。根據這些因素可以檢查出抽象層面上的問題。比如應該使用非關系型數據倉庫產品的場景,你們卻使用了關系型數據庫,并做了一致性校驗、數據關聯。
不綁外鍵,一致性用程序保證,加快寫入
我們用 Postgres 作數據存儲,性能方面 Python 這邊需要關注的比較少,只需要注意
如果用 Python 作為業務系統,對一些查詢結果做緩存
即可滿足大部分場景的需求了
1.請描述業務場景、業務需求、性能需求、數據量等。根據這些因素可以檢查出抽象層面上的問題。比如應該使用非關系型數據倉庫產品的場景,你們卻使用了關系型數據庫,并做了一致性校驗、數據關聯。
不綁外鍵,一致性用程序保證,加快寫入
總結
以上是生活随笔為你收集整理的python处理百万级数据如何提高检索速率?的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 国庆去国内那里自驾好呢?
- 下一篇: 中国驾照可以在麻省开车吗?