mysqlsql優化

① sql優化終於幹掉了「distinct」

SQL優化中去掉「distinct」的關鍵策略包括以下幾點：

1. 使用GROUP BY代替DISTINCT：

   • 原理：GROUP BY可以對查詢結果進行分組，每個組返回一行數據，從而實現去重效果，這與DISTINCT的功能類似。
   • 優勢：在某些情況下，GROUP BY的執行效率可能高於DISTINCT，特別是當與ORDER BY或LIMIT結合使用時。

2. 拆解復雜SQL：

   • 策略：將包含多表子查詢和DISTINCT的復雜SQL拆解為多個簡單的查詢操作。
   • 實施：通過Java後台代碼或其他邏輯整合這些簡單查詢的結果，從而避免在SQL層面處理復雜的去重和排序需求。

3. 優化查詢邏輯：

   • 分析：在編寫SQL時，盡量避免使用不必要的子查詢和臨時表，這些操作會增加查詢的復雜性和執行時間。
   • 改進：嘗試通過調整查詢邏輯，使用JOIN等更高效的操作來替代子查詢和臨時表。

4. 利用MySQL優化機制：

   • 了解：深入學習MySQL在處理DISTINCT、ORDER BY、GROUP BY等操作時的優化機制。
   • 應用：根據MySQL的優化策略，調整SQL的編寫方式，以充分利用MySQL的查詢優化器。

5. 測試和驗證：

   • 實施：在優化SQL後，進行充分的測試和驗證，確保優化後的SQL能夠正確執行，並且性能有所提升。
   • 監控：持續監控SQL的執行性能，及時發現並解決潛在的性能問題。

通過以上策略，可以有效地優化SQL查詢，提高執行效率，並避免在查詢中使用不必要的DISTINCT關鍵字。

② 記錄一次神奇的MySQL Group by慢查詢優化

現網出現慢查詢，單表查詢速度在30多秒，針對sql進行了優化，查詢目標為一定條件下特定用戶的記錄。在測試環境下構造了500萬數據，模擬出37秒的查詢耗時。分析發現，查詢欄位已建立索引並被使用。

嘗試了多種優化方法，但效果不顯著。在困惑中，嘗試用distinct替代group by，發現查詢速度突飛猛進，出乎意料地快了數十倍。盡管group by與distinct性能差異較小，但實際效果大相徑庭，此為優化發現。

進一步測試顯示，優化後sql在測試環境和伺服器上執行結果存在顯著差異。使用sqlyog執行優化後的sql時，耗時僅為0.8秒，而在其他工具或伺服器上執行仍為30多秒。經排查，問題歸因於sqlyog的默認行為，即在查詢後添加limit 1000，導致查詢速度加快。

經過討論，發現優化後的sql在現網環境執行時問題依舊。嘗試了多種方法均未見效，最終發現優化後sql的執行計劃中並未使用預期的索引。強制指定使用特定索引後，查詢耗時顯著減少至0.19秒。通過比較優化前後的執行計劃，驗證了優化效果。