日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > 数据库 >内容正文

数据库

写给运营同学和初学者的SQL入门教程

發布時間:2024/7/5 数据库 33 豆豆
生活随笔 收集整理的這篇文章主要介紹了 写给运营同学和初学者的SQL入门教程 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

作者簡介

多肉,餓了么資深python工程師。曾在17年擔任餓了么即時配送眾包系統的研發經理,這篇文章最早的版本就誕生于那段時間,目前負責配送相關業務系統的整體穩定性建設。個人比較喜歡c和python,最近有點迷rust,同時還是個archlinux的日常用戶,有類似愛好的歡迎交流

  • Preface
  • Introduction
  • 1 預備知識
    • 1.1 數據庫和數據表
    • 1.2 最基本的Sql查詢語法
  • 2 更進一步
    • 2.1 IN 操作
    • 2.2 關系運算符:AND 和 OR
    • 2.3 排序:ORDER BY
  • 3 高級一點的話題
    • 3.1 聚合函數:COUNT,SUM, AVG
    • 3.2 對查詢結果去重:DISTINCT 語法
    • 3.3 將查詢數據分組:GROUP BY 語法
    • 3.4 聚合函數的好搭檔:HAVING 語法
  • 4 有點超綱的話題
    • 4.1 字段類型
    • 4.2 索引
    • 4.3 JOIN語法家族
    • 4.4 嵌套的SELECT語法
  • 5 闖關答題:快速復習

Preface

為什么以《寫給運營同學和初學者的Sql入門教程》為題?

這原本是給一位關系要好的運營同學定制的Sql教程。在餓了么,總部運營的同學在排查、跟蹤線上問題和做運營決策的時候,除了通過運營管理系統查詢信息和依賴數據分析師給出的分析數據,常常也需要直接從數據庫管理臺通過寫Sql的方式獲取更細致、更實時的業務數據,并基于這些數據進行一些及時的分析,從而更快的給出運營方案。在這樣的背景下,Sql已經越來越成為我們運營同學的一項必備技能。網上有很多Sql教程(e.g. w3school),我也翻閱過一些運營同學桌上的Sql紙質書,這些教程都很好,但普遍側重介紹語法,很多很多的語法,配以簡短的demo。作為老司機的reference book很贊,可是對于剛入門甚至還沒有入門的學習者,就未免困難了一點。再回顧運營同學的使用場景,大多數情況下是根據一些已有條件做一些簡單的查詢,偶爾會有一些相對復雜的查詢,比如對查詢結果做一些聚合、分組、排序,或是同時查詢兩三張數據表,除此以外,建表、建索引、修改表字段、修改字段值等等這些操作,在運營同學的日常工作中基本是不會遇到的。

基于以上種種原因,寫了這篇教程,初衷是能夠幫助這位好朋友以更高的ROI入門Sql。下面是寫這篇教程時的一些考量:

  • 從數據庫、數據表的基礎概念以及最簡單的Sql語法開始,做一些必要的鋪墊,后續的每一章再逐步增加難度;
  • 只介紹查詢語法(更準確的說,是最常用的查詢語法),將它們的用法和套路解釋清楚,不涉及日常工作暫時還用不到的建表、修改表結構等等操作,避免鋪天蓋地的語法一個接一個反而干擾了學習的節奏;
  • 通過穿插一些小測驗、小溫習,及時檢驗對知識點的理解和復習已經學習過的知識點;
  • 結合一些業務場景的demo幫助理解;
  • 結尾提供一章快速復習,既是復習,也可以自測還有哪些知識點沒有掌握到位;
  • 建議所有閱讀教程的同學,都嘗試搭建一套自己的數據庫服務(建議安裝MySQL),對教程中的demo多做一些練習,不論是示例、小測驗還是小溫習里面的Sql語句,都不妨親自執行一下,這也是一種很好的幫助你熟悉語法的方式。當然搭建自己的數據庫會是一個不小的挑戰,寫作這篇教程的時候,我在自己的VPS上安裝了MySQL(MariaDB)并提供了一個連接腳本(隱藏了連接MySQL的過程)給朋友使用,但是這種方式并不適合推廣到所有人。具體的安裝和使用方式,不在本教程的敘述范圍內,所以...運營妹子們可以求助下熟悉的研發同學,漢子們嘛..

  • 數據創建腳本-通過該腳本導入demo數據到MySQL中
  • 鏈接VPS上MySQL的腳本-基本原理是建立了一個ssh tunnel,在tunnel里和遠端的MySQL通信,但實際上本地建MySQL服務更方便,僅供參考
  • 可以從這里sql_tutorial下載通過pandoc+latex導出的pdf,獲得更好的閱讀體驗。

    B.T.W

    由餓了么技術社區主辦的首屆物流技術開放日終于來啦!

    時間:2018年12月30日

    地點:餓了么上海總部:普陀區近鐵城市廣場北座5樓榴蓮酥

    此次活動邀請到了物流團隊的6位重量級嘉賓。不僅會有前后端大佬分享最新的架構、算法在物流團隊的落地實戰經驗,更有 P10 大佬教你如何在業務開發中獲得技術成長。當然,也會有各種技術書籍,紀念品拿到手軟,最后最重要的一點,完全免費!還等什么,趕快點擊 etech.ele.me/salon.html?… 了解更多細節并報名吧!

    ?我也會在這次開放日活動中分享Gunicorn有關的話題,歡迎大家報名參加。放出一張分享內容的Outline:

    by 多肉

    Introduction

    其實Sql并沒有那么難。Sql是幫助你和關系型數據庫交互的一套語法,主要支持的操作有4類:

  • DQL:其實就是數據查詢操作,通過特定的語法查詢到數據庫里你想要的數據結果,并且展示出來;
  • DML:數據修改操作,包括更新某個數據字段、向某張表里面插入一條新的數據等等;
  • DDL:數據定義操作,比如創建一張新的表或是創建一個新的索引(索引是啥?我們后面專門聊一聊它);
  • DCL:數據授權操作,比如授權特定的人可以查詢某張特定的表;
  • 聽起來挺嚇人的對吧,但實際上DML、DDL、DCL這3類操作在日常的運營工作中幾乎都不會用到,經常會使用到的吶其實是第一種,也就是數據查詢操作(DQL)。Sql基本的查詢語法也比較簡單,那么難在哪里呢?我猜想難在學習了基本語法之后,不知道怎么應用到實際的Case上。在接下來的內容里,我將以一些十分接近現實的眾包運營Case為例,逐一解釋最基本的Sql查詢語法并且分析如何將它應用到具體的場景上。

    1 預備知識

    好的吧,吹了一波牛還是逃不過需要介紹一些最基礎的東西,但是我保證這是整篇教程中最枯燥的部分,后面就會有趣很多。

    1.1 數據庫和數據表

    為了更簡單的理解這兩個概念以及他們之間的關系,可以這么類比:

  • 數據表:就是一張表格,想象一張你經常在使用的Excel表,有行有列,每一行就是一條數據,每一列對應了這條數據的某一個具體的字段,當然這張表還有一個表名。數據表也是如此,只是字段名、表名不像Excel表格那樣好理解,比如Excel表格里面某一列的字段名可能叫騎手id,而對應到數據表里面可能就叫做rider_id,Excel的表名可能叫騎手基本信息表,而對應到數據表的表名則可能叫tb_rider;
  • 數據庫:就是集中管理一批相關的表格的地方。你可以把它理解成是一個文件夾。平時你可能會創建一個名叫眾包業務的文件夾,然后將眾包運營相關的Excel表格都放在這個文件夾里面。數據庫也是如此,比如我們會有一個庫名叫做crowd的數據庫,里面可能存放了tb_rider、tb_order等和騎手、運單相關的多張數據表;
  • 所以,“關系型數據庫”的概念很嚇唬人,但其實道理很簡單,就是列和列之間有一定的聯系,整合在一起就是一條有意義的數據,將這些數據歸納起來就構成了一張表,而將一批有關聯的表一同管理起來就得到了一個數據庫。

    1.2 最基本的Sql查詢語法

    最基本的Sql查詢語法其實就一個:

    SELECT 列名(或者*,表示所有列) FROM 表名 WHERE 篩選條件; 復制代碼

    B.T.W 注意SELECT...FROM...WHERE...;語句結尾的這個分號,在標準Sql語法中這個分號是必要的

    讓我們按照FROM、WHERE、SELECT的順序理解一下這個語法:

  • FROM 表名:顧名思義,就是從表名指定的這張表格中;
  • WHERE 篩選條件:意思是“當滿足篩選條件”的時候;
  • SELECT 列名:意思是選擇出這些記錄,并且展示指定的列名;
  • 串聯起來便是,從FROM后面指定的數據表中,篩選出滿足WHERE后面指定條件的數據,并且展示SELECT后指定的這幾列字段。是不是很簡單吶?不過好像抽象了一點。所以我們來看幾個具體的超簡單的例子。假設我們有一張學生數學期末考試成績表,數據表長下面這樣,表名叫作tb_stu_math_score。

    id(自增主鍵)name(學生姓名)number(學號)grade(年級)class(班級)score(得分)
    1柯南01020112100
    2小哀01020212100
    3光彥0102031298
    4步美0102041295
    5元太0102051259

    讓我們試著理解一下下面幾個查詢語句:

    [1] SELECT name FROM tb_stu_math_score WHERE score >= 95;

    從tb_stu_math_score表中挑選出得分大于95分的學生姓名,得到的結果顯而易見:

    name
    柯南
    小哀
    光彥
    步美

    [2] SELECT name, number FROM tb_stu_math_score WHERE score < 60;

    從tb_stu_math_score表中挑選出得分小于60分的學生姓名,得到的結果是:

    namenumber
    元太010205

    [3] SELECT * FROM tb_stu_math_score WHERE score = 100;

    從tb_stu_math_score表中挑選出得分為100分學生的所有信息(注意SELECT后面的*符號,表示所有字段),得到的結果是:

    idnamenumbergradeclassscore
    1柯南01020112100
    2小哀01020212100

    小測驗

    看看下面這些Sql查詢語句你是不是知道是什么含義并且知道查詢結果是什么了呢?

    1. SELECT name, grade, class, score FROM tb_stu_math_score WHERE number = "010201"; 2. SELECT * FROM tb_stu_math_score WHERE name = "小哀"; 3. SELECT id, score FROM tb_stu_math_score WHERE number = "010202"; 復制代碼

    2 更進一步

    剛剛我們學習了Sql查詢的最最最最基礎的語法,但是相信我,所有的Sql查詢幾乎都長這個樣子,所以理解了這個最基礎的語法結構,后面學習起來就輕松多了。接下來讓我通過一些例子,擴展這個基礎語法,教你一些更加高級的Sql查詢操作。不過首先,我們還是要看一下接下來我們的范例數據表長啥樣。

    假設我們有一張騎手數據表,表名叫作tb_rider,還有一張運單數據表,表名叫作tb_order,這兩張表分別長下面這個樣子。

    [1] 騎手數據表:tb_rider

    idnamereal_name_certify_statelevellevel_cityis_deletedcreated_atupdated_at
    1Stark23102017-01-01 22:00:192018-01-01 06:40:01
    2Banner23902017-04-28 12:01:192018-01-01 06:40:01
    3Rogers22102017-04-10 17:24:012018-01-01 06:40:01
    4Thor10102017-12-31 23:10:392018-01-01 06:40:01
    5Natasha21102017-02-11 15:03:132018-01-01 06:40:01
    6Barton21902017-02-11 15:04:192018-01-01 06:40:01
    7Coulson23902017-01-03 23:00:222018-01-01 06:40:01
    8Coulson10202017-01-05 10:10:232018-01-01 06:40:01

    字段含義:

  • id:自增主鍵。又是一個聽起來很嚇人的名字,但實際含義很簡單。“自增”的意思是,每次在這張數據表中創建一條新記錄的時候,數據庫都會在上一個id值的基礎上自動加上一個固定的步長(默認就是+1)作為新記錄的id值。而所謂“主鍵”,就是能夠在一張數據表中唯一標識一條記錄的字段,因為每條記錄的id都不一樣,所以它是主鍵。這個字段可以是為了單純的標識數據的唯一性,也可以具有一些業務含義,比如這里的id就同時也是騎手的賬號id;
  • name: 騎手姓名;
  • real_name_certify_state: 實名認證狀態:1-認證中,2-認證通過,3-認證失敗;
  • level:騎手等級,3-金牌,2-銀牌,1-銅牌,0-普通;
  • level_city:等級城市;
  • is_deleted:這條數據是否有效,在大多數產線相關的數據表中,都會有這樣的標記字段。0-未刪除(表示有效), 1-已刪除(表示無效);
  • created_at:這條數據的創建時間,也是所有產線數據表中都必須有的字段;
  • updated_at:這條數據最新一次被更新的時間,同樣是所有產線數據表中都必須有的字段;
  • [2] 運單數據表:tb_order

    idorder_idorder_staterider_idrider_namegrabbed_timecreated_atupdated_at
    1300000201712300001401Stark2017-12-30 12:34:552017-12-30 12:34:172017-12-30 12:39:30
    2300000201712300002401Stark2017-12-30 12:34:562017-12-30 12:34:182017-12-30 12:44:27
    3300000201712300003402Banner2017-12-30 13:23:122017-12-30 13:20:022017-12-30 13:54:09
    4300000201712300004405Natasha2017-12-30 13:35:032017-12-30 13:34:192017-12-30 14:03:17
    5300000201712300005401Stark2017-12-30 16:01:222017-12-30 16:01:032017-12-30 16:08:21
    6300000201712300006403Rogers2017-12-30 16:10:452017-12-30 16:08:572017-12-30 16:34:27
    7300000201712310001206Barton2017-12-31 09:12:572017-12-31 09:12:072017-12-31 09:20:35
    8300000201712310002807Coulson2017-12-31 09:15:012017-12-31 09:10:332017-12-31 09:20:17
    9300000201712310003802Banner2017-12-31 09:20:172017-12-31 09:18:102017-12-31 09:22:24
    10300000201712310004203Rogers2017-12-31 10:37:332017-12-31 10:34:012017-12-31 10:38:09
    113000002017123100051001970-01-01 00:00:002017-12-31 19:29:022017-12-31 19:29:02
    123000002017123100061001970-01-01 00:00:002017-12-31 19:29:272017-12-31 19:29:27
    133000002017123100071001970-01-01 00:00:002017-12-31 19:30:012017-12-31 19:30:01

    字段含義:

  • id:自增主鍵。吶,這里的id就是單純的主鍵作用,沒有其他的業務含義;
  • order_id:運單號,業務層面上運單的唯一標識;
  • order_state:運單當前的狀態。10-待搶單,20-待到店,80-待取餐,40-已送達;
  • rider_id:搶單的騎手id,還未被搶的運單這個字段是默認值0;
  • rider_name:搶單的騎手姓名,還未被搶的運單這個字段是默認值空字符;
  • grabbed_time:搶單時間,還未被搶的運單這個字段是默認的"1970-01-01 00:00:00"(這是一個特殊的時間,有興趣的話可以搜索關鍵詞:時間戳);
  • created_at:這條數據的創建時間,也是所有產線數據表中都必須有的字段;
  • updated_at:這條數據最新一次被更新的時間,同樣是所有產線數據表中都必須有的字段;
  • 小溫習

    試著理解看看下面這幾條Sql的含義以及返回的數據結果吧?

    1. SELECT name, real_name_certify_state FROM tb_rider WHERE level = 3; 2. SELECT * FROM tb_order WHERE rider_id = 1; 3. SELECT rider_id, rider_name, order_id, grabbed_time FROM tb_orderWHERE order_state = 40; 復制代碼

    2.1 IN 操作

    場景: 線下反饋了一批騎手說自己理應是上海的金牌,但是牌級是普通或者展示的是金牌卻沒有享受到上海的金牌活動,你已經知道了這幾個分別是id=(2, 4, 7)的騎手,想排查一下他們的等級更新情況。

    這時你可以選擇像這樣一條一條的查詢,像之前我們介紹的那樣:

    1. SELECT name, real_name_certify_state, level, level_city FROM tb_rider WHERE id=2; 2. SELECT name, real_name_certify_state, level, level_city FROM tb_rider WHERE id=4; 3. SELECT name, real_name_certify_state, level, level_city FROM tb_rider WHERE id=7; 復制代碼

    這樣當然可以達到目的,但是只有兩三個騎手的時候還勉強可以操作,如果有幾十個騎手這樣查起來就太費勁了。這時候我們可以使用IN這個語法。

    SELECT name, real_name_certify_state, level, level_city FROM tb_rider WHERE id IN(2, 4, 7); 復制代碼

    很簡單的對吧?但我們還是來簡單理解一下,WHERE id IN(2, 4, 7)的意思就是篩選id字段的值在2,4,7這幾個值當中的記錄,執行這條Sql語句你就會得到下面這樣的結果。

    namereal_name_certify_statelevellevel_city
    Banner239
    Thor101
    Coulson239

    于是你會發現,Thor這個騎手因為他沒有通過實名認證所以肯定評不上金牌,Banner和Coulson兩位騎手雖然都是金牌騎手,但是等級城市卻是福州,所以享受不到上海金牌的活動。

    那如果不知道騎手id,只知道騎手的名字怎么辦?也可以使用IN查詢,只是這時候篩選的條件變成了name,取值范圍也變成了"Banner", "Thor", "Coulson"。就像這樣。

    SELECT name, real_name_certify_state, level, level_city FROM tb_rider WHERE name IN("Banner", "Thor", "Coulson"); 復制代碼

    于是你順利的得到了以下的結果。

    namereal_name_certify_statelevellevel_city
    Banner239
    Thor101
    Coulson239
    Coulson102

    Oops! 居然有兩個Coulson!

    這就是在實際應用中要特別注意的地方了:

    當你使用類似騎手id這種被設計為唯一值的字段作為查詢依據時,返回的結果也是唯一的,而當你使用類似騎手姓名這類字段作為查詢依據時,就有可能出現上面這種情況。這時候你就需要依賴更多的信息來判斷,哪一條才是你真正想要的。所以能夠用明確的字段作為查詢依據時就要盡可能的使用。

    2.2 關系運算符:AND 和 OR

    最常用的關系運算符有兩個AND和OR,用來連接多個篩選條件。顧名思義,AND就是**“并且”的意思,也就是同時滿足AND前后兩個篩選條件;OR就是“或者”**的意思,也就是滿足OR前后任何一個篩選條件。有點抽象了對不對,我們看一個具體的例子。

    場景: 假設你想要看看2017-02-01(包括2017-02-01當天)到2017-06-01(不包括2017-06-01當天)期間注冊的騎手所有信息。

    注冊時間對應到數據上就是騎手信息的創建時間(created_at),換句話說,就是查詢tb_rider``表中創建時間處于2017-02-01到2017-06-01之間的數據。那這樣的Sql應該怎么寫呢,這時我們就可以用到AND```。

    SELECT * FROM tb_rider WHERE created_at >= "2017-02-01 00:00:00" AND created_at < "2017-06-01 00:00:00"; 復制代碼

    B.T.W 注意因為包括2017-02-01當天,而不包括2017-06-01當天,所以前者是>=,而后者是<。

    讓我們再來推廣一下。假設現在的場景變成:想看一看2017-02-01(包括當天)之前,或者2017-06-01(包括當天)之后注冊的騎手所有信息。我們應該怎么寫這個Sql呢?既然是的關系,我們就應該使用OR了。

    SELECT * FROM tb_rider WHERE created_at <= "2017-02-01 00:00:00" OR created_at >= "2017-06-01 00:00:00"; 復制代碼

    B.T.W 注意這里既包括了2017-02-01當天,又包括了2017-06-01當天,所以前者是<=,后者是>=。

    當然啦,AND和OR這樣的關系運算符,不僅僅能夠連接前后兩個篩選條件,也可以通過使用若干個AND和OR連接多個不同的篩選條件。比如:想要看看2017-02-01(包括2017-02-01當天)到2017-06-01(不包括2017-06-01當天)期間注冊的且當前是金牌等級的騎手所有信息,那么我們可以這么寫。

    SELECT * FROM tb_rider WHERE created_at >= "2017-02-01 00:00:00" AND created_at < "2017-06-01 00:00:00" AND level = 3; 復制代碼

    2.3 排序:ORDER BY

    讓我們先小小的復習一下上面學到的知識點,有一個這樣的場景:

    我們打算看一下Stark這位騎手,在2017-12-30當天搶單且當前狀態為已完成的運單號和運單的創建時間。

    如何寫這個Sql呢?先思考3s...1...2...3,看看是否和你想的一樣。

    SELECT order_id, created_at FROM tb_order WHERE rider_id = 1 AND grabbed_time >= "2017-12-30 00:00:00" AND grabbed_time < "2017-12-31 00:00:00" AND order_state = 40; 復制代碼

    如果你沒有寫對,沒關系,讓我們來分析一下:

  • Stark這位騎手的騎手id是1,所以我們的第一個篩選條件為rider_id = 1;
  • 因為我們要看2017-12-30當天搶單的運單id,確定了我們的第二個篩選條件是搶單時間,對應的是grabbed_time這個字段,而2017-12-30當天,實際上指的就是2017-12-30 00:00:00(包括)到2017-12-31 00:00:00(不包括)這段時間;
  • 最后是已完成這個條件,order_state字段標識了運單狀態,因此我們的篩選條件是order_state = 40;
  • 執行這個語句,我們得到了下面這樣的結果。

    order_idcreated_at
    3000002017123000012017-12-30 12:34:17
    3000002017123000022017-12-30 12:34:18
    3000002017123000052017-12-30 16:01:03

    有點美中不足,我想按照運單的創建時間倒序排序把最近創建的運單排在最前面,這時候就可以使用ORDER BY語法了。

    SELECT order_id, created_at FROM tb_order WHERE rider_id = 1 AND grabbed_time >= "2017-12-30 00:00:00" AND grabbed_time < "2017-12-31 00:00:00" AND order_state = 40 ORDER BY created_at DESC; 復制代碼

    讓我們再來理解一下,DESC是**“遞減"**的意思,與之對應的是ASC遞增。ORDER BY created_at DESC的含義是,按照(BY)created_at字段值遞減(DESC)的順序對查詢結果排序(ORDER)。于是我們得到如下的結果。

    order_idcreated_at
    3000002017123000052017-12-30 16:01:03
    3000002017123000022017-12-30 12:34:18
    3000002017123000012017-12-30 12:34:17

    B.T.W 在現實場景中有時候查詢結果的集合會很大(例如幾百行、幾千行),但是我們只想看其中前10行的數據,這時候我們可以使用LIMIT語法。例如這里我們可以使用LIMIT語法僅僅展示前兩行查詢結果: SELECT order_id, created_at FROM tb_order WHERE rider_id = 1 AND grabbed_time >= "2017-12-30 00:00:00" AND grabbed_time < "2017-12-31 00:00:00" AND order_state = 40 ORDER BY created_at DESC LIMIT 2;

    我們再來看一個更加復雜的場景:假設想要查詢2017-12-30和2017-12-31兩天所有運單的所有信息,并先按照騎手id遞增,再按運單狀態遞減的順序排序展示。還是先思考一會兒。

    這時的Sql類似長這樣。

    SELECT * FROM tb_order WHERE created_at >= "2017-12-30 00:00:00" AND created_at < "2018-01-01 00:00:00" ORDER BY rider_id ASC, order_state DESC; 復制代碼

    如果前面的每個知識點都理解了,這里應該就只對**“先按照騎手id遞增,再按運單狀態遞減的順序排序展示”**有所疑惑。實際上我們不僅可以對一個字段排序,還可以把多個字段作為排序的依據,而且不同字段上的排序規則(遞增/遞減)可以不同。但排序是有優先級的,比如這里,只有當rider_id字段的值都相同無法區分順序時,才會對相同rider_id的這幾條數據再按照order_state字段的值進行排序。舉例來說,rider_id = 2且order_state = 80的數據,也依然不可能排在rider_id = 1且order_state = 40的數據前面。

    執行這條Sql語句,將得到的結果如下。

    idorder_idorder_staterider_idrider_namegrabbed_timecreated_atupdated_at
    113000002017123100051001970-01-01 00:00:002017-12-31 19:29:022017-12-31 19:29:02
    123000002017123100061001970-01-01 00:00:002017-12-31 19:29:272017-12-31 19:29:27
    133000002017123100071001970-01-01 00:00:002017-12-31 19:30:012017-12-31 19:30:01
    1300000201712300001401Stark2017-12-30 12:34:552017-12-30 12:34:172017-12-30 12:39:30
    2300000201712300002401Stark2017-12-30 12:34:562017-12-30 12:34:182017-12-30 12:44:27
    5300000201712300005401Stark2017-12-30 16:01:222017-12-30 16:01:032017-12-30 16:08:21
    9300000201712310003802Banner2017-12-31 09:20:172017-12-31 09:18:102017-12-31 09:22:24
    3300000201712300003402Banner2017-12-30 13:23:122017-12-30 13:20:022017-12-30 13:54:09
    6300000201712300006403Rogers2017-12-30 16:10:452017-12-30 16:08:572017-12-30 16:34:27
    10300000201712310004203Rogers2017-12-31 10:37:332017-12-31 10:34:012017-12-31 10:38:09
    4300000201712300004405Natasha2017-12-30 13:35:032017-12-30 13:34:192017-12-30 14:03:17
    7300000201712310001206Barton2017-12-31 09:12:572017-12-31 09:12:072017-12-31 09:20:35
    8300000201712310002807Coulson2017-12-31 09:15:012017-12-31 09:10:332017-12-31 09:20:17

    這個部分相對有一點難,可以多對比著例子理解一下。

    3 高級一點的話題

    進入到這個部分,說明之前的內容你基本都已經掌握了,在日常運營的操作中有30%左右的場景都可以使用前面講述的這些知識點解決(當然會有個熟能生巧的過程)。這個部分,我將繼續介紹幾個更加高級、當然也更加有難度的Sql技能,當你結束這一部分的學習并且熟練掌握這些技能的時候,你會發現絕大部分需要通過查數據來確認的場景你都可以勝任。因為這個章節的內容本身難度又大了些,如果再對著一張復雜的表就更加難以關注重點,因此我們精簡一下表結構,只保留一些必要的字段。新的tb_order表如下。

    idorder_idorder_staterider_idrider_namemerchant_customer_distancecreated_at
    1300000201712300001401Stark2.52017-12-30 12:34:17
    2300000201712300002401Stark1.82017-12-30 12:34:18
    3300000201712300003402Banner1.82017-12-30 13:20:02
    4300000201712300004405Natasha2.72017-12-30 13:34:19
    5300000201712300005401Stark1.22017-12-30 16:01:03
    6300000201712300006403Rogers0.52017-12-30 16:08:57
    7300000201712310001206Barton1.32017-12-31 09:12:07
    8300000201712310002807Coulson2.92017-12-31 09:10:33
    9300000201712310003802Banner0.72017-12-31 09:18:10
    10300000201712310004203Rogers2.22017-12-31 10:34:01
    113000002017123100051000.32017-12-31 19:29:02
    123000002017123100061001.32017-12-31 19:29:27
    133000002017123100071003.02017-12-31 19:30:01

    新增的列: merchant_customer_distance:配送距離(商家到用戶的直線距離),單位是千米(km)。

    3.1 聚合函數:COUNT,SUM, AVG

    千萬別被聚合函數這個名字嚇唬到,可以簡單的理解為對數據進行一些加工處理,讓我們先來分別看一下這幾個聚合函數的基本定義。

  • COUNT:對查詢結果集合中特定的列進行計數;
  • SUM:對查詢結果的某個字段進行求和;
  • AVG:就是average的意思,對查詢結果的某個字段計算平均值;
  • 讓我們分別來看幾個具體的例子。

    [1] 場景:查詢2017-12-30這一天,騎手Stark的所有完成單(狀態為40)總量

    你可以這樣來寫這個Sql。

    SELECT COUNT(id) FROM tb_order WHERE rider_id = 1 AND order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00"; 復制代碼

    到這里你應該已經能夠很好的理解WHERE...AND...AND...這部分的含義,我們就不再過多的討論這個部分(對自己要有信心!試著理解先自己理解一下)。

    讓我們重點來看一下COUNT(id)這部分的含義。其實很簡單,就是對id這一列進行計數。連起來看這段Sql,意思就是:從tb_order這張表中(FROM tb_order)篩選(WHERE)騎手id為1(rider_id = 1)且運單狀態為已完成(order_state = 40)且創建時間大于等于2017年12月30日(created_at >= "2017-12-30 00:00:00)且創建時間小于2017年12月31日(created_at < "2017-12-31 00:00:00)的數據,并且按照id這列對返回的結果集合進行計數。

    我們看到tb_order這張表中,2017-12-30當天由騎手Stark配送且狀態是已完成的運單分別是300000201712300001、300000201712300002、300000201712300005這幾個運單號的運單,對應的自增id分別是id=[1, 2, 5],所以對id這一列進行計數得到的結果是3。所以我們得到的查詢結果如下表。

    COUNT(id)
    3

    有時候你僅僅是想查一下滿足某個條件的記錄的總行數,而并非想對某個特定的列進行計數,這時就可以使用COUNT(*)語法。比如上面的這個Sql也可以寫成下面這個樣子。

    SELECT COUNT(*) FROM tb_order WHERE rider_id = 1 AND order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00"; 復制代碼

    因為返回的結果有三行,所以我們會得到下表的結果。

    COUNT(*)
    3

    看起來COUNT(列)和COUNT(*)是完全等價的?有些特定的場景下的確如此,這里需要補充一下COUNT的兩個小脾氣。

  • COUNT不會自動去重;
  • COUNT在某一條查詢結果中,用來計數的那一列的值為**“空"**時,這條記錄不進行計數;
  • B.T.W 注意這里的“空”指的是<null>,而不是某一列沒有展示出任何值就是空,這是一個相對技術的概念,當前不理解可以先跳過

    有一點暈是嗎?不著急,我們來看兩個例子。假設有兩張表,很簡單的表,長下面這樣。

    示例表1:tb_sample_1

    idname
    1Stark
    2Stark
    3Coulson
    4Natasha
    5Stark

    示例表2:tb_sample_2

    idname
    1Stark
    2Stark
    3<null>
    4<null>
    5Natasha
    6Coulson

    我們下猜一猜下面幾條Sql的執行結果分別是什么?

    1. SELECT COUNT(id) FROM tb_sample_1; 2. SELECT COUNT(*) FROM tb_sample_1; 3. SELECT COUNT(name) FROM tb_sample_1; 4. SELECT COUNT(name) FROM tb_sample_2; 復制代碼

    B.T.W 當SELECT...FROM...WHERE...語句中的WHERE...部分被省略時,表示查詢表中的所有數據(不對數據進行篩選)。

    讓我們逐一分析一下。

    1. SELECT COUNT(id) FROM tb_sample_1; 復制代碼

    這條Sql沒有太多可以分析的,因為tb_sample_1表中id字段的取值范圍是id=[1, 2, 3, 4, 5],共5個,所以我們得到的結果如下。

    COUNT(id)
    5
    2. SELECT COUNT(*) FROM tb_sample_1; 復制代碼

    這條Sql也沒有太多需要分析的,因為COUNT(*)的含義是計算查詢結果的總行數,tb_sample_1共5行數據,所以我們得到的結果如下。

    COUNT(*)
    5
    3. SELECT COUNT(name) FROM tb_sample_1; 復制代碼

    這條Sql里面我們對name這一列進行計數,tb_sample_1表中包含3個Stark,1個Coulson和1個Natasha,因為COUNT不進行自動去重,因此結果是5=3(Stark)+1(Coulson)+1(Natasha),如下表。

    COUNT(name)
    5
    4. SELECT COUNT(name) FROM tb_sample_2; 復制代碼

    這條Sql語句我們還是對name這一列進行計數,tb_sample_2表中包含2個Stark,1個Coulson,1個Natasha以及2個<null>,由于COUNT不去重因此2個Stark都會被計數,但COUNT不會對值為**“空”**的結果進行計數,因此兩個<null>都會被忽略。所以最終的結果為4=2(Stark)+1(Coulson)+1(Natasha),如下表。

    COUNT(name)
    4

    [2] 場景:查詢Stark這名騎手的累計配送里程

    讓我們先定義一下累計配送里程:騎手所有配送完成單的配送距離(商家到用戶的直線距離)之和。

    這里的關鍵詞是求和,所以我們要用到SUM這個聚合函數。對字段求和的意思是把返回的結果集合中該字段的值累加起來。讓我們看下這個場景的Sql怎么寫。

    SELECT SUM(merchant_customer_distance) FROM tb_order WHERE rider_id = 1 AND order_state = 40; 復制代碼

    讓我們來分析一下這條語句,FROM tb_order WHERE rider_id = 1 AND order_state = 40已經比較好理解了,就是從tb_order表中篩選出騎手id為1且配送狀態為40的記錄。而這里的SUM(merchant_customer_distance)的含義,就是對前面的條件篩選出的數據結果中的merchant_customer_distance列的值進行求和。根據騎手id和配送狀態篩選出的記錄分別為id=(1, 2, 5),對應的merchant_customer_distance的值分別為merchant_customer_distance=(2.5, 1.8, 1.2),求和結果為5.5=2.5+1.8+1.2,如下表。

    SUM(merchant_customer_distance)
    5.5

    [3] 場景:查詢Stark這名騎手的平均配送里程

    同樣的,讓我們先來定義一下平均配送里程:騎手所有完成單的配送距離(商家到用戶的直線距離)之和除以總的完成單量。

    基于SUM的經驗和前面的“預告”,不難想到這次我們會用到AVG這個聚合函數。對字段求平均值的意思是,把結果集合中該字段的值累加起來再除以結果總行數。AVG幫我們自動完成了“做除法”的動作,所以Sql的長相和上一個場景的SUM是如出一轍的。

    SELECT AVG(merchant_customer_distance) FROM tb_order WHERE rider_id = 1 AND order_state = 40; 復制代碼

    根據騎手id和配送狀態篩選出的記錄分別為id=(1, 2, 5),對應的merchant_customer_distance的值分別為merchant_customer_distance=(2.5, 1.8, 1.2),求平均值的結果為1.83=(2.5+1.8+1.2) / 3,如下表。

    AVG(merchant_customer_distance)
    1.83

    寫在3.1節的最后:

    對著這幾個場景學習下來,不知道你感覺怎么樣吖?是否覺得這幾個聚合函數本身還蠻簡單的,或者也有可能會覺得一下子灌輸了很多知識點有點費勁呢?其實聚合函數有它復雜的一面,我們上面看的這些Case都是比較簡單的使用方式。但是千萬不要擔心,一方面是因為運營工作中遇到的絕大多數場景都不會比這些示例Case更復雜,另一方面是不鼓勵過于復雜的使用這些聚合函數,因為查詢的邏輯越是復雜就越是難以“預測”查詢的結果,Sql并不是一個適合表達“邏輯”的語言,如果對數據的再加工邏輯很多,就應該考慮像分析師提需求或者學習更加利于表達邏輯的其他編程語言。

    其次要說的就是多給自己些信心,同時也要多一點耐心。Sql雖然不同于Python、Java這樣的通用編成語言,除了語法還雜糅著一套體系化的編程概念、設計哲學,但是初次上手的時候還是會感覺到有些吃力的。但是只要多去理解幾遍示例、多自己寫一寫,特別是在之后遇到實際工作中真實場景的時候自己思考如何轉化為Sql、多實踐、多回顧分析,很快就會在潛移默化中掌握它,要相信熟能生巧。

    接下來的3.2、3.3節,我會繼續介紹兩個實用的Sql語法,以及如何將它們和聚合函數結合使用,會更有難度一些。

    3.2 對查詢結果去重:DISTINCT 語法

    DISTINCT語法顧名思義就是對某一列的值進行去重,讓我們首先來回顧一下3.1節中COUNT的其中一個例子。

    這個例子使用的是tb_sample_1這張表,這張表很簡單,讓我再把它貼出來。

    idname
    1Stark
    2Stark
    3Coulson
    4Natasha
    5Stark

    對應的,我們想要回顧的這條Sql語句也很簡單。

    SELECT COUNT(name) FROM tb_sample_1; 復制代碼

    前面我們已經分析過這條Sql:對name這列進行計數,有3個Stark,1個Coulson,1個Natasha,所以得到最終的結果如下表。

    COUNT(name)
    5

    可是有的時候,我們不想對相同的名字進行重復計數,當有多個相同的名字時只計數一次。這時候就可以使用到DISTINCT語法。

    SELECT COUNT(DISTINCT name) FROM tb_sample_1; 復制代碼

    對比上一條Sql只是增加了一個DISTINCT關鍵字,其實理解起來呢也不用把它想的太復雜啦:COUNT(DISTINCT name)就是對去重后的name進行計數。tb_sample_1中有3個Stark,但是3個Stark是重復的,使用DISTINCT語法后只會被計算一次,另外還有1個Coulson和一個Natasha,所以得到的結果如下表。

    COUNT(DISTINCT name)
    3

    DISTINCT語法可以單獨使用,這時就是它本身的意思,對某列的值進行去重。但是相比之下,更常見的是像上面的例子一樣和COUNT這個聚合函數一起使用,這樣就可以對去重后的結果進行計數。

    3.3 將查詢數據分組:GROUP BY 語法

    前面我們基于tb_order這張表講解了很多Sql的語法知識,讓我們再來回憶一下這張表的容顏。

    idorder_idorder_staterider_idrider_namemerchant_customer_distancecreated_at
    1300000201712300001401Stark2.52017-12-30 12:34:17
    2300000201712300002401Stark1.82017-12-30 12:34:18
    3300000201712300003402Banner1.82017-12-30 13:20:02
    4300000201712300004405Natasha2.72017-12-30 13:34:19
    5300000201712300005401Stark1.22017-12-30 16:01:03
    6300000201712300006403Rogers0.52017-12-30 16:08:57
    7300000201712310001206Barton1.32017-12-31 09:12:07
    8300000201712310002807Coulson2.92017-12-31 09:10:33
    9300000201712310003802Banner0.72017-12-31 09:18:10
    10300000201712310004203Rogers2.22017-12-31 10:34:01
    113000002017123100051000.32017-12-31 19:29:02
    123000002017123100061001.32017-12-31 19:29:27
    133000002017123100071003.02017-12-31 19:30:01

    溫故而知新!先來出幾道題目復習一下前面所學的Sql知識。

    復習題1: 試著寫出以下幾個場景對應的Sql語句

  • 查詢2017-12-30當天創建的運單,狀態為已完成且配送距離大于等于2公里的總單量;
  • 查詢2017-12-30當天創建且狀態為已完成的所有運單的平均配送距離;
  • 查詢2017-12-30當天完成過配送任務(至少配送完成1單)的騎手總人數;
  • 復習題2: 試著理解以下幾條Sql的含義并且寫出查詢的結果

    1. SELECT COUNT(order_id) FROM tb_order WHERE order_state = 40AND merchant_customer_distance >= 2.0 AND created_at >= "2017-12-30 00:00:00"AND created_at < "2017-12-31 00:00:00"; 2. SELECT AVG(merchant_customer_distance) FROM tb_order WHERE order_state = 40AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00"; 3. SELECT COUNT(DISTINCT rider_id) FROM tb_order WHERE order_state = 40AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00"; 復制代碼

    聰明的你是否發現復習題2就是復習題1的答案呢?如果還沒有發現,沒關系,再回過頭來多分析幾遍,Practice Makes Perfect 絕對是真理。不過復習這幾個例子可不僅僅是為了復習哦,讓我們在1、2兩個場景的基礎下擴展一下,講解新的知識點。思考下面這兩個場景。

  • 查詢2017-12-30當天每個參與跑單的騎手各自的完成單總量;
  • 查詢2017-12-30當天每個參與跑單騎手的完成單平均配送距離;
  • 首先分析一下這里的場景1。“2017-12-30當天”這個條件不難轉化為created_at >= '2017-12-30 00:00:00' AND created_at < '2017-12-31 00:00:00',“完成單”不難轉化為order_state = 40,由于要計算運單的“總量”我們也不難想到可以對order_id進行COUNT操作。那么如何分組到每個騎手身上呢?這時候就要用到GROUP BY了。

    SELECT COUNT(order_id) FROM tb_order WHERE order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00" GROUP BY rider_id; 復制代碼

    注意這里執行順序是先按照WHERE條件進行篩選,然后根據騎手id進行分組(GROUP BY),最后再對每個分組按照運單號進行計數。因此我們可以得到下表的結果。

    COUNT(order_id)
    3
    1
    1
    1

    好像有哪里不對?結果中看不到對應的騎手吖!不著急,我們稍微修改下剛才的Sql,將騎手id、騎手姓名這2列展示出來就可以了。

    SELECT rider_id, rider_name, COUNT(order_id) FROM tb_order WHERE order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00" GROUP BY rider_id; 復制代碼

    我們得到如下表的結果。

    rider_idrider_nameCOUNT(order_id)
    1Stark3
    2Banner1
    5Natasha1
    3Rogers1

    這樣是不是就清晰多了。

    再來分析場景2。有了前面的例子,“2017-12-30當天”、“完成單”這兩個條件應該是已經得心應手、信手拈來了,“平均配送距離”問題也不大,可以轉化為AVG(merchant_customer_distance)。那么如何分組到每個騎手身上呢?還是通過GROUP BY語法。我們的Sql長成下面這個樣子。

    SELECT rider_id, rider_name, AVG(merchant_customer_distance) FROM tb_order WHERE order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00" GROUP BY rider_id; 復制代碼

    得到如下表的結果。

    rider_idrider_nameAVG(merchant_customer_distance)
    1Stark1.83
    2Banner1.8
    5Natasha2.7
    3Rogers0.5

    還是需要特別提一下這里的執行順序,首先執行的是WHERE條件篩選,然后對篩選出的數據結果根據騎手id進行分組,最后再對每個分組中的數據進行merchant_customer_distance列的求平均值。

    3.4 聚合函數的好搭檔:HAVING 語法

    HAVING語法的含義類似于WHERE,當我們使用HAVING的時候一般遵循HAVING 篩選條件的語法結構。你可能會問啦,既然和WHERE語法含義差不多、使用方式又很類似,那干嘛還要憑空多個HAVING語法出來呢?原因就在于聚合函數。WHERE語法是不能和聚合函數一起使用的,但有些時候我們卻需要依賴聚合函數的計算結果作為篩選條件。讓我們看一下3.3節中場景2這個例子。

    場景2:查詢2017-12-30當天每個參與跑單騎手的完成單平均配送距離。

    通過前面我們的分析,得到這樣的Sql。

    SELECT rider_id, rider_name, AVG(merchant_customer_distance) FROM tb_order WHERE order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00" GROUP BY rider_id; 復制代碼

    我們在場景2的基礎上再擴展一下。

    擴展的場景2:查詢2017-12-30當天每個參與跑單騎手的完成單平均配送距離,并篩選出其中平均配送距離超過1.5km的數據。

    我們得到這樣的Sql結果。

    SELECT rider_id, rider_name, AVG(merchant_customer_distance) FROM tb_order WHERE order_state = 40 AND created_at >= "2017-12-30 00:00:00" AND created_at < "2017-12-31 00:00:00" GROUP BY rider_id HAVING AVG(merchant_customer_distance) > 1.5; 復制代碼

    比較一下不難發現,變化僅僅是末尾多了HAVING AVG(merchant_customer_distance) > 1.5這條子句。讓我們分析看看。SELECT ... FROM ... WHERE ...和之前的用法并沒有變化,GROUP BY rider_id將SELECT的結果根據rider_id進行分組,分組完成后HAVING AVG(merchant_customer_distance) > 1.5語句對每一組的merchant_customer_distance字段值求取平均數,并且將平均數大于1.5的結果篩選出來,作為返回結果。

    執行這條Sql我們得到結果。

    rider_idrider_nameAVG(merchant_customer_distance)
    1Stark1.83
    2Banner1.8
    5Natasha2.7

    Rogers這位騎手(騎手id=3)因為平均配送距離為0.5,不滿足HAVING語句指定的“平均配送距離大于1.5km”的篩選條件,所以沒有在我們的查詢結果中。

    4 有點超綱的話題

    4.1 字段類型

    類型這個詞此刻你聽起來可能還是很陌生的,但其實在計算機科學領域,類型是一個非常基礎而且廣泛存在的概念,幾乎每一種編程語言都有自己的類型系統。

    B.T.W 在二進制中每一個0或者1被稱作一個比特位,所以32位是指一段二進制數據中0和1的個數加在一起共有32個,例如00000000000000000000000000000001表示一個32位二進制數,0000000000000001表示一個16位二進制數。

    [1] 為什么要定義類型的概念?

    關于為什么要有類型這個概念,我吶有一個“不成熟”的理解:編程語言作為人和機器交互的一種工具,人類對數據有人類邏輯上的理解,當我們看到2903的時候我們會認為這是個整數,當我們看到1031.2903的時候我們會認為這是個小數。而機器在處理數據或者存取數據的時候,是無差別的按照比特位進行二進制運算或者讀寫的。人類很難做到直接用二進制輸入計算機,當然也不能接受計算機直接以二進制的形式輸出結果。設想一下,如果某天咱們想用一下電腦上的計算器,計算個1+1=2,但是我們沒有類型,我們需要理解機器是如何處理二進制的,那么就可能需要輸入00000000000000000000000000000001 + 00000000000000000000000000000001,而得到的結果也是二進制00000000000000000000000000000010,這得多累人吶。有了類型就輕松多了,通過定義數據的類型,根據類型的約定,計算機就知道如何將這個1轉化為二進制(包括:應該轉化為16位、32位還是64位的二進制,對這段二進制數據進行操作的時候,應該把它看作整數還是浮點數等等),而返回結果的時候也就知道如何將二進制的00000000000000000000000000000010轉化為我們能夠理解的整數2

    編程語言的類型其實就是人與機器約定好的,去理解和操作數據的一套規則

    總而言之,在機器的眼里,無論是對數據進行何種操作,它看到的都是一串一串由0和1構成的東西,稱呼這種東西有專門的術語,叫作**“字節流”或者“二進制流“**。

    讓我們再一起看一個例子。假設要處理這樣的一段二進制流:00000000100111011000001111010111,這段二進制流可以表示很多東西,要明確它的含義,就需要明確它的類型,比如下面這兩種不同的類型,這段流表示的內容就完全不同。

  • 如果我們把這段二進制流看作是32位整型,那么它代表的是10322903這個整數;
  • 如果我們把這段二進制流看作是2個16位整型(前16位0000000010011101表示一個整型,后16位1000001111010111表示一個整型),那么它分別代表的是157和33751這兩個整數;
  • 我知道你此刻對為何轉換為32位整型是10322903?為何看作2個16位整型轉換后是157和33751?還有著很多疑惑。但是關于二進制和十進制的轉換方法呢,在這里就不做展開了,如果你很感興趣、很想知道可以再單獨給你講這個方法。講上面的這些,最主要的還是希望你明白,定義“類型”的概念,根本上是在人機交互的過程中提供了一種機制,賦予無差別的二進制流一定的語義

    還是太抽象了對不對?沒關系,我們再來舉個栗子。

    前面我們在預備知識這一章中使用到了tb_stu_math_score這張表,為了不讓你辛苦的再翻回去,我們再貼一下這張表的內容啦。

    id(自增主鍵)name(學生姓名)number(學號)grade(年級)class(班級)score(得分)
    1柯南01020112100
    2小哀01020212100
    3光彥0102031298
    4步美0102041295
    5元太0102051259

    也寫過類似下面這條Sql語句。

    SELECT score FROM tb_stu_math_score WHERE id=1; 復制代碼

    這條Sql語句非常非常的簡單,現在我們已經知道它會返回第一行數據score這一列的值,結果長下面這樣。

    score
    100

    讓我們分析一下獲取這個結果的整個流程,幫助你理解一下,類型是如何發揮作用的。

  • 這條Sql語句會被執行,根據主鍵id找到對應的行,進而獲取到這一行、score這列的值;
  • 但是我們上面說到,計算機的存儲是基于二進制的,所以獲取到的score值是類似于00000000000000000000000001100100這樣的二進制流;
  • 這時候根據tb_stu_math_score表的定義,score這一列被定義為整型,于是將二進制流轉化為一個整型數,經過進制轉換得到00000000000000000000000001100100對應的整型值為100,于是我們看到的結果就是100。
  • 實際上反過來也非常類似,當我們向這張表中寫入數據時,例如寫入的score列的值為100。因為存儲基于二進制,根據表的定義,score列的類型為整型,于是將值100按照整型轉換為對應的二進制流00000000000000000000000001100100,并且寫入到庫中。

    [2] Sql的主要數據類型有哪些?

    Sql中常常接觸的數據類型主要包括幾類。

    1 整型

  • tinyint:用來表示很小很小的整數,比如常常用它作為is_deleted、is_valid這些字段的字段類型,因為這兩個字段表示該條記錄是否有效,只存在兩個值分別是0和1;
  • smallint:比tinyint稍微大一點點的整型,可以表示更大一點的整數,比如200、404、401這樣的整數值;
  • int:常用的整型,可以用來表示比較大的整數,比如10322(事實上int可以表示的整數范圍遠遠比這個大);
  • bigint:用來表示非常大的整數,比如大多數表的自增id就會使用這個類型,可以表示類似10322903這樣非常大的整數(事實上bigint可以表示的整數范圍遠遠比這個要大);
  • 2 浮點型

  • decimal:可以表示非常準確的小數,比如經緯度;
  • 3 字符串類型

  • char:固定長度的字符串;
  • varchar:可變長度的字符串;
  • 這里固定長度和可變長度指的是數據庫中的存儲形式,因為這部分的內容其實有些超出了這個教程的范圍,我們不過多的解釋這里的區別。一般在我們實際的應用中varchar用的更多一些。它們都表示類似于"very glad to meet u, Huohuo!"這樣的一串字符,當然也可以是中文"敲開心認識你,火火!"。

    4 日期類型

  • date:表示一個日期,只包含日期部分,不包含時間,比如當前日期"2018-01-23";
  • datetime:表示一個日期,同時包含日期部分和時間部分,比如當前日期"2018-01-23 03:01:43";
  • 我們在這里只是簡單的介紹了幾種Sql中常見的字段類型,并沒有很深入的去解釋它們的原理、差異以及一些其他的數據類型,咱們不著急去學習那些“高大上”的內容,先理解這些類型的含義。

    [3] 怎么知道一張表中每一列的類型是什么?

    第1種方式是使用DESC 表名命令,例如我們想看一下之前提到的tb_rider表的每一列字段類型,就可以執行命令DESC tb_rider,得到下面的結果。

    FieldTypeNullKeyDefaultExtra
    idint(11)NOPRI<null>auto_increment
    namevarchar(32)NO
    real_name_certify_stateint(11)NO0
    is_deletedtinyint(4)NO0
    created_atdatetimeNOMULCURRENT_TIMESTAMP
    updated_atdatetimeNOMULCURRENT_TIMESTAMPon update CURRENT_TIMESTAMP
    leveltinyint(4)NO0
    level_cityvarchar(32)NO

    注意這里的第一列表示字段名稱,第二列Type則表示對應字段的字段類型。比如id字段,是一個int類型。

    第二種方式是使用SHOW CREATE TABLE 表名命令,例如SHOW CREATE TABLE tb_rider,得到下面的結果。

    CREATE TABLE `tb_rider` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` varchar(32) NOT NULL DEFAULT '' COMMENT '姓名',`real_name_certify_state` int(11) NOT NULL DEFAULT '0' COMMENT '身份證認證狀態',`is_deleted` tinyint(4) NOT NULL DEFAULT '0' COMMENT '該用戶是否還存在. 0: 不存在, 1: 存在',`created_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創建時間',`updated_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新時間',`level` tinyint(4) NOT NULL DEFAULT '0' COMMENT '騎手等級:0普通 1銅牌 2銀牌 3金牌',`level_city` varchar(32) NOT NULL DEFAULT '' COMMENT '配送員等級城市',PRIMARY KEY (`id`),KEY `ix_created_at` (`created_at`),KEY `ix_updated_at` (`updated_at`) ) ENGINE=InnoDB AUTO_INCREMENT=9 DEFAULT CHARSET=utf8 COMMENT='配送員信息'; 復制代碼

    我們以

    `name` varchar(32) NOT NULL DEFAULT '' COMMENT '姓名' 復制代碼

    來解釋一下這里的語句。

  • name是字段名(列名);
  • varchar表示字段類型為字符串;
  • NOT NULL表示這個字段不能為空, 為空的意思是沒有指定任何值給這個字段(注意不等價于空字符串);
  • ```DEFAULT ''`表示如果沒有指定這個字段的值則使用空字符串作為默認值;
  • COMMENT '姓名'是對這個字段的備注,表示這個字段的業務含義,只用做展示;
  • 4.2 索引

    索引絕對算得上是關系型數據庫中最關鍵同時也是最有難度的話題。即便是經驗豐富的研發同學,也經常會踩到索引的坑。不過我們這里介紹索引,只是為了更好的服務于查詢,我會盡可能避免牽扯進一些復雜的概念和底層原理。

    [1] 什么是索引?

    那么到底什么是索引呢?你可以把數據庫理解為一本很厚的書(假設有10萬頁),書中的內容就是數據庫里的數據,那么索引就是書的目錄。 假設你從來沒有閱讀過這本書,此刻你想要閱讀書的第7章第2小節。如果沒有目錄,你可能需要翻閱整本書找到你要閱讀的內容。但是在有目錄的情況下,你就只需要先查一下目錄找到對應的頁碼,然后直接翻到那一頁就能看到你想看的內容了。索引也是類似的,首先查詢索引找到目標數據的位置,再從特定的位置讀取出數據的內容。

    如何設計索引,是設計數據庫表的時候考慮的關鍵點之一。索引一般由表中的某一列或者某幾列構成,一旦設置某一列為索引,那么之后每次在往表中寫入數據的時候,都會更新這一列到索引中去。事實上,索引在技術層面是比較復雜的,涉及到磁盤I/O、B樹、優化器(Optimizer)等很多技術概念,不過我們先不去深究這些。

    [2] 為什么索引很重要,它有什么用?

    索引之所以重要,最主要的原因是能夠大大提高查詢的速度。上面我們舉了書的例子,當這本書的頁數足夠大的時候(假設有2000萬頁),如果沒有目錄,想要查閱其中的某一章節的內容,那幾乎就是天方夜譚了。數據庫也是如此,當表中的數據只有幾行或者幾十行、幾百行的時候,有沒有索引其實差別不大,但是當表中的數據非常非常多的時候(比如眾包的運單表,2000萬+ 行),如果沒有索引,要找到某一條目標數據,查詢的速度就會非常非常非常的慢。

    [3] 如何使用索引?

    要使用索引非常簡單,只需要在WHERE條件中使用到索引列作為查詢條件,讓我們舉個例子。

    idorder_idorder_staterider_idrider_namemerchant_customer_distancecreated_at
    1300000201712300001401Stark2.52017-12-30 12:34:17
    2300000201712300002401Stark1.82017-12-30 12:34:18
    3300000201712300003402Banner1.82017-12-30 13:20:02
    4300000201712300004405Natasha2.72017-12-30 13:34:19
    5300000201712300005401Stark1.22017-12-30 16:01:03
    6300000201712300006403Rogers0.52017-12-30 16:08:57
    7300000201712310001206Barton1.32017-12-31 09:12:07
    8300000201712310002807Coulson2.92017-12-31 09:10:33
    9300000201712310003802Banner0.72017-12-31 09:18:10
    10300000201712310004203Rogers2.22017-12-31 10:34:01
    113000002017123100051000.32017-12-31 19:29:02
    123000002017123100061001.32017-12-31 19:29:27
    133000002017123100071003.02017-12-31 19:30:01

    還是這張tb_order表,假設這張數據表中order_id是索引列,那么當我們以order_id作為查詢條件時,我們就利用了索引,比如下面這條Sql。

    SELECT * FROM tb_order WHERE order_id = 300000201712310007; 復制代碼

    當然啦,類似的使用order_id作為查詢條件的Sql也都會利用到索引,看看你是否都理解下面兩條Sql語句的含義。

    1. SELECT * FROM tb_orderWHERE order_id IN (300000201712310007, 300000201712310006)AND order_state = 40; 2. SELECT order_id, order_state FROM tb_orderWHERE order_id >= 300000201712300001AND order_id <= 300000201712300006AND order_state = 40; 復制代碼

    那么如果一張表里面不止一列是索引,而在查詢的Sql中這些索引列都作為了WHERE語句的查詢條件,會使用哪個列作為索引還是都使用?假設tb_order表中order_id和rider_id兩列都是索引列,那么下面這條Sql語句會使用哪個作為索引呢?

    SELECT * FROM tb_order WHERE order_id >= 300000201712310001 AND order_id <= 300000201712310007 AND rider_id > 0; 復制代碼

    答案是不確定的。使用哪個索引,甚至是否使用索引,從根本上來說是由優化器(Optimizer)決定的,它會分析多個索引的優劣,以及使用索引和不使用索引的優劣,然后選擇最優的方式執行查詢。這部分話題就太過復雜了,這里不做展開。盡管有優化器(Optimizer)的存在,但是對于我們的查詢來說,能夠使用明確的索引字段作為查詢條件的,就應該盡可能使用索引字段。

    [4] 索引的類型、如何確定表中的哪些列是索引列?

    還記得字段類型一節中提到的DESC 表名和SHOW CREATE TABLE 表名語法嗎?前面我們將這兩個語法用在了tb_rider表上,這一節讓我們看一看tb_order表。

    首先是DESC tb_order,我們會得到下面的結果。

    FieldTypeNullKeyDefaultExtra
    idbigint(20)NOPRI<null>auto_increment
    order_idbigint(20)NOUNI0
    rider_idint(11)NO0
    rider_namevarchar(100)NO
    order_statetinyint(4)NO0
    is_deletedtinyint(4)NO0
    grabbed_timetimestampNOCURRENT_TIMESTAMP
    merchant_customer_distancedecimal(10,2)NO0.00
    created_atdatetimeNOMULCURRENT_TIMESTAMP
    updated_atdatetimeNOMULCURRENT_TIMESTAMPon update CURRENT_TIMESTAMP

    之前我們關注的是Type這一項,這里讓我們關注Key這一項。我們看到有些列對應的Key是空的,這就表示這一列(或者叫這個字段)不是索引列(或者叫索引字段)。但id、order_id、created_at和updated_at這幾列對應的Key均是有值的,這說明這幾列都是索引列。但這幾列Key的值又各不相同,這是為啥吶?這是以內索引也分為不同的類型,讓我們逐個來解釋一下。

  • PRI:是primary的縮寫,標記這一列為主鍵,主鍵的概念我們在一開始的時候有介紹過,就是用來唯一標識表中每一行數據的索引;
  • UNI: 是unique的縮寫,顧名思義就是唯一的意思, 被設置為UNI KEY的列,不允許出現重復的值,如果嘗試向表中插入這一列的值完全相同的兩行數據,則會引發報錯。我猜你肯定會覺得疑惑,那UNI KEY和PRI KEY有啥區別?首先是這兩種類型的索引在實現上是有區別的(這一點咱們不深究,涉及到了數據庫底層對索引的實現),其次PRI KEY更多的是數據庫層面的語義,僅僅是描述數據的唯一性,而UNI KEY則更多是業務層面的語義,比如說這里的order_id字段,因為業務上不能存在兩個運單號完全相同的運單,所以需要把order_id這一列設置為UNI KEY;
  • MUL:是multiple的縮寫,表示這一列是被設置為一個普通索引。之所以叫做multiple,是因為此時可能這一列單獨作為索引,也可能這一列和其他標記為MUL的列共同構成了一個索引(這種由多列共同構成的索引被叫作復合索引);
  • 現在我們還處在Sql以及數據庫知識(是的,除了Sql,我還偷偷介紹了一些數據庫原理)學習的初級階段,所以讓我們知道這寫差異,但是不著急去把這些搞得一清二楚,它們都是索引,只要合理使用,都可以幫助我們加快Sql查詢的效率。

    另一種識別表中索引列的方法就是通過SHOW CREATE TABLE 表名命令,比如SHOW CREATE TABLE tb_order,我們得到下面的結果。

    CREATE TABLE `tb_order` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '對外不提供,內部使用',`order_id` bigint(20) NOT NULL DEFAULT '0' COMMENT '運單的跟蹤號(可以對外提供)',`rider_id` int(11) NOT NULL DEFAULT '0' COMMENT '配送員id',`rider_name` varchar(100) NOT NULL DEFAULT '' COMMENT '配送員名字',`order_state` tinyint(4) NOT NULL DEFAULT '0' COMMENT '配送狀態',`is_deleted` tinyint(4) NOT NULL DEFAULT '0',`grabbed_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '搶單時間',`merchant_customer_distance` decimal(10,2) NOT NULL DEFAULT '0.00' COMMENT '商鋪到顧客步行距離',`created_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP,`updated_at` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,PRIMARY KEY (`id`),UNIQUE KEY `uk_order_id` (`order_id`),KEY `ix_created_at` (`created_at`),KEY `ix_updated_at` (`updated_at`) ) ENGINE=InnoDB AUTO_INCREMENT=14 DEFAULT CHARSET=utf8 COMMENT='配送單'; 復制代碼

    看到末尾幾行的PRIMARY KEY、UNIQUE KEY和KEY了嗎,它們就對應于DESC tb_order結果中的PRI、UNI和MUL,分別標識主鍵索引、唯一索引和普通索引。每一行括號內的字段就表示對應的索引列。

    4.3 JOIN語法家族

    我嘗試了好幾種解釋清楚JOIN語法的方法(JOIN語法的確有些復雜),始終不能讓我自己滿意,最終決定還是從一個例子開始。讓我們首先看一張新的表,建表語句長下面這樣。

    CREATE TABLE `tb_grab_order_limit` (`id` BIGINT(20) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵',`rider_id` BIGINT(20) NOT NULL DEFAULT 0 COMMENT '騎手id',`order_grab_limit` INT(11) NOT NULL DEFAULT '0' COMMENT '接單上限',`is_deleted` TINYINT NOT NULL DEFAULT 0 COMMENT '該記錄是否被刪除',`created_at` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '創建時間',`updated_at` DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新時間',PRIMARY KEY(`id`),KEY `ix_rider_id` (`rider_id`),KEY `ix_created_at` (`created_at`),KEY `ix_updated_at` (`updated_at`) ) ENGINE = InnoDB DEFAULT CHARSET=utf8 comment="自定義騎手接單上限表"; 復制代碼

    小溫習

    參考上面的建表語句嘗試回答下面這幾個問題。

  • 這張表的表名是什么?
  • order_grab_limit這個字段的含義是什么?
  • 這張表的主鍵索引是什么?有幾個唯一索引、幾個普通索引?
  • 沒錯!這就是自定義騎手接單上限表。描述了某一個騎手(rider_id)對應的他的接單上限(order_grab_limit)。表中的數據如下。

    idrider_idorder_grab_limitis_deletedcreated_atupdated_at
    111102018-02-25 17:22:032018-02-25 17:22:03
    22902018-02-25 17:22:212018-02-25 17:22:21
    34902018-02-25 17:22:312018-02-25 17:22:31
    46702018-02-25 17:22:392018-02-25 17:22:39
    510802018-02-25 17:22:462018-02-25 17:22:46

    再讓我們回顧一下前面反復用到的tb_rider表。

    idnamereal_name_certify_statelevellevel_cityis_deletedcreated_atupdated_at
    1Stark23102017-01-01 22:00:192018-01-01 06:40:01
    2Banner23902017-04-28 12:01:192018-01-01 06:40:01
    3Rogers22102017-04-10 17:24:012018-01-01 06:40:01
    4Thor10102017-12-31 23:10:392018-01-01 06:40:01
    5Natasha21102017-02-11 15:03:132018-01-01 06:40:01
    6Barton21902017-02-11 15:04:192018-01-01 06:40:01
    7Coulson23902017-01-03 23:00:222018-01-01 06:40:01
    8Coulson10202017-01-05 10:10:232018-01-01 06:40:01

    (終于鋪墊完啦!)

    [1] 從LEFT JOIN開始

    以這兩張表為基礎,設想一個場景:假設要查詢tb_rider表中所有騎手對應的自定義接單上限。我們的Sql應該怎么寫呢?

    **思路1:**先查出tb_rider表中所有騎手id,再根據這些騎手id作為查詢條件,通過前面學習過的IN語法從tb_grab_order_limit表中查詢出所對應的自定義接單上限的記錄。

    SELECT id FROM tb_rider; 復制代碼

    SELECT rider_id, order_grab_limit FROM tb_grab_order_limit WHERE rider_id IN (1, 2, 3, 4, 5, 6, 7, 8); 復制代碼

    思路1顯然是個Bad idea。但是思路1詮釋了解決這個查詢問題的基本要點。

  • 我們最終想要的數據是需要結合tb_rider和tb_grab_order_limit兩張表共同得出的;
  • 關聯這兩張數據表的條件是騎手id;
  • 因為查詢的要求是:tb_rider表中所有騎手,因此應該以tb_rider表中的騎手id作為查詢參考集合;
  • 不是所有tb_rider表中的騎手都配置了自定義接單上限,思路1的查詢方案存在一個缺點,就是我們需要根據查詢結果,在邏輯上做一個轉換得知哪些騎手沒有配置自定義接單上限( 不在返回結果中的騎手);
  • **思路2:**基于這幾個要點我們可以使用LEFT JOIN語法,下面是對應的Sql語句。

    SELECT tb_rider.id, tb_grab_order_limit.order_grab_limit FROM tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    這里先介紹一下JOIN語法的基本結構:表1 (INNER/LEFT/RIGHT/FULL) JOIN 表2 ON 表1.列1 = 表2.列2。JOIN關鍵字前后連接的是兩張需要關聯查詢的數據表,ON關鍵字后面跟著關聯的條件。一共有四種類型的JOIN,他們分別是INNER JOIN、LEFT JOIN、RIGHT JOIN和FULL JOIN。以例子中的LEFT JOIN為例,表1 LEFT JOIN 表2 ON 表1.列1 = 表2.列2的含義是,遍歷表1中的列1的值,如果表2中列2的值有和它相等的則展示對應的記錄,如果沒有表2.列2和表1.列1相等,則展示為null。

    思路2的例子中,tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id的含義是,遍歷tb_rider表中id這一列(tb_rider表的id字段業務含義就是騎手id)的值,尋找tb_grab_order_limit表中rider_id列的值和它相等的記錄,如果不存在則是null。

    我們還看到SELECT語句的內容和我們之前使用的很類似,但又稍微有點不一樣,都是表名.列名的書寫形式。其實這主要是指明了字段所屬的表,因為JOIN的兩張數據表中可能存在的相同名稱的列,例如tb_rider表和tb_grab_order_limit表都有id字段,但含義截然不同,這樣寫更加明確。

    最終思路2的結果如下。

    idorder_grab_limit
    111
    29
    49
    67
    7<null>
    8<null>
    5<null>
    3<null>

    我們看到騎手id=(7, 8, 5, 3)的幾個騎手沒有配置自定義的接單上限,但因為是LEFT JOIN,他們仍然會展示在查詢結果中,不過因為沒有接單上限的記錄,order_grab_limit的結果為null。

    讓我們再回頭看一下表名.列名這個寫法。如果思路2中的Sql改成下面這樣,返回結果會變成什么呢?

    SELECT tb_grab_order_limit.rider_id, tb_grab_order_limit.order_grab_limit FROM tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    讓我們來分析一下。我們知道LEFT JOIN的返回結果集合是以它左側連接的數據表決定的,所以結果集仍然包含8條記錄,但是騎手id=(7, 8, 5, 3)這個騎手沒有對應的接單上限的配置,因此當我們展示這幾個騎手的tb_grab_order_limit.rider_id列的值的時候,類似于tb_grab_order_limit.order_grab_limit,也是null。因此結果是下面這樣。

    rider_idorder_grab_limit
    111
    29
    49
    67
    <null><null>
    <null><null>
    <null><null>
    <null><null>

    如果你還是不太明白,然我們在SELECT的時候,加上tb_rider.id,或許有助于理解。

    SELECT tb_rider.id, tb_grab_order_limit.rider_id, tb_grab_order_limit.order_grab_limit FROM tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    結果是。

    idrider_idorder_grab_limit
    1111
    229
    449
    667
    7<null><null>
    8<null><null>
    5<null><null>
    3<null><null>

    [2] LEFT JOIN的姊妹篇:RIGHT JOIN

    前面我們知道LEFT JOIN是以連接的左側表作為查詢的結果集的依據,RIGHT JOIN則是以連接的右側表作為依據。讓我們考慮另一個場景:假設想要查詢所有設置了自定義接單上限的騎手姓名。應該如何寫這個Sql呢?

    先在聰明的大腦里思考幾分鐘。此時你需要類比LEFT JOIN,需要理解上一段內容講述的LEFT JOIN知識點,可能需要回到上一段再看一看示例Sql語句以及對應的結果。沒關系,一開始學習的時候慢慢來。

    答案是這樣的。

    SELECT tb_grab_order_limit.rider_id, tb_rider.name FROM tb_rider RIGHT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    對應的查詢結果則是。

    rider_idname
    1Stark
    2Banner
    4Thor
    6Barton
    10<null>

    如果這個結果和你腦海中思考的結果不一樣,不要著急,讓我們再來解釋一下。RIGHT JOIN是以連接的右側表為依據,而tb_grab_order_limit中的騎手id=(1, 2, 4, 6, 10),其中騎手id為10的騎手在tb_rider表中是沒有的,所以name為null。

    小測驗

    嘗試下將上面的這條Sql語句改寫成LEFT JOIN吧(要求得到相同的查詢結果)?

    [3] 一絲不茍的INNER JOIN

    之所以叫“一絲不茍”的INNER JOIN,是因為INNER JOIN是非常嚴格的關聯查詢,換句話說,必須是根據JOIN條件兩張表中存在匹配記錄的才作為結果集返回。讓我們回顧下[1]中LEFT JOIN的Sql。

    SELECT tb_rider.id, tb_grab_order_limit.order_grab_limit FROM tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    它的返回結果是。

    idorder_grab_limit
    111
    29
    49
    67
    7<null>
    8<null>
    5<null>
    3<null>

    如果我們將LEFT JOIN改為INNER JOIN吶?修改后的Sql像這樣。

    SELECT tb_rider.id, tb_grab_order_limit.order_grab_limit FROM tb_rider INNER JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    這時返回的查詢結果變成了。

    idorder_grab_limit
    111
    29
    49
    67

    這是因為INNER JOIN會遍歷連接一側的表,根據ON后的連接條件,和連接另一側的表進行比較,只有兩張表中存在匹配的記錄才會作為結果集返回。例如這里,它會遍歷tb_rider表中id字段的值,并且去tb_grab_order_limit表中尋找rider_id與之匹配的記錄,如果找到則作為結果返回。

    B.T.W INNER JOIN 和 JOIN是等價的,換句話說,表1 INNER JOIN 表2 ON...和表1 JOIN 表2 ON...是完全等價的。

    小測驗

    猜測一下下面的這條Sql語句的返回結果是什么?

    SELECT tb_rider.id, tb_grab_order_limit.order_grab_limit FROM tb_grab_order_limit INNER JOIN tb_rider ON tb_grab_order_limit.rider_id = tb_rider.id; 復制代碼

    提示:這里交換了一下INNER JOIN連接的兩張表的位置,根據INNER JOIN的特性,查詢結果會有影響嘛?

    [4] 心大的FULL JOIN

    FULL JOIN其實并不在乎匹配與否,而是將連接的兩張表中所有的行都返回,如果有匹配的則返回匹配的結果,如果沒有匹配則哪張表中缺失則對應的將當前這條記錄標記為null。看一個例子就明白啦!

    SELECT tb_rider.id, tb_rider.name, tb_grab_order_limit.rider_id, tb_grab_order_limit.order_grab_limit FROM tb_rider FULL JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    這條Sql語句的查詢結果是這樣的。

    idnamerider_idorder_grab_limit
    1Stark111
    2Banner29
    4Thor49
    6Barton67
    3Rogers<null><null>
    5Natasha<null><null>
    7Coulson<null><null>
    8Coulson<null><null>
    <null><null>1010

    可以看到tb_rider表中騎手id=(3, 5, 7, 8)的騎手在tb_grab_order_limit表中沒有匹配的記錄,而tb_grab_order_limit表中騎手id=(10)的騎手在tb_rider表中沒有匹配記錄,但是它們都作為結果集返回了。只不過缺失tb_grab_order_limit記錄的,rider_id和order_grab_limit字段值為null,而缺失tb_rider記錄的,id和name字段的值為null。

    事實上,絕大多數情況下,FULL JOIN都不會被用到。而且在一些數據庫管理系統中,例如MySql(我們的線上環境主要使用的就是MySql),是不支持FULL JOIN語法的。對于上面的查詢語句,需要使用一些技巧通過LEFT JOIN、RIGHT JOIN以及UNION(這篇教程中我們不討論UNION語法哦)語法的組合來實現同樣效果的查詢。

    SELECT tb_rider.id, tb_rider.name, tb_grab_order_limit.rider_id, tb_grab_order_limit.order_grab_limit FROM tb_rider LEFT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id UNION SELECT tb_rider.id, tb_rider.name, tb_grab_order_limit.rider_id, tb_grab_order_limit.rider_id FROM tb_rider RIGHT JOIN tb_grab_order_limit ON tb_rider.id = tb_grab_order_limit.rider_id WHERE tb_rider.id IS null; 復制代碼

    這已經超出了這篇教程的討論范圍啦!如果想要挑戰一下自己,以下是一些提示。

  • UNION連接兩條SELECT語句,作用是將兩個SELECT語句的查詢結果取交集;
  • 第2條SELECT語句中的WHERE tb_rider.id IS null 是為了對存在匹配的數據記錄去重(否則UNION之后會有重復的結果);
  • WHERE語句是在RIGHT JOIN之后,UNION之前執行的;
  • 試著在這兩條提示下理解一下這條Sql語句,如果能夠弄明白這條語句是如何等價于FULL JOIN的,那么說明你對JOIN家族的語法已經基本掌握啦。如果暫時還不能弄得非常明白也沒關系,多看一看例子,多寫一寫實踐一下,慢慢就會明白啦。

    題外話

    從上面的講解我們了解到JOIN的四種用法,總結一下。

  • INNER JOIN關鍵字在兩張表中都有匹配的值的時候返回匹配的行;
  • LEFT JOIN關鍵字從左表返回所有的行,即使在右表中沒有匹配的行;
  • RIGHT JOIN關鍵字從右表返回所有的行,即使在左表中沒有匹配的行;
  • FULL JOIN關鍵字從左表和右表那里返回所有行,即使右表的行在左表中沒有匹配或者左表的行在右表中沒有匹配,這些行也會返回;
  • 不過這些都是刻板的文字總結,讓我們換個視角總結一下這集中JOIN語法。

    離散數學中在討論集合論的時候介紹過**“韋恩圖”**的概念,它清楚的描述了數據集合之間的關系。而JOIN的這4種操作也正好對應了4種集合運算,下面的這張圖(Figure 1)很清楚的描述了這種關系。

    4.4 嵌套的SELECT語法

    再來看一下講述LEFT JOIN的開始,我們提到的那個例子:查詢tb_rider表中所有騎手對應的自定義接單上限。當時我們首先提出了思路1,是分為2個步驟的。

    SELECT id FROM tb_rider; 復制代碼

    SELECT rider_id, order_grab_limit FROM tb_grab_order_limit WHERE rider_id IN (1, 2, 3, 4, 5, 6, 7, 8); 復制代碼

    我們說這個思路不好,這是顯然的,因為在現實場景中往往數據集合都很大(例如這里的rider_id在現實中可能是成百上千甚至成千上萬個),思路本身沒有問題但無法操作執行。所以在4.3節我們選擇通過JOIN語法來實現同樣的查詢。那是不是思路1就真的只能是個紙上談兵的思路了呢?當然不是啦!我們還可以使用嵌套的SELECT語句,就像這樣。

    SELECT rider_id, order_grab_limit FROM tb_grab_order_limit WHERE rider_id IN (SELECT id FROM tb_rider); 復制代碼

    這個寫法非常好理解,WHERE rider_id IN (SELECT id FROM tb_rider)首先執行括號中的語句SELECT id FROM tb_rider,然后執行IN篩選,就是我們的思路1描述的那樣。于是得到下面的結果。

    rider_idorder_grab_limit
    111
    29
    49
    67

    復習題

    回想一下上面的結果和以下哪條Sql語句的執行結果是一致的呢?為什么是一致的,為什么和其他的不一致?

    1. SELECT tb_rider.id, tb_grab_order_limit.order_grab_limitFROM tb_rider LEFT JOIN tb_grab_order_limitON tb_rider.id = tb_grab_order_limit.rider_id; 2. SELECT tb_grab_order_limit.rider_id, tb_rider.nameFROM tb_rider RIGHT JOIN tb_grab_order_limitON tb_rider.id = tb_grab_order_limit.rider_id; 3. SELECT tb_rider.id, tb_grab_order_limit.order_grab_limitFROM tb_rider INNER JOIN tb_grab_order_limitON tb_rider.id = tb_grab_order_limit.rider_id; 4. SELECT tb_rider.id, tb_grab_order_limit.order_grab_limitFROM tb_rider FULL JOIN tb_grab_order_limitON tb_rider.id = tb_grab_order_limit.rider_id; 復制代碼

    小測驗

    思考一下以下這個場景,看看能否寫出它對應的Sql語句?

    場景:篩選出所有通過實名認證(real_name_certify_state=2)的金牌(level=3)騎手(tb_rider表),在2017-12-30當天(created_at >= xxx AND created_at < yyy)所跑運單(tb_order表)的運單號(order_id)。

    想一想有幾種寫法呢?

    5 闖關答題:快速復習

    前面的幾個段落我們學習了Sql查詢中最常用,而且特別好用的語法知識,讓我們簡單總結一下。

  • 數據庫、數據表的概念;
  • 最基本的Sql查詢結構;
  • IN查詢和邏輯操作語法(AND/OR);
  • 對查詢結果進行排序和LIMIT語法;
  • 聚合函數(COUNT/AVG/SUM)和DISTINCT語法;
  • 對查詢結果分組(GROUP BY);
  • 對聚合函數的結果進行篩選的HAVING語法;
  • 字段類型和索引的概念和作用;
  • JOIN語法的一家子(LEFT JOIN/RIGHT JOIN/INNER JOIN/FULL JOIN);
  • 嵌套的SELECT語法;
  • 學習了這么多知識點,實在是太膩害了!給自己點贊!

    但是(凡事都有個但是)...

    想要把這些知識點融會貫通,靈活應用到現實工作中更多變、更復雜的查詢場景,僅僅是“學會”是不夠的,還需要更多的“練習”和“回味”。

    這個部分我設計了一個“闖關答題”項目,通過思考和回答這些闖關題,幫助你更好的掌握上面提到的知識點。

    先來看一下答題將要用到的數據表。

    [1] 商品數據表:tb_product

    idproduct_idnameprice
    11001iPad Pro 10.5 64G WLAN4888
    21002Macbook Pro 2017 13.3 i5/8G/256GB13888
    31003iPhone X 64G8388

    建表語句:

    CREATE TABLE `tb_product` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵',`product_id` bigint(20) NOT NULL DEFAULT '0' COMMENT '商品id',`name` varchar(100) NOT NULL DEFAULT '' COMMENT '商品名稱',`price` int(11) NOT NULL DEFAULT '0' COMMENT '商品價格',PRIMARY KEY (`id`),UNIQUE KEY `uk_product_id` (`product_id`) ) ENGINE=InnoDB AUTO_INCREMENT=14 DEFAULT CHARSET=utf8 COMMENT='商品信息表'; 復制代碼

    字段含義:

  • id:自增主鍵;
  • product_id:商品id;
  • name:商品名稱;
  • price:商品單價,單位是元;
  • [2] 用戶數據表:tb_customer

    idcustomer_idnamegenderbalance
    1NO100001火火18888
    2NO100002撥潑抹9000
    3NO100003艾橋7990
    4NO100004水娃8388

    建表語句:

    CREATE TABLE `tb_customer` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵',`customer_id` varchar(100) NOT NULL DEFAULT '' COMMENT '用戶id',`name` varchar(100) NOT NULL DEFAULT '' COMMENT '用戶姓名',`gender` varchar(30) NOT NULL DEFAULT '' COMMENT '用戶性別',`balance` int(11) NOT NULL DEFAULT '0' COMMENT '賬戶余額',PRIMARY KEY (`id`),UNIQUE KEY `uk_customer_id` (`customer_id`) ) ENGINE=InnoDB AUTO_INCREMENT=14 DEFAULT CHARSET=utf8 COMMENT='用戶信息表'; 復制代碼

    字段含義:

  • id:自增主鍵;
  • customer_id:用戶id;
  • name:用戶姓名;
  • gender:用戶的性別;
  • balance:用戶當前的可用賬戶余額,單位是元;
  • [3] 訂單數據表:tb_order

    idorder_idcustomer_idproduct_idquantity
    1NUM1000301NO10000110011
    2NUM1000302NO10000110022
    3NUM1000303NO10000210022
    4NUM1000304NO10000310021
    5NUM1000305NO10000110031

    建表語句:

    CREATE TABLE `tb_order` (`id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增主鍵',`order_id` varchar(100) NOT NULL DEFAULT '' COMMENT '訂單id',`customer_id` varchar(100) NOT NULL DEFAULT '0' COMMENT '用戶id',`product_id` bigint(20) NOT NULL DEFAULT '0' COMMENT '商品id',`quantity` int(11) NOT NULL DEFAULT '0' COMMENT '商品價格',PRIMARY KEY (`id`),UNIQUE KEY `uk_order_id` (`order_id`) ) ENGINE=InnoDB AUTO_INCREMENT=14 DEFAULT CHARSET=utf8 COMMENT='訂單數據表'; 復制代碼

    字段含義:

  • id:自增主鍵;
  • order_id:訂單號;
  • customer_id:下單用戶id;
  • product_id:購買的商品id;
  • quantity:購買的數量;
  • 了解完需要用到表結構,我們就要開始答題啦!

    第一關:查詢賬戶余額大于1萬元的用戶id和姓名?

    Answer:

    SELECT customer_id, name FROM tb_customer WHERE balance > 10000; 復制代碼 customer_idname
    NO100001火火

    第二關:查詢賬戶余額小于1萬元且性別為女生的用戶姓名?

    Answer:

    SELECT name FROM tb_customer WHERE balance < 10000 AND gender="女"; 復制代碼 name
    撥潑抹
    水娃

    第三關:查詢用戶id為NO100001和NO100002的用戶,所有購買記錄的訂單號?

    Hint:IN

    Answer:

    SELECT order_id FROM tb_order WHERE customer_id IN ("NO100001", "NO100002"); 復制代碼 order_id
    NUM1000301
    NUM1000302
    NUM1000303
    NUM1000305

    第四關:查詢用戶id為NO100001、NO100002兩位用戶所有的購買記錄(所有字段),要求按照優先以商品id遞增、其次以訂單號遞減的規則展示數據?

    Hint:IN、ORDER BY

    Answer:

    SELECT * FROM tb_order WHERE customer_id IN ("NO100001", "NO100002") ORDER BY product_id ASC, order_id DESC; 復制代碼 idorder_idcustomer_idproduct_idquantity
    1NUM1000301NO10000110011
    3NUM1000303NO10000210022
    2NUM1000302NO10000110022
    5NUM1000305NO10000110031

    第五關:查詢性別為女生的用戶總數?

    Hint:COUNT

    Answer:

    SELECT COUNT(customer_id) FROM tb_customer WHERE gender="女"; 復制代碼 COUNT(customer_id)
    3

    第六關:查詢NO100001、NO100002、NO100003三位用戶各自購買商品的總數(不區分商品類型),輸出購買商品件數大于等于2件的用戶id以及他們對應購買的商品總數?

    Warning:“購買商品的總數”和上一關“女生用戶的總數”,這兩個**“總數”**一樣嗎?

    Hint:IN、SUM、HAVING

    Answer:

    SELECT customer_id, SUM(quantity) FROM tb_order WHERE customer_id IN ("NO100001", "NO100002", "NO100003") GROUP BY customer_id HAVING SUM(quantity) >= 2; 復制代碼 customer_idSUM(quantity)
    NO1000014
    NO1000022

    第七關:查詢NO100001、NO100002、NO100003三位用戶各自購買商品的總數(不區分商品類型),輸出購買總數前兩名的用戶id以及他們對應購買的商品總數?

    Hint:IN、SUM、ORDER BY、LIMIT

    Answer:

    SELECT customer_id, SUM(quantity) FROM tb_order WHERE customer_id IN ("NO100001", "NO100002", "NO100003") GROUP BY customer_id ORDER BY SUM(quantity) DESC LIMIT 2; 復制代碼 customer_idSUM(quantity)
    NO1000014
    NO1000022

    第八關:查詢所有用戶各自購買商品的總數(不區分商品類型),輸出購買商品件數大于等于2件的用戶id以及他們對應購買的商品總數?要求給出至少兩種寫法。

    Warning:注意是“所有用戶”,不是所有的用戶都購買了商品

    Hint:關聯查詢有哪些方法?

    Answer:

    寫法一:嵌套的SELECT

    SELECT customer_id, SUM(quantity) FROM tb_order WHERE customer_id IN (SELECT customer_id FROM tb_customer) GROUP BY customer_id HAVING SUM(quantity) >= 2; 復制代碼 customer_idSUM(quantity)
    NO1000014
    NO1000022

    寫法二:使用LEFT JOIN語法

    SELECT tb_customer.customer_id, SUM(tb_order.quantity) FROM tb_customer LEFT JOIN tb_order ON tb_customer.customer_id = tb_order.customer_id GROUP BY tb_customer.customer_id HAVING SUM(tb_order.quantity) >= 2; 復制代碼 customer_idSUM(tb_order.quantity)
    NO1000014
    NO1000022

    第九關:查詢所有用戶各自購買商品的總數(不區分商品類型),輸出購買總數前兩名的用戶id以及他們對應購買的商品總數?要求給出至少兩種寫法。

    Hint:關聯查詢有哪些方法?

    Answer:

    寫法一:嵌套的SELECT

    SELECT customer_id, SUM(quantity) FROM tb_order WHERE customer_id IN (SELECT customer_id FROM tb_customer) GROUP BY customer_id ORDER BY SUM(quantity) DESC LIMIT 2; 復制代碼 customer_idSUM(quantity)
    NO1000014
    NO1000022

    寫法二:使用LEFT JOIN語法

    SELECT tb_customer.customer_id, SUM(tb_order.quantity) FROM tb_customer LEFT JOIN tb_order ON tb_customer.customer_id = tb_order.customer_id GROUP BY tb_customer.customer_id ORDER BY SUM(tb_order.quantity) DESC LIMIT 2; 復制代碼 customer_idSUM(tb_order.quantity)
    NO1000014
    NO1000022

    第十關:以下哪幾條Sql語句使用到了索引?分別是哪些字段上的索引?是什么類型的索引?

    1. SELECT name FROM tb_customer WHERE customer_id = 1001; 2. SELECT product_id, name FROM tb_product WHERE price > 5000; 3. SELECT order_id, customer_id, product_id FROM tb_orderWHERE order_id = "NUM1000302" AND customer_id = "NO100001"AND product_id = "1002"; 4. SELECT order_id FROM tb_order WHERE id > 2; 復制代碼

    Hint:索引

    Answer:

    sql序號是否使用到索引索引所在字段索引類型
    1customer_idUNIQUE KEY
    2--
    3order_idUNIQUE KEY
    4idPRIMARY KEY





    閱讀博客還不過癮?

    歡迎大家掃二維碼通過添加群助手,加入交流群,討論和博客有關的技術問題,還可以和博主有更多互動

    博客轉載、線下活動及合作等問題請郵件至 shadowfly_zyl@hotmail.com 進行溝通

    總結

    以上是生活随笔為你收集整理的写给运营同学和初学者的SQL入门教程的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。