我以前介紹過(guò)最多的就是單表隨機(jī)查詢時(shí)的優(yōu)化了,今天 看到一站長(zhǎng)分享了一個(gè)多表隨機(jī)查詢優(yōu)化的一些方法與方案,下面我們就一起來(lái)看看吧.
本文主要談?wù)撊绾螌?shí)現(xiàn)Mysql的隨機(jī)查詢,多表隨機(jī)查詢。在Mysql中隨機(jī)取出一條記錄的實(shí)現(xiàn)方法。
我們通常的查詢是沒(méi)有where或者where fields>2這樣的方式,這樣只能取出在某種條件下的一條或多條,如果條件不變(例如2),那么結(jié)果就一直不會(huì)有變化。
那么如何實(shí)現(xiàn)隨機(jī)查詢呢?本人有兩種方法。
方法一、數(shù)據(jù)表記錄不大的情況下:
select * from `table`
查出來(lái)所有的記錄列表,然后array_rand()隨機(jī)出一個(gè)結(jié)果的數(shù)組的key。連續(xù)的key可以使用mt_rand(1, count($list)); 為什么不使用rand而是mt_rand呢?因?yàn)閙t_rand幣rand快4倍。
這種情況下,查出整個(gè)列表,存入到Memcache的緩存或者Redis的NoSQL中,下次直接取出結(jié)果集而不需要查表。不過(guò)當(dāng)數(shù)據(jù)量一旦超過(guò)萬(wàn)級(jí)別,取出列表就很困難了。
方法二:使用SQL語(yǔ)句隨機(jī)
MYSQL函數(shù)RAND(),產(chǎn)生一個(gè)0-1之間的小數(shù),然后MAX(`id`)可以獲得該表中最大的ID。那么MAX(`id`) * RAND()就可以取到表中所有的ID。OK,看語(yǔ)句。
SELECT * FROM `table` WHERE `id` > (SELECT RAND() * (SELECT MAX(`id`) FROM `table`) LIMIT 0, 1
既然MAX(`id`) * MAX(`id`)可以取到表里所有值,那么本語(yǔ)句的WHERE就可以取到本表的所有情況,那么這就是一個(gè)所有記錄都有可能被取到的隨機(jī)SQL語(yǔ)句。
補(bǔ)充另一篇文章
1. 多表連接類型
1. 笛卡爾積(交叉連接) 在MySQL中可以為CROSS JOIN或者省略CROSS即JOIN,或者使用',' 如:
SELECT * FROM table1 CROSS JOIN table2
SELECT * FROM table1 JOIN table2
SELECT * FROM table1,table2
由于其返回的結(jié)果為被連接的兩個(gè)數(shù)據(jù)表的乘積,因此當(dāng)有WHERE, ON或USING條件的時(shí)候一般不建議使用,因?yàn)楫?dāng)數(shù)據(jù)表項(xiàng)目太多的時(shí)候,會(huì)非常慢。一般使用LEFT [OUTER] JOIN或者RIGHT [OUTER] JOIN
2. 內(nèi)連接INNER JOIN 在MySQL中把INNER JOIN叫做等值連接,即需要指定等值連接條件在MySQL中CROSS和INNER JOIN被劃分在一起。 join_table: table_reference [INNER | CROSS] JOIN table_factor [join_condition]
3. MySQL中的外連接,分為左外連接和右連接,即除了返回符合連接條件的結(jié)果之外,還要返回左表(左連接)或者右表(右連接)中不符合連接條件的結(jié)果,相對(duì)應(yīng)的使用NULL對(duì)應(yīng)。
例子:
user表:
id | name
———
1 | libk
2 | zyfon
3 | daodao
user_action表:
user_id | action
—————
1 | jump
1 | kick
1 | jump
2 | run
4 | swim
sql:
select id, name, action from user as u
left join user_action a on u.id = a.user_id
result:
id | name | action
——————————–
1 | libk | jump ①
1 | libk | kick ②
1 | libk | jump ③
2 | zyfon | run ④
3 | daodao | null ⑤
分析:
注意到user_action中還有一個(gè)user_id=4, action=swim的紀(jì)錄,但是沒(méi)有在結(jié)果中出現(xiàn),
而user表中的id=3, name=daodao的用戶在user_action中沒(méi)有相應(yīng)的紀(jì)錄,但是卻出現(xiàn)在了結(jié)果集中
因?yàn)楝F(xiàn)在是left join,所有的工作以left為準(zhǔn).
結(jié)果1,2,3,4都是既在左表又在右表的紀(jì)錄,5是只在左表,不在右表的紀(jì)錄
工作原理:
從左表讀出一條,選出所有與on匹配的右表紀(jì)錄(n條)進(jìn)行連接,形成n條紀(jì)錄(包括重復(fù)的行,如:結(jié)果1和結(jié)果3),如果右邊沒(méi)有與on條件匹配的表,那連接的字段都是null.然后繼續(xù)讀下一條。
引申:
我們可以用右表沒(méi)有on匹配則顯示null的規(guī)律, 來(lái)找出所有在左表,不在右表的紀(jì)錄, 注意用來(lái)判斷的那列必須聲明為not null的。
如:
sql:
select id, name, action from user as u
left join user_action a on u.id = a.user_id
where a.user_id is NULL
(注意:
1.列值為null應(yīng)該用is null 而不能用=NULL
2.這里a.user_id 列必須聲明為 NOT NULL 的.
)
上面sql的result:
id | name | action
————————–
3 | daodao | NULL
——————————————————————————–
一般用法:
a. LEFT [OUTER] JOIN:
除了返回符合連接條件的結(jié)果之外,還需要顯示左表中不符合連接條件的數(shù)據(jù)列,相對(duì)應(yīng)使用NULL對(duì)應(yīng)
SELECT column_name FROM table1 LEFT [OUTER] JOIN table2 ON table1.column=table2.column
b. RIGHT [OUTER] JOIN:
RIGHT與LEFT JOIN相似不同的僅僅是除了顯示符合連接條件的結(jié)果之外,還需要顯示右表中不符合連接條件的數(shù)據(jù)列,相應(yīng)使用NULL對(duì)應(yīng)
SELECT column_name FROM table1 RIGHT [OUTER] JOIN table2 ON table1.column=table2.column
Tips:
1. on a.c1 = b.c1 等同于 using(c1)
2. INNER JOIN 和 , (逗號(hào)) 在語(yǔ)義上是等同的
3. 當(dāng) MySQL 在從一個(gè)表中檢索信息時(shí),你可以提示它選擇了哪一個(gè)索引。
如果 EXPLAIN 顯示 MySQL 使用了可能的索引列表中錯(cuò)誤的索引,這個(gè)特性將是很有用的。
通過(guò)指定 USE INDEX (key_list),你可以告訴 MySQL 使用可能的索引中最合適的一個(gè)索引在表中查找記錄行。
可選的二選一句法 IGNORE INDEX (key_list) 可被用于告訴 MySQL 不使用特定的索引。如:
mysql> SELECT * FROM table1 USE INDEX (key1,key2)
-> WHERE key1=1 AND key2=2 AND key3=3;
mysql> SELECT * FROM table1 IGNORE INDEX (key3)
-> WHERE key1=1 AND key2=2 AND key3=3;
2. 表連接的約束條件
添加顯示條件WHERE, ON, USING
1. WHERE子句
mysql>
SELECT * FROM table1,table2 WHERE table1.id=table2.id;
2. ON
mysql>
SELECT * FROM table1 LEFT JOIN table2 ON table1.id=table2.id;
SELECT * FROM table1 LEFT JOIN table2 ON table1.id=table2.id
LEFT JOIN table3 ON table2.id=table3.id;
3. USING子句,如果連接的兩個(gè)表連接條件的兩個(gè)列具有相同的名字的話可以使用USING
例如:
SELECT FROM LEFT JOIN USING ()
連接多于兩個(gè)表的情況舉例:
mysql>
SELECT artists.Artist, cds.title, genres.genre
FROM cds
LEFT JOIN genres N cds.genreID = genres.genreID
LEFT JOIN artists ON cds.artistID = artists.artistID;
或者 mysql>
SELECT artists.Artist, cds.title, genres.genre
FROM cds
LEFT JOIN genres ON cds.genreID = genres.genreID
LEFT JOIN artists -> ON cds.artistID = artists.artistID
WHERE (genres.genre = 'Pop');
--------------------------------------------
先過(guò)濾條件然后再根據(jù)表連接 同時(shí)在表中建立相關(guān)查詢字段的索引這樣在大數(shù)據(jù)多表聯(lián)合查詢的情況下速度相當(dāng)快
SELECT M.*,SS.SensorCode,SS.SensorStatus,SS.ManufacturerId,SS.Electricity,
SS.Voltage,SS.MinElectricity,SS.MinVoltage,SS.Temperature,SS.StatusUpdteDate,SS.UpdateStatus ,tp.PricingStrategyid,tps.FreeDuration,bat.BerthTypeId
FROM
(SELECT T.* , BS.ParkStatus,BS.ChangeTime ,CA.CantonName, SE.SectionName
FROM
(SELECT A.* ,B.BerthId,B.BerthCode,B.BerthAddress,B.BerthStatus,B.LineDirection,B.CantonId,B.SectionId
FROM
(SELECT AR.AreaId,AR.AreaCode,AR.AreaName FROM SYS_Area AS AR WHERE 1=1 AND AR.AreaCode='110' ) A
LEFT JOIN SYS_Berth AS B ON B.AreaId=A.AreaId ) T
JOIN SYS_BerthStatus AS BS ON T.BerthCode=BS.BerthCode
JOIN SYS_Canton AS CA ON T.CantonId=CA.CantonId
JOIN SYS_Section AS SE ON T.SectionId=SE.SectionId )M
LEFT JOIN SYS_Sensor SS ON M.BerthCode=SS.BerthCode
LEFT JOIN TRA_PricingBerth AS tp ON tp.BerthCode=M.BerthCode
LEFT JOIN TRA_PricingStrategy AS tps ON tps.PricingStrategyId=tp.PricingStrategyId
LEFT JOIN SYS_BerthAndType AS bat ON bat.BerthCode=M.BerthCode
ORDER BY BerthCode ASC
另外需要注意的地方 在MySQL中涉及到多表查詢的時(shí)候,需要根據(jù)查詢的情況,想好使用哪種連接方式效率更高。
1. 交叉連接(笛卡爾積)或者內(nèi)連接 [INNER | CROSS] JOIN
2. 左外連接LEFT [OUTER] JOIN或者右外連接RIGHT [OUTER] JOIN 注意指定連接條件WHERE, ON,USING.
3. MySQL如何優(yōu)化LEFT JOIN和RIGHT JOIN
在MySQL中,A LEFT JOIN B join_condition執(zhí)行過(guò)程如下:
1)· 根據(jù)表A和A依賴的所有表設(shè)置表B。
2)· 根據(jù)LEFT JOIN條件中使用的所有表(除了B)設(shè)置表A。
3)· LEFT JOIN條件用于確定如何從表B搜索行。(換句話說(shuō),不使用WHERE子句中的任何條件)。
4)· 可以對(duì)所有標(biāo)準(zhǔn)聯(lián)接進(jìn)行優(yōu)化,只是只有從它所依賴的所有表讀取的表例外。如果出現(xiàn)循環(huán)依賴關(guān)系,MySQL提示出現(xiàn)一個(gè)錯(cuò)誤。
5)· 進(jìn)行所有標(biāo)準(zhǔn)WHERE優(yōu)化。
6)· 如果A中有一行匹配WHERE子句,但B中沒(méi)有一行匹配ON條件,則生成另一個(gè)B行,其中所有列設(shè)置為NULL。
7)· 如果使用LEFT JOIN找出在某些表中不存在的行,并且進(jìn)行了下面的測(cè)試:WHERE部分的col_name IS NULL,其中col_name是一個(gè)聲明為 NOT NULL的列,MySQL找到匹配LEFT JOIN條件的一個(gè)行后停止(為具體的關(guān)鍵字組合)搜索其它行。
RIGHT JOIN的執(zhí)行類似LEFT JOIN,只是表的角色反過(guò)來(lái)。
聯(lián)接優(yōu)化器計(jì)算表應(yīng)聯(lián)接的順序。LEFT JOIN和STRAIGHT_JOIN強(qiáng)制的表讀順序可以幫助聯(lián)接優(yōu)化器更快地工作,因?yàn)闄z查的表交換更少。請(qǐng)注意這說(shuō)明如果執(zhí)行下面類型的查詢,MySQL進(jìn)行全掃描b,因?yàn)長(zhǎng)EFT JOIN強(qiáng)制它在d之前讀取:
SELECT *
FROM a,b LEFT JOIN c ON (c.key=a.key) LEFT JOIN d ON (d.key=a.key)
WHERE b.key=d.key;
在這種情況下修復(fù)時(shí)用a的相反順序,b列于FROM子句中:
SELECT *
FROM b,a LEFT JOIN c ON (c.key=a.key) LEFT JOIN d ON (d.key=a.key)
WHERE b.key=d.key;
MySQL可以進(jìn)行下面的LEFT JOIN優(yōu)化:如果對(duì)于產(chǎn)生的NULL行,WHERE條件總為假,LEFT JOIN變?yōu)槠胀?lián)接。
例如,在下面的查詢中如果t2.column1為NULL,WHERE 子句將為false:
SELECT * FROM t1 LEFT JOIN t2 ON (column1) WHERE t2.column2=5;
因此,可以安全地將查詢轉(zhuǎn)換為普通聯(lián)接:
SELECT * FROM t1, t2 WHERE t2.column2=5 AND t1.column1=t2.column1;
這樣可以更快,因?yàn)槿绻梢允共樵兏?,MySQL可以在表t1之前使用表t2。為了強(qiáng)制使用表順序,使用STRAIGHT_JOIN。
更多信息請(qǐng)查看IT技術(shù)專欄