網頁

2018/4/6

MySQL 效能調教 58到家MySQL军规升级版 comment by Triton Ho

今天在Facebook的Backend 台灣 (Backend Tw)社團看到板主分享58到家MySQL军规升级版這篇文章,下面紀錄板主對於該文章的評論及說明,是很好的參考及學習。

>表存储引擎必须使用InnoDB
在今天2018下,除非你的資料庫100%read only只作數據分析用途,在99.99情況下你都不應該還去使用上古的myisam。而tokudb是有patent的,而且其數據結構怎看都會發生hotspot的。(又是跑份一流,實務九流)

>表字符集默认使用utf8,必要时候使用utf8mb4
utf8和utf8mb4是mysql的智障早年留下來的問題……
之前cpu / harddisk資源不足時,mysql覺得4-bytes utf8字符非常少用嘛,便白目地讓mysql中「utf8」只支持到3-byte字符,要完整的utf8便要utf8mb4。
大堆新手看見utf8便選下去,然後人名啊地方字啊一堆常用的4-byte unicode便錯誤掉…… 所以,2018今天,請直接用utf8mb4,別用utf8

>禁止使用存储过程,视图,触发器,Event
我在公司時,已經說了:
除非要做audit log,或是傳說中的database schema refactoring,否則嚴禁triggerview
stored procedure看情況,在高流量時有時是不能避免的。(這一部份要說明原因太長,會另開文章說明)

>表必须有主键,推荐使用UNSIGNED整数为主键
如果有一個table沒有Primary Key(PK),而建立這table的不是junior developer,個人建議是給warning letter或是直接開除的,因為這是非常嚴重的過失。(笑)
另外,在mysql / mariadb的世界,所謂的secondary index(即是一般人口中所說的index)其實是一棵B-tree,其leaf-node是存了indexed column --> PK的mapping。
所以你的PK所用的bytes越多,你的secondary index也會越大體積。
(postgresql / oracle的走向是完全另一派的,所以pg / oracle是不建議用auto-increment,而應該用natural key的)

>禁止使用外键,如果要保证完整性,应由应用程式实现
個人看法是:
Foreign Key(FK)對效能影響輕微。
除非你是打算做social media(例子:facebook)這種對數據一致性非常低,但是流量非常大的系統。否則,2018年的角度來看,不值得為了那一點點的效能而不建FK。
另外,如果沒有FK,數據一致性便100%落在app. layer上。一旦app. layer有bug而你又沒建FK,讓你的數據弄髒了,你隨時要花上以星期計的工作天來對比資料的。
在超高流量的系統,全都是走nosql的,沒有transaction也沒有FK,但是還是一句:「先求有,再求好,先把產品快速地推上市場賣錢,有了流量再來想怎面對大流量吧。」 (註:facebook和uber的主資料庫是mysql也好,但是他們用法是把mysql當成nosql的data node來用,這場景下的mysql不算是RDBMS)

>使用varchar(20)存储手机号,不要使用整数
這是涉及了另一個概念:
在RDBMS中,1NF要求column中的值都應該是atomic(不可分拆)的。(註:array / json這堆全是違反了1NF耶~)
區碼這些應該是另外存到country_code這一個column的。

>互联网高并发业务,太多索引会影响写性能
oracle說過:每增加一個secondary index,你的throughout便降30%(我忘了是降到30%還是降30%了XD)
一個好的OLTP系統,大部份操作都應該以PK來拿資料的。

>非必要不要进行JOIN查询,如果要进行JOIN查询,被JOIN的字段必须类型相同,并建立索引
join本身不慢,笨蛋用什麼都會慢。
另外一句:我會說mysql / mariadb很爛,是因為其query optimizer能力非常弱,對比oracle和postgresql的持續飛躍性成長。mysql / mariadb到了今天還是沒法有效地做到subquery unnesting,所以在mysql / mariadb請非常小心地用subquery。

>同一个字段上的OR必须改写问IN,IN的值必须少于50个
這是關乎query optimizer問題,還是一句:mysql的query parser和optimizer,對比postgresql和oracle的,其能力是幼稚園級別的。
如果你的in內有超過50個值,請先把這些值開一個temp table,用insert丟進去,然後再做joining。


關於以上我目前很多還是有看沒有懂得...。


其他參考:

沒有留言:

張貼留言