麻豆小视频在线观看_中文黄色一级片_久久久成人精品_成片免费观看视频大全_午夜精品久久久久久久99热浪潮_成人一区二区三区四区

首頁(yè) > 編程 > Ruby > 正文

Rails中使用MySQL分區(qū)表一個(gè)提升性能的方法

2020-10-29 19:42:09
字體:
來(lái)源:轉(zhuǎn)載
供稿:網(wǎng)友

MySQL 的分區(qū)表是一種簡(jiǎn)單有效的處理極大數(shù)據(jù)表的特性,通過(guò)它可以使應(yīng)用程序幾乎很少改動(dòng)就能達(dá)成對(duì)極大數(shù)據(jù)表的高效處理,但由于 Rails ActiveRecord 設(shè)計(jì)上一些慣例,可能導(dǎo)致一些數(shù)據(jù)處理不能利用分區(qū)表特性,反而變得很慢,在使用分區(qū)表過(guò)程中一定要多加注意。

下面以一個(gè)例子來(lái)說(shuō)明。在 light 系統(tǒng)中,有一張數(shù)據(jù)表是 diet_items, 主要字段是 id, schedule_id, meal_order food_id, weight, calory 等等,它的每一條記錄表示為用戶生成每日的減肥計(jì)劃(減肥食譜 + 運(yùn)動(dòng)計(jì)劃)中的一條飲食項(xiàng),平均一條的計(jì)劃有 10 多條數(shù)據(jù),數(shù)據(jù)量非常大,預(yù)計(jì)每天生成數(shù)據(jù)會(huì)超過(guò) 100 萬(wàn)條,所以對(duì)其做了分表處理,根據(jù) schedule_id hash 分成 60 張表,也就是數(shù)據(jù)將動(dòng)態(tài)分到 60 張表中。分表后 diet_items 的建表語(yǔ)句如下所示:

復(fù)制代碼 代碼如下:

CREATE TABLE `diet_items` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `schedule_id` int(11) NOT NULL,
  `meals_order` int(11) NOT NULL,
  `food_id` int(11) DEFAULT NULL,
  ....
  KEY id (`id`),
  UNIQUE KEY `index_diet_items_on_schedule_id_and_id` (`schedule_id`,`id`)
)
PARTITION BY HASH (schedule_id)
PARTITIONS 60;

分表之后,所有查詢 diet_items 的地方都要求帶上 schedule_id,比如獲取某一個(gè) schedule 的所有 diet_items,通過(guò) schedule. diet_items,獲取某一個(gè) id 的 diet_item 也是通過(guò) schedule.diet_items.find(id) 進(jìn)行。生成 diet_item 也沒(méi)有問(wèn)題,因?yàn)樯?diet_item 都是通過(guò) schedule.diet_items.build(data) 方式,在生成的時(shí)候都是帶了 schedule_id 的。

觀察 newrelic 日志,發(fā)現(xiàn) diet_item 的 update 和 destroy 相關(guān)的請(qǐng)求特別慢,仔細(xì)分析后,發(fā)現(xiàn)這兩種操作非常忙是由于 ActiveRecord 生成的 sql 并沒(méi)有帶 schedule_id 導(dǎo)致。 diet_item update 操作 ActiveRecord 生成的 sql 語(yǔ)句類似于 update diet_items set … where id = <id>。 diet_item destroy 生成的語(yǔ)句類似于 delete diet_items where id = <id> 因?yàn)闆](méi)有帶 schedule_id,導(dǎo)致這兩種語(yǔ)句都需要 mysql 掃描 60 張分區(qū)表才能夠完成一個(gè)語(yǔ)句執(zhí)行,非常慢!

知道原因之后就好辦了,把原來(lái)的 update 和 destroy 調(diào)用改為自定義版本的 update 和 destroy 調(diào)用就可以了。

diet_item.update(attributes) 改成 DietItem.where(id: diet_item.id, schedule_id: diet_item.schedule_id).update_all(attributes)

diet_item.destroy 改成 DietItem.where(id: diet_item.id, schedule_id: diet_item.schedule_id).delete_all

這樣生成的 sql 都帶上 schedule_id 條件,從而避免了掃描全部的分區(qū)表,性能提升立竿見(jiàn)影。

發(fā)表評(píng)論 共有條評(píng)論
用戶名: 密碼:
驗(yàn)證碼: 匿名發(fā)表
主站蜘蛛池模板: 国产精品99久久久久久宅女 | 欧美精品一区二区三区四区 | 91精品免费在线 | 国产精品久久久久久久久久久久午夜 | 日本s级毛片免费观看 | 日本免费aaa观看 | av免费不卡国产观看 | 日韩毛片网 | 逼特逼视频在线观看 | 久久久99精品视频 | 久久久av亚洲男天堂 | 精品在线观看一区二区 | 亚洲一区二区三区四区精品 | 国产亚洲精品综合一区 | 黑人一区二区三区四区五区 | 国产精品一区二区三区在线 | 欧美a在线 | 欧美毛片免费观看 | 一本色道久久综合亚洲精品小说 | 久久久久国 | 久久久经典视频 | 欧美中文字幕一区二区三区亚洲 | 亚洲国产成人久久成人52 | 久久99国产伦子精品免费 | 操操影视 | 国产盼盼私拍福利视频99 | 九色p| 法国性xxx精品hd专区 | 黄色大片在线免费观看 | 久久久一区二区精品 | 日本a在线观看 | 免费一级毛片网站 | 91av在线免费播放 | 欧美偷拍一区二区 | 成年人视频免费 | 国产伦精品一区二区三区在线 | 深夜小视频在线观看 | 亚洲精品a在线观看 | 色欲香天天天综合网站 | 有兽焉免费动画 | 国产午夜精品一区二区三区四区 |