1亿条数据如何分表100张到Mysql数据库中(PHP)
生活随笔
收集整理的這篇文章主要介紹了
1亿条数据如何分表100张到Mysql数据库中(PHP)
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
來源:http://www.jb51.net/article/70265.htm
這篇文章主要介紹了當(dāng)數(shù)據(jù)量猛增的時候如何把一億條數(shù)據(jù)分表100張到Mysql數(shù)據(jù)庫中,需要的朋友可以參考下
下面通過創(chuàng)建100張表來演示下1億條數(shù)據(jù)的分表過程,具體請看下文代碼。
當(dāng)數(shù)據(jù)量猛增的時候,大家都會選擇庫表散列等等方式去優(yōu)化數(shù)據(jù)讀寫速度。筆者做了一個簡單的嘗試,1億條數(shù)據(jù),分100張表。具體實現(xiàn)過程如下:
首先創(chuàng)建100張表:
?| 1 2 3 4 5 6 7 8 9 10 | $i=0; while($i<=99){ echo "$newNumber \r\n"; $sql="CREATE TABLE `code_".$i."` ( `full_code` char(10) NOT NULL, `create_time` int(10) unsigned NOT NULL, PRIMARY KEY (`full_code`), ) ENGINE=MyISAM DEFAULT CHARSET=utf8"; mysql_query($sql); $i++; |
下面說一下我的分表規(guī)則,full_code作為主鍵,我們對full_code做hash
函數(shù)如下:
?| 1 2 3 4 5 6 7 | $table_name=get_hash_table('code',$full_code); function get_hash_table($table,$code,$s=100){ $hash = sprintf("%u", crc32($code)); echo $hash; $hash1 = intval(fmod($hash, $s)); ?return $table."_".$hash1; } |
這樣插入數(shù)據(jù)前通過get_hash_table獲取數(shù)據(jù)存放的表名。
最后我們使用merge存儲引擎來實現(xiàn)一張完整的code表
?| 1 2 3 4 5 | CREATE TABLE IF NOT EXISTS `code` ( `full_code` char(10) NOT NULL, `create_time` int(10) unsigned NOT NULL, INDEX(full_code) ) TYPE=MERGE UNION=(code_0,code_1,code_2.......) INSERT_METHOD=LAST ; |
這樣我們通過select * from code就可以得到所有的full_code數(shù)據(jù)了。
以上介紹就是本文的全部內(nèi)容,希望對大家有所幫助。
總結(jié)
以上是生活随笔為你收集整理的1亿条数据如何分表100张到Mysql数据库中(PHP)的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 快速判断经纬度方向口诀(如何辨别经纬度)
- 下一篇: 常州工业职业技术学院2020录取查询(2