佳木斯湛栽影视文化发展公司

主頁(yè) > 知識(shí)庫(kù) > MySQL高效導(dǎo)入多個(gè).sql文件方法詳解

MySQL高效導(dǎo)入多個(gè).sql文件方法詳解

熱門(mén)標(biāo)簽:AI電銷 服務(wù)外包 Linux服務(wù)器 呼叫中心市場(chǎng)需求 鐵路電話系統(tǒng) 百度競(jìng)價(jià)排名 地方門(mén)戶網(wǎng)站 網(wǎng)站排名優(yōu)化

MySQL有多種方法導(dǎo)入多個(gè).sql文件(里面是sql語(yǔ)句),常用的有兩個(gè)命令:mysql和source。

但是這兩個(gè)命令的導(dǎo)入效率差別很大,具體請(qǐng)看最后的比較。

(還有sqlimport和LOAD DATA INFILE等導(dǎo)入方法,不過(guò)它們主要用于導(dǎo)入.csv或.xml文件數(shù)據(jù),不是.sql文件)

假設(shè)我們有一個(gè) users.sql 大文件,為方便我們將其拆分成:user1.sql、user2.sql、user3.sql 三個(gè)獨(dú)立的小sql文件。

1、mysql命令導(dǎo)入

mysql命令導(dǎo)入多個(gè)sql文件方法:

$ for SQL in *.sql; do mysql -uroot -p"123456" mydb  $SQL; done

2、source命令導(dǎo)入

source命令需要首先進(jìn)入MySQL命令行:

$ mysql -uroot -p"123456"

導(dǎo)入多個(gè)sql文件需要先創(chuàng)建一個(gè)額外的文件,名字隨意,這里我們?nèi)。篴ll.sql,內(nèi)容:

source user1.sql
source user2.sql
source user3.sql

注意,這里每行一條,必須以source命令開(kāi)頭。

然后用source命令執(zhí)行該文件:

mysql > use mydb;
mysql > source /home/gary/all.sql

3、如何提高導(dǎo)入速度?

對(duì)于百M(fèi)級(jí)以上文件,如果光這樣導(dǎo)入,速度是極其緩慢的,

根據(jù)MySQL官方建議,我們有幾個(gè)措施可以極大提高導(dǎo)入的速度,如下:

對(duì)于MyISAM,調(diào)整系統(tǒng)參數(shù):bulk_insert_buffer_size(至少單個(gè)文件大小的2倍以上)

對(duì)于InnoDB,調(diào)整系統(tǒng)參數(shù):innodb_log_buffer_size(至少單個(gè)文件大小的2倍以上,導(dǎo)入完成后可以改回默認(rèn)的8M,注意不是innodb_buffer_pool_size。)

除主鍵外,刪除其他索引,導(dǎo)入完成后重建索引。

關(guān)閉自動(dòng)提交:autocommit=0。(請(qǐng)勿用set global autocommit=1;命令來(lái)關(guān)閉,否則整個(gè)MySQL系統(tǒng)都會(huì)停止自動(dòng)commit,innodb log buffer很快就會(huì)爆滿,5和6項(xiàng)也請(qǐng)僅在會(huì)話中有效,正確做法請(qǐng)往下看)

關(guān)閉唯一索引檢查:unique_checks=0。(關(guān)閉了這一項(xiàng)會(huì)影響on duplicate key update的效果)

關(guān)閉外鍵檢查:foreign_key_checks=0。

insert值寫(xiě)在一條語(yǔ)句內(nèi),如:INSERT INTO yourtable VALUES (1,2), (5,5), ...;

有自增列的,設(shè)置:innodb_autoinc_lock_mode的值為2,

其中,第1-2、8條在修改my.cnf文件,然后重啟MySQL:

bulk_insert_buffer_size=2G;
innodb_log_buffer_size=2G;
innodb_autoinc_lock_mode=2;

第3條用到的命令:

#刪除索引
DROP INDEX index_name ON talbe_name
ALTER TABLE table_name DROP INDEX index_name
ALTER TABLE table_name DROP PRIMARY KEY

# 添加索引
ALTER TABLE table_name ADD INDEX index_name (column_list)
ALTER TABLE table_name ADD UNIQUE (column_list)
ALTER TABLE table_name ADD PRIMARY KEY (column_list)

第4-6條寫(xiě)在.sql中,批量bash腳本如下:

for SQL in *.sql;
do
  echo $SQL;
  sed -i '1i\SET autocommit=0;\nSET unique_checks=0;\nSET foreign_key_checks=0;' $SQL
  sed -i '$a\COMMIT;\nSET autocommit=1;\nSET unique_checks=1;\nSET foreign_key_checks=1;' $SQL
done

按照以上幾個(gè)步驟調(diào)整后,插入速度必會(huì)有大幅度的提高。

4、mysql和source效率比較

在sql文件較小的情況下,source速度比mysql高,

在實(shí)際測(cè)試導(dǎo)入時(shí),5個(gè)合計(jì)25M的sql文件,mysql命令的速度比source要快2秒(我自己的測(cè)試,不代表普遍的結(jié)果),

可以粗略得出,在導(dǎo)入大的sql文件時(shí),建議使用mysql命令。

以上既是MySQL高效導(dǎo)入多個(gè).sql文件的方法,希望能幫助到大家

您可能感興趣的文章:
  • MySQL從命令行導(dǎo)入SQL腳本時(shí)出現(xiàn)中文亂碼的解決方法
  • MySQL導(dǎo)入sql腳本錯(cuò)誤:2006 解決方法
  • mysql導(dǎo)入sql文件報(bào)錯(cuò) ERROR 2013 2006 2002
  • mysql導(dǎo)入sql文件命令和mysql遠(yuǎn)程登陸使用詳解
  • 在linux中導(dǎo)入sql文件的方法分享(使用命令行轉(zhuǎn)移mysql數(shù)據(jù)庫(kù))
  • 解析MYSQL 數(shù)據(jù)庫(kù)導(dǎo)入SQL 文件出現(xiàn)亂碼的問(wèn)題
  • Mysql命令行導(dǎo)入sql數(shù)據(jù)的代碼
  • Mysql命令行導(dǎo)入sql數(shù)據(jù)

標(biāo)簽:銅川 蘭州 崇左 衡水 仙桃 黃山 湘潭 湖南

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《MySQL高效導(dǎo)入多個(gè).sql文件方法詳解》,本文關(guān)鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無(wú)關(guān)。
  • 相關(guān)文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    蚌埠市| 休宁县| 包头市| 开江县| 甘肃省| 敦煌市| 德令哈市| 抚宁县| 皋兰县| 广汉市| 中方县| 周口市| 天津市| 舒兰市| 贵南县| 原阳县| 泸水县| 南康市| 华坪县| 固阳县| 崇礼县| 都昌县| 盐津县| 林西县| 铜陵市| 界首市| 绍兴县| 右玉县| 和顺县| 稷山县| 安泽县| 广宗县| 博湖县| 文山县| 越西县| 襄樊市| 阜南县| 祁连县| 瑞安市| 门源| 泌阳县|