讓你的insert操作速度增加1000倍的方法
更新時(shí)間：2009年08月29日 01:29:47 作者：
大家平時(shí)都會(huì)使用insert語句,特別是有時(shí)候需要一個(gè)大批量的數(shù)據(jù)來做測(cè)試,一條一條insert將會(huì)是非常慢的,那么我們?nèi)绾巫屛覀兊膇nser更快呢。
很多時(shí)候方法選對(duì)了對(duì)于我們做事將會(huì)是事半功倍。
大家平時(shí)都會(huì)使用insert語句,特別是有時(shí)候需要一個(gè)大批量的數(shù)據(jù)來做測(cè)試,一條一條insert將會(huì)是非常慢的,那么我們?nèi)绾巫屛覀兊膇nser更快呢。
先看個(gè)例子:
我們需要在如下這個(gè)表中插入測(cè)試數(shù)據(jù),包含兩列,一個(gè)是itemid,一個(gè)是itemname。如果向這個(gè)表中插入103,680,000 條記錄,普通的插入方法可能需要20多天才能完成,但是用這里介紹的新方法在5個(gè)小時(shí)內(nèi)就能夠完成。
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
DECLARE @counter int
SET @counter = 1
WHILE (@counter < 100000)
BEGIN
INSERT INTO #tempTable VALUES (@counter, 'Hammer')
SET @counter = @counter + 1
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
INSERT INTO #tempTable VALUES (1, 'Hammer')
WHILE((SELECT COUNT(*) FROM #tempTable) < 100000)
BEGIN
INSERT INTO #tempTable ([Item ID], [Item Name])
(SELECT [Item ID] + (SELECT COUNT(*) FROM #tempTable), 'Hammer' FROM #tempTable)
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
用第一種方法可能需要幾十分鐘插入100000數(shù)據(jù),但是用第二種只要4秒鐘。再改進(jìn)下,2秒鐘就完成:
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
INSERT INTO #tempTable VALUES (1, 'Hammer')
DECLARE @counter int
SET @counter = 1
WHILE(@counter <= 17)
BEGIN
INSERT INTO #tempTable ([Item ID], [Item Name])
(SELECT [Item ID] + (SELECT COUNT(*) FROM #tempTable), 'Hammer' FROM #tempTable)
SET @counter = @counter + 1
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
大家平時(shí)都會(huì)使用insert語句,特別是有時(shí)候需要一個(gè)大批量的數(shù)據(jù)來做測(cè)試,一條一條insert將會(huì)是非常慢的,那么我們?nèi)绾巫屛覀兊膇nser更快呢。
先看個(gè)例子:
我們需要在如下這個(gè)表中插入測(cè)試數(shù)據(jù),包含兩列,一個(gè)是itemid,一個(gè)是itemname。如果向這個(gè)表中插入103,680,000 條記錄,普通的插入方法可能需要20多天才能完成,但是用這里介紹的新方法在5個(gè)小時(shí)內(nèi)就能夠完成。
先看一般的數(shù)據(jù)插入方法,假設(shè)我們向上表中插入100000 條數(shù)據(jù):
復(fù)制代碼 代碼如下:
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
DECLARE @counter int
SET @counter = 1
WHILE (@counter < 100000)
BEGIN
INSERT INTO #tempTable VALUES (@counter, 'Hammer')
SET @counter = @counter + 1
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
新的插入方法會(huì)使用已經(jīng)插入的數(shù)據(jù)來進(jìn)行下一條記錄的操作,原理如下:
那么看看我的新insert代碼:
復(fù)制代碼 代碼如下:
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
INSERT INTO #tempTable VALUES (1, 'Hammer')
WHILE((SELECT COUNT(*) FROM #tempTable) < 100000)
BEGIN
INSERT INTO #tempTable ([Item ID], [Item Name])
(SELECT [Item ID] + (SELECT COUNT(*) FROM #tempTable), 'Hammer' FROM #tempTable)
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
用第一種方法可能需要幾十分鐘插入100000數(shù)據(jù),但是用第二種只要4秒鐘。再改進(jìn)下,2秒鐘就完成:
復(fù)制代碼 代碼如下:
CREATE TABLE #tempTable([Item ID] [bigint], [Item Name] nvarchar(30))
INSERT INTO #tempTable VALUES (1, 'Hammer')
DECLARE @counter int
SET @counter = 1
WHILE(@counter <= 17)
BEGIN
INSERT INTO #tempTable ([Item ID], [Item Name])
(SELECT [Item ID] + (SELECT COUNT(*) FROM #tempTable), 'Hammer' FROM #tempTable)
SET @counter = @counter + 1
END
SELECT * FROM #tempTable
DROP TABLE #tempTable
相關(guān)文章
sql內(nèi)連接查詢代碼，實(shí)例分析inner join實(shí)現(xiàn)方法2008-04-04
最新Navicat?16??Mac版安裝永久激活教程(親測(cè)有效)
這篇文章主要介紹了最新Navicat?16??Mac版安裝永久激活教程(親測(cè)有效),本文通過圖文并茂的形式給大家介紹的非常詳細(xì)，對(duì)Navicat?16?永久激活教程感興趣的朋友一起看看吧2022-08-08
SQLServer與Access常用SQL函數(shù)區(qū)別
SQLServer Access SQL函數(shù)2009-06-06
MySQL有很多可以導(dǎo)入數(shù)據(jù)的方法，然而這些只是數(shù)據(jù)傳輸中的一半，另外的一般是從MySQL數(shù)據(jù)庫中導(dǎo)出數(shù)據(jù)。有許多的原因我們需要導(dǎo)出數(shù)據(jù)。一個(gè)重要的原因是用于備份數(shù)據(jù)庫。數(shù)據(jù)的造價(jià)常常是昂貴的，需要謹(jǐn)慎處理它們。2006-12-12
使用Navicat連接opengauss數(shù)據(jù)庫完整步驟(詳細(xì)圖文)
Navicat是一套快速、可靠并價(jià)格相當(dāng)便宜的數(shù)據(jù)庫管理工具,專為簡(jiǎn)化數(shù)據(jù)庫的管理及降低系統(tǒng)管理成本而設(shè),下面這篇文章主要給大家介紹了關(guān)于使用Navicat連接opengauss數(shù)據(jù)庫的完整步驟,需要的朋友可以參考下2024-02-02
Navicat導(dǎo)入海量Excel數(shù)據(jù)到數(shù)據(jù)庫的流程步驟
Navicat 是一款功能強(qiáng)大的數(shù)據(jù)庫管理工具,支持多種數(shù)據(jù)庫系統(tǒng),它提供便捷的數(shù)據(jù)導(dǎo)入功能,可以將 Excel 數(shù)據(jù)導(dǎo)入到數(shù)據(jù)庫中,本文給大家介紹了Navicat導(dǎo)入海量Excel數(shù)據(jù)到數(shù)據(jù)庫的流程步驟,文章通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2025-02-02
GaussDB數(shù)據(jù)庫使用COPY命令導(dǎo)入導(dǎo)出數(shù)據(jù)的場(chǎng)景分析
使用COPY命令可以方便地導(dǎo)入數(shù)據(jù)到GaussDB,GaussDB還提供了其他數(shù)據(jù)導(dǎo)入工具和功能,如使用GDS導(dǎo)入數(shù)據(jù)、使用INSERT多行插入、使用gsql元命令導(dǎo)入數(shù)據(jù)、ETL工具集成等,以滿足不同場(chǎng)景下的數(shù)據(jù)導(dǎo)入需求,對(duì)GaussDB COPY命令相關(guān)知識(shí)感興趣的朋友一起看看吧2024-01-01
在ITPUB上有一則非常巧妙的SQL技巧，學(xué)習(xí)一下，記錄在這里2013-09-09
數(shù)據(jù)庫分頁查詢語句數(shù)據(jù)庫查詢
關(guān)于分頁 SQL 的資料許多，有的使用存儲(chǔ)過程，有的使用游標(biāo)。本人不喜歡使用游標(biāo)，我覺得它耗資、效率低；使用存儲(chǔ)過程是個(gè)不錯(cuò)的選擇，因?yàn)榇鎯?chǔ)過程是顛末預(yù)編譯的，執(zhí)行效率高，也更靈活2014-08-08
這幾天查看了很多關(guān)于SQL SERVER收縮數(shù)據(jù)文件方面的文章，準(zhǔn)備寫一篇關(guān)于收縮日志方面的文章，但是突然有種沖動(dòng)將看過經(jīng)典的文章翻譯出來,需要的朋友可以參考下2018-03-03