c#分頁(yè)讀取GB文本文件實(shí)例
本文實(shí)例講述了c#分頁(yè)讀取GB文本文件的方法。分享給大家供大家參考。具體如下:
一、應(yīng)用場(chǎng)景:
① .我在做BI開(kāi)發(fā)測(cè)試的時(shí)候,有可能面對(duì)source文件數(shù)GB的情況,如果使用一般的文本編輯器,則會(huì)卡死,或要等很久才能顯示出來(lái)。
② .有時(shí)候,我們使用ascii(01)或ascii(02)作為行或列的分隔符,這樣的臨時(shí)文件用于導(dǎo)數(shù)據(jù)到DB,如果文件導(dǎo)入過(guò)程中有錯(cuò)誤,需要查看文件 的時(shí)候,普通的編輯器不支持換行,則會(huì)很恐怖。
為解決這兩個(gè)需求,我使用c#完成了一個(gè)簡(jiǎn)單的winform的應(yīng)用程序。
功能列表:
1.根據(jù)配置的行數(shù),寫(xiě)測(cè)試文件,指定行終止符,列分隔符暫時(shí)沒(méi)有使用上。
2.根據(jù)指定的行終止符,和pagesize,分頁(yè)讀取文件內(nèi)容,而且可以在text和byte間轉(zhuǎn)換。
二、實(shí)現(xiàn)代碼:
主要的代碼如下,使用了一個(gè)迭代器:
{
/*
string line;
using (TextReader reader = File.OpenText(filename))
{
while ((line = reader.ReadLine()) != null)
yield return line;
}
*/
StringBuilder sb = new StringBuilder();
using (FileStream fs = File.OpenRead(filename))
{
int b = 0;
while ((b=fs.ReadByte())!=-1)
{
//textbox3 store the row terminator
if (b.ToString() == textBox3.Text.Trim())
{
yield return sb.ToString();
sb.Clear();
}
else
sb.Append(UnicodeEncoding.ASCII.GetString(new byte[] { byte.Parse(b.ToString()) }));
}
}
}
示例截圖如下所示:

我測(cè)試了一次,生成了1個(gè)億的數(shù)據(jù)行,在系統(tǒng)中顯示占用6GB的空間,
我嘗試讀寫(xiě),無(wú)卡頓情況。
可以進(jìn)一步更新:
根據(jù)列行分隔符顯示到gridview中,這樣更清晰。
可以從后往前讀文件。
希望本文所述對(duì)大家的C#程序設(shè)計(jì)有所幫助。
相關(guān)文章
c# socket心跳超時(shí)檢測(cè)的思路(適用于超大量TCP連接情況下)
這篇文章主要介紹了c# socket心跳超時(shí)檢測(cè)的思路(適用于超大量TCP連接情況下),幫助大家更好的理解和學(xué)習(xí)使用c#,感興趣的朋友可以了解下2021-03-03
C#彈出對(duì)話框確定或者取消執(zhí)行相應(yīng)操作的實(shí)例代碼
這篇文章主要介紹了C#彈出對(duì)話框確定或者取消執(zhí)行相應(yīng)操作的實(shí)例代碼,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-12-12
C# 控件屬性和InitializeComponent()關(guān)系案例詳解
這篇文章主要介紹了C# 控件屬性和InitializeComponent()關(guān)系案例詳解,本篇文章通過(guò)簡(jiǎn)要的案例,講解了該項(xiàng)技術(shù)的了解與使用,以下就是詳細(xì)內(nèi)容,需要的朋友可以參考下2021-08-08
CefSharp如何進(jìn)行頁(yè)面的縮放(Ctrl+滾輪)
CefSharp簡(jiǎn)單來(lái)說(shuō)就是一款.Net編寫(xiě)的瀏覽器包,本文主要介紹了CefSharp如何進(jìn)行頁(yè)面的縮放,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2021-06-06
C#實(shí)現(xiàn) Server-sent Events的步驟
這篇文章主要介紹了C#實(shí)現(xiàn) Server-sent Events的步驟,幫助大家更好的理解和使用c#,感興趣的朋友可以了解下2021-01-01

