大規(guī)模なテキスト ファイル (10 GB 以上) の最後の 10 行を取得する
テキスト処理の分野では、共通の課題は、非常に大きなテキスト ファイルの最後の數(shù)行。 10 GB を超えるファイルを扱う場(chǎng)合、従來のアプローチでは不十分な場(chǎng)合があります。この記事では、C# を使用したこの問題に対する効果的な解決策を紹介し、その実裝を示すコード スニペットを示します。
最後の 10 行を効率的に取得するための戦略には、ファイルを最後から逆方向に走査することが含まれます。行數(shù)は可変であるため、10 個(gè)の改行が見つかるまで後方への探索を繰り返します。この點(diǎn)に達(dá)したら、殘りのコンテンツを前方に読み取って、最後の 10 行をキャプチャします。
次の実裝を考えてみましょう。
public static string ReadEndTokens(string path, Int64 numberOfTokens, Encoding encoding, string tokenSeparator) {
int sizeOfChar = encoding.GetByteCount("\n");
byte[] buffer = encoding.GetBytes(tokenSeparator);
using (FileStream fs = new FileStream(path, FileMode.Open)) {
Int64 tokenCount = 0;
Int64 endPosition = fs.Length / sizeOfChar;
for (Int64 position = sizeOfChar; position < endPosition; position += sizeOfChar) {
fs.Seek(-position, SeekOrigin.End);
fs.Read(buffer, 0, buffer.Length);
if (encoding.GetString(buffer) == tokenSeparator) {
tokenCount++;
if (tokenCount == numberOfTokens) {
byte[] returnBuffer = new byte[fs.Length - fs.Position];
fs.Read(returnBuffer, 0, returnBuffer.Length);
return encoding.GetString(returnBuffer);
}
}
}
// handle case where number of tokens in file is less than numberOfTokens
fs.Seek(0, SeekOrigin.Begin);
buffer = new byte[fs.Length];
fs.Read(buffer, 0, buffer.Length);
return encoding.GetString(buffer);
}
}
このコードは、行數(shù)が異なる場(chǎng)合を処理します。ファイルが 10 未満であるため、読み取り操作を適切に調(diào)整します。エンコーディング パラメーターを使用すると、ファイルのエンコーディングに基づいたカスタマイズが可能になり、tokenSeparator を使用して、別のセパレーターの最後の連続要素を取得できます。
このアプローチを採(cǎi)用すると、大量のテキストの最後の 10 行を効果的に取得できます。ファイルを作成し、効率的な処理と正確な結(jié)果を保証します。
以上がC# で 10 GB のテキスト ファイルの最後の 10 行を効率的に読み取る方法は?の詳細(xì)內(nèi)容です。詳細(xì)については、PHP 中國(guó)語(yǔ) Web サイトの他の関連記事を參照してください。
ホットAIツール
Undress AI Tool
脫衣畫像を無(wú)料で
Undresser.AI Undress
リアルなヌード寫真を作成する AI 搭載アプリ
AI Clothes Remover
寫真から衣服を削除するオンライン AI ツール。
Clothoff.io
AI衣類リムーバー
Video Face Swap
完全無(wú)料の AI 顔交換ツールを使用して、あらゆるビデオの顔を簡(jiǎn)単に交換できます。
人気の記事
ホットツール
メモ帳++7.3.1
使いやすく無(wú)料のコードエディター
SublimeText3 中國(guó)語(yǔ)版
中國(guó)語(yǔ)版、とても使いやすい
ゼンドスタジオ 13.0.1
強(qiáng)力な PHP 統(tǒng)合開発環(huán)境
ドリームウィーバー CS6
ビジュアル Web 開発ツール
SublimeText3 Mac版
神レベルのコード編集ソフト（SublimeText3）
ホットトピック
8634
17
1783
16
1723
56
1577
28
1439
31
c多型：関數(shù)は一種の多型を過負(fù)荷にしていますか？
Jun 20, 2025 am 12:05 AM
はい、関數(shù)の過負(fù)荷はCの多型形態(tài)であり、特に時(shí)間の多型をコンパイルします。 1。関數(shù)の過負(fù)荷により、同じ名前が異なるパラメーターリストを持つ複數(shù)の関數(shù)が許可されます。 2。コンパイラは、提供されたパラメーターに基づいてコンパイル時(shí)間に呼び出す関數(shù)を決定します。 3.ランタイムの多型とは異なり、機(jī)能過負(fù)荷は実行時(shí)に余分なオーバーヘッドがなく、実裝が簡(jiǎn)単ですが、柔軟性が低くなります。
Cのさまざまな種類の多型は何ですか？説明した
Jun 20, 2025 am 12:08 AM
Cには、コンパイルタイム多型とランタイム多型の2つの主要な多型タイプがあります。 1.コンピレーション時(shí)間の多型は、関數(shù)の過負(fù)荷とテンプレートを通じて実裝され、高い効率を提供しますが、コード膨満につながる可能性があります。 2。ランタイムの多型は、仮想関數(shù)と継承を通じて実裝され、柔軟性を提供しますが、パフォーマンスオーバーヘッドを提供します。
C：多型は本當(dāng)に便利ですか？
Jun 20, 2025 am 12:01 AM
はい、Cの多型は非常に便利です。 1）新しいタイプを簡(jiǎn)単に追加できる柔軟性を提供します。 2）コードの再利用を促進(jìn)し、重複を減らします。 3）メンテナンスを簡(jiǎn)素化し、コードの拡張と適応が容易になります。パフォーマンスとメモリ管理の課題にもかかわらず、その利點(diǎn)は複雑なシステムで特に重要です。
C Destructors：一般的なエラー
Jun 20, 2025 am 12:12 AM
c Destructorscanleadtoseveralcommonerrors.toavoidhem：1）preventdobledeletionbysettingpointerstonullptrorusings.2）handleExceptionSeptionsEnterstructorsbyCatchingingthem.3）usevirtualDestructorurcorurcorurcorructorsinbaseclasseClassessoperproperpolymorphictedestruction.4
Cの多型：例を備えた包括的なガイド
Jun 21, 2025 am 12:11 AM
Cの多型は、ランタイム多型とコンパイル時(shí)間の多型に分けられます。 1.ランタイムの多型は仮想関數(shù)を通じて実裝され、正しい方法を?qū)g行時(shí)に動(dòng)的に呼び出すことができます。 2。コンパイル時(shí)間の多型は、関數(shù)の過負(fù)荷とテンプレートを通じて実裝され、より高いパフォーマンスと柔軟性を提供します。
c Pythonを知っている人のためのチュートリアル
Jul 01, 2025 am 01:11 AM
Pythonの移籍を研究する人は、最も直接的な混亂を抱えています。なぜPythonのように書くことができないのですか？構(gòu)文はより複雑ですが、基礎(chǔ)となる制御機(jī)能とパフォーマンスの利點(diǎn)を提供します。 1。構(gòu)文構(gòu)造の観點(diǎn)から、Cはインデントの代わりに巻き毛のブレース{}を使用してコードブロックを整理し、可変型を明示的に宣言する必要があります。 2。タイプシステムとメモリ管理の観點(diǎn)から、Cには自動(dòng)ガベージ収集メカニズムがなく、メモリを手動(dòng)で管理し、リリースのリリースに注意を払う必要があります。 RAIIテクノロジーは、リソース管理を支援できます。 3。関數(shù)とクラスの定義では、Cは修飾子、コンストラクター、デストラクタを明示的にアクセスし、オペレーターの過負(fù)荷などの高度な機(jī)能をサポートする必要があります。 4。標(biāo)準(zhǔn)ライブラリに関しては、STLは強(qiáng)力なコンテナとアルゴリズムを提供しますが、一般的なプログラミングのアイデアに適応する必要があります。 5
Cの多型のさまざまな形態(tài)は何ですか？
Jun 20, 2025 am 12:21 AM
C MolymorphismsCompile-Time、Runtime、andTemplatePolymorphism.1）Compile-TimepolymorphismusEssondoperatorover overloading forefficiency.2）runtimepolymorphismploysvirtualFunctionsforfibility.3）TemplatePolateMismorphismablePhismeNableencenericProgrommingfo
c多型：コーディングスタイル
Jun 19, 2025 am 12:25 AM
c多形は、compile-timeandruntimepolymorphismの組み合わせ、forbothefficiencyandflexibility.toharnesitspowerstyly：1）usesmartpointerslikestd :: unique_ptrformemorymanagement、2）sureseclaseshavevirtulirvirtulaructors、3）
