オンラインで重複行を削除 – 無料のテキスト重複除去ツールおよびリストクリーナー
テキスト リスト、電子メール アドレス、SEO キーワード、URL、CSV 行、ログ ファイルから重複行をリアルタイムで即座に検索して削除します。元のリストの順序を維持したり、大文字と小文字を区別しない一致、空白の正規化、重複のみの監査、出現回数のサポートにより、結果をアルファベット順または頻度で並べ替えることができます。
オンラインで重複行を削除する方法
- テキストまたはリストを貼り付けます: 左側の テキスト入力 ボックスに複数行のリストを入力するか、サンプル リストのロード をクリックして、重複した電子メール アドレスと大文字小文字の混合でテストします。
- フィルターとマッチング モードを選択します: 大文字と小文字を区別した比較を維持しますコード/ログが正確に一致するように をチェックするか、チェックを外して (または Email / キーワード リスト をクリックして)、
Alex@example.comおよびalex@example.comが一緒に重複排除されます。 - 並べ替えまたは監査頻度: 並べ替え順序 ドロップダウンを使用して、元の順序を保持したり、アルファベット順 (A ～ Z または Z ～ A) で並べ替えたり、最も頻度の高い順に行をランク付けしたり、重複数を表示 を有効にして を使用したりできます。
- コピーまたはエクスポートして
.txt: [clipboardにコピー] をクリックして、クリーンアップしたリストを Excel、Google スプレッドシート、またはコード エディターに貼り付けるか、[ダウンロード .txt] をクリックしてファイルとして保存します。
重複排除モードと出力例
入力リストに apple、banana、apple、cherry、banana、apple が含まれているとします。各モードがリストを処理する方法は次のとおりです。
| モード/プリセット | 何をするのか | 出力例 |
|---|---|---|
| 一意の行を保持 (デフォルト) | すべての行の 1 つのコピーを元の順序で保持し、後続の繰り返しをすべて削除します。 | ZXQ0QXザアップル、バナナ、チェリー |
| 頻度レポート | 行の重複を除去し、頻度が最も高い順に並べ替えて、出現回数を表示します。 | ZXQ0QXザアップル (3×)、バナナ (2×)、チェリー (1×) |
| Extract は複製のみ (2+) | 少なくとも 2 回繰り返された行のみを出力します (重複レコードの検索に最適です)。 | ZXQ0QXザアップル (3×)、バナナ (2×) |
| 厳密に単一行を維持 (1×) | 1 回だけ出現し、繰り返されなかった行のみを出力します。 | チェリー |
重複行を削除するための一般的な使用例
- Eメールと購読者リストのクリーニング: 大文字と小文字を区別しないモードと空白のトリミングを使用して、エクスポートされたニュースレターまたは CRM メール リストの重複を除去し、購読者が重複したキャンペーンを受信しないようにします。
- SEO キーワードとバックリンクの監査: Google Search Console、Ahrefs、SEMrush からのキーワード エクスポートまたは URL リストを結合し、ワンクリックで重複したクエリを削除します。
- ログ分析とデバッグ: サーバー ログ、IP リスト、またはスタック トレースで 頻度レポート を有効にして、どのエラー メッセージまたは IP アドレスが最も頻繁に発生するかをすぐに確認します。
- Code、Config、および CSV 準備: 元の行順序を失わずに、`.gitignore` ルール、環境変数、ホスト ファイル、または単一列の CSV 識別子をクリーンアップします。
よくある質問
元の順序を維持したまま重複行を削除するにはどうすればよいですか?
Sort Order を Keep Original Order (デフォルト) に設定したままにします。このツールは、各行の最初の出現箇所をその出現位置と同じ位置に保持し、それ以降の繰り返しを削除します。
「最初の出現を保持」と「最後の出現を保持」の違いは何ですか?
元の順序を保持するか、大文字と小文字を区別しないマッチングを行う場合、Keep First Occurrence は、繰り返される行の最初の位置と大文字小文字を保持しますが、Keep Last Occurrence は最終位置と大文字小文字を保持します (構成の上書きや時系列ログに役立ちます)。
視覚的に同一の 2 つの行が重複として削除されなかったのはなぜですか?
通常、これは、1 つの行の末尾にスペースがあるか、大文字と小文字がわずかに異なるために発生します。すべての隠れたバリエーションを検出するには、先頭と末尾の空白を削除するをオンのままにし、複数の内部スペースを正規化するを有効にし、大文字と小文字を区別する比較をオフにします。
リスト内でどの行が重複しているかを確認するにはどうすればよいですか?
フィルタモードで重複行のみ抽出(2回以上)を選択します(または、重複のみ(2回以上)監査 presetをクリックします)。これにより、一意のシングルトンが非表示になり、複数回出現した行のみが表示されます。