duplicate-files

「--recurse」オプションで「fdupes」を使用するときは、.appフォルダをスキップしてください。
duplicate-files

「--recurse」オプションで「fdupes」を使用するときは、.appフォルダをスキップしてください。

fdupes特定のフォルダにある重複ファイルのリストを印刷するオプションを使用しています--recurse。 しかし、私はmacOSを使用しているので、再帰プロセスはMacアプリケーション(folderで終わるフォルダのように見えます.app)をフォルダとして扱い、そのアプリケーションとして実行するため、重複ファイルに不要な追加情報がたくさん生成されます。そのようなフォルダをスキップする方法はありますか? ...

Admin

同じコンテンツを含む重複フォルダを検出する
duplicate-files

同じコンテンツを含む重複フォルダを検出する

名前は異なりますが、内容は同じフォルダがあることがよくあります。 たとえば、アクセスしやすくするためにフォルダを別の場所にコピーし、そのコピーを削除するのを忘れていました。 同じ内容を含む重複フォルダをどのように検出しますか? 重複ファイルを検索するためにCzkawkaを使用しましたが、重複フォルダを検索するための同様のツールが見つかりませんでした。 エマルジョン: 重複フォルダを検出しますが、空のフォルダの存在は無視します。 https://stackoverflow.com/questions/43560796/how-to-find-duplicate...

Admin

ディレクトリ名の代わりにinodeを使用してディレクトリを一覧表示するにはどうすればよいですか?別の inode を使用して同じディレクトリ名が 2 回表示されます。
duplicate-files

ディレクトリ名の代わりにinodeを使用してディレクトリを一覧表示するにはどうすればよいですか?別の inode を使用して同じディレクトリ名が 2 回表示されます。

Pythonがインストールされているディレクトリを一覧表示すると、ディレクトリがinclude2回表示され、各ディレクトリに異なるinode。 ╰─○ ls -i1 2282047 bin 2641630 include 2642559 include 2282048 lib 2641850 share inodeが違うので内容も違うと思います。 lsディレクトリ名の代わりにinodeを使用して個別に解決できるコマンドはありますか? 実行すると、ls includeどのディレクトリがリストされているかわかりません。 ...

Admin

重複ファイルを見つけてアーカイブするディレクトリを指定します。
duplicate-files

重複ファイルを見つけてアーカイブするディレクトリを指定します。

会社の共有ドライブを整理しようとしていますが、重複したアイテムを削除したいと思います。重複エントリを削除するディレクトリを指定できる重複検索プログラムはありますか? 私はこれを行うことができます。fdupes -rdN some_Folder master_folderしたがって、あるフォルダに他のフォルダよりも優先的に重複するエントリを保持します。 これには何千ものファイルが含まれているため、手動で行うことは実際にはオプションではありません。 rdfindの結果ファイルがこれを行う唯一の方法である場合、それを使用する最良の方法は何ですか? ...

Admin

1つを除くすべての重複画像ファイルを削除します。
duplicate-files

1つを除くすべての重複画像ファイルを削除します。

かなり多くの重複を含むイメージフォルダがありますが、1つを除いてすべて削除したいと思います。 インターネット検索でこの賢いスクリプトを見つけました。この投稿簡単に言えばほぼ私が欲しいもの: #!/bin/sh -eu find "${1:-.}" -type f ! -empty -print0 | xargs -0 md5 -r | \ awk '$1 in a{sub("^.{33}","");printf "%s\0",$0}a[$1]+=1{}' | \ xargs -0 rm -v -- 残念ながら、私はUNIXシェルスクリプトに...

Admin

「rmlint」を使用して、ある場所からのみ重複エントリを削除し、他の場所を変更しないままにする方法は?
duplicate-files

「rmlint」を使用して、ある場所からのみ重複エントリを削除し、他の場所を変更しないままにする方法は?

/path/to/a2つの場所があり、両方の/path/to/bパスで重複ファイルを見つけて/path/to/bプロジェクトのエントリのみを削除する必要があります。 rmlintかなり大きな削除スクリプトを生成しますが、これには両方のパス(空のフォルダを含む)から削除する項目が含まれています。 rmlintこの結果を得るために、次のパラメータを使用して実行しましたが、削除対象としてのみ選択されたとします/path/to/a。 rmlint -g -e -S p /path/to/a /path/to/b ...

Admin

rmlintを使用して2つの大きなフォルダをマージする方法は?
duplicate-files

rmlintを使用して2つの大きなフォルダをマージする方法は?

2つのフォルダをマージするオプションを探索しながら、私は次の非常に強力なツールを見つけました。リント。何か役に立つものがあります文書(そして滑らかな地図)。 以前はシナリオに言及しましたが、いくつかの素晴らしい答えを受けました。 チェックサムの違いを維持しながら、1つのフォルダから同じファイルを削除するように2つのフォルダをマージする方法は? 私はrdfindその答えに向かって傾いていましたが、調査中に偶然に開発rmlint者の意見を見つけました。議論する繰り返し分離に関する問題は非常に明白です。 これらすべてを見直して、私はいくつかの興味深い主張を見つけま...

Admin

別のディレクトリから重複した項目を繰り返し削除する
duplicate-files

別のディレクトリから重複した項目を繰り返し削除する

(よくある質問がたくさんあることに注意してください(例:ここ、ここ、こことここ)しかし、彼らはディレクトリ構造が1レベルであると仮定するか、答えはより複雑な複数行スクリプトであると仮定します。 ) 私の状況は次のとおりです。 . ├── to_keep │   ├── a │   │   └── duplicate1.txt │   └── b │   ├── duplicate2.txt │   └── unique1.t...

Admin

一意のファイルを新しいディレクトリにコピーしますか?
duplicate-files

一意のファイルを新しいディレクトリにコピーしますか?

私には、さまざまな視点のさまざまなメディア(写真、音楽など)を含む多くのフォルダがあります。異なるフォルダには共通のコンテンツがいくつかあります(たとえば、写真が2つのフォルダにある場合があります)、ほとんどは一意である必要があります。他のフォルダのファイル名は保証されません。たとえば、写真はとA/foo.pngで表示できますB/bar.png。または、A/baz.png同じB/baz.pngファイルではないかもしれません。 すべてのメディアを単一のフォルダに統合し、重複したアイテムを削除する方法を探しています。理想的には、ファイルが元々どこから来たのかに...

Admin

重複ファイルを見つける最も効率的な方法は何ですか?
duplicate-files

重複ファイルを見つける最も効率的な方法は何ですか?

合計数百万のファイル(合計テラバイト)を含む多くのフォルダがあります。すべてのファイルで重複したファイルを見つけたいです。理想的には、出力は簡単なチートのリストです。私のスクリプトを使ってさらに処理します。 fdupesファイルを比較するために「ファイルサイズとMD5署名」を使用するコマンドがあることを知っています。 私にとって明確ではないのは、私が望んでいない一意のサイズのファイルを読んでいるのか(そしてそのハッシュが計算されたのか)ということです。私の場合、データボリュームが膨大で、必要なものよりも多くのディスクI / Oを実行しないように注意が必要...

Admin

大きなディレクトリを繰り返し比較しますが、サブディレクトリは無視します。 2つのバックアップを比較します。 GUIを使用してください。
duplicate-files

大きなディレクトリを繰り返し比較しますが、サブディレクトリは無視します。 2つのバックアップを比較します。 GUIを使用してください。

私は友人のコンピュータの2つの非常に古いバックアップを持っています。単に外付けハードドライブのすべてのフォルダにコピーされます。どちらもサイズが約300GBで、内容は非常に似ていますが、同じではなく、フォルダ構造も異なります。そのスペースを確保し、両方のスペースをバックアップしたいと思います。ファイルの90%程度が重複だと思いますが、重複していないファイルも見逃したくありません。 したがって、両方のディレクトリとすべてのサブディレクトリのファイルを比較しますが、そのサブディレクトリには無視するプログラムが必要です。フォルダAのすべてのファイルは、フォルダB...

Admin

2つの異なる場所に重複ファイルが作成されましたか?
duplicate-files

2つの異なる場所に重複ファイルが作成されましたか?

人々は通常、重複したアイテムを見つけて削除することを期待し、その逆の場合もあるので、私のアイデアに一致する情報を見つけるのは難しいです。 暖房システムを制御するアプリケーションを実行しています。ファイルベースのデータベースを使用して、構成データとセンサーデータを保存します。ソフトウェアには毎日実行されるバックアップルーチンがあります。 私の質問:外部から介入してライブ出力を外部リポジトリに複製することは可能ですか?ハードウェア障害が発生した場合、データ損失はごくわずかであり、最大24時間持続しません。 シンボリックリンクを使うのと同じくらい簡単であれば...

Admin

FSlintを使用してファイルサイズでのみ重複エントリを探していますか?
duplicate-files

FSlintを使用してファイルサイズでのみ重複エントリを探していますか?

重複ファイルを見つけるためにfslintを使用しようとしていますが、数ギガバイトのファイル全体をハッシュするのに時間がかかります。 ~によるとこのウェブサイト、以下の特徴で比較できます。 機能の概要 compare by file size compare by hardlinks compare by md5 (first 4k of a file) compare by md5 (entire file) compare by sha1 (entire file) ただし、GUIやマニュアルページにはこれらのオプションは表示されません。ここで何か...

Admin

私が所有しているもの
duplicate-files

私が所有しているもの

私は2つのビデオの間で互いに「数学的距離」を確実に提供する方法を探しています。方法に類似距離を編集ある文字列から別の文字列までの距離を取得するために使用できます。そのような機能を提供できるコマンドまたはコマンドシーケンスはありますか?複数のビデオコーデックとファイル形式にわたって重複したビデオを常に自動的に削除したいと思います。 私が所有しているもの たとえば、コーデックだけが異なる(重複)動画がたくさんあります。ファイル形式はwebm、mp4、flv、mkvからaviまでさまざまです。これらのビデオをsha256sumと比較することは間違いなく機能しません...

Admin