Удаление файлов в зависимости от того, что находится в имени файла или содержимого в файле [duplicate]

Question 1

Поиск этой модели ноутбука показывает эту дискуссию о том, как управлять электропитанием на этом ноутбуке.

Сначала установите утилиты:

sudo apt-get install cpufrequtils

Затем установите консервативный регулятор:

sudo cpufreq-set -g conservative

Согласно мысли:

Они различаются по тому, как они масштабируются вверх и вниз. Регулятор ondemand переключается на самую высокую частоту сразу же, когда есть нагрузка, в то время как консервативный регулятор увеличивает частоту шаг за шагом. Аналогично, они ведут себя наоборот, чтобы снизить частоту, когда процессор находится в режиме ожидания. Консервативный регулятор хорош для сред с батарейным питанием на AMD64 (но может не работать на более старых ThinkPad, таких как T21). Ondemand может не работать на старых ноутбуках без Enhanced SpeedStep из-за причин задержки. В любом случае, для достаточно недавнего процессора Intel, ondemand - это тот, который рекомендуется для энергоэффективности (над пользовательским пространством и даже над «powersave») разработчиком ядра Intel Arjan van de Ven

Хотя это может быть немного устаревший. Вы можете попробовать и посмотреть, как работает ноутбук некоторое время.

Ссылки:

Как использовать cpufrequtils http://www.thinkwiki.org/wiki/How_to_make_use_of_Dynamic_Frequency_Scaling [ ! d9]

Question 2

Для этого я использую fdupes. Это программа командной строки, которая может быть установлена из репозиториев с помощью sudo apt install fdupes. Вы можете называть его как fdupes -r /dir/ect/ory, и он распечатает список обманов. fdupes также имеет простую домашнюю страницу и статью в Википедии, в которой перечислены еще несколько программ.

Question 3

Question 4

Для этого я использую fdupes. Это программа командной строки, которая может быть установлена из репозиториев с помощью sudo apt install fdupes. Вы можете называть его как fdupes -r /dir/ect/ory, и он распечатает список обманов. fdupes также имеет простую домашнюю страницу и статью в Википедии, в которой перечислены еще несколько программ.

Question 5

Вы пробовали

finddup

или

finddup -l

Я думаю, что все нормально.

Question 6

FSlint имеет графический интерфейс и некоторые другие функции. Объяснение алгоритма проверки дубликатов из их FAQ:

1. exclude files with unique lengths
2. handle files that are hardlinked to each other
3. exclude files with unique md5(first_4k(file))
4. exclude files with unique md5(whole file)
5. exclude files with unique sha1(whole file) (in case of md5 collisions).

fslint

Question 7

Question 8

Список programs/scripts/bash-solutions, который может найти дубликаты и работать под nix:

dupedit: сравнивает сразу несколько файлов без контрольных сумм. Избегает сравнения файлов с самим собой, когда несколько путей указывают на один и тот же файл. dupmerge: работает на разных платформах (Win32 / 64 с Cygwin, * nix, Linux и т. д.) dupseek: Perl с алгоритмом, оптимизированным для уменьшения чтения. fdf: Perl / c работает и работает на большинстве платформ (Win32, * nix и, возможно, другие). Использует MD5, SHA1 и другие алгоритмы контрольной суммы freedups: shell script, который выполняет поиск по указанным вами каталогам. Когда он находит два одинаковых файла, он жестко связывает их вместе. Теперь два или более файла все еще существуют в своих соответствующих каталогах, но только одна копия данных хранится на диске; обе записи в каталогах указывают на одни и те же блоки данных. fslint: имеет интерфейс командной строки и графический интерфейс. liten: инструмент командной строки для дедупликации Pure Python и библиотека, используя контрольные суммы md5 и новый алгоритм сравнения байтов. (Linux, Mac OS X, * nix, Windows) liten2: переписывание оригинальной Liten, еще инструмент командной строки, но с более быстрым интерактивным режимом с использованием контрольных сумм SHA-1 (Linux, Mac OS X, * nix) rdfind: One из немногих, которые ранжируют дубликаты на основе порядка входных параметров (каталогов для сканирования), чтобы не удалять в «исходных / хорошо известных» источниках (если дано несколько каталогов). Использует MD5 или SHA1. rmlint: быстрый поиск с интерфейсом командной строки и множество опций для поиска другого lint тоже (использует MD5) ua: инструмент командной строки Unix / Linux, предназначенный для работы с find (и т. п.). findrepe: бесплатный инструмент командной строки на основе Java, предназначенный для эффективного поиска дубликатов файлов, он может выполнять поиск в почтовых индексах и банках. (GNU / Linux, Mac OS X, * nix, Windows) fdupe: небольшой скрипт, написанный на Perl. Выполнение своей работы быстро и эффективно.1 ssdep: идентифицировать почти идентичные файлы, используя Context Triggered Piecewise Hashing

Question 9

Другой скрипт, выполняющий эту работу, - rmdupe. На странице автора:

rmdupe использует стандартные команды linux для поиска в указанных папках для дубликатов файлов, независимо от имени файла или расширения. Прежде чем удалять дубликаты кандидатов, они сравниваются по байтам. rmdupe также может проверять дубликаты в отношении одной или нескольких справочных папок, может удалять файлы вместо их удаления, позволяет выполнить команду пользовательского удаления и может ограничить поиск файлами указанного размера. rmdupe включает режим моделирования, который сообщает, что будет сделано для данной команды без фактического удаления любых файлов.

Question 10

Я использую komparator - sudo apt-get install komparator (Ubuntu 10.04+) - как GUI-инструмент для поиска дубликатов в ручном режиме.

Question 11

Для дублирования и удаления дубликатов музыки Picard и Jaikoz по http://musicbrainz.org/ - лучшее решение. Jaikoz Я считаю, что автоматически помечает вашу музыку на основе данных файла песни. Вам даже не нужно имя песни, чтобы определить песню и назначить ей все метаданные. Хотя бесплатная версия может отмечать только ограниченное количество песен за один проход, но вы можете запускать ее столько раз, сколько хотите.

Question 12

Если ваша задача дедупликации связана с музыкой, сначала запустите приложение picard, чтобы правильно идентифицировать и пометить вашу музыку (чтобы вы нашли дубликаты файлов .mp3 / .ogg, даже если их имена неверны). Обратите внимание, что picard также доступен как пакет Ubuntu.

Это сделано, на основе тега musicip_puid вы можете легко найти все свои повторяющиеся песни.

Question 13

Question 14

Вы пробовали

finddup

или

finddup -l

Я думаю, что все нормально.

Question 15

FSlint имеет графический интерфейс и некоторые другие функции. Объяснение алгоритма проверки дубликатов из их FAQ:

1. exclude files with unique lengths
2. handle files that are hardlinked to each other
3. exclude files with unique md5(first_4k(file))
4. exclude files with unique md5(whole file)
5. exclude files with unique sha1(whole file) (in case of md5 collisions).

fslint

Question 16

Список programs/scripts/bash-solutions, который может найти дубликаты и работать под nix:

dupedit: сравнивает сразу несколько файлов без контрольных сумм. Избегает сравнения файлов с самим собой, когда несколько путей указывают на один и тот же файл. dupmerge: работает на разных платформах (Win32 / 64 с Cygwin, * nix, Linux и т. д.) dupseek: Perl с алгоритмом, оптимизированным для уменьшения чтения. fdf: Perl / c работает и работает на большинстве платформ (Win32, * nix и, возможно, другие). Использует MD5, SHA1 и другие алгоритмы контрольной суммы freedups: shell script, который выполняет поиск по указанным вами каталогам. Когда он находит два одинаковых файла, он жестко связывает их вместе. Теперь два или более файла все еще существуют в своих соответствующих каталогах, но только одна копия данных хранится на диске; обе записи в каталогах указывают на одни и те же блоки данных. fslint: имеет интерфейс командной строки и графический интерфейс. liten: инструмент командной строки для дедупликации Pure Python и библиотека, используя контрольные суммы md5 и новый алгоритм сравнения байтов. (Linux, Mac OS X, * nix, Windows) liten2: переписывание оригинальной Liten, еще инструмент командной строки, но с более быстрым интерактивным режимом с использованием контрольных сумм SHA-1 (Linux, Mac OS X, * nix) rdfind: One из немногих, которые ранжируют дубликаты на основе порядка входных параметров (каталогов для сканирования), чтобы не удалять в «исходных / хорошо известных» источниках (если дано несколько каталогов). Использует MD5 или SHA1. rmlint: быстрый поиск с интерфейсом командной строки и множество опций для поиска другого lint тоже (использует MD5) ua: инструмент командной строки Unix / Linux, предназначенный для работы с find (и т. п.). findrepe: бесплатный инструмент командной строки на основе Java, предназначенный для эффективного поиска дубликатов файлов, он может выполнять поиск в почтовых индексах и банках. (GNU / Linux, Mac OS X, * nix, Windows) fdupe: небольшой скрипт, написанный на Perl. Выполнение своей работы быстро и эффективно.1 ssdep: идентифицировать почти идентичные файлы, используя Context Triggered Piecewise Hashing

Question 17

Другой скрипт, выполняющий эту работу, - rmdupe. На странице автора:

rmdupe использует стандартные команды linux для поиска в указанных папках для дубликатов файлов, независимо от имени файла или расширения. Прежде чем удалять дубликаты кандидатов, они сравниваются по байтам. rmdupe также может проверять дубликаты в отношении одной или нескольких справочных папок, может удалять файлы вместо их удаления, позволяет выполнить команду пользовательского удаления и может ограничить поиск файлами указанного размера. rmdupe включает режим моделирования, который сообщает, что будет сделано для данной команды без фактического удаления любых файлов.

Question 18

Я использую komparator - sudo apt-get install komparator (Ubuntu 10.04+) - как GUI-инструмент для поиска дубликатов в ручном режиме.

Question 19

Question 20

Для дублирования и удаления дубликатов музыки Picard и Jaikoz по http://musicbrainz.org/ - лучшее решение. Jaikoz Я считаю, что автоматически помечает вашу музыку на основе данных файла песни. Вам даже не нужно имя песни, чтобы определить песню и назначить ей все метаданные. Хотя бесплатная версия может отмечать только ограниченное количество песен за один проход, но вы можете запускать ее столько раз, сколько хотите.

Question 21

Если ваша задача дедупликации связана с музыкой, сначала запустите приложение picard, чтобы правильно идентифицировать и пометить вашу музыку (чтобы вы нашли дубликаты файлов .mp3 / .ogg, даже если их имена неверны). Обратите внимание, что picard также доступен как пакет Ubuntu.

Это сделано, на основе тега musicip_puid вы можете легко найти все свои повторяющиеся песни.

dessert · Accepted Answer · 17 July 2018 в 19:19

Для этого я использую fdupes. Это программа командной строки, которая может быть установлена из репозиториев с помощью sudo apt install fdupes. Вы можете называть его как fdupes -r /dir/ect/ory, и он распечатает список обманов. fdupes также имеет простую домашнюю страницу и статью в Википедии, в которой перечислены еще несколько программ.

dessert · Accepted Answer · 23 July 2018 в 20:04

Для этого я использую fdupes. Это программа командной строки, которая может быть установлена из репозиториев с помощью sudo apt install fdupes. Вы можете называть его как fdupes -r /dir/ect/ory, и он распечатает список обманов. fdupes также имеет простую домашнюю страницу и статью в Википедии, в которой перечислены еще несколько программ.

blade19899 · Answer 3 · 17 July 2018 в 19:19

Вы пробовали

finddup

или

finddup -l

Я думаю, что все нормально.

3

ответ дан blade19899 17 July 2018 в 19:19

Community · Answer 4 · 17 July 2018 в 19:19

FSlint имеет графический интерфейс и некоторые другие функции. Объяснение алгоритма проверки дубликатов из их FAQ:

1. exclude files with unique lengths
2. handle files that are hardlinked to each other
3. exclude files with unique md5(first_4k(file))
4. exclude files with unique md5(whole file)
5. exclude files with unique sha1(whole file) (in case of md5 collisions).

fslint

Eliah Kagan · Answer 5 · 17 July 2018 в 19:19

Список programs/scripts/bash-solutions, который может найти дубликаты и работать под nix:

dupedit: сравнивает сразу несколько файлов без контрольных сумм. Избегает сравнения файлов с самим собой, когда несколько путей указывают на один и тот же файл. dupmerge: работает на разных платформах (Win32 / 64 с Cygwin, * nix, Linux и т. д.) dupseek: Perl с алгоритмом, оптимизированным для уменьшения чтения. fdf: Perl / c работает и работает на большинстве платформ (Win32, * nix и, возможно, другие). Использует MD5, SHA1 и другие алгоритмы контрольной суммы freedups: shell script, который выполняет поиск по указанным вами каталогам. Когда он находит два одинаковых файла, он жестко связывает их вместе. Теперь два или более файла все еще существуют в своих соответствующих каталогах, но только одна копия данных хранится на диске; обе записи в каталогах указывают на одни и те же блоки данных. fslint: имеет интерфейс командной строки и графический интерфейс. liten: инструмент командной строки для дедупликации Pure Python и библиотека, используя контрольные суммы md5 и новый алгоритм сравнения байтов. (Linux, Mac OS X, * nix, Windows) liten2: переписывание оригинальной Liten, еще инструмент командной строки, но с более быстрым интерактивным режимом с использованием контрольных сумм SHA-1 (Linux, Mac OS X, * nix) rdfind: One из немногих, которые ранжируют дубликаты на основе порядка входных параметров (каталогов для сканирования), чтобы не удалять в «исходных / хорошо известных» источниках (если дано несколько каталогов). Использует MD5 или SHA1. rmlint: быстрый поиск с интерфейсом командной строки и множество опций для поиска другого lint тоже (использует MD5) ua: инструмент командной строки Unix / Linux, предназначенный для работы с find (и т. п.). findrepe: бесплатный инструмент командной строки на основе Java, предназначенный для эффективного поиска дубликатов файлов, он может выполнять поиск в почтовых индексах и банках. (GNU / Linux, Mac OS X, * nix, Windows) fdupe: небольшой скрипт, написанный на Perl. Выполнение своей работы быстро и эффективно.1 ssdep: идентифицировать почти идентичные файлы, используя Context Triggered Piecewise Hashing

girardengo · Answer 6 · 17 July 2018 в 19:19

Другой скрипт, выполняющий эту работу, - rmdupe. На странице автора:

rmdupe использует стандартные команды linux для поиска в указанных папках для дубликатов файлов, независимо от имени файла или расширения. Прежде чем удалять дубликаты кандидатов, они сравниваются по байтам. rmdupe также может проверять дубликаты в отношении одной или нескольких справочных папок, может удалять файлы вместо их удаления, позволяет выполнить команду пользовательского удаления и может ограничить поиск файлами указанного размера. rmdupe включает режим моделирования, который сообщает, что будет сделано для данной команды без фактического удаления любых файлов.

N0rbert · Answer 7 · 17 July 2018 в 19:19

Я использую komparator - sudo apt-get install komparator (Ubuntu 10.04+) - как GUI-инструмент для поиска дубликатов в ручном режиме.

Yathi · Answer 8 · 17 July 2018 в 19:19

Для дублирования и удаления дубликатов музыки Picard и Jaikoz по http://musicbrainz.org/ - лучшее решение. Jaikoz Я считаю, что автоматически помечает вашу музыку на основе данных файла песни. Вам даже не нужно имя песни, чтобы определить песню и назначить ей все метаданные. Хотя бесплатная версия может отмечать только ограниченное количество песен за один проход, но вы можете запускать ее столько раз, сколько хотите.

ΤΖΩΤΖΙΟΥ · Answer 9 · 17 July 2018 в 19:19

Если ваша задача дедупликации связана с музыкой, сначала запустите приложение picard, чтобы правильно идентифицировать и пометить вашу музыку (чтобы вы нашли дубликаты файлов .mp3 / .ogg, даже если их имена неверны). Обратите внимание, что picard также доступен как пакет Ubuntu.

Это сделано, на основе тега musicip_puid вы можете легко найти все свои повторяющиеся песни.

blade19899 · Answer 10 · 23 July 2018 в 20:04

Вы пробовали

finddup

или

finddup -l

Я думаю, что все нормально.

3

ответ дан blade19899 23 July 2018 в 20:04

Community · Answer 11 · 23 July 2018 в 20:04

FSlint имеет графический интерфейс и некоторые другие функции. Объяснение алгоритма проверки дубликатов из их FAQ:

1. exclude files with unique lengths
2. handle files that are hardlinked to each other
3. exclude files with unique md5(first_4k(file))
4. exclude files with unique md5(whole file)
5. exclude files with unique sha1(whole file) (in case of md5 collisions).

fslint

58

ответ дан Community 23 July 2018 в 20:04

1

Благодарю. Обратите внимание, что имя команды is & quot; fslint-gui & quot ;, а инструменты командной строки не находятся в $ PATH по умолчанию - они находятся в / usr / share / fslint / fslint. Я был сбит с толку, когда мне не помогли, на какой пакет он находился, просто запустив fslint (через / usr / lib / command-not-found). – nealmcb 20 November 2011 в 00:59
2

именно то, что необходимо – Tebe 17 August 2014 в 22:38
3

@nealmcb Если вы используете sudo apt-get install fslint, установка в настоящий момент помещает fslint-gui в путь и поэтому я могу запустить его из любой точки, просто набрав fslint-gui. Вы можете найти, где fslint-gui живет, набрав which fslint-gui (он выглядит как скрипт Python). – user29020 25 November 2014 в 23:29

Eliah Kagan · Answer 12 · 23 July 2018 в 20:04

Список programs/scripts/bash-solutions, который может найти дубликаты и работать под nix:

dupedit: сравнивает сразу несколько файлов без контрольных сумм. Избегает сравнения файлов с самим собой, когда несколько путей указывают на один и тот же файл. dupmerge: работает на разных платформах (Win32 / 64 с Cygwin, * nix, Linux и т. д.) dupseek: Perl с алгоритмом, оптимизированным для уменьшения чтения. fdf: Perl / c работает и работает на большинстве платформ (Win32, * nix и, возможно, другие). Использует MD5, SHA1 и другие алгоритмы контрольной суммы freedups: shell script, который выполняет поиск по указанным вами каталогам. Когда он находит два одинаковых файла, он жестко связывает их вместе. Теперь два или более файла все еще существуют в своих соответствующих каталогах, но только одна копия данных хранится на диске; обе записи в каталогах указывают на одни и те же блоки данных. fslint: имеет интерфейс командной строки и графический интерфейс. liten: инструмент командной строки для дедупликации Pure Python и библиотека, используя контрольные суммы md5 и новый алгоритм сравнения байтов. (Linux, Mac OS X, * nix, Windows) liten2: переписывание оригинальной Liten, еще инструмент командной строки, но с более быстрым интерактивным режимом с использованием контрольных сумм SHA-1 (Linux, Mac OS X, * nix) rdfind: One из немногих, которые ранжируют дубликаты на основе порядка входных параметров (каталогов для сканирования), чтобы не удалять в «исходных / хорошо известных» источниках (если дано несколько каталогов). Использует MD5 или SHA1. rmlint: быстрый поиск с интерфейсом командной строки и множество опций для поиска другого lint тоже (использует MD5) ua: инструмент командной строки Unix / Linux, предназначенный для работы с find (и т. п.). findrepe: бесплатный инструмент командной строки на основе Java, предназначенный для эффективного поиска дубликатов файлов, он может выполнять поиск в почтовых индексах и банках. (GNU / Linux, Mac OS X, * nix, Windows) fdupe: небольшой скрипт, написанный на Perl. Выполнение своей работы быстро и эффективно.1 ssdep: идентифицировать почти идентичные файлы, используя Context Triggered Piecewise Hashing

Может ли любая из этих программ найти дубликаты папок (а не только дублировать файлы?) — Anderson Green, 2 September 2012 в 08:08
@AndersonGreen rmlint может найти дубликаты dirs. [F2] — oligofren, 3 January 2015 в 18:33
для Ubuntu другим способом является открытие файлов, поиск (control-f) для заданного расширения (например, .mp3), а затем сортировка имени файла; это позволит удалять дубликаты вручную и в то же время отображать местоположения дубликатов. — axd, 11 June 2018 в 22:10

girardengo · Answer 13 · 23 July 2018 в 20:04

Другой скрипт, выполняющий эту работу, - rmdupe. На странице автора:

rmdupe использует стандартные команды linux для поиска в указанных папках для дубликатов файлов, независимо от имени файла или расширения. Прежде чем удалять дубликаты кандидатов, они сравниваются по байтам. rmdupe также может проверять дубликаты в отношении одной или нескольких справочных папок, может удалять файлы вместо их удаления, позволяет выполнить команду пользовательского удаления и может ограничить поиск файлами указанного размера. rmdupe включает режим моделирования, который сообщает, что будет сделано для данной команды без фактического удаления любых файлов.

N0rbert · Answer 14 · 23 July 2018 в 20:04

Я использую komparator - sudo apt-get install komparator (Ubuntu 10.04+) - как GUI-инструмент для поиска дубликатов в ручном режиме.

Yathi · Answer 15 · 23 July 2018 в 20:04

Для дублирования и удаления дубликатов музыки Picard и Jaikoz по http://musicbrainz.org/ - лучшее решение. Jaikoz Я считаю, что автоматически помечает вашу музыку на основе данных файла песни. Вам даже не нужно имя песни, чтобы определить песню и назначить ей все метаданные. Хотя бесплатная версия может отмечать только ограниченное количество песен за один проход, но вы можете запускать ее столько раз, сколько хотите.

ΤΖΩΤΖΙΟΥ · Answer 16 · 23 July 2018 в 20:04

Если ваша задача дедупликации связана с музыкой, сначала запустите приложение picard, чтобы правильно идентифицировать и пометить вашу музыку (чтобы вы нашли дубликаты файлов .mp3 / .ogg, даже если их имена неверны). Обратите внимание, что picard также доступен как пакет Ubuntu.

Это сделано, на основе тега musicip_puid вы можете легко найти все свои повторяющиеся песни.

Удаление файлов в зависимости от того, что находится в имени файла или содержимого в файле [duplicate]

16 ответов

fslint

fslint

Другие вопросы по тегам:

Похожие вопросы: