Text duplicate killer 11 rus

Text duplicate killer 1.1 rus используйте пробелы в именах файлов. Настройки, установленные с помощью параметров командной строки, запоминаются. Открыть исходный файл — Позволяет выбрать исходный файл формата ASCII. Задать целевой файл — Позволяет указать имя целевого файла, в который будут записываться уникальные строки из исходного файла.

Text Duplicate Killer — Программа для работы со словарями. Text Duplicate Killer — программа, предназначенная для удаления из текста повторяющихся строк не обязательно смежных. В результате создается новый текстовый файл, в котором каждая строка встречается только один раз. Инструкция как найти дубликаты:. У Вас должен быть готов файл формата ASCII, содержащий текст, в котором Вы хотите удалить дублирующиеся строки.

Хэшировать по N символов — Сколько первых символов использовать для хэширования. Данная настройка важна только в том случае, если вы обрабатываете очень большие файлы, не помещающиеся в оперативную память.

По умолчанию установлено 3 символа — это некий компромисс между скоростью работы и требованиями к ОЗУ. Совместимость с Windows 7: Да.

Хэш-индекс основан на ASCII-коде, поэтому при хэшировании по одному символу максимальное количество сегментов равно При использовании двух символов количество сегментов становится равным Если вам понадобилось изменить эту настройку, то определить нужное значение можно экспериментально, но учтите, что для разных текстов эффективность обработки может сильно различаться.

Если Вам нужно обработать текст из файлов DOC или RTF, то экспортируйте его в ASCII. После запуска утилиты tdk. Затем с помощью пункта меню Файл Задать целевой файл укажите имя нового файла. В этот файл утилита поместит обработанный текст, который уже не будет содержать дубликатов. Вы можете Text duplicate killer 1.1 rus создать новое имя. Для запуска процесса поиска и удаления дубликатов выберите пункт меню Операции Убрать дубликаты!. В любой Text duplicate killer 1.1 rus Вы можете прервать работу, нажав на кнопку Стоп, находящуюся в правом нижнем углу.

Игнорировать регистр латиница — Данная опция указывает, что регистр латинских букв не учитывается. В этом случае, например, строки String, string и STRING будут рассматриваться как дубликаты.

Хэш-данные — Эта опция позволяет включить отображение специфических сведений, например, скорость обработки. Найденные дубликаты — Данная опция позволяет Text duplicate killer 1.1 rus отображение окна с экземплярами найденных дубликатов.

При большом объеме текста обработка может занять некоторое время. В автоматически созданном имени кодируются некоторые настройки. Варианты автоматически создаваемого имени целевого файла:. В случае, если файл с целевым именем уже существует, он перезапишется без запроса. Text Duplicate Killer корректно обрабатывает только текстовые файлы формата ASCII.

Чтобы обработать документы Microsoft Word и прочие файлы, имеющие сложную структуру, необходимо экспортировать их в формат ASCII. Обработка любых двоичных файлов также недопустима. TDK создает этот файл на основе source, исключая повторяющиеся строки. Параметры нечувствительны к регистру. Параметры должны отделяться друг от друга как минимум одним пробелом!.

Внимание: в целевом тексте пробелы не отсекаются!. Без сортировки целевого текста — Строки целевого текста не сортируются. Сортировка по национальному алфавиту — Сортировка национальных символов происходит с учетом настроек языка в операционной системе Windows. Сортировка по кодам символов — Сортировка основана на кодах символов Latin-1, то есть расширенный 8-битный ASCII-код. Сортировка по длине строки — Строки сортируются по длине включая пробелы.

Например, если в тексте будет найдено 10 дубликатов одной строки, то каждый экземпляр добавиться в это окно. При обработке больших текстов рекомендуется Text duplicate killer 1.1 rus отображение этого окна, поскольку найденные дубликаты могут переполнить оперативную память.