Remove duplicates

Программа предназначена для удаления одинаковых строк в текстовых документах. Обрабатывает файлы в которых до 10 миллионов строк.

Поддерживается два режима удаления:

первый - удаление дублированные строки в одном документе;

второй - проверяются два документа на одинаковые строки, удаляются строки во втором документе, если в первом является дубле.

Как это работает:

если удалять одинаковые строки в одном документе, нужно его открыть кнопкой "Open file 1", после того нажать "Remove duplicates in files 1" и дождаться завершения обработки;

если сравнить с первым документом и удалить строки во втором документе, нужно открыть первый документ с которым будем сравнивать кнопкой "Open file 1", затем открыть второй документ, где строки будут удаляться кнопкой "Open file 2" и нажать "Remove duplicates in files 2".

После каждого нажатия кнопок дождитесь завершения операций, сообщения о ходе всех обработок можно увидеть в поле ниже кнопок.

Скачать Remove duplicates v 1.0 (zip)