Як визначається дублікат
Дублікатом вважається рядок, який повністю збігається з уже наявним вище. За замовчуванням порівнюється точний текст після обрізання пробілів на краях. Тобто «Львів» і «Львів » — одне й те саме, а «Львів» і «львів» — різні, доки не ввімкнено «Без урахування регістру». Для кирилиці регістр знижується за правилами мови, тож «Ґанок» і «ґанок» вважатимуться однаковими.
Що не вважається дублікатом
Інструмент порівнює рядки буквально й працює швидко навіть зі списками на тисячі рядків, адже все виконується на вашому пристрої. Схожі, але не тотожні записи лишаються: «Київ» і «м. Київ», «Іванов І.» і «Іванов Іван», «dіm» з латинською «і» та «дім» з українською. Тому якщо дублікати очікувані, а інструмент їх не знайшов, перевірте, чи немає в записах зайвих пробілів усередині, різних апострофів (’ і ') або літер різних алфавітів.
Типовий порядок дій
- Спершу очистіть список від зайвих пробілів інструментом видалити зайві пробіли.
- Приберіть дублікати.
- За потреби відсортуйте результат за алфавітом.
Таблиця опцій
| Опція | Типово | Дія |
|---|---|---|
| Без урахування регістру | вимкнено | «Київ» і «київ» стають дублікатами |
| Обрізати кожен рядок | увімкнено | пробіли на краях не враховуються і прибираються |
| Видалити порожні рядки | вимкнено | порожні рядки зникають із результату |
Обмеження
Найчастіші помилки пов’язані не з інструментом, а зі списком. Якщо ви скопіювали стовпчик з електронної таблиці, у ньому можуть бути комірки з пробілами або невидимими символами, а якщо збирали адреси з листування, до них могли додатися імена у кутових дужках. Перед обробкою один раз пробіжіться очима по списку й виправте очевидні розбіжності.
Рядки розділяються розривами рядка, тому кома чи крапка з комою всередині рядка не розділяють записи: перетворіть такий список на стовпчик, наприклад за допомогою пошуку й заміни. Перше входження залишається в початковому вигляді, тобто регістр першого запису не змінюється. Окремо стежте за вмістом: якщо в рядках є посилання з відстеженням (utm-мітки), різні мітки зроблять однакові адреси різними рядками. Інструмент нічого не вгадує й не об’єднує схожі записи, тому результат завжди можна передбачити й перевірити.