Проблема дублікатів
RSS-стрічки, поштові скриньки та інші джерела часто повертають одні й ті ж дані при кожному запуску. Без фільтрації ви будете повторно обробляти і публікувати те, що вже оброблялось.
Як працює фільтрація
Коли у ноді ввімкнена опція «Тільки унікальні», система:
- Отримує дані від джерела
- Генерує хеш (відбиток) для кожного елемента
- Порівнює з хешами, що вже зберігаються в базі
- Передає далі тільки нові, раніше не бачені елементи
Які ноди підтримують?
Фільтрація доступна у нодах-джерелах:
- RSS ✅
- Prom.ua ✅
- Rozetka ✅
- Gmail Get ✅
- Google Sheet Get ✅
- Telegram Source ✅
Поведінка при тестуванні
⚠️ Важливо: При тестовому запуску (ручний запуск, тест окремої ноди) фільтрація автоматично вимкнена, навіть якщо опція «Тільки унікальні» ввімкнена в налаштуваннях ноди. Це зроблено для того, щоб ноди завжди повертали дані під час тестування.