Проверьте, существуют ли записи в таблице Postgres
Я должен читать CSV каждые 20 секунд. Каждый CSV содержит мин. от 500 до макс. 60000 строк. Я должен вставить данные в таблицу Postgres, но перед этим мне нужно проверить, были ли элементы уже вставлены, потому что существует высокая вероятность получения дубликата элемента. Поле для проверки уникальности также индексируется.
Итак, я читаю файл кусками и использую предложение IN, чтобы получить элементы, уже находящиеся в базе данных.
Есть ли лучший способ сделать это?