удаляются ли дубли при парсинге с разных аккаунтов?

Здравствуйте!

Удаляются, но есть нюансы, при которых их удаление невозможно. Для этого нужно больше конкретики: способ сбора аудитории, настройки сбора аудитории.

?

??

Способ сбора парсинг по конкурентам, допустим я взял 20 аккаунтов и начал с них парсинг если один и тот же человек состоит в нескольких сообществах, он несколько раз будет в списке, то есть дублировать или же дубли удаляются?

Есть один из режимов сохранения данных, при котором дубли не удаляются. Это называется сохранение в независимые файлы по каждому конкуренту. Такой способ сбора нужен, когда требуется собирать очень большую аудиторию сразу в файл на диске, а не в визуальные списки, т.к. Windows не позволяет держать в визуальном списке более 2.5 млн записей. В целом программа может собрать ЛЮБЫЕ объемы по каждому конкуренту.