Для удаления всех повторяющихся строк в таблице, можно воспользоваться оконными функциями.