Дубли в pandas
Вопрос
Как найти и удалить дубли в DataFrame?
Попробуйте сами
Ответьте про себя или вслух, потом откройте ответ и сверьтесь.
Показать ответ и разбор
Коротко
Ответ
df.duplicated(subset=[...], keep="first") даёт маску повторов, df.drop_duplicates(subset=[...], keep="first"|"last"|False) удаляет. Без subset сравниваются строки целиком. Чтобы оставить свежую запись, сначала сортировка по времени, потом keep="last". Проверка уникальности ключа: df["id"].is_unique.
Разбор
df.duplicated(subset=[...], keep="first") даёт маску повторов, df.drop_duplicates(subset=[...], keep="first"|"last"|False) удаляет. Без subset сравниваются строки целиком. Чтобы оставить свежую запись, сначала сортировка по времени, потом keep="last". Проверка уникальности ключа: df["id"].is_unique.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.