duplicated() 函數在數據清洗過程中的主要作用是找出重復的數據行
在數據清洗過程中，可能會遇到重復的數據行。這些重復的數據可能是由于錯誤、數據輸入或其他原因導致的。為了保持數據集的準確性和完整性，需要刪除或合并這些重復的數據行。duplicated() 函數可以幫助我們識別這些重復的數據行，從而進行相應的處理。
例如，在 R 語言中，可以使用 duplicated() 函數來找出重復的數據行：
# 創建一個包含重復數據的數據框
data <- data.frame(a = c(1, 2, 3, 1, 2), b = c("A", "B", "C", "A", "B"))
# 使用 duplicated() 函數找出重復的數據行
duplicated_rows <- duplicated(data)
# 打印重復的數據行
print(duplicated_rows)
輸出結果：
[1] FALSE FALSE FALSE TRUE TRUE
這表示第4行和第5行是重復的數據行。接下來，可以根據需要刪除或合并這些重復的數據行。
