[請益]在大量重複的Data中,只保存unique部分

[tao2tw (smile_ting)]

小弟遇到一個問題，
就是會處理到大量的重複資料
比如說10萬筆資料，其中大概不重複的只有1000筆

請問想把這10萬筆資料，透過PHP 的built-in function?
或者哪些資料結構，可以達成 只儲存那1000筆的資料呢？

感謝...可以提示小弟某些關鍵字，會自行去搜尋

--
※ 發信站: 批踢踢實業坊(ptt.cc) 
◆ From: 119.77.136.156
→ bibo9901:那要看你的資料到底長什麼樣子.. 如果夠簡單的話, PHP 的
→ bibo9901:陣列本身就是個Hash Table了
推 ihon822:Select DISTINCT -> Export -> Truncate -> Import