→ celestialgod: 最好的方式是用資料庫存資料06/18 08:41
謝謝 目前已經是用類似的方式處理單筆csv內的重複資料 但是我的問題是跨不同csv的重
複資料
推 lycantrope: df.groupby("人名").sort_values(by="時間").last(1)06/18 09:33
→ lycantrope: 記錯groupby沒有sort_values06/18 09:38
推 lycantrope: sort跟groupby對調就可以了06/18 09:40
謝謝 已經會處理單個csv的 想要討論如果我有非常多csv有什麼好辦法嗎?全部import
到一個df的話我還有辦法照原本csv output 出來嗎?ex. 10個進去 10個出來 這樣
※ 編輯: leog123456 (220.135.236.153 臺灣), 06/18/2022 10:23:12
推 lycantrope: 是不同csv file整理一起同步更新嗎?06/18 11:16
→ lycantrope: concat前把個別df加上filename,concat處理後,可以06/18 11:18
→ lycantrope: 再個別輸出csv也是一種方法 06/18 11:19
好的 來試試看 謝謝!
※ 編輯: leog123456 (220.135.236.153 臺灣), 06/18/2022 12:14:31
推 celestialgod: 建議直接把csv全部存進去sqlite 處理06/18 16:13
→ celestialgod: 就好 這樣比較簡單06/18 16:13
謝謝!會研究看看
※ 編輯: leog123456 (220.135.236.153 臺灣), 06/18/2022 16:25:40
※ 編輯: leog123456 (220.135.236.153 臺灣), 06/18/2022 16:26:54
→ longlongint: 建索引啊 key 出現在哪些檔案06/19 03:07
→ longlongint: 然後你會發現「存多個csv」這個性質你要思考一下 06/19 03:08
→ longlongint: 建議資料庫啦 但你又下了一個有矛盾的強大限制06/19 03:10
謝謝 的確有一點麻煩 每天都會有一個csv產出 然後我有程式每天自動去修改當日(datet
ime==today)產出的csv
然後上傳到server再做圖 但難處就在今天新建的csv內有跟先前上傳過的csv內有重複的
資料(小明) 所以造成那麼矛盾的問題 不好意思
※ 編輯: leog123456 (220.135.236.153 臺灣), 06/19/2022 23:31:43
※ 編輯: leog123456 (111.243.141.44 臺灣), 06/19/2022 23:34:58
推 bills1987: DB建Pk by 日期&其他欄位 06/20 11:04