[問題] Pandas 匯入資料庫，防止重覆資料輸入

[rs6000 (正義的胖虎)]

請問各位大大們
有關 pandas to_sql的問題

我的資料欄位格是如下
 data.columns = ['stock_name', 'date',
'open','high','low','close','volume']

當我用 to_sql 是可以很方便地把資料輸入到資料庫中
data[allstocks].to_sql('stcks',engine,if_exists='append', index=False)

但是要如何去避免重覆資料寫入資料庫中呢???

卡關卡好久了...QQ


--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 125.231.106.45
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1547173040.A.D79.html
推 TuCH: 在資料庫裡做欄位的條件
推 Tarlach: 在sql裡面Insert or ignore into ?
→ rs6000: 用 panda的 to_sql 寫入資料庫，預設就沒有pk或 unique
推 guaptpan: 把資料庫的PK撈出來和要放入的資料比對PK，重複就把它從
→ guaptpan: 要放入的資料中拿掉？
→ rs6000: 目前也是用樓上大大的方法...先從資料庫撈資料
→ rs6000: 跟目前要寫入資料庫的dataframe比對