python csv資料比對問題

ayabreay1

如題，最近想做csv參數比對，但不曉得往哪個方向做，不知道各位大大可以指點一下小的我嗎?

用途：

用a.csv檔的Number欄位當KeyWord去搜尋b.csv檔是否存在，
在用 data1 ~ data6做資料比對，若data1 ~ data6其中1個資料不同，
則把2筆資料寫到c.csv檔。

a.csv

NAME	DATE	Number	data1	data2	data3	data4	data5	data6
Kobe	2021/06/03	1		--------------	--------------	test1	10	80
Kobe	2021/06/03	1		--------------	--------------	test2	20	82
Kobe	2021/06/03	2		--------------	--------------	test3	20	96
Kobe	2021/06/03	2		--------------	--------------	test4	20	97
Kobe	2021/06/03	3		--------------	--------------	test5	10	129
Kobe	2021/06/03	3		--------------	--------------	test6	20	98
Kobe	2021/06/03	4		--------------	--------------	test7	10	916

...

瀏覽完整內容，請先 註冊 或 登入會員

tryit244178

簡單粗爆的方法就是，一行一行的比對。先把b的第一行，拿去跟a的第一、二、三、四、五……行比對；然後把b的第二行，拿去跟a的第一、二、三、四、五……行比對……以此類推。

用a.csv檔的Number欄位當KeyWord去搜尋b.csv檔是否存在。

宣告一個list的變數，把b拿來跟a比對，如果Number的值相同，就push。
...

瀏覽完整內容，請先 註冊 或 登入會員

codewice

我有點看不太懂需求，但你要不要試試看把兩個 csv 都倒進 sqlite db 裡面變成兩個 table，然後再把兩邊的 table join 起來？

albertalan

先實作row的欄位成物件(model)，然後將a.csv、b.csv的資料分別以model放到兩個list，分別是alist、blist，接著就迭代兩個list比對每一個物件的屬性就可以了

ayabreay1

codewice 發表於 2021-6-19 09:49 PM

下載: 訪客無法瀏覽下載點，請先 註冊 或 登入會員

我有點看不太懂需求，但你要不要試試看把兩個 csv 都倒進 sqlite db 裡面變成兩個 table，然後再把兩邊的 t ...

講簡單一點就是 我想設條件去比對2個檔案的差異性，
...

瀏覽完整內容，請先 註冊 或 登入會員

ilikeatom

import pandas as pd
import numpy as np

#用pandas載入資料
a = pd.read_csv("a.csv").fillna("none") #用文字的none取代空值是因為比較空值的時候會有nan不等於nan的問題
b = pd.read_csv("b.csv").fillna("none")

#以Nmber相同來合併資料
ab_merge = pd.merge(a,b,on = "Number",suffixes = ("_a","_b"))
#插入Nmber
ab_merge.insert(11,"Number_b",c.Number) #為了讓這張表的左右欄位都相同
ab_merge...

瀏覽完整內容，請先 註冊 或 登入會員