python - 仅从 CSV 导入两列

Question

我有一个包含 20 列和 100 行的 CSV 文件。我想只使用其中的两列来创建一个 SQLite 数据库——第 1 列中的日期和第 10 列中的温度。我已经修改了我找到的一些示例代码，但不知道如何让它只使用这两列。

import csv, sqlite3
import sys

filename = sys.argv[-1]

con = sqlite3.connect("my.db")
con.execute("create table stats(date, temperature)")                               
cur = con.cursor()

stats = csv.reader(open(filename))

con.executemany("insert into stats(date, temperature) values (?, ?)", stats)

con.commit()

Answer 1

您可以使用pandas仅读取指定的列并将它们写入DB

import sqlite3
from pandas.io import sql
import pandas as pd
from StringIO import StringIO

s = """Year,Make,Model
1997,Ford,E350
2000,Mercury,Cougar"""

f = StringIO(s)
df = pd.read_csv(f, usecols = ['Year','Model']) # reads specified cols
                                                # to a DataFrame

con = sqlite3.connect(':memory:')
sql.write_frame(df, name='test', con=con)

print sql.read_frame('select * from test', con) # reads data back 
                                                # to DataFrame

出去：

   Year   Model
0  1997    E350
1  2000  Cougar

Answer 2

con.executemany("insert into stats(date, temperature) values (?, ?)",
                ((rec[0], rec[9]) for rec in stats))