-1

我的记录 anOrderedDict如下所示:

my_record = OrderedDict([ (u'FIR_ID', '111249'), (u'FIR_TYPE', 'ORG')])

我需要将它加载到数据库中,所以我想将数据集转换为数据框,然后转换为 CSV 文件,以方便数据库加载。但是,当我这样做时type(my_record),我得到:

<class 'pg.mod.results'>

这意味着它是一个类对象。如果它是类型collections.OrderedDict,我可以只做一个DataFrame(my_record). 我正在使用 Python 2.x。我可以将其转换OrderedDict为什么DataFrame

编辑

感谢 nosklo 的代码,错误消失了;列标题在那里,但缺少值。我提取了 10 条如下所示的记录:

[<ravenpackapi.models.results.Result at 0x118caadd0>,
 <ravenpackapi.models.results.Result at 0x118caad90>,
 <ravenpackapi.models.results.Result at 0x118e1a950>,
...,  <ravenpackapi.models.results.Result at 0x118da8750>]

然后, csv.DictWriter() 生成一个包含以下内容的 csv:

<Field: TIMESTAMP_UTC>,<Field: RP_STORY_ID>,<Field: RP_ENTITY_ID>,...,<Field: ENTITY_TYPE>,,,,,,,,,,,,,,,

这看起来像完整的键列表。并且文件末尾有很多行 ',,,,' 表示缺少值。

更新

我目前的代码是这样的:

records = list(records)
with open('/Users/.../.../RP_test_5.txt', 'w') as f:
    cf = csv.DictWriter(f, 
        ravenpackapi.models.fields.ANALYTICS_FIELDS,
        extrasaction='ignore') 
    cf.writeheader()
    cf.writerows(r.data for r in records)

由于缺少值,我尝试了:

for r in records: r.data

这成功地给了我我需要的字典。所以我不明白为什么,我不能向我的 csv 写入任何值。难道是这样

ravenpackapi.models.fields.ANALYTICS_FIELDS

给我

[<Field: TIMESTAMP_UTC>,
 <Field: RP_STORY_ID>,
 <Field: RP_ENTITY_ID>,
 <Field: ENTITY_TYPE>,...

r.data来自

for r in records: r.data

给我

 {u'RP_ENTITY_ID': u'91C82E',
 u'RP_POSITION_ID': None,
 u'RP_SOURCE_ID': u'C98333',
 u'RP_STORY_EVENT_COUNT': 17,
 u'RP_STORY_EVENT_INDEX': 5,
 u'RP_STORY_ID': u'54F16F66850FB15F838629FD0C41F1CD',
 u'SOURCE_NAME': u'Ticker Report',
 u'SUB_TYPE': None,
 u'TIMESTAMP_UTC': u'2018-06-30 00:03:10.457',...,}

哪些是不同的顺序,和/或键的格式不同?

u'TIMESTAMP_UTC'相对<Field: TIMESTAMP_UTC>

这有效

records = list(records)

for r in records: r.data

with open('/Users/.../RP_test_6.txt', 'w') as f:
    cf = csv.DictWriter(f, 
        r.data.keys(),
        extrasaction='ignore') 
    cf.writeheader()
    cf.writerows(r.data for r in records)

我相信有比

for r in records: r.data

r.data.keys()

想法?

4

1 回答 1

1

你首先说你的对象是 a OrderedDict,但它不是。它是一个pg.mod.results

如果它是一个类似dict的对象,并且你想将它存储到一个csv文件中,你根本不需要将它转换为DataFrame,你可以使用csv.DictWriterpython中包含的类:

records = list(records)

with open('myfile.csv', 'w') as f:
    cf = csv.DictWriter(f, records[0].keys()) 
    cf.writeheader()
    cf.writerows(records)

编辑:

在下面的评论中,您揭示了这些对象的真正含义 - 它们不是 OrderedDicts 并且由于某种未知原因,作者决定OrderedDict在对象__str__方法中返回 a 的表示Result,这就是您感到困惑的原因。

基于此https://github.com/RavenPack/python-api/blob/e3c99f5eaab7819a2087565ce0859bfb956a45cc/ravenpackapi/models/results.py#L33Result对象是一个自定义对象,它在其.data属性中保存真实数据。然后,您可以使用该属性进行转换:

with open('myfile.csv', 'w') as f:
    cf = csv.DictWriter(f, 
        ravenpackapi.models.fields.ANALYTICS_FIELDS,
        extrasaction='ignore') 
    cf.writeheader()
    cf.writerows(r.data for r in records)
于 2018-06-29T18:13:52.327 回答