1

我正在为我们的数据部门编写一个转换器代码，将固定宽度的文件转换为分隔文件。通常我们使用将文件导入 Excel，使用文本导入向导设置字段长度，然后保存为 csv。但是，我们遇到了限制，我们开始获取数百万条记录长的文件，因此无法导入 Excel。这些文件并不总是在字段之间有空格，尤其是在电话号码或邮政编码等值字段之间。标题也经常被完全填满，没有空格。

我们正在处理的典型固定宽度文件的示例：

SequenSack and PaFull Name****************************]JOB TITLE****************]HOSP NAME******************************]Delivery Address***********************]Alternate 1 Address********************]Calculated Text**********************************]POSTNET Bar
000001T1  P1     Sample A Sample                                                                                         123 Any Street                                                                  Anytown 12345-6789                                12345678900
000002T1  P1     Sample A Sample                       Director of Medicine                                              123 Any Street                          Po Box 1234                             Anytown 12345-6789                                12345678900

该程序需要将文件分成以下分隔字段：

Sequen
Sack and Pa
全名
职位医院
名称
收货地址
备用地址 1
计算文本
POSTNET 栏

每个文件作为每个字段的宽度略有不同，具体取决于作业的其余部分。我正在寻找的是一个面向 GUI 的分隔符，很像用于固定宽度文件的 Excel 导入向导。我正在用 Python 编写这个工具，作为一个更大的工具的一部分，该工具执行许多其他文件操作，例如将文件分解为多个文件、反转文件、从定界转换为固定宽度以及校验位检查。我将 Tkinter 用于其余工具，如果解决方案也使用它，那将是理想的。

任何帮助表示赞赏

4

2 回答 2

3

如果我正确理解了问题（而且很有可能我没有……），最简单的解决方案可能是使用文本小部件。

使第一行是一系列与行长度相同的空格。使用几个交替的标签（例如：“偶数”和“奇数”）为每个字符赋予一种交替的颜色，使它们彼此突出。第二行是标题，任何剩余的行都是几行样本数据。

然后，在第一行设置绑定，以在用户单击字符时将空格转换为“x”。如果他们单击“x”，则将其转换回空格。然后他们可以去点击作为每列开头的字符。用户完成后，您可以获得文本小部件的第一行，并且每列都会有一个“x”。然后，您只需要一个小函数将其转换为您需要的任何格式。

它看起来大致像这样（尽管颜色显然与本网站上显示的颜色不同）

      x          x                                     x  ...
SequenSack and PaFull Name****************************]JOB...
000001T1  P1     Sample A Sample                          ...

这里有一个快速的技巧来说明一般的想法。这有点草率，但我认为它说明了这项技术。运行它时，单击第一行中的一个区域以设置或清除标记。这将导致标题以每个标记的交替颜色突出显示。

import sys
import Tkinter as tk
import tkFont

class SampleApp(tk.Tk):
    def __init__(self, *args, **kwargs):
        tk.Tk.__init__(self, *args, **kwargs)

        header = "SequenSack and PaFull Name****************************]JOB TITLE****************]HOSP NAME******************************]Delivery Address***********************]Alternate 1 Address********************]Calculated Text**********************************]POSTNET Bar"
        sample = "000001T1  P1     Sample A Sample                                                                                         123 Any Street                                                                  Anytown 12345-6789                                12345678900"
        widget = DelimiterWidget(self, header, sample)
        hsb = tk.Scrollbar(orient="horizontal", command=widget.xview)
        widget.configure(xscrollcommand=hsb.set)
        hsb.pack(side="bottom", fill="x")
        widget.pack(side="top", fill="x")

class DelimiterWidget(tk.Text):
    def __init__(self, parent, header, samplerow):
        fixedFont = tkFont.nametofont("TkFixedFont")
        tk.Text.__init__(self, parent, wrap="none", height=3, font=fixedFont)
        self.configure(cursor="left_ptr")
        self.tag_configure("header", background="gray")
        self.tag_configure("even", background="#ffffff")
        self.tag_configure("header_even", background="bisque")
        self.tag_configure("header_odd", background="lightblue")
        self.tag_configure("odd", background="#eeeeee")
        markers = " "*len(header)
        for i in range(len(header)):
            tag = "even" if i%2==0 else "odd"
            self.insert("end", " ", (tag,))
        self.insert("end", "\n")
        self.insert("end", header+"\n", "header")
        self.insert("end", samplerow, "sample")
        self.configure(state="disabled")
        self.bind("<1>", self.on_click)
        self.bind("<Double-1>", self.on_click)
        self.bind("<Triple-1>", self.on_click)

    def on_click(self, event):
        '''Handle a click on a marker'''
        index = self.index("@%s,%s" % (event.x, event.y))
        current = self.get(index)
        self.configure(state="normal")
        self.delete(index)
        (line, column) = index.split(".")
        tag = "even" if int(column)%2 == 0 else "odd"
        char = " " if current == "x" else "x"
        self.insert(index, char, tag)
        self.configure(state="disabled")
        self.highlight_header()
        return "break"

    def highlight_header(self):
        '''Highlight the header based on marker positions'''
        self.tag_remove("header_even", 1.0, "end")
        self.tag_remove("header_odd", 1.0, "end")
        markers = self.get(1.0, "1.0 lineend")

        i = 0
        start = "2.0"
        tag = "header_even"
        while True:
            try:
                i = markers.index("x", i+1)
                end = "2.%s" % i
                self.tag_add(tag, start, end)
                start = self.index(end)
                tag = "header_even" if tag == "header_odd" else "header_odd"
            except ValueError:
                break

if __name__ == "__main__":
    app = SampleApp()
    app.mainloop()
于 2012-01-12T21:25:16.523 回答
0

编辑：我现在看到你正在寻找一个 gui。我会把这个不正确的答案留给后代。

import csv

def fixedwidth2csv(fw_name, csv_name, field_info, headings=None):
    with open(fw_name, 'r') as fw_in:
        with open(csv_name, 'rb') as csv_out: # 'rb' => 'r' for python 3
            wtr = csv.writer(csv_out)
            if headings:
                wtr.writerow(headings)
            for line in fw_in:
                wtr.writerow(line[pos:pos+width].strip() for pos, width in field_info)
于 2012-01-12T17:54:27.523 回答