固定幅ファイルを区切りファイルに変換するtkintergui
-
27-10-2019 - |
質問
データ部門のコンバーターコードを作成して、固定幅ファイルをDelmitedファイルに変換しています。通常、ファイルをExcelにインポートし、テキストインポートウィザードを使用してフィールドの長さを設定し、CSVとして保存するだけです。ただし、数百万のレコードの長さのファイルを取得し始めたため、Excelにインポートすることができない制限に遭遇しました。ファイルには常にフィールドの間にスペースがあるとは限りません。特に、電話番号やzipコードなどのバリューフィールドの間ではそうです。また、ヘッダーは、スペースなしで完全に満たされていることがよくあります。
次のことを扱っている典型的な固定幅ファイルのサンプル
SequenSack and PaFull Name****************************]JOB TITLE****************]HOSP NAME******************************]Delivery Address***********************]Alternate 1 Address********************]Calculated Text**********************************]POSTNET Bar
000001T1 P1 Sample A Sample 123 Any Street Anytown 12345-6789 12345678900
000002T1 P1 Sample A Sample Director of Medicine 123 Any Street Po Box 1234 Anytown 12345-6789 12345678900
プログラムは、ファイルを次の区切りフィールドに分割する必要があります。
シーケン
袋とPA
フルネーム
職名
病院の名前
配達アドレス
代替アドレス1
計算されたテキスト
ポストネットバー
各ファイルは、ジョブの残りに応じて各フィールドのわずかに異なる幅として。私が探しているのは、固定幅ファイルのExcelインポートウィザードによく似たGUI指向の区切り文字です。このツールは、ファイルを複数のアップに分割したり、ファイルを逆転させたり、区切りから固定幅に変換したり、桁チェックをチェックするなど、他の多くのファイル操作を行う大きなツールの一部としてPythonで書いています。私は残りのツールにTKINTERを使用していますが、ソリューションが同様に使用する場合は理想的です。
どんな助けも感謝しています
解決
問題を正しく理解している場合(そして、私はそうしない可能性が十分にあります...)、最も簡単な解決策はテキストウィジェットを使用することです。
最初の行を行と同じ長さの一連のスペースにします。いくつかの交互のタグ(例:「偶数」と「奇数」)を使用して、各キャラクターに互いに目立つように代替色を与えます。 2番目の行はヘッダーであり、残りの行はすべてのサンプルデータです。
次に、ユーザーが文字をクリックすると、最初の行にバインディングを設定してスペースを「x」に変換します。 「x」をクリックする場合は、スペースに戻します。その後、各列の開始である文字をクリックしてクリックできます。ユーザーが完了したら、テキストウィジェットの最初の行を取得でき、各列に「x」があります。その後、必要な形式に変換する小さな関数が必要です。
それは大まかにこのように見えます(明らかに、このウェブサイトに表示されるものと色が異なりますが)
x x x ...
SequenSack and PaFull Name****************************]JOB...
000001T1 P1 Sample A Sample ...
一般的なアイデアを説明するための簡単なハックを次に示します。少しずさんなことですが、テクニックを示していると思います。実行したら、最初の行の領域をクリックして、マーカーを設定またはクリアします。これにより、各マーカーの代替色でヘッダーが強調表示されます。
import sys
import Tkinter as tk
import tkFont
class SampleApp(tk.Tk):
def __init__(self, *args, **kwargs):
tk.Tk.__init__(self, *args, **kwargs)
header = "SequenSack and PaFull Name****************************]JOB TITLE****************]HOSP NAME******************************]Delivery Address***********************]Alternate 1 Address********************]Calculated Text**********************************]POSTNET Bar"
sample = "000001T1 P1 Sample A Sample 123 Any Street Anytown 12345-6789 12345678900"
widget = DelimiterWidget(self, header, sample)
hsb = tk.Scrollbar(orient="horizontal", command=widget.xview)
widget.configure(xscrollcommand=hsb.set)
hsb.pack(side="bottom", fill="x")
widget.pack(side="top", fill="x")
class DelimiterWidget(tk.Text):
def __init__(self, parent, header, samplerow):
fixedFont = tkFont.nametofont("TkFixedFont")
tk.Text.__init__(self, parent, wrap="none", height=3, font=fixedFont)
self.configure(cursor="left_ptr")
self.tag_configure("header", background="gray")
self.tag_configure("even", background="#ffffff")
self.tag_configure("header_even", background="bisque")
self.tag_configure("header_odd", background="lightblue")
self.tag_configure("odd", background="#eeeeee")
markers = " "*len(header)
for i in range(len(header)):
tag = "even" if i%2==0 else "odd"
self.insert("end", " ", (tag,))
self.insert("end", "\n")
self.insert("end", header+"\n", "header")
self.insert("end", samplerow, "sample")
self.configure(state="disabled")
self.bind("<1>", self.on_click)
self.bind("<Double-1>", self.on_click)
self.bind("<Triple-1>", self.on_click)
def on_click(self, event):
'''Handle a click on a marker'''
index = self.index("@%s,%s" % (event.x, event.y))
current = self.get(index)
self.configure(state="normal")
self.delete(index)
(line, column) = index.split(".")
tag = "even" if int(column)%2 == 0 else "odd"
char = " " if current == "x" else "x"
self.insert(index, char, tag)
self.configure(state="disabled")
self.highlight_header()
return "break"
def highlight_header(self):
'''Highlight the header based on marker positions'''
self.tag_remove("header_even", 1.0, "end")
self.tag_remove("header_odd", 1.0, "end")
markers = self.get(1.0, "1.0 lineend")
i = 0
start = "2.0"
tag = "header_even"
while True:
try:
i = markers.index("x", i+1)
end = "2.%s" % i
self.tag_add(tag, start, end)
start = self.index(end)
tag = "header_even" if tag == "header_odd" else "header_odd"
except ValueError:
break
if __name__ == "__main__":
app = SampleApp()
app.mainloop()
他のヒント
編集: 私は今、あなたがGUIを探していることがわかります。私はこの誤った答えを後世のために残します。
import csv
def fixedwidth2csv(fw_name, csv_name, field_info, headings=None):
with open(fw_name, 'r') as fw_in:
with open(csv_name, 'rb') as csv_out: # 'rb' => 'r' for python 3
wtr = csv.writer(csv_out)
if headings:
wtr.writerow(headings)
for line in fw_in:
wtr.writerow(line[pos:pos+width].strip() for pos, width in field_info)