Pythonで複数のcsvを読み込み、出力として1つのcsvを取得する方法

Question

私はすでにパンダでそれをどのように解決するかという質問をしていました。しかし今、私はパンダ以外のバージョンが必要です。

マイコード

import glob 
import os 

## path 
path = r'C:/x/x/Desktop/xxx/' 
all_files = glob.glob(os.path.join(path, '*.csv')) 

## column 
column_headers = ['Date', 'Time', 'Duration', 'IP', 'Request'] 

## open only one csv. -- I want to read here not only 1 file -- 
## my approach: 
## with open(all_files) as log, .... 
with open('log.csv') as log, open('out355.csv', 'w') as out: 
    out.write(';'.join(column_headers)+'\n') 
    while True: 
     try: 
      lines = [next(log).strip('\n').split(' ',4) for i in range(6)][3:] 
      out.write(';'.join(lines[1][:2]+[l[4] for l in lines])+'\n') 
     except StopIteration: 
      break 

私は、Pythonに新たなんだので、私はちょうど非常によく私の実行中のコードを変更することはできません。だから私は完全なコードを取得すると嬉しいだろう。

ありがとうございます！

Answer 1

あなたが近づいているので、*.csvファイルをそれぞれ読み込んで連結する必要があります。したがって、新しいファイルを開き、globを使用して各csvファイルを読み込む必要があります。これを行う際に、各CSVファイルの末尾に改行があることを確認してください。最後の行がfile_xで、の最初のデータ行が同じ行にあることを確認してください。

from glob import glob 

with open('combined.csv', 'a') as combinedFile: 
    combinedFile.write('a,b,c,d,e\n') # Headers 
    for eachFile in glob('*.csv'): 
     if eachFile == 'combined.csv': 
      pass 
     else: 
      count = 0 
      for line in open(eachFile, 'r'): 
       if count != 0: # So that you don't read 1st line of every file if it contains the headers. 
        combinedFile.write(line) 
       count = 1 

ランタイム：

a.csv

a,b,c,d,e 
1,2,3,4,5 
6,7,8,9,10 

b.csv

a,b,c,d,e 
11,12,13,14,15 
16,17,18,19,20 

combined.csv

a,b,c,d,e  
1,2,3,4,5 
6,7,8,9,10 
11,12,13,14,15 
16,17,18,19,20 

Answer 2

これらの線に沿って何か動作するはずです：

with open('out355.csv', 'w') as out: 
    for csvfile in all_files: 
    with open(csvfile) as log: 
     out.write(...) 
     .. the rest of your script .. 

Answer 3

これは

import glob 
import os 

## path 
path = r'C:/x/x/Desktop/xxx/' 
all_files = glob.glob(os.path.join(path, '*.csv')) 

## column 
column_headers = ['Date', 'Time', 'Duration', 'IP', 'Request'] 

out = open('out355.csv', 'w') 
out.write(';'.join(column_headers)+'\n') 
for file_ in all_files: 
    log = open(file_) 
    while True: 
     try: 
      lines = [next(log).strip('\n').split(' ',4) for i in range(6)][3:] 
      out.write(';'.join(lines[1][:2]+[l[4] for l in lines])+'\n') 
     except StopIteration: 
      break