Importuj wiele plików excel do Pythona i połącz je w jedną ramkę danych

Chciałbym odczytać kilka plików Excela z katalogu do pand i połączyć je w jedną dużą ramkę danych. Nie byłem jednak w stanie tego rozgryźć. Potrzebuję pomocy z pętlą for I zbudowaniem konkatenowanej ramki danych: Oto co mam do tej pory: 

import sys
import csv
import glob
import pandas as pd

# get data file names
path =r'C:\DRO\DCL_rawdata_files\excelfiles'
filenames = glob.glob(path + "/*.xlsx")

dfs = []

for df in dfs: 
    xl_file = pd.ExcelFile(filenames)
    df=xl_file.parse('Sheet1')
    dfs.concat(df, ignore_index=True)
Author: jonas, 2014-01-03
Source

2 answers

Jak wspomniano w komentarzach, jednym z błędów, które popełniasz, jest to, że zapętlasz pustą listę.

Oto jak bym to zrobił, używając przykładu posiadania 5 identycznych plików Excela, które są dołączane jeden po drugim.

(1) Import: 

import os
import pandas as pd

(2) Lista plików: 

path = os.getcwd()
files = os.listdir(path)
files

Wyjście: 

['.DS_Store',
 '.ipynb_checkpoints',
 '.localized',
 'Screen Shot 2013-12-28 at 7.15.45 PM.png',
 'test1 2.xls',
 'test1 3.xls',
 'test1 4.xls',
 'test1 5.xls',
 'test1.xls',
 'Untitled0.ipynb',
 'Werewolf Modelling',
 '~$Random Numbers.xlsx']

(3) Wybierz pliki 'xls': 

files_xls = [f for f in files if f[-3:] == 'xls']
files_xls

Wyjście: 

['test1 2.xls', 'test1 3.xls', 'test1 4.xls', 'test1 5.xls', 'test1.xls']

(4) Initialize empty dataframe: 

df = pd.DataFrame()

(5) Loop over list of files to append to empty dataframe: 

for f in files_xls:
    data = pd.read_excel(f, 'Sheet1')
    df = df.append(data)

(6) Ciesz się nowym dataframe. :-)

df

Wyjście: 

  Result  Sample
0      a       1
1      b       2
2      c       3
3      d       4
4      e       5
5      f       6
6      g       7
7      h       8
8      i       9
9      j      10
0      a       1
1      b       2
2      c       3
3      d       4
4      e       5
5      f       6
6      g       7
7      h       8
8      i       9
9      j      10
0      a       1
1      b       2
2      c       3
3      d       4
4      e       5
5      f       6
6      g       7
7      h       8
8      i       9
9      j      10
0      a       1
1      b       2
2      c       3
3      d       4
4      e       5
5      f       6
6      g       7
7      h       8
8      i       9
9      j      10
0      a       1
1      b       2
2      c       3
3      d       4
4      e       5
5      f       6
6      g       7
7      h       8
8      i       9
9      j      10
 22
Author: ericmjl,
Warning: date(): Invalid date.timezone value 'Europe/Kyiv', we selected the timezone 'UTC' for now. in /var/www/agent_stack/data/www/doraprojects.net/template/agent.layouts/content.php on line 54
2014-01-03 16:33:41

To działa z Pythonem 2.x

BYĆ w katalogu, w którym znajdują się pliki Excela

Zobacz http://pbpython.com/excel-file-combine.html 

import numpy as np
import pandas as pd
import glob
all_data = pd.DataFrame()
for f in glob.glob("*.xlsx"):
    df = pd.read_excel(f)
    all_data = all_data.append(df,ignore_index=True)

# now save the data frame
writer = pd.ExcelWriter('output.xlsx')
all_data.to_excel(writer,'sheet1')
writer.save()
 1
Author: john blue,
Warning: date(): Invalid date.timezone value 'Europe/Kyiv', we selected the timezone 'UTC' for now. in /var/www/agent_stack/data/www/doraprojects.net/template/agent.layouts/content.php on line 54
2018-02-10 04:25:32