将 .dat 文件导入数据框而不是 python 中的字符串列表

Question

我正在尝试导入我的实验输出的 .dat 文件作为 header 行中的元数据，然后导入实验本身的数据（在虚线行之后）。我的想法是剥离它，以便我有一个包含元数据的字符串变量列表和另一个变量作为带有结果的数据框（破折号下方的部分）。我在尝试将下面的数据导入为数据框时遇到问题，因为上面的元数据被归类为字符串列表，因此整个文件保持这种格式。有没有办法将数据作为数据框而不是字符串列表获取？

Learned-Helplesness-Experiment  (TriplePlatform)  from      05.04.2017         13:41:24

software version:   DoublePlatform_1.3 04-Jun-2014

Setup of Experiment:    

Platform 1: 
ExpType:    M   M   M   M   M   M   M   M   M   M   

heated side:    right   right   right   right   right   right   right       right   right   right   

PIs:     n. def.     0   0   0   0   0   0   0   0   0  

Platform 2: 
ExpType:    Te  Te  Te  Y   Te  Y   Y   Y   Y   Y   

heated side:    right   right   right   ->M right   ->M ->M ->M ->M ->M 

PIs:     n. def.     0   0   0   0   0   0   0   0   0  

Platform 3: 
ExpType:    Y   Y   Y   Y   M_S Y   Y   Y   Y   Y   

heated side:    ->M ->M ->M ->M right   ->M ->M ->M ->M ->M 

PIs:     n. def.     0   0   0   0   0   0   0   0   0  


------------------------------------    ------------------------------------

 0   0   0   0   0
 1   47 -0.3759766   0.1123047   0.3710938
 2   97  0.01953125 -0.1318359   0.1123047
 3   157    -0.4150391   0.2246094   0.3369141
 4   207    -0.01953125 -0.2539063   0.1318359
 5   257    -0.3515625   0.3027344   0.3222656

Answer 1

我猜你正在使用 pandas？我认为没有 "general" 方法可以做到这一点。您可以手动 open/parse 文件（直到 "dash lines"）。虚线之前的部分保留为 "list of strings"。然后你告诉 pandas 从行号 x 开始导入其余部分（你找到破折号的地方）。该选项称为 skiprows.

Edit1（回复评论）:

这取决于您的 header 行数是否恒定。如果没有，您可能需要逐行阅读文件，寻找破折号：

with open('filename', 'r') as file:
    line_no = 0
    for line in file.read():
        line_no += 1
        if line.startswith('-'*37):
            # do sth
            break
        else:
            # do sth

编辑2

要导入数据部分，您可以使用

pandas.read_csv(..., sep='\t', skiprows=line_no)

如果tab是字段分隔符，或者

pandas.read_csv(..., delim_whitespace=True, skiprows=line_no)

如果字段由一个（或多个）分隔 blanks

将 .dat 文件导入数据框而不是 python 中的字符串列表

Importing a .dat file to a dataframe instead of a list of strings in python

python

python-import