Python 3 - Ler e gravar valores em um arquivo .csv

Estou lendo um arquivo .csv, quero extrair determinados valores dele e gravá-los em um novo arquivo result.csv (B). Eu tentei fazer isso com o código (A), que está funcionando apenas parcialmente.

Na definição, coloquei todas as variáveis das quais quero extrair os valores correspondentes do arquivo .csv que estou lendo. (exceto "record_id" e "abreviação", porque eu os preencherei manualmente)

Agora, executando o código (A), ele gera a seguinte saída no result.csv:

Saída atual

record_id  abbreviation  patient_id  step_count  distance  ambulation_time  velocity  cadence  normalized_velocity  step_time_differential  step_length_differential  cycle_time_differential  step_time  step_length  step_extremity  cycle_time  stride_length  hh_base_support  swing_time  stance_time  single_supp_time  double_supp_time  toe_in_out 
70520161453                          3           292,34    1,67             ,         107,8    ,                    0,004                   1,051                     0,008                    ,          96,746       ,               1,116       ,              2,988            ,           ,            ,                 ,

Como você pode ver, faltam muitos valores em comparação com a saída desejada (B), além de alguns que são mostrados, mas incorretos.

Agora, os problemas que estou enfrentando são os seguintes:

Problema 1

Como estou comparando nomes no arquivo .csv, estou lendo, com os nomes na minha definição (A). Alguns deles não correspondem exatamente ou são confundidos com outros que têm parcialmente o mesmo nome.

Este é o problema para:

patient_id, velocity, step_time, stride_length, swing_time, stance_time, single_supp_time, double_supp_time, toe_in_out

Por exemplo, velocidade da minha definição corresponde à velocidade do arquivo .csv que estou lendo, mas também corresponde ao stridevelocitystddev. Isso está causando o valor ausente da velocidade.

Problema 2

Todas as variáveis a seguir contêm 2 valores em vez de 1, por exemplo, step_time contém os valores 0,558 e 0,554. Para todas essas variáveis que contêm 2 valores, quero calcular a média das duas e depois escrever apenas a média (neste exemplo, a média de 0,558 e 0,554 = 0,56) no resultado.csv pertencente a step_time.

step_time, step_length, cycle_time, stride_length, hh_base_support, swing_time, stance_time, single_supp_time, double_supp_time, toe_in_out

Espero que alguém possa me ajudar a resolver esses problemas, será apreciado!

Sinta-se livre para jogar com o arquivo de exportação que estou usando, você pode baixá-lo aqui:Arquivo de exportação CSV

(A) código Python

import csv
from collections import defaultdict
from datetime import datetime

data = defaultdict(str)
result = 'path/to/file/result_%s.csv'%datetime.now().strftime('%b-%d-%Y_%H%M')

#Make a list with the predefined variables
definition = ["record_id", "abbreviation", "patient_id", "step_count", "distance", "ambulation_time", "velocity", "cadence", "normalized_velocity", "step_time_differential", "step_length_differential", "cycle_time_differential", "step_time", "step_length", "step_extremity", "cycle_time", "stride_length", "hh_base_support", "swing_time", "stance_time", "single_supp_time", "double_supp_time", "toe_in_out"]

#Read the GaitRite .csv
with open('path/to/file/Export 4.csv', 'r') as f, open(result, 'w') as outfile:
    reader = csv.reader(f, delimiter=';')
    next(reader, None)  # skip the headers
    writer = csv.DictWriter(outfile, fieldnames=definition, lineterminator='\n')
    writer.writeheader()

#Read the .csv row by row
    for row in reader:
        for item in definition:
            h = item.replace('_', '')
            r0 = row[0].lower().replace(' ', '')
            if h in r0:
                try:
                    avg = round((float(row[1].replace(',', '.')) + float(row[2].replace(',', '.'))) / 2, 2)
                    data[item] = avg
                except ValueError:
                    avg = 0  # for cases with entry strings or commas
                data[item] = row[1]

    data['record_id'] = datetime.now().strftime('%m%d%Y%H%M')

# Write the clean result.csv
    writer.writerow(data)

(B) Saída .csv desejada

record_id  abbreviation  patient_id  step_count  distance  ambulation_time  velocity  cadence  normalized_velocity  step_time_differential  step_length_differential  cycle_time_differential  step_time  step_length  step_extremity  cycle_time  stride_length  hh_base_support  swing_time  stance_time  single_supp_time  double_supp_time  toe_in_out 
70520161453              25          3           292,34    1,67             175,1     107,8                         0,004                   1,051                     0,008                    0,56       97,27                        1,11        194,64         4,65             0,47        0,65         0,47              0,18              1,45

questionAnswers(0)

yourAnswerToTheQuestion