Como gravar linhas ruins ignoradas por pandas
Estou lendo um arquivo CSV com pandas com
error_bad_lines=False
Um aviso é impresso quando uma linha incorreta é encontrada. No entanto, quero manter um registro de todos os números de linhas incorretas para alimentar outro programa. Existe uma maneira fácil de fazer isso?
Pensei em iterar sobre o arquivo com um
chunksize=1
e capturando o CParserError que deve ser lançado para cada linha incorreta encontrada. Quando eu faço isso, nenhum CParserError é lançado para linhas defeituosas, portanto não consigo pegá-las.