[오류 해결] Error tokenizing data. C error: Expected * fields in line *, saw *

- 오류 현상

Pandas read_csv를 할 때 발생
(Error tokenizing data. C error: Expected 4 fields in line 2, saw 7)

- 오류 원인

데이터 중간에 첫 행과 다른 길이를 가진 데이터가 있는 경우 발생

- 해결 방법

1) 데이터 수정하기 : 보통 데이터 오류인 경우가 많으니, 다른 길이를 가지는 행의 데이터를 수정한다.

2) 문제가 되는 행을 건너뛰기 : error_bad_lines 옵션을 False로 바꾸면, 문제가 되는 행을 건너뛴다.

pd.read_csv(path, error_bad_lines=False)

3)  파일 전체 스캔 후, 다시 Pandas 로 읽어주기 : 특정 Row를 건너뛰면 안되는, 즉 첫번째 행이 없는 데이터라도 살려야하는 경우 활용한다.

# 파일 전체 스캔하면서 Row별 Column	 개수 세기
delm = ','
with open("sample.csv", "r") as f:
	count_columns = [len(l.split(delm)) for l in f.readlines()]
# 가장 큰 Column 개수 기준 Columns명 리스트 만들어주기 
columns = [i for i in range(0, max(count_columns)]

df = pd.read_csv("sample.csv", names=columns, delimiter=',')