'utf-8' codec can't decode byte 0xe0 in position 39: invalid continuation byte

https://gmnam.tistory.com/291

[Pandas] UnicodeDecodeError: 'utf-8' codec can't decode byte 해결방법

 

인코딩 포맷을 찾아서 해결하는 방법 

두 번째 방법은 csv파일의 포맷을 찾아서 read_csv에 알려주는 것이다. 

 

이것은 chardet이란 모듈을 이용한다. 모듈이 없으면 다음과 같이 설치할 수 있다. 

pip install chardet 
# or 
conda install chardet

 

설치를 하고 다음과 같이 실행해보자.

import chardet

with open('test.csv', 'rb') as rawdata:
    result = chardet.detect(rawdata.read(10000))

# check what the character encoding might be
print(result)

 

 

 

73%의 확률로 ISO-8859-1 포맷이라고 알려준다. 100%가 아닌 이유는 파일의  첫 1만 개의 bytes만으로 판단을 했기 때문이다. 이 정도만으로도 포맷을 특정 짓기에 충분하다. 

 

그러면 ISO-8859-1포맷으로 파일을 읽어보자. encoding이 일치한다면 에러 없이 파일을 읽을 것이다. 

 

 

 

 

 

....근데 계속 오류남 ㅠㅠ