pd.read_csv多了一列怎么回事？涂黑的NUL是什么意思

Question

pd.read_csv(f)报错
pandas.errors.ParserError: Error tokenizing data. C error: Expected 34 fields in line 10729, saw 35
用Notepad++打开看csv文件，发现了几个NUL涂黑的，这代表什么意思啊？

Answer 1

这样的原始数据文件，需要预先用一些处理办法来处理，做成能直接导入到数据处理系统的数据文件，这一步称为基础数据清洗。
其和后面对无效数据的再次处理一起算作数据清洗工作。
这里比如强制用excel导入这个CSV文件，强制指定只有某个符号为分隔符，然后再另存使用，
或者用支持特殊符号搜索的工具进行搜索替换，把这里标黑的完全替换为某个许可的空字符。