文章目录
目录
- 一、前言
- 二、问题复现
- 1. 问题
- 2. 通过 on_bad_lines=‘warn’ 跳过异常数据
- 3. 没办法了 delimiter=‘t’
- 4. 添加 delimiter后，按列无法取值
- 5. 没有办法回归最原始的方式
- 三、总结
我有一个 csv 文件，要做数据分析，可是用 pandas 死活读不出来，差点搞崩溃了。
但打开 csv 文件，发现里面的内容啥的还是蛮正常的
并且以 逗号 分割
import pandas as pd
df=pd.read_csv('./data/test.csv')
df
不报错了，但发现数据错位了。
数据总算对了，看着是没有错位
仔细想想也应该这样，因为本来分割符就是 ‘,’
with open(f'{file_path}', newline='',encoding='utf-8') as csvfile:
reader = csv.DictReader(csvfile)
通过本文可见，正确的参数设置对于使用Pandas读取CSV文件至关重要。在处理异常数据时，合适的参数选择和方法应用能有效解决数据错位和取值异常等问题，确保数据的准确性和完整性。
以上为个人经验，希望能给大家一个参考，也希望大家多多支持风君子博客。
您可能感兴趣的文章:
- 使用pandas库读取和写入csv文件的实现示例
- Python使用Pandas读取CSV文件数据的操作方法
- 使用Pandas实现高效读取筛选csv数据
- 针对Pandas的总结以及数据读取_pd.read_csv()的使用详解
- Python 中 Pandas 文件操作和读取 CSV 参数详解
- Pandas读取csv的实现