pandas read_csvで行を指定して読み込む方法

こんにちは！今回は、Pandasのread_csvで行を指定してデータを読み込む方法について解説します。

1. Pandas read_csvの基本概念

PandasはPythonのライブラリで、データ解析や処理を簡単に行うことができます。その中でも、CSVファイルの読み込みにはread_csvを使います。read_csvを使用することで、CSVファイルをデータフレームとして読み込むことができます。

基本的なread_csvの使い方は以下のようになります。

1
2
3
import pandas as pd
df = pd.read_csv('example.csv')
print(df)

このコードでは、example.csvというファイルを読み込み、データフレームdfに格納しています。そして、print関数でdfを表示しています。

2. 行指定の読み込みの必要性

CSVファイルが大きい場合、全てのデータを一度に読み込むのはメモリ不足の原因となります。そこで、必要な行だけを指定して読み込む方法があります。

3. read_csvで行を指定して読み込む方法

read_csvで行を指定する方法は、skiprowsを使用することです。skiprowsには、読み込みをスキップする行数を指定します。

例えば、2行目から読み込みたい場合は、以下のようにします。

1
2
3
import pandas as pd
df = pd.read_csv('example.csv', skiprows=1)
print(df)

このコードでは、skiprows=1と指定することで、1行目をスキップして2行目からの読み込みを行っています。

4. 複数行を指定して読み込む方法

複数行を指定して読み込む場合は、skiprowsにリストを指定します。

例えば、2行目から4行目までを読み込みたい場合は、以下のようにします。

1
2
3
import pandas as pd
df = pd.read_csv('example.csv', skiprows=[1, 2, 3])
print(df)

このコードでは、skiprows=[1, 2, 3]と指定することで、2行目から4行目までの読み込みを行っています。

5. 実践例：行指定を用いたデータ読み込みの応用

実際に、行指定を用いたデータ読み込みの応用例を見てみましょう。

例えば、以下のようなCSVファイルがあるとします。

1
2
3
4
5
name,age,gender
Alice,25,Female
Bob,32,Male
Charlie,18,Male
Diana,41,Female

このCSVファイルから、30歳以上の人だけを読み込みたい場合は、以下のようにします。

1
2
3
4
import pandas as pd
df = pd.read_csv('example.csv', skiprows=1)
df = df[df['age'] >= 30]
print(df)

このコードでは、まず2行目からのデータを読み込み、その後に年齢が30歳以上の人だけを抽出しています。

6. 注意点とトラブルシューティング

行指定を用いたデータ読み込みにおいて、注意点があります。

  • skiprowsに指定する行数は、先頭からの行数ではなく、1からの行数を指定する必要があります。
  • skiprowsに指定する行数は、ヘッダー行を含む行数となります。
  • CSVファイルが大きい場合、読み込みに時間がかかることがあります。その場合は、chunksizeを指定して読み込みを分割することができます。
  • CSVファイルのエンコードがUTF-8以外の場合は、encodingオプションを指定する必要があります。

7. まとめ

今回は、Pandasのread_csvを用いた行指定の読み込み方法について解説しました。行指定を使用することで、大きなCSVファイルから必要なデータだけを簡単に読み込むことができます。

しかし、行指定による読み込みには注意点がありますので、それらについても理解しておくことが大切です。

以上で、Pandas read_csvで行を指定して読み込む方法の解説を終わります。ご清聴ありがとうございました！