MENU
SWELL公式サイトへ 詳しくはこちら

pandasでのピボットテーブルとクロス集計の基礎

Python Pandas
  • URLをコピーしました！
目次

1. はじめに

データ分析や処理を行う際、データを効率的に集計し、視覚的に理解しやすくするためのツールが必要です。Pythonのpandasライブラリは、その強力なデータ操作機能により、多くのデータサイエンティストやアナリストに愛用されています。この記事では、特にpandasのピボットテーブルとクロス集計について、初心者向けにその使い方と実践例を紹介します。

記事の目的: この記事の目的は、pandasを使ってデータを集計・分析するための基本的な方法を学ぶことです。ピボットテーブルとクロス集計は、データを再編成し、要約するための非常に強力なツールです。これらを理解し、使いこなすことで、データ分析の効率が格段に向上します。

対象読者: この記事は、Pythonとpandasを使い始めたばかりの初心者を対象としています。Pythonの基本的な操作や、pandasライブラリのインストール方法については既に理解していることを前提としています。

この記事で学べること:

  • ピボットテーブルとクロス集計の基本的な概念
  • pandasを使ったピボットテーブルの作成方法
  • pandasを使ったクロス集計の作成方法
  • それぞれの機能を使用する際の具体的なコード例とその解説

データを集計・分析するための基本スキルを身につけることで、今後のデータ処理がよりスムーズになり、効率的な分析が可能になります。それでは、次のセクションでピボットテーブルとクロス集計の基本的な概念について詳しく見ていきましょう。

あわせて読みたい
Pandasのデータフレーム構造を徹底解説：Values、Columns、Indexの理解と操作 【1. はじめに】 データ分析を行う際に、データを効率的に操作・管理するためにはPandasのデータフレームを理解することが非常に重要です。PandasはPythonのデータ分析…

2. ピボットテーブルとクロス集計とは？

データを効果的に分析するためには、情報を整理し、視覚的に理解しやすい形式に変換することが重要です。ピボットテーブルとクロス集計は、こうしたデータの要約と視覚化に非常に便利なツールです。ここでは、それぞれのツールの基本的な概念と使いどころについて説明します。

ピボットテーブルとは？

ピボットテーブルは、データを再編成し、要約統計量（例えば合計、平均、最大値、最小値など）を計算するための強力なツールです。特定の列を行ラベルや列ラベルに設定し、他の列の値を集計することで、データを視覚的に分かりやすく表示することができます。Excelでお馴染みの機能ですが、pandasでも簡単に作成することができます。

ピボットテーブルの主な利点

  • データの集約: 膨大なデータセットから、重要な統計情報を抽出。
  • 柔軟な再編成: データを自由に並べ替え、異なる視点から分析可能。
  • 視覚的な理解: 集計結果を行と列に分けることで、データのパターンや傾向を把握しやすくする。

使用例

  • 売上データの要約: 日付ごと、製品ごとに売上を集計して表示。
  • 学生の成績の分析: 科目ごと、学年ごとに平均点を算出。

クロス集計とは？

クロス集計（クロス集計表、クロスタブとも呼ばれます）は、二つのカテゴリカルデータの組み合わせごとにデータを集計する方法です。特に、頻度や割合、合計、平均などを計算するのに便利です。クロス集計を使用することで、異なるカテゴリ間の関係性やパターンを明確にすることができます。

クロス集計の主な利点

  • 関係性の把握: 異なるカテゴリカル変数間の関係を簡単に視覚化。
  • 頻度分析: 各カテゴリの出現頻度を迅速に算出。
  • 柔軟な集計: 複数の集計方法を適用可能（例：合計、平均、割合）。

使用例

  • 購買行動の分析: 性別と購入の有無の関係を集計。
  • 顧客属性と製品購入の関係: 年齢層と特定製品の購入数を分析。

まとめ

ピボットテーブルとクロス集計は、データを視覚的に理解しやすい形式に変換し、要約するための強力なツールです。これらを利用することで、データのパターンやトレンドを迅速に把握し、効果的な意思決定を支援することができます。次のセクションでは、実際にpandasを使ってこれらのツールをどのように作成するか、具体的なコード例を交えて解説していきます。

あわせて読みたい
pandas入門：インデックスを簡単に変更する方法 【1. はじめに】 この記事では、Pythonのpandasライブラリを使用して、データフレームの軸のインデックス（行や列のラベル）を変更する方法について解説します。特に、…

3. どのようなときに使えるか？

データ分析の現場では、ピボットテーブルやクロス集計が非常に役立ちます。これらのツールを使うことで、データセットの特定の側面を迅速に要約し、視覚的に理解しやすい形式で提供することができます。以下に、それぞれのツールがどのような場面で有効か、具体的な使用例を紹介します。

ピボットテーブルの使用例

売上データの要約 ピボットテーブルを使うことで、日付ごとや製品ごとに売上を集計し、簡単に分析できます。例えば、以下のようなデータセットがあるとします。

日付製品売上
2024-01-01A100
2024-01-01B150
2024-01-02A200
2024-01-02B250

このデータをピボットテーブルで集計すると、日付ごと、製品ごとの売上を一目で把握できます。

import pandas as pd

data = {
    '日付': ['2024-01-01', '2024-01-01', '2024-01-02', '2024-01-02'],
    '製品': ['A', 'B', 'A', 'B'],
    '売上': [100, 150, 200, 250]
}
df = pd.DataFrame(data)

pivot_table = df.pivot_table(values='売上', index='日付', columns='製品', aggfunc='sum')
print(pivot_table)

このように、売上データを簡単に要約できるため、日々の売上パフォーマンスを迅速に把握することができます。

学生の成績の分析 学校の成績データを分析する際にもピボットテーブルは非常に便利です。例えば、各科目ごとの成績平均を学年ごとに集計することで、生徒の学習傾向を把握できます。

import pandas as pd

# データフレームの作成
data = {
    '学年': ['1年', '1年', '1年', '1年', '2年', '2年', '2年', '2年'],
    '科目': ['数学', '数学', '英語', '英語', '数学', '数学', '英語', '英語'],
    '成績': [80, 85, 90, 88, 85, 87, 88, 90]
}
df = pd.DataFrame(data)

# ピボットテーブルの作成
pivot_table = df.pivot_table(values='成績', index='学年', columns='科目', aggfunc='mean')
print(pivot_table)

このコードでは、以下のようなデータセットを使用しています。

学年科目成績
1年数学80
1年数学85
1年英語90
1年英語88
2年数学85
2年数学87
2年英語88
2年英語90

出力結果は以下のようになります

科目英語数学
学年
1年89.082.5
2年89.086.0

このピボットテーブルにより、各学年ごとに科目別の成績平均を視覚的に比較することができます。

クロス集計の使用例

購買行動の分析 クロス集計を用いることで、異なるカテゴリカルデータ間の関係を分析できます。例えば、性別と購入の有無をクロス集計することで、購買行動のパターンを把握できます。

import pandas as pd

data = {
    '性別': ['男性', '女性', '女性', '男性', '女性'],
    '購入': ['はい', 'はい', 'いいえ', 'はい', 'いいえ']
}
df = pd.DataFrame(data)

crosstab = pd.crosstab(df['性別'], df['購入'])
print(crosstab)

このクロス集計により、男性と女性の購買行動の違いを視覚的に確認できます。

顧客属性と製品購入の関係 異なる顧客属性（例えば年齢層や地域）と製品購入の関係をクロス集計で分析することも可能です。これにより、特定の顧客グループがどの製品を好むかを明確にすることができます。

import pandas as pd

data = {
    '年齢層': ['20代', '30代', '30代', '40代', '20代'],
    '製品': ['A', 'B', 'A', 'B', 'A']
}
df = pd.DataFrame(data)

crosstab = pd.crosstab(df['年齢層'], df['製品'])
print(crosstab)

このクロス集計を使うことで、年齢層ごとの製品購入のパターンを分析し、マーケティング戦略の立案に役立てることができます。

まとめ

ピボットテーブルとクロス集計は、データの要約と分析を効率化する強力なツールです。日常の業務や学術研究、マーケティング分析など、様々な場面で利用できます。次のセクションでは、これらのツールを実際にpandasでどのように作成するか、具体的なコード例を交えて解説します。

あわせて読みたい
Pandasを使ったデータ型の変換方法とその重要性 【1. はじめに】 データを扱うとき、データ型を適切に変換することはとても大事です。例えば、計算をするためには文字列ではなく数値にする必要があります。Pandasとい…

4. pandasでのピボットテーブルの使い方

pandasを使えば、データを簡単にピボットテーブルとして要約できます。ここでは、基本的なピボットテーブルの作成方法と、その使い方について具体例を交えて解説します。

基本的な書式

pandasのpivot_tableメソッドを使ってピボットテーブルを作成します。以下は基本的な書式です：

import pandas as pd
pivot_table = df.pivot_table(
    values='値の列',
    index='行ラベルの列',
    columns='列ラベルの列',
    aggfunc='集計関数'
)
  • values: 集計する値の列
  • index: 行ラベルにする列
  • columns: 列ラベルにする列
  • aggfunc: 使用する集計関数（例：sum, meanなど）

サンプルコードと解説

ここでは、以下の成績データを使って、学年ごとに各科目の成績平均を算出するピボットテーブルを作成してみます。

import pandas as pd

# データフレームの作成
data = {
    '学年': ['1年', '1年', '1年', '1年', '2年', '2年', '2年', '2年'],
    '科目': ['数学', '数学', '英語', '英語', '数学', '数学', '英語', '英語'],
    '成績': [80, 85, 90, 88, 85, 87, 88, 90]
}
df = pd.DataFrame(data)

# ピボットテーブルの作成
pivot_table = df.pivot_table(values='成績', index='学年', columns='科目', aggfunc='mean')
print(pivot_table)

解説

このコードでは、以下のようにピボットテーブルを作成しています：

  1. data辞書からデータフレームdfを作成。
  2. pivot_tableメソッドを使用し、成績列の平均を計算。
  3. indexに学年列、columnsに科目列を指定しているため、学年ごとに各科目の成績平均が表示される。

出力結果は以下のようになります：

科目英語数学
学年
1年89.082.5
2年89.086.0

このように、各学年ごとの科目別成績の平均を簡単に比較することができます。

複数の集計関数を使う方法

ピボットテーブルでは、複数の集計関数を同時に使用することも可能です。例えば、成績データに対して平均と合計を計算したい場合は以下のようにします：

pivot_table = df.pivot_table(values='成績', index='学年', columns='科目', aggfunc=['mean', 'sum'])
print(pivot_table)

このコードでは、aggfuncにリストとして['mean', 'sum']を指定することで、成績の平均と合計の両方を計算しています。

フィルタリングやソートの方法

ピボットテーブルを作成した後、その結果をフィルタリングやソートすることも簡単です。例えば、特定の学年や科目に絞ってデータを表示したい場合は、通常のpandasのデータフレーム操作と同様に行えます。

# 学年が1年のデータのみ表示
filtered_pivot = pivot_table.loc['1年']
print(filtered_pivot)

このコードでは、学年が1年のデータのみをフィルタリングして表示しています。

まとめ

pandasのピボットテーブルを使うことで、データを効率的に集計し、視覚的に理解しやすくすることができます。基本的な使い方から、複数の集計関数を使った応用例、フィルタリングやソートの方法までを学ぶことで、データ分析の幅が広がります。次のセクションでは、クロス集計の使い方について詳しく解説します。

5. pandasでのクロス集計の使い方

クロス集計（クロスタブ）は、二つのカテゴリカル変数の関係を分析するのに非常に有用なツールです。pandasではcrosstabメソッドを使用して簡単にクロス集計を行うことができます。ここでは、基本的なクロス集計の作成方法とその応用例について具体的なコードを交えて解説します。

基本的な書式

pandasのcrosstabメソッドを使ってクロス集計を作成します。以下は基本的な書式です：

import pandas as pd
crosstab = pd.crosstab(df['列1'], df['列2'])
  • 列1: 行ラベルにするカテゴリカルデータ
  • 列2: 列ラベルにするカテゴリカルデータ

サンプルコードと解説

ここでは、性別と購入の有無を示すデータを使って、クロス集計を行う例を示します。

import pandas as pd

# データフレームの作成
data = {
    '性別': ['男性', '女性', '女性', '男性', '女性'],
    '購入': ['はい', 'はい', 'いいえ', 'はい', 'いいえ']
}
df = pd.DataFrame(data)

# クロス集計の作成
crosstab = pd.crosstab(df['性別'], df['購入'])
print(crosstab)

解説

このコードでは、以下のようにクロス集計を作成しています：

  1. data辞書からデータフレームdfを作成。
  2. crosstabメソッドを使用し、性別と購入の関係を集計。

出力結果は以下のようになります：

購入いいえはい
性別
女性21
男性02

このように、性別ごとに購入の有無の分布を簡単に比較することができます。

クロス集計の応用例

クロス集計では、単純な頻度集計だけでなく、さまざまな統計量を計算することも可能です。

正規化したクロス集計

データの相対的な割合を知りたい場合、正規化したクロス集計を行うことができます。以下は、各行の合計に対する割合を計算する例です：

normalized_crosstab = pd.crosstab(df['性別'], df['購入'], normalize='index')
print(normalized_crosstab)

出力結果は以下のようになります：

購入いいえはい
性別
女性0.66670.3333
男性0.01.0

この結果は、各性別ごとの購入割合を示しています。

複数のカテゴリカル変数を使った集計

複数のカテゴリカル変数を同時にクロス集計することも可能です。例えば、性別と年齢層ごとに購入の有無を集計する場合：

# データフレームの作成
data = {
    '性別': ['男性', '女性', '女性', '男性', '女性'],
    '年齢層': ['20代', '20代', '30代', '30代', '40代'],
    '購入': ['はい', 'はい', 'いいえ', 'はい', 'いいえ']
}
df = pd.DataFrame(data)

# クロス集計の作成
crosstab = pd.crosstab([df['性別'], df['年齢層']], df['購入'])
print(crosstab)

出力結果は以下のようになります：

購入いいえはい
性別年齢層
女性20代0
30代1
40代1
男性30代0
20代0

この結果は、性別と年齢層ごとの購入状況を示しています。

まとめ

pandasのクロス集計を使うことで、二つ以上のカテゴリカル変数の関係を簡単に分析し、視覚化することができます。基本的な使い方から、正規化や複数のカテゴリカル変数を使った応用例までを学ぶことで、データ分析の幅が広がります。これらのツールを活用して、データから有益なインサイトを引き出しましょう。

6. 応用例と実践的な活用方法

pandasのピボットテーブルとクロス集計は、基本的な使い方だけでなく、さまざまな応用や実践的な活用方法があります。ここでは、より高度な機能や実際のデータ分析に役立つ方法を紹介します。

ピボットテーブルの応用例

複数の集計関数を使う

ピボットテーブルでは、同時に複数の集計関数を適用することができます。例えば、売上データを使って平均と合計を計算する場合を考えます。

import pandas as pd

# データフレームの作成
data = {
    '日付': ['2024-01-01', '2024-01-01', '2024-01-02', '2024-01-02'],
    '製品': ['A', 'B', 'A', 'B'],
    '売上': [100, 150, 200, 250]
}
df = pd.DataFrame(data)

# ピボットテーブルの作成（複数の集計関数）
pivot_table = df.pivot_table(values='売上', index='日付', columns='製品', aggfunc=['mean', 'sum'])
print(pivot_table)

このコードでは、日付ごと、製品ごとの売上の平均と合計を同時に計算しています。出力結果は以下のようになります

日付mean 売上 (A)mean 売上 (B)sum 売上 (A)sum 売上 (B)
2024-01-01100150100150
2024-01-02200250200250

この表は、日付ごとに製品Aと製品Bの売上の平均と合計を示しています。

フィルタリングやソート

ピボットテーブルの結果をフィルタリングやソートすることも可能です。例えば、特定の製品や日付でフィルタリングしたり、売上の合計でソートしたりすることができます。

# フィルタリング（特定の日付を表示）
filtered_pivot = pivot_table.loc['2024-01-01']
print(filtered_pivot)

# ソート（売上の合計でソート）
sorted_pivot = pivot_table.sort_values(by=('sum', '売上', 'A'), ascending=False)
print(sorted_pivot)

クロス集計の応用例

正規化したクロス集計

クロス集計では、各カテゴリの相対的な割合を計算するために正規化を行うことができます。これにより、データの分布を視覚的に理解しやすくなります。

import pandas as pd

# データフレームの作成
data = {
    '性別': ['男性', '女性', '女性', '男性', '女性'],
    '購入': ['はい', 'はい', 'いいえ', 'はい', 'いいえ']
}
df = pd.DataFrame(data)

# 正規化したクロス集計
normalized_crosstab = pd.crosstab(df['性別'], df['購入'], normalize='index')
print(normalized_crosstab)

このコードでは、性別ごとの購入割合を計算しています。出力結果は以下のようになります：

購入いいえはい
性別
女性0.66670.3333
男性0.01.0

重複データを含むクロス集計

複数のカテゴリカル変数を同時にクロス集計することも可能です。例えば、性別と年齢層ごとに購入の有無を集計する場合：

# データフレームの作成
data = {
    '性別': ['男性', '女性', '女性', '男性', '女性'],
    '年齢層': ['20代', '20代', '30代', '30代', '40代'],
    '購入': ['はい', 'はい', 'いいえ', 'はい', 'いいえ']
}
df = pd.DataFrame(data)

# クロス集計の作成
crosstab = pd.crosstab([df['性別'], df['年齢層']], df['購入'])
print(crosstab)

このクロス集計では、性別と年齢層ごとの購入状況を示しています。出力結果は以下のようになります：

性別年齢層購入いいえはい
女性20代01
30代10
40代10
男性30代01
20代00

実践的な活用方法

マーケティング分析

クロス集計は、顧客属性や購買行動の分析に非常に有用です。例えば、年齢層や性別ごとの購入パターンを分析することで、マーケティング戦略の改善に役立てることができます。

製品分析

ピボットテーブルは、製品ごとの売上や利益を分析するのに最適です。異なる製品ラインや地域ごとの売上を集計することで、ビジネス戦略の見直しに役立ちます。

学生の成績分析

教育機関では、学生の成績データをピボットテーブルで分析することで、成績の傾向や問題点を把握することができます。科目ごとの成績平均や学年ごとの成績分布を視覚化することで、教育方針の改善に役立てることができます。

まとめ

ピボットテーブルとクロス集計は、データ分析の基本的なツールでありながら、応用範囲が非常に広いです。複数の集計関数を使用したり、正規化や複数のカテゴリカル変数を使った分析を行うことで、データからより多くの情報を引き出すことができます。これらの技術を活用して、データ分析のスキルを向上させましょう。

7. まとめ

この記事では、Pythonのpandasライブラリを使用して、データを効率的に集計し分析する方法について学びました。特に、ピボットテーブルとクロス集計の基本的な使い方とその応用例について詳しく解説しました。ここでは、学んだ要点を振り返り、今後のステップについて触れます。

要点の復習

  • ピボットテーブルの基本:
    • データを再編成し、要約統計量を計算するためのツール。
    • 複数の集計関数を使用することで、平均や合計など、さまざまな統計量を同時に計算可能。
    • フィルタリングやソートにより、特定のデータを抽出したり、並べ替えたりすることが容易。
  • クロス集計の基本:
    • 二つのカテゴリカル変数の関係を分析するためのツール。
    • 正規化したクロス集計を用いることで、各カテゴリの相対的な割合を把握。
    • 複数のカテゴリカル変数を同時に集計することで、複雑なデータの関係性を視覚化。

応用例と実践的な活用方法

  • マーケティング分析:
    • 顧客属性や購買行動の分析にクロス集計を活用。
    • 年齢層や性別ごとの購入パターンを把握し、マーケティング戦略の改善に役立てる。
  • 製品分析:
    • ピボットテーブルを使用して、製品ごとの売上や利益を分析。
    • 異なる製品ラインや地域ごとの売上を集計し、ビジネス戦略の見直しに貢献。
  • 学生の成績分析:
    • 教育機関では、学生の成績データをピボットテーブルで分析。
    • 科目ごとの成績平均や学年ごとの成績分布を視覚化し、教育方針の改善に活用。

次のステップ

これまでに学んだ内容を実際のデータ分析プロジェクトに適用することで、さらに深く理解することができます。以下のステップを参考に、実践的なスキルを身につけていきましょう。

  1. 練習問題に挑戦:
    • 自分でデータセットを作成し、ピボットテーブルやクロス集計を用いて分析してみましょう。
    • オンラインで公開されているデータセットを使用するのも良い方法です。
  2. 高度な分析手法の習得:
    • この記事で紹介した基本的な方法をマスターしたら、より高度な分析手法や可視化手法を学びましょう。
    • pandasの公式ドキュメントやデータサイエンスの専門書を参考にすると良いです。
  3. 実践的なプロジェクトに取り組む:
    • 実際のビジネスや研究プロジェクトでデータ分析を行い、得られた結果を報告・共有することで、実務経験を積むことができます。

追加リソース

  • pandas公式ドキュメント: pandas documentation
  • データサイエンスのオンラインコース: CourseraやUdemyなどのプラットフォームで提供されているデータサイエンス関連のコース

データ分析の基本スキルを磨くことで、データから有益なインサイトを引き出し、意思決定を支援する力を身につけましょう。これからも学び続け、データサイエンスの世界で活躍できるよう応援しています。

Python Pandas
よかったらシェアしてね！
  • URLをコピーしました！

関連記事

目次