Pythonデータサイエンスハンドブック ―Jupyter、NumPy、pandas、Matplotlib、scikit-learnを使ったデータ分析、機械学習

Table of contents

1. 目次
2. 訳者まえがき (1/3)
3. 訳者まえがき (2/3)
4. 訳者まえがき (3/3)
5. はじめに (1/3)
6. はじめに (2/3)
7. はじめに (3/3)
8. 1章 IPython： Pythonより優れたPython
   1. 1.1 シェルかnotebookか
      1. 1.1.1 IPythonシェルの起動
      2. 1.1.2 Jupyter notebookの起動
   2. 1.2 IPythonのヘルプシステムとドキュメント
      1. 1.2.1 ?文字を使ったドキュメントの検索
      2. 1.2.2 ??文字を使ったソースコードの探索
      3. 1.2.3 Tab補完を使ったモジュールの調査
   3. 1.3 IPythonシェルのキーボードショートカット
      1. 1.3.1 ナビゲーションショートカット
      2. 1.3.2 テキスト入力ショートカット
      3. 1.3.3 コマンド履歴ショートカット
      4. 1.3.4 その他のショートカット
   4. 1.4 IPython Magicコマンド
      1. 1.4.1 コードブロックのペースト：%pasteと%cpaste
      2. 1.4.2 外部コードの実行：%run
      3. 1.4.3 コードの実行時間計測：%timeit
      4. 1.4.4 Magicコマンドのヘルプ：?、%magic、%lsmagic
   5. 1.5 入力と出力の履歴
      1. 1.5.1 IPythonのInオブジェクトとOutオブジェクト
      2. 1.5.2 アンダースコアショートカットと過去の出力
      3. 1.5.3 出力の抑止
      4. 1.5.4 関連するMagicコマンド
   6. 1.6 IPythonとシェルコマンド
      1. 1.6.1 シェルの概要
      2. 1.6.2 IPythonからのシェルコマンド実行
      3. 1.6.3 シェルとの値の受け渡し
   7. 1.7 シェルに関連するMagicコマンド
   8. 1.8 エラーとデバッグ
      1. 1.8.1 例外の制御：%xmode
      2. 1.8.2 デバッグ：トレースバックの情報では不十分な場合
   9. 1.9 コードのプロファイリングと実行時間計測
      1. 1.9.1 コード断片の実行時間を測定する：%timeitと%time
      2. 1.9.2 コード全体のプロファイリング：%prun
      3. 1.9.3 %lprunによる行単位のプロファイリング
      4. 1.9.4 メモリ使用のプロファイリング：%memitと%mprun
   10. 1.10 その他のIPythonリソース
       1. 1.10.1 ウェブリソース
       2. 1.10.2 書籍
9. 2章 NumPyの基礎
   1. 2.1 Pythonのデータ型について
      1. 2.1.1 単なる整数ではないPythonの整数
      2. 2.1.2 単なるリストではないPythonのリスト
      3. 2.1.3 Pythonの固定型配列
      4. 2.1.4 Pythonのリストから作る配列
      5. 2.1.5 配列の構築
      6. 2.1.6 NumPyの標準データ型
   2. 2.2 NumPy配列の基礎
      1. 2.2.1 NumPy配列の属性
      2. 2.2.2 配列インデクス：配列の要素にアクセスする
      3. 2.2.3 配列のスライス：部分配列にアクセスする
      4. 2.2.4 配列の形状変更
      5. 2.2.5 配列の連結と分割
   3. 2.3 NumPy配列の計算：ユニバーサル関数
      1. 2.3.1 低速なループ処理
      2. 2.3.2 ufuncの紹介
      3. 2.3.3 NumPy ufuncの調査
      4. 2.3.4 高度なufuncの機能
      5. 2.3.5 ufunc：より深く学ぶために
   4. 2.4 集約：最大、最小、その他データの間にあるもの
      1. 2.4.1 配列を合計する
      2. 2.4.2 最大と最小
      3. 2.4.3 事例：米国大統領の平均身長は？
   5. 2.5 配列の計算：ブロードキャスト
      1. 2.5.1 ブロードキャストの基礎
      2. 2.5.2 ブロードキャストのルール
      3. 2.5.3 ブロードキャストの実践
   6. 2.6 比較、マスク、ブール論理
      1. 2.6.1 事例：雨天日数
      2. 2.6.2 ufuncの比較演算子
      3. 2.6.3 ブール値配列の操作
      4. 2.6.4 マスクとしてのブール値配列
   7. 2.7 ファンシーインデクス
      1. 2.7.1 ファンシーインデクスの調査
      2. 2.7.2 インデクスの組み合わせ
      3. 2.7.3 事例：ランダムポイントの選択
      4. 2.7.4 ファンシーインデクスを使った値の変更
      5. 2.7.5 事例：データのビニング
   8. 2.8 配列のソート
      1. 2.8.1 NumPyの高速ソート：np.sortとnp.argsort
      2. 2.8.2 部分ソート：分割（パーティショニング）
      3. 2.8.3 事例：k近傍法
   9. 2.9 構造化データ：NumPyの構造化配列
      1. 2.9.1 構造化配列の作成
      2. 2.9.2 より高度な複合型
      3. 2.9.3 RecordArrays：構造化配列の変形版
      4. 2.9.4 pandasへ
10. 3章 pandasを使ったデータ操作
    1. 3.1 pandasのインストールと使用方法
    2. 3.2 pandasオブジェクトの基礎
       1. 3.2.1 Seriesオブジェクト
       2. 3.2.2 DataFrameオブジェクト
       3. 3.2.3 Indexオブジェクト
    3. 3.3 インデクスとデータの選択
       1. 3.3.1 Seriesのデータ選択
       2. 3.3.2 DataFrameのデータ選択
    4. 3.4 pandasデータの操作
       1. 3.4.1 ufunc：インデクスの保存
       2. 3.4.2 ufunc：インデクスの整列
       3. 3.4.3 ufunc: DataFrameとSeriesとの演算
    5. 3.5 欠損値の扱い
       1. 3.5.1 欠損値表現のトレードオフ
       2. 3.5.2 pandasの欠損値
       3. 3.5.3 null値が存在する場合の処理
    6. 3.6 階層型インデクス
       1. 3.6.1 多重インデクスを持つSeries
       2. 3.6.2 MultiIndexの作成方法
       3. 3.6.3 MultiIndexのインデクス指定とスライス
       4. 3.6.4 多重インデクスの並べ替え
       5. 3.6.5 多重インデクスに基づいたデータ集約
    7. 3.7 データセットの連結：concatとappend
       1. 3.7.1 再掲：NumPy配列の連結
       2. 3.7.2 pd.concatを使った単純な連結
    8. 3.8 データセットの結合：mergeとjoin
       1. 3.8.1 関係代数
       2. 3.8.2 結合の種類
       3. 3.8.3 キーの指定
       4. 3.8.4 結合に対する集合演算の指定
       5. 3.8.5 列名の重複：suffixesキーワード
       6. 3.8.6 事例：米国州データ
    9. 3.9 集約とグループ化
       1. 3.9.1 惑星データ
       2. 3.9.2 pandasによる単純な集約
       3. 3.9.3 GroupBy：分割、適用、結合 (1/2)
       4. 3.9.3 GroupBy：分割、適用、結合 (2/2)
    10. 3.10 ピボットテーブル
        1. 3.10.1 ピボットテーブルの必要性
        2. 3.10.2 ピボットテーブルのマニュアル作成
        3. 3.10.3 ピボットテーブルの文法
        4. 3.10.4 事例：出生率データ
    11. 3.11 文字列操作のベクトル化
        1. 3.11.1 pandas文字列操作の基礎
        2. 3.11.2 pandas文字列操作メソッドの一覧
        3. 3.11.3 事例：レシピデータベース
    12. 3.12 時系列
        1. 3.12.1 Pythonの日付と時刻
        2. 3.12.2 pandasの時系列：時刻によるインデクス
        3. 3.12.3 pandasの時系列データ構造
        4. 3.12.4 頻度とオフセット
        5. 3.12.5 再サンプリング、シフト、窓 (1/2)
        6. 3.12.5 再サンプリング、シフト、窓 (2/2)
        7. 3.12.6 さらに学ぶために
        8. 3.12.7 事例：シアトル市の自転車数を可視化する
    13. 3.13 ハイパフォーマンスpandas：eval()とquery()
        1. 3.13.1 query()とeval()の必要性：複合表現
        2. 3.13.2 pandas.eval()による効率的実行
        3. 3.13.3 DataFrame.eval()による列単位の操作
        4. 3.13.4 DataFrame.query()メソッド
        5. 3.13.5 パフォーマンス：これらの機能を使うべき場合
    14. 3.14 参考資料
11. 4章 Matplotlibによる可視化
    1. 4.1 Matplotlibの基礎知識
       1. 4.1.1 matplotlibのインポート
       2. 4.1.2 スタイルの設定
       3. 4.1.3 show()するかshow()しないか？ 描画を表示する方法
       4. 4.1.4 プロット結果のファイル保存
    2. 4.2 同じ結果を得る2つのインターフェース
    3. 4.3 単純な線グラフ
       1. 4.3.1 プロットの制御：線の色とスタイル
       2. 4.3.2 プロットの制御：座標軸の範囲
       3. 4.3.3 プロットへのラベル付け
    4. 4.4 単純な散布図
       1. 4.4.1 plt.plotを使った散布図
       2. 4.4.2 plt.scatterを使った散布図
       3. 4.4.3 plotメソッド対scatterメソッド：効率に関する注意点
    5. 4.5 誤差の可視化
       1. 4.5.1 基本的なエラーバー
       2. 4.5.2 連続誤差
    6. 4.6 密度と等高線図
       1. 4.6.1 3次元関数の可視化
    7. 4.7 ヒストグラム、ビニング、密度
       1. 4.7.1 2次元のヒストグラムとビニング
    8. 4.8 凡例のカスタマイズ
       1. 4.8.1 凡例要素の選択
       2. 4.8.2 点サイズの凡例
       3. 4.8.3 複数の凡例
    9. 4.9 カラーバーのカスタマイズ
       1. 4.9.1 カラーバーのカスタマイズ
       2. 4.9.2 事例：手書きの数字
    10. 4.10 複数サブプロット
        1. 4.10.1 plt.axes：サブプロットのマニュアル作成
        2. 4.10.2 plt.subplot：サブプロットの単純なグリッド
        3. 4.10.3 plt.subplots：グリッド全体を一度に作成する
        4. 4.10.4 plt.GridSpec：より複雑な配置
    11. 4.11 テキストと注釈
        1. 4.11.1 事例：米国出生率における休日の影響
        2. 4.11.2 テキスト位置の変換
        3. 4.11.3 矢印と注釈
    12. 4.12 目盛のカスタマイズ
        1. 4.12.1 主目盛と補助目盛
        2. 4.12.2 非表示の目盛とラベル
        3. 4.12.3 目盛の増加と削減
        4. 4.12.4 目盛フォーマットの調整
        5. 4.12.5 FormatterとLocatorのまとめ
    13. 4.13 Matplotlibのカスタマイズ：設定とスタイルシート
        1. 4.13.1 手作業でカスタマイズ
        2. 4.13.2 デフォルトの変更：rcParams
        3. 4.13.3 スタイルシート
    14. 4.14 Matplotlibを使った3次元プロット
        1. 4.14.1 3次元の点と線
        2. 4.14.2 3次元等高線図
        3. 4.14.3 ワイヤーフレームとサーフェス
        4. 4.14.4 三角形分割のサーフェス
    15. 4.15 Basemapを使った地理データの処理
        1. 4.15.1 地図の投影法
        2. 4.15.2 地図背景の描画
        3. 4.15.3 地図上のデータプロット
        4. 4.15.4 事例：カリフォルニア州の都市
        5. 4.15.5 事例：地表気温データ
    16. 4.16 Seabornによる可視化
        1. 4.16.1 Seaborn対Matplotlib
        2. 4.16.2 Seabornプロットの探索 (1/2)
        3. 4.16.2 Seabornプロットの探索 (2/2)
        4. 4.16.3 事例：マラソンのゴール時間の調査 (1/2)
        5. 4.16.3 事例：マラソンのゴール時間の調査 (2/2)
    17. 4.17 その他のリソース
        1. 4.17.1 Matplotlibリソース
        2. 4.17.2 その他のPython用グラフィックライブラリ
12. 5章 機械学習
    1. 5.1 機械学習とは？
       1. 5.1.1 機械学習の分類
       2. 5.1.2 定性的な機械学習アプリケーションの例 (1/2)
       3. 5.1.2 定性的な機械学習アプリケーションの例 (2/2)
       4. 5.1.3 まとめ
    2. 5.2 scikit-learnの紹介
       1. 5.2.1 scikit-learnのデータ表現
       2. 5.2.2 scikit-learnの推定器API (1/2)
       3. 5.2.2 scikit-learnの推定器API (2/2)
       4. 5.2.3 応用：手書き数字の調査
       5. 5.2.4 まとめ
    3. 5.3 ハイパーパラメータとモデルの検証
       1. 5.3.1 モデル検証に関する考察
       2. 5.3.2 最適なモデルの選択 (1/2)
       3. 5.3.2 最適なモデルの選択 (2/2)
       4. 5.3.3 学習曲線
       5. 5.3.4 検証の実践：グリッドサーチ
       6. 5.3.5 まとめ
    4. 5.4 特徴量エンジニアリング
       1. 5.4.1 カテゴリ特徴量
       2. 5.4.2 テキスト特徴量
       3. 5.4.3 画像特徴量
       4. 5.4.4 導出された特徴量
       5. 5.4.5 不足しているデータの補完
       6. 5.4.6 特徴パイプライン
    5. 5.5 詳細：ナイーブベイズ分類
       1. 5.5.1 ベイズ分類
       2. 5.5.2 ガウシアンナイーブベイズ
       3. 5.5.3 多項分布ナイーブベイズ
       4. 5.5.4 ナイーブベイズをいつ使うべきか
    6. 5.6 詳細：線形回帰
       1. 5.6.1 単回帰
       2. 5.6.2 基底関数回帰
       3. 5.6.3 正則化
       4. 5.6.4 事例：自転車の交通量予測
    7. 5.7 詳細：サポートベクターマシン
       1. 5.7.1 サポートベクターマシンの必要性
       2. 5.7.2 サポートベクターマシン：マージンの最大化 (1/2)
       3. 5.7.2 サポートベクターマシン：マージンの最大化 (2/2)
       4. 5.7.3 事例：顔認識
       5. 5.7.4 サポートベクターマシンまとめ
    8. 5.8 詳細：決定木とランダムフォレスト
       1. 5.8.1 ランダムフォレストの必要性：決定木
       2. 5.8.2 推定器の組み合わせ：ランダムフォレスト
       3. 5.8.3 ランダムフォレスト回帰
       4. 5.8.4 事例：ランダムフォレストによる文字認識
       5. 5.8.5 ランダムフォレストまとめ
    9. 5.9 詳細：主成分分析
       1. 5.9.1 主成分分析の基礎
       2. 5.9.2 PCAによるノイズフィルタリング
       3. 5.9.3 事例：固有顔画像
       4. 5.9.4 主成分分析まとめ
    10. 5.10 詳細：多様体学習
        1. 5.10.1 多様体学習：HELLO
        2. 5.10.2 多次元尺度構成法
        3. 5.10.3 多様体学習としてのMDS
        4. 5.10.4 非線形埋め込み：MDSがうまくいかない場合
        5. 5.10.5 非線形多様体：局所線形埋め込み
        6. 5.10.6 多様体学習に対する考察
        7. 5.10.7 事例：顔画像へのIsomap適用
        8. 5.10.8 事例：手書き数字構造の可視化
    11. 5.11 詳細：k平均法クラスタリング
        1. 5.11.1 k平均法の基礎
        2. 5.11.2 k平均法アルゴリズム：期待値最大化法
        3. 5.11.3 事例 (1/2)
        4. 5.11.3 事例 (2/2)
    12. 5.12 詳細：ガウス混合モデル
        1. 5.12.1 GMMの必要性：k平均法の弱点
        2. 5.12.2 E-Mの一般化：ガウス混合モデル
        3. 5.12.3 GMMによる密度推定
        4. 5.12.4 事例：GMMによるデータの生成
    13. 5.13 詳細：カーネル密度推定
        1. 5.13.1 KDEの必要性：ヒストグラム
        2. 5.13.2 カーネル密度推定の実践
        3. 5.13.3 事例：球面上のKDE
        4. 5.13.4 事例：単純ではないベイズ推定
    14. 5.14 応用：顔検出パイプライン
        1. 5.14.1 HOG特徴量
        2. 5.14.2 HOGの実践：簡単な顔検出
        3. 5.14.3 課題と改善
    15. 5.15 機械学習をさらに学ぶためのリソース
        1. 5.15.1 Pythonの機械学習
        2. 5.15.2 機械学習一般
13. 索引 (1/4)
14. 索引 (2/4)
15. 索引 (3/4)
16. 索引 (4/4)