教師なし学習とは？教師あり学習との違いや概要、手法を解説

機械学習の種類と教師なし学習のゴール

機械学習の一種である教師なし学習では、入力データをそのまま与えて、学習を進められる点が大きな特徴です。もともと正解となるデータがない場合に、データの構造や法則性などの関係をコンピュータが自動で解析して抽出する手法になります。

例えば、従来まったく販売したことのないような新製品のターゲット市場を決める場合など、結果にコミットするデータがないような場合に利用されます。

機械学習には「教師なし学習」のほかにも、「教師あり学習」（Supervised Learning）や「強化学習」（Reinforcement Learning）といった手法もあります。これらの中で、教師なし学習の利用頻度は、教師あり学習よりもまだ低いのですが、教師あり学習を実施する前段階にも適用できたり、ビッグデータの解析に用いられたりするため、非常に重要な手法となります。

人間は、特に何か意識しなくても多くのモノを見て区別することができます。例えば、名前の分からない複数種の野菜が陳列されていたとき、その形やサイズや色などを見て特徴を捉え、どのようにまとめればよいかを直感的に判断できます。教師なし学習では、そのような能力をモデルによって再現し、未知のデータをまとめていくことが最終的なゴールとなります。

一方、教師あり学習は、あらかじめ正解となる答えをラベリングし、ペアのデータセットを大量に用意し、そこから関係性を表すモデルを作るため、教師なし学習よりも手間とコストがかかります。しかし、新しい未知のデータを入力すると、正解となる結果を高精度に予測できるようになります。また強化学習は、出力される結果に対して報酬、すなわち点数（スコア）をつけて、その報酬が最大になるように学習させ、最適な結果を導き出せます。

教師あり学習、強化学習については以下の記事でも詳しく解説しているため、あわせてご覧ください。

教師あり学習とは？概要や手法など機械学習の基礎となる知識を解説

強化学習とは？機械学習との違いなどの用語解説や活用事例などをご紹介

「クラスター分析」と「次元削減」

教師なし学習が扱う代表的な問題には「クラスター分析（クラスタリング）」（cluster analysis） と「次元削減」（dimension reduction）があります。

クラスター分析のclusterとは、英語で「房」や「塊」といった意味があり、特徴が似ているものが集まった状態を指します。つまりクラスター分析は、大量のデータから類似するものを（特徴量の近いもの）、いくつかの集団にまとめるための分析手法になります。この手法で特徴が近いデータの集団をつくることを「クラスタリング」といいます。

なお、クラスターは、教師あり学習のクラス分類と似ているので注意しましょう。クラス分類では、人間が教師となって正解データ（目的変数）をラベリングし、訓練データをセットで適用します。

そこから最適な関係性を導き出すモデルを作り、未知のデータに対して正しい回答を与えますが、クラスタリングの場合は正解データがない状態での分類です。分類はできますが、それぞれの集団の持つ意味は明確ではありません。その結果は人間が解釈する必要があります。

クラスタリングとクラス分類の違いの分かりやすいケースとして、例えばテストの結果を「50点以上」「50点未満」というように、あらかじめ2グループに分ける場合ではクラス分類になります。しかし「数学が得意」とか、「国語が得意」というように、似たような特徴を持つグループに自動的に分ける手法はクラスタリングになります（そのままでは何の集団か分からないので、数学が得意といったグループの意味付けは、人間が行うことになります）。

クラスター分析は、ビッグデータのような膨大なデータやグループから機械的に「似たもの同士」を集めてくれます。大量のデータでも扱いやすく、人間では分からない潜在的なクラスターや異常なデータなどの発見に役立ちます。ビジネス領域では、顧客を分析するマーケティングなどによく利用されています。

階層的クラスタリングと非階層的クラスタリング

クラスター分析の種類には、分類対象が少ない場合に用いられる「階層的クラスタリング」と、分類対象が多数ある場合に適用される「非階層的クラスタリング」があります。

階層的クラスタリングは、似ている特徴のあるデータをクラスター順に階層的に1つずつまとめていき、最終的に1つの大きなクラスターになるまで繰り返していきます。その経過はトーナメント表（樹形図）のような図で視覚化されるため、データの特徴を把握しやすい分析法です。

また、非階層的クラスタリングのほうは、階層的な構造を持ちません。前もって、いくつかのクラスターに分ければよいのかを設定し、そのクラスター数に応じてデータを分割していく手法です（ただし数を決めないで機械が自動分割してくれる手法もあります）。計算量が少なく済むため、ビッグデータなど処理件数が膨大な場合に特に有効で重宝されています。

クラスタリングを行うための仕組み

ここからは教師なし学習の代表的手法であるクラスタリングについて、さらに深掘りしていきましょう。

階層的クラスタリングでは、すべてのデータ間で互いの類似度や非類似度を計算し、似たもの同士を同じクラスターにまとめて、階層型クラスターを形成します。このとき互いのデータの距離を計算し、その距離が近いかどうかによって類似度を判断します。

最初は三平方の定理で「ユークリッド距離」を求めますが、その後の結合工程の距離測定には、いろいろな方法が使われます。よく利用されるのは分散（ばらつき具合）が最小になるようにデータを結合する「ウォード法」です。

また、非階層的クラスタリングに利用される代表的な実行法としては「k-means法」（k-平均法）があります。あらかじめ指定された数（たとえばk個）のデータをランダムに「プロトタイプ」として指定します。そしてプロトタイプ以外の個体データを、最も近いプロトタイプに割り当てることで、最初のクラスターを作ります。

次に、その時点でのクラスターに所属するデータから、クラスターごとに重心（平均）を求めます。この重心が決まったら、さらに最も距離の近い重心のクラスターの各データを割り当て直します。このように何度もクラスターの重心の計算を行っていくと、最終的に重心が動かなくなって収束し、近いデータ同士がk個のクラスターに集まるようになるわけです。

次元を削減するメリットとは？

次元削減は、簡単にいうとデータを要約することです。なぜ、このようなことをするのかというと、次元を削減すると人間にとって理解しやすくなるからです。例えば、人間は3次元の世界は感覚でも分かりますが、4次元以上の世界になると頭ではイメージできません。そこで多次元データを3次元以下のデータに落としてデータを視覚化することで、重要な情報（特徴量）を際立たせることができるわけです。

また機械学習を行う際にも次元が大きすぎると、逆に特徴や類似性が分かりづらくなるという「次元の呪い」が起きてしまいます。そこで、この問題を回避するためにも次元を減らして見通しをよくする必要があるのです。さらに、大きな高次元から低次元に置き換えることで、データ量も圧縮できます。膨大なデータに対して次元削減を適用すると、計算量を大幅に減らせて、処理時間も短くなります。

主成分分析によって次元を減らすには？

具体的に次元を削減するためには「主成分分析」（PCA:Principal Component Analysis）がよく使われます。主成分分析は「観測変数」（多数の変数の情報）を、できるだけ少ない「合成変数」（指標や次元）で要約する手法です。ここで観測変数を要約した合成変数のことを「主成分」といいます。

一般的には、主成分分析では1～3つの主成分に置き換えます。前述のように人間は3次元以下ならば、次元のイメージを捉えられるからです。主成分は最初に求められるものから順に、第1主成分、第2主成分、第3主成分……と呼びます。中でも第1主成分は、分析に使用した対象の「総合力」を示しています。というのも、第1主成分が分析に使用した合成変数の中で、最も多く元のデータの情報を反映しているからです。

主成分分析は、少し難しい表現をすると「データを射影（変換）し、別の視点から捉えてデータを扱いやすくする操作」のことです。ここで、例えば2次元（平面）のデータを1次元（直線）に落とし込む場合に、射影する軸の選び方が重要になります。

軸上に変換される前のデータの重要な特徴を残すためには、変換後にも情報ができるだけそぎ落とされずに多く含まれるようにすることが大切です（情報損失量を少なくするといいます）。そのためには、データの散らばり具合（分散）が最大になるようにする必要があります。

主成分分析を行うことで、データの持つ情報をできるかぎり損なわずに全体の雰囲気を可視化し、理解しやすくすることができます。ビジネス面では、ビッグデータの分析、店舗分析、成績の総合評価などに利用されています。