心理学の法則・効果

マルチメディア学習の認知理論とは?言葉と図を使って理解が進む仕組み

なるほど心理学編集部

料理の作り方を文章だけで読むと、手の動かし方が分かりにくくても、手元の図を見ると理解しやすくなることがあります。一方、説明動画に文字や飾りが次々と重なると、どこに注意を向ければよいか迷うかもしれません。

マルチメディア学習の認知理論は、言葉と図などを使って学ぶとき、人が必要な情報を選び、頭の中で整理し、結び付けて理解する仕組みを説明する理論です。人が一度に考えられる量には限りがあるため、言葉と図の関係を分かりやすく示し、余分な情報を減らすことが理解を助ける場合があると考えます。

マルチメディア学習の認知理論とは?

心理学者リチャード・メイヤーが発展させた理論です。ここでいう「マルチメディア」は、動画やパソコンを使うことだけではありません。文章と図が並ぶ教科書や、話し言葉と映像を組み合わせた解説など、言葉と視覚的な情報を一緒に使う教材を広く指します。

理論が注目するのは、情報を覚えることに加えて、学んだ内容のつながりを理解し、初めて出会う問題にも使えるようになることです。メイヤーは、この学び方を三つの考え方から説明しています(Mayer、2024)。

言葉と図は、主に異なる働きで処理する

人は、絵や動きを見る情報と、話し言葉を聞く情報を、主に異なる経路で扱うと考えます。たとえば図を見ながら説明を聞くと、図が示す位置や動きと、言葉が表す意味をそれぞれ確かめられます。

音声による説明は耳から、図や文章は目から入ります。目で読んだ文章も、内容を理解するときには言葉として整理されます。そのため、情報が目と耳のどちらから入ったかに加え、言葉として考えるのか、図の内容として考えるのかを区別します。

一度に考えられる情報には限りがある

私たちは、見聞きしたことを一時的に覚えながら考えますが、同時に扱える情報の量は限られています。図の変化を追いながら長い文章を読み、さらに別の説明も確かめなければならないと、肝心の内容を整理する余裕が減ることがあります。

だからこそ、教材に情報を追加することと、理解が進むことは同じではありません。学ぶ内容自体が複雑な場合には、一度に説明する量や速さも関係します(Mayer、2024)。

必要な情報を選び、自分でつなげて理解する

理解するには、目や耳に入った情報から大事な部分に注意を向け、言葉の内容と図の内容をそれぞれ整理し、両方の関係を考える必要があります。さらに、以前から知っていることと結び付けることで、出来事の順序や理由を筋道立てて理解できると考えられています。

つまり、この理論において学習者は、情報をそのまま受け取るだけの存在ではありません。図が表すことと言葉の意味を自分で結び付ける働きが、理解の中心になります(Mayer、2024)。

研究で分かっていること

2001年:説明を増やすと成績が下がる場合があった

メイヤー、ハイザー、ロン(2001)は、大学生に雷が発生する仕組みを説明するアニメーションを見せ、同時に音声による説明を聞いてもらう実験を四つ行いました。

そのうち、音声を要約した文字や、音声と同じ内容の文字を画面に加えた実験では、文字を加えない場合より、説明を思い出すテストと、学んだ仕組みを新しい問題に使うテストの成績が低くなりました。また、学習の目的とは関係の薄い話や映像を加えた場合にも、新しい問題に使う成績が下がる結果が報告されました(Mayerら、2001)。

これは、情報を増やせば学習がよくなるとは限らないことを示しています。ただし、調べたのは主に大学生が特定の科学の説明を学ぶ場面です。どの教材でも画面の文字を減らすべきだという結論ではありません。

2022年:図と説明の示し方を工夫する利点が確認された

ノーテルら(2022)は、複数の研究結果をまとめた29件の報告をさらに整理しました。そこには合計1,189件の研究が含まれています。対応する図と言葉を時間的・位置的に近づけることや、重要な箇所を見つけやすくすることなど、教材の示し方に学習上の利点が見られました(Noetelら、2022)。

一方、この整理では、外国語の動画に字幕を付けることにも利点が報告されています。先ほどの実験で画面の文字が妨げになったことと矛盾するとは限りません。何を学ぶか、文字と音声がどのように役立つかによって、適した示し方が変わるからです。

2025年:教材の種類によって結果の安定性は異なる

クロンリーとチェン(2025)は、メイヤーが著者に含まれる92本の論文、181件の研究をまとめて分析しました。文章と図を組み合わせた教材については、研究で工夫した示し方の方が、比較対象の示し方より、内容を思い出す・内容から考える・新しい問題に使うという三種類のテストで成績がよい傾向が比較的一貫していました。一方、アニメーションやゲームなどの教材では、効果の大きさにばらつきがありました(Cromley・Chen、2025)。

この分析の対象はメイヤーが関わった研究に限られますが、教材の形式を豪華にするだけでは、同じ学習効果を期待できないことを考える材料になります。学ぶ人の知識、課題の難しさ、教材の進む速さなども、説明の適切さに関わります。

身近な場面で考える

たとえば、家で子どもが図鑑を読みながら、「雨はどうして降るのだろう」と調べているとします。文章には、地上の水が水蒸気となって空気とともに上がり、冷えて雲ができることが書かれています。さらに、雲の中の小さな水や氷の粒が大きくなると、雨として地上に落ちてくることが説明されています。横の図には、水蒸気が上がり、雲ができて、雨が落ちるまでの流れが矢印で示されています。

このとき、文章の「冷えて雲ができる」「雨として落ちる」という部分が図のどこに対応するかを確かめれば、変化の順序を具体的に捉えやすくなるでしょう。一方、雲のきれいな写真がたくさんあっても、雨ができるまでの流れが示されていなければ、この疑問への答えを理解する助けにはなりにくいかもしれません。

一緒に読む大人が「この矢印は文章のどこを示している?」と尋ね、子どもが言葉と図の関係を説明するのも、理解を促すために考えられる工夫です。これは理論を日常の場面に当てはめた仮の例であり、この質問をすれば必ず理解が深まると実験で確かめたものではありません。

マルチメディア学習の認知理論が教えてくれるのは、図や言葉の数よりも、学ぶ人が必要な情報を選び、そのつながりを考えられるかが大切だという視点です。文章と図をどう組み合わせるかは、学ぶ内容と学ぶ人に合わせて考える必要があります。

参考文献・出典