ライブラリに戻る

中心となる問い 新着

AI処理済み · 著者確認済み

学生が生成AIを利用できる状況で、完成した課題は個人の自立した能力を証明できるか?

CS1 in the Age of GenAI: Affordance Dissolution and Assessment Governance
Janne Parkkila, Mika Matveinen, Uolevi Nikula · International Conference on Information Systems (ICIS) · 2026

43 回閲覧 · 6 回再生

イラスト: 学生が生成AIを利用できる状況で、完成した課題は個人の自立した能力を証明できるか?

Spotifyのプレーヤーを読み込みます。SpotifyによりCookieが設定される場合があります。選択内容はこの端末に保存されます。

主な知見

  • あるプログラミングコースでは、毎週の課題で最高評価を得ていた学生の45%が監督付きの期末試験で0点となり、課題成績と試験成績の相関は極めて低いことが示された(r = 0.18)。
  • 別の高等教育機関において同一のプログラミングテストに試験監督を導入したところ、最高評価の割合が73%から24%へと大幅に低下した。
  • ソースコードの比較により、学生の提出物にはコードの肥大化や未習のプログラミング構文が見られ、学生が作成したコードの約18%からAI特有の文体マーカーが検出された。
  • アンケート調査の結果、留学生と国内学生の集団間でAIの利用形態や有用性の認識に違いが見られ、異なる社会的・制度的プレッシャーが反映されていることが明らかになった。
  • 行動規範によるAIの禁止は評価の妥当性を維持するには不十分であることが判明し、監督付き試験や目に見える認知的努力を要する課題への転換の必要性が浮き彫りになった。

実践への示唆

CIO / IT役員

Monitor digital exam environments because unproctored take-home assignments cannot be trusted anymore during the age of AI since it is easy to skip them.

ITマネージャー

Deploy secure, proctored digital testing platforms across institution-wide coursework to ensure assessment integrity.

経営戦略担当者

Reallocate institutional resources away from futile AI-ban enforcement toward scalable, supervised assessment infrastructure.

研究者

Start evaluating how students perceive their own skills when using AI, and design new learning pathways that accept AI usage while ensuring students still learn.

政策立案者

Prohibiting AI tools is impossible, as we cannot monitor what students are doing at home and what kind of assignments they return, and thus, we should think how to make more supervised assessments possible and scalable as just plain oral exams in large student groups are not a feasible method.

要約

フィンランドの3つの高等教育機関における1,000人以上の学生を対象に、評価成績の検証、学生とAIによるソースコードのペア提出物883件の分析、および602人の学生から得られた学期初めのアンケート回答の評価を行っている。

課題

高等教育における学習評価は、完成した課題の提出がその課題で育成・評価するはずの基礎的な認知的スキルを証明しているという前提に依拠している。生成AIは、学生が必要な問題解決プロセスを経ずに機能する解決策を作成できるようにすることで、この結びつきを揺るがしている。規則だけでは技術がもたらす実践的な能力を変えられないため、AIを一律に禁止する組織的方針では評価の妥当性を回復できない。

文字起こし
Host: A.I.S. Insights — powered by Living Knowledgeへようこそ。ホストのAnna Ivy Summersです。本日は、Janne Parkkila氏、Mika Matveinen氏、Uolevi Nikula氏による研究「生成AI時代におけるCS1:アフォーダンスの解消と評価ガバナンス」を取り上げます。この研究はフィンランドの3つの高等教育機関において、1,000人以上の学生を対象に評価成績の検証、883件のコード分析、602人のアンケート調査を実施したものです。アナリストのAlex Ian Sutherlandさんと共に見ていきましょう。Alexさん、よろしくお願いします。
Expert: よろしくお願いします、Annaさん。
Host: まず、この研究が着目している根本的な課題について教えてください。従来の教育やスキル評価は、完成した課題の提出が基礎的なスキルの習得を証明しているという前提に立っていましたよね。
Expert: その通りです。しかし、生成AIの普及により、学習者が本来必要な思考や問題解決のプロセスを経ずに、機能する成果物を作成できるようになりました。その結果、提出された成果物と実際のスキルとの結びつきが崩れつつあります。さらに、規則や行動規範でAIの利用を一律に禁止しても、技術が持つ実践的な能力そのものを変えることはできず、評価の妥当性を保つことが困難になっています。
Host: 規則による禁止だけでは解決しないということですね。この研究では、どのようなアプローチでその実態を調査したのでしょうか。
Expert: 研究チームは、3つの教育機関のデータを用いて多角的にアプローチしました。具体的には、普段の課題成績と試験監督付きの試験結果の統計的な比較、学生が提出したコードとAIが生成したコードの構造比較、そして学生への意識調査です。
Host: 分析からどのような結果が得られたのですか。
Expert: 明確な乖離が示されています。あるプログラミングコースでは、毎週の課題で最高評価を得ていた学生のうち、45%が監督付きの期末試験で0点となりました。課題成績と試験成績の相関関係はr = 0.18と極めて低い数値です。また別の機関では、同一のテストに試験監督を導入したところ、最高評価を獲得した割合が73%から24%へと大幅に低下しました。
Host: 成果物の出来栄えと個人の能力に大きな開きが生じているのですね。提出されたコード自体にはどのような特徴がありましたか。
Expert: 学生の提出コードを分析したところ、授業で教えていない構文の使用やコードの肥大化が確認され、約18%からAI特有の文体マーカーが検出されました。またアンケートからは、留学生と国内学生の間でAIの利用形態や有用性の認識に違いが見られ、置かれた環境やプレッシャーが影響している実態も判明しました。総じて、方針による禁止だけでは不十分であることがデータで示されています。
Host: これは教育機関だけでなく、企業の実務にとっても非常に重要な示唆を含んでいますね。ビジネスの現場にはどのような影響があるでしょうか。
Expert: 採用、人材育成、そして業務評価の再設計が必要です。リモートワークや日常業務において、提出されたレポートやコードといった成果物だけを見て個人の能力を評価することは、重大なリスクを伴います。企業は、AIの使用を一律に禁止するのではなく、評価ガバナンスを見直す必要があります。
Host: 具体的にはどのような対応が考えられますか。
Expert: 成果物そのものだけでなく、問題解決のプロセスを可視化することです。例えば、対面での技術面談、思考プロセスを説明させる検証、あるいは監督下での実践スキルの確認など、認知的努力が伴っているかを測定する枠組みを導入することが有効な対策となります。
Host: 表面的な成果物の確認から、実際の能力を見極める評価プロセスへの移行が求められているということですね。Alexさん、解説をありがとうございました。
Expert: ありがとうございました。
Host: リスナーの皆様、お聴きいただきありがとうございました。次回もA.I.S. Insightsでお会いしましょう。
Artificial Intelligence & Automation Information Systems & Management Human-Computer Interaction Data Analytics & Big Data Digital Transformation & Strategy Cybersecurity & Privacy Cloud & Infrastructure E-Commerce & Digital Platforms Operations & Supply Chain Sustainability & Green IS

Generative AI, Assessment validity, Affordance theory, Introductory programming, Assessment governance, Higher education