研究ハンドブック

Ueduで研究を実施する

どのようなデータが存在するか、どの倫理ケースに該当するか、どのようにプラットフォームを離れるか、そして方法と限界に何を書くか

Written for: 研究を発表する予定の研究者

Machine-assisted translation, structurally verified against the English text. Where the two differ, the English version governs; the authoritative governance documents are in Traditional Chinese. Read the English version

このハンドブックでは、研究者が差し迫る順に抱く疑問に答えます。つまり、ここに何があるのか、各自で倫理審査の承認が必要かどうか、データがどのように外部へ出るのか、limitationsセクションに何を書くべきか、そしてそれらをどのように引用するかです。ここでは、プラットフォームが何を提供できないかをあえて明確にしています。研究の4か月目にそれを知るのは、費用がかかるからです。

1. このプラットフォームが適している用途

Uedu は、研究用ラボではなく、たまたま計測機能が組み込まれている本番の教育プラットフォームです。そのため、どのような種類の問いにうまく答えられるかが決まります。

適している用途適していない用途
学問分野や機関をまたいだ、実際の AI-mediated learning の大規模な観察研究 標準化された条件を必要とする、厳密に統制されたラボ実験
学期内、または再履修学生については学期をまたぐ縦断研究 学生を機関や教員に無作為割り当てする必要があるもの
自分の授業を変更し、その後に起こることを観察するデザインベースド・リサーチ 介入を教員に隠さなければならない研究
手法と指標の研究:対話の測定、分析アプローチの比較、指標の妥当性検証 単一の授業における単一学期から学習効果を主張する研究
マルチモーダルな統合 — 対話と評価、あるいは認知テスト、あるいは生理的日次要約との統合 生の連続信号を必要とする高頻度の生理学研究

データが基づいて整理されている枠組み

Educational Omics は、学習を複数の同時に観測可能な層として扱います。これはプラットフォームが収集する内容を整理するための枠組みであり、このハンドブックの残りを短くするためには、この用語を知っておくことが役立ちます。

次元対象範囲
Cognomics認知プロセス — 対話の軌跡、認知レベル分類、認知テスト成績
Linguomics言語と表現 — 複雑性、意味論、音声書き起こし
PhysioNeuromics生理的・神経的要素 — 心拍変動、睡眠、ストレス。センサー研究は開発中です
Sociomics社会的相互作用 — フォーラム、協働、ピアレスポンス
Environomics学習環境 — 公的モニタリングデータから得られる周辺条件
Ethicomics倫理とガバナンス — 同意、撤回、開示、そしてそれらの仕組み自体の研究

これらの用語を定義している論文を含む、プラットフォームに関するこれまでの研究は /practice(19 publications)にあります。最初の会話の前に 2〜3 本読んでおくと、その会話はずっと短くなります。

2. どの倫理ケースに当たるか

これは最初に決めるべき質問です。というのも、何よりもあなたのタイムラインを決めるからです。プラットフォームは包括的な研究倫理プロトコル (NTU-REC 202507EM058) を保持しており、その下でのデータガバナンスは、あなたではなくプラットフォームの責任です。ケースは3つあります。

ケース A — プラットフォームがすでに保持しているデータを分析する

対象です。これについては、あなた自身で申請を行う必要はありません。 すでに収集されたデータの匿名化済みエクスポートは、包括プロトコルの下で実施されます。インフォームド・コンセント、匿名化、およびエクスポート経路はプラットフォームの責任です。方法のセクション(第10章)で引用できる由来に関する記述を提供します。

ケース B — 新しいものを収集する

開始前にプロトコル修正が必要です。余裕を持って計画してください。 新しい計測器、新しいセンサー、外部アンケート、またはプロトコルでまだ対象になっていない学生への質問です。修正は1件ずつではなくまとめて処理されるため、決定要因は、どれだけ早く知らせるかであり、依頼時にどれだけ緊急かではありません。

ケース C — あなたの所属機関と投稿先ジャーナル

あなたの責任です。対応に必要な書類は私たちが提供します。 一部の機関は、データがどこで収集されたかに関わらず、独自の登録や承認を求めます。また、ほとんどのジャーナルは倫理声明を要求します。これらの義務はあなたにありますが、通常は新たな審査を受けるのではなく、包括プロトコルを引用することで満たされます。

ここで誤解されやすい点

  • 「アンケートに3問追加するだけです。」 それはケース B です。プロトコルで対象になっていない3問は、少量であっても新規収集です。
  • 「自分の授業なのだから、自分の判断です。」 授業を行うかどうかはあなたの判断です。しかし、採点する学生から研究データを収集することは同じ行為ではなく、第8章の分離は例外なく適用されます。
  • 「外部フォームを使えば速いです。」 実際には遅くなります。外部アンケートは包括プロトコルの対象外であり、追加のデータ転送問題を伴ってケース B に入ります。プラットフォーム独自のアンケートツールを使ってください。まさにそのために存在しています。

3. どのデータが存在するか

以下でいう利用可能性は、「プラットフォーム上に存在し、原則としてエクスポート経路を通じて匿名化して提供しうる」という意味であり、「要請があれば引き渡す」という意味ではありません。実際にどのように提供されるかは第5章で扱います。

データ粒度次元注記
Assistant dialogue メッセージごと、タイムスタンプ付き、会話ごとにスレッド化 Cognomics / Linguomics 中核となる資産です。会話がどのモードで行われたかを含みます。
Cognitive-level labels 学生メッセージごと Cognomics 改訂版 Bloom タキソノミーをモデルが付与します。これらを成果指標として使う前に第9章を確認してください。
Message embeddings メッセージベクトルごと Linguomics 再埋め込みなしでクラスタリングや意味的類似性の作業を可能にします。
Quizzes, worksheets, assignments 各項目への応答ごと、スコア付き Cognomics 項目内容は先生のものであり、インストゥルメントは授業ごとに異なります。
Forum activity 各投稿と返信ごと、品質および反応シグナル付き Sociomics 件数だけでなく、品質調整済みのスコア構成要素を含みます。
Surveys 応答ごと インストゥルメントによります プラットフォーム内のサーベイのみです。新規インストゥルメントは Case B です。
Cognitive test battery トライアルレベル、ミリ秒単位のタイミング Cognomics 実行機能、処理速度、作業記憶、エピソード記憶、流動性推論、空間認知、言語能力、およびメタ認知にわたる、研究グレードの23のタスクです。トライアルレベルの記録は物理的に削除されることはありません。
Learner profiling 完了したインストゥルメントごと Cognomics 3つの公開心理測定インストゥルメント(Holland RIASEC、IPIP Big Five、OEJTS)です。学生は自分のために受検し、繰り返し受検することもできます。すべての試行は保持されます。
Wearable daily summaries 日次値 PhysioNeuromics 睡眠ステージとスコア、心拍変動、ストレスと body battery、活動、安静時心拍数です。認可された研究プロジェクト内でのみ、かつデバイスを接続したメンバーに限ります。第5章と第7章を参照してください。
Environmental exposure 機関または郡レベルでの派生日次指標 Environomics 公的機関のモニタリングデータから算出されます。派生指標は変数として使用できますが、基礎となる機関データセットは当方では再配布しません。生の値が必要な場合は、機関から直接取得してください。
コーパスの率直な形

それは均一というよりも広範です。授業ごとに使用したツールが異なり、先生ごとに求めた内容が異なり、参加は一貫して任意です。そのため、カバレッジは設計上不均一であり、事後的に均一にすることはできません。すべての学生がすべてのモダリティを持つことを前提にした設計は、データに接すると成立しません。設計を確定する前に、変数の具体的な組み合わせについて実現可能性の件数を尋ねてください。それは負担の小さい質問ですし、できれば早い段階でお答えしたいです。

4. あなたが決して得られないもの

「まだ」ではありません。これらは確定した方針であり、改めて尋ねても変わりません。

  • 識別された学生。 研究データはランダムな研究コード付きで公開されます。 そちら側に再識別キーはなく、作成しようとしてはなりません。
  • 他の先生の講義、本人不在で。 コースデータはそのコースに帰属します。 複数コースの研究は、関係する先生を通して行われ、先生方を飛び越えて行われるものではありません。
  • 月経周期および生殖健康データ。 サービス層でユーザー自身の参照用にのみ収集され、すべての研究カテゴリから除外され、いかなるプロジェクトでも承認できません。その理由は 研究ガバナンス文書の第7章にあります。科学的根拠が弱く、この種の主張の歴史も十分に悪質であるため、倫理的リスクが学術的価値を上回るからです。
  • プロジェクト経由での生の連続生理信号。 研究プロジェクトが承認するのは日次要約値であり、分単位の系列ではありません。拍動レベルの作業はプラットフォーム上にありますが、データ要求ではなく、独立した計測付き研究として実行されます。
  • 公開 API を通じた学生の作業。 公開 API と MCP サーバーが公開するのは、低感度データのみです。公開コース、機関、出版物です。対話、成績、フォーラムの内容はその方法では決して公開されず、この境界はプロジェクトごとに交渉の余地がありません。
  • 退学した学生のデータ。 退学は即時に有効となり、その学生はその後の分析およびエクスポートから除外されます。退学前にすでに計算され、匿名化された集計は、事後に分解することはできず、その制限は同意時に学生へ開示されます。

5. エクスポート経路

出口は1つだけです。非公式なコピーも、メールで共有されたデータセットも、急ぎの共同研究者向けの例外もありません。この単一経路の性質が包括プロトコルを機能させているため、推奨ではなく強制されています。

外部に出る際に起こること

  • 識別子はランダムな研究コードに置き換えられます。
  • エクスポートは暗号化され、依頼者に届けられ、すべてのエクスポートは記録されます。
  • 責任教員はデータ保護誓約書に署名していなければなりません。代理でエクスポートする研究助手は、さらに上級ティーチングアシスタントの権限を持ち、機密保持誓約書に署名していなければなりません。
  • 研究エクスポートには時間制限があります。記録は作成から5年間はエクスポート可能で、その後はシステムが拒否します。

外部研究者向けのアクセス区分

コース担当教員ではない共同研究者は、段階的アクセス、機密保持、出版物レビュー、終了を含む研究者アクセス契約を通じて利用します。これはガバナンスセンターに掲載されています(中国語です。所属機関の記録用に正式な英語版が必要な場合はお問い合わせください)。

未開放: ウェアラブル研究プロジェクトからの匿名化済みエクスポート

研究プロジェクト内では、主任研究者はプロジェクト期間中、メンバーの承認済み日次サマリーを閲覧できます。そのデータの匿名化済み研究エクスポートは、倫理委員会が対応するプロトコル修正を承認した後にのみ開放され、今日は開放されていません。研究がウェアラブルデータのエクスポートに依存している場合は、それを未解決の依存事項として扱い、提案書に記載する前に私たちに相談してください。閲覧機能があるからといって、エクスポート機能があると仮定してはいけません。

6. 適合する研究デザイン

デザイン必要なもの倫理区分
既存対話の二次分析 — コーパス研究、軌跡 モデリング、手法比較 明確な問いと実行可能性の見積もりです。収集はありません。 A
自分の授業におけるデザインベース研究 — 教え方を変更し、 その後に何が起きたかをプラットフォームが記録します ご自身の授業、開始前に文書化した想定、そしてその学期に他に何が変わったか についての報告での正直さです。 A、新しい計測手段を追加しない場合
設計された活動の前後比較 — たとえば Socratic 対話 を用い、前後に評価を行う場合 既存のプラットフォーム計測手段です。独自のテスト項目を追加すると B になります。 A または B
授業間または機関間比較 各先生の関与と、関心変数以外に授業間でどの程度違いがあるかについての 現実的な認識です。 A
学習行動と結びついた認知テスト 学生がバッテリーを完了することです。これは任意なので、登録から利用可能な N に至るまでの脱落を見込んで計画してください。 A
生理学的研究 メンバーごとの承認、機器を所有し接続するメンバー、そして第 5 章の エクスポート依存がある研究プロジェクトです。 通常 B
新しい質問票または計測手段 十分な事前期間を伴う修正申請です。その後は、プラットフォーム内アンケートとして実施されます。 B
学生に何か尋ねる必要があるなら、プラットフォーム内で尋ねてください

プラットフォーム内アンケートがデフォルトであるのには理由があります。回答は既存の同意 およびガバナンスの枠組みの中にとどまり、同じ匿名化の経路を通じてプラットフォーム データと連結可能であり、第二のデータ管理者を生みません。外部フォームはこの 3 つを一度に崩します。

7. 同意のアーキテクチャ

2つの独立したレイヤーに加え、文書で約束するのではなくソフトウェアで実装される参加者の権利のセットです。

  1. プラットフォームレベルの研究同意。 バージョン管理され、撤回可能で、プラットフォームの利用そのものとは切り離されています。これを拒否しても、すべての教育機能は利用可能なままです。
  2. プロジェクトごとの承認 は、ウェアラブルデータを含む研究プロジェクト向けです。 参加者は、プロジェクトで示された目的を逐語的に読み、どのデータカテゴリを承認するかを選択し、参加開始日以前の履歴を含めるかどうかを選びます。全文は署名時にハッシュ化され、後日の証拠となります。

参加者の権利、実装済みのもの

  • ミラー表示。 参加者は、研究者が見る画面とまったく同じ画面を見ます。隠しフィールドはありません。
  • アクセスログ。 研究者によるあらゆる閲覧が記録されます — 誰が、いつ、どの範囲を — そして参加者はそのログを読むことができます。
  • 撤回。 1回の操作で、即時に効力を持ち、理由は不要で、結果もありません。研究者は理由を尋ねてはなりません。
  • 匿名アラート。 圧力を感じているものの撤回はしたくない参加者は、プロジェクトを離れることなく、また誰が報告したのかを研究者に知られることなく、フラグを立てることができます。アラートが閾値に達すると — 2人以上で、かつアクティブメンバーの5%未満ではないこと — プロジェクトの閲覧アクセスは審査まで自動的に停止されます。
階層的な設定には追加の義務が伴います

研究者が参加者に対して権限を持つ場合 — 教師と学生、コーチと選手、司令官と部下 — プロジェクトはそれを申告し、研究者は追加の誓約に署名します。データは訓練の調整と参加者のケアのためにのみ使用され、 評価、懲戒、選抜、その他いかなる人事判断にも決して使用しません。関係を隠すことは重大な違反です。全文と根拠: research governance

8. 曲げられない規則

研究参加は成績に一切影響しません

同意書に署名しても、何も得られません。辞退しても、何も失いません。学期途中で撤回しても、何も失いません。学生はこれまでどおり出席し、アシスタントを利用し、成績もまったく同じように付けられます。除外されるのは、そのデータだけです。いかなる機能、文言、通知、または授業案内も、そうでないと示してはなりません。たとえば、「参加者にはボーナス点が与えられる」、「この研究は授業要件の一部である」、さらには教員がそれを望んでいるというわずかな示唆さえ含めてはいけません。

これは文体上の好みではありません。教員と採点対象の学生との間には力の非対称性があるため、成績が付くことを条件に得られた同意は同意ではなく、同様の事例では、解雇、研究参加資格の喪失、罰金、そして機関に対する助成金の返還請求が生じています。

計画段階で考慮すべき結果は2つあります。

  • 審査に耐える形で募集してください。 学生が無視してよい案内であれば問題ありません。あなた自身が自分の教室で行う募集の働きかけは、後で弁護すべき圧力ではなく、最初から設計段階で排除すべきものです。
  • AI利用を採点すると、データが変わります。 教員はAI利用を採点できます。それは教員の教育上の自律性です。しかし、成績インセンティブによって生じた行動は、自発的な利用とは異なる現象です。両者を区別しない論文は、査読でその点を問われます。

9. 書くべき制約

審査者はこれらについて質問しますので、先にご自身で取り上げたほうがよいです。以下の各項目は、含意ではなく、データの実際の性質です。

認知レベルのラベルはモデル出力です

Bloomレベルの分類は、訓練された人間のコーダーではなく、記録されたプロンプトに対して言語モデルが生成したものです。これらは、一括で見た場合と時系列で見た場合には一貫しており有用ですが、個別のメッセージに対する真の値ではなく、人手コーディングとの一致は、既存研究から引用するか、サンプル上でご自身で確立するべき性質です。モデルとプロンプトのバージョンを明記してください。どちらもイベントごとに記録されているので、明記できます。

利用量はエンゲージメントではありません

メッセージ数、セッション数、単語数は弱い代理指標であり、教師が参加を評価する場面ではさらに弱くなります。プラットフォームが質調整済みのシグナルを提供している場合は、それを優先し、そう選んだ理由を述べてください。

参加は一貫して任意です

学生は、アシスタントを使うかどうか、認知バッテリーを受けるかどうか、デバイスを接続するかどうか、研究に同意するかどうかを自分で選びます。これらはすべて選択の段階です。最終的なNだけでなく、funnel、つまり登録済み、利用済み、完了、同意済みを報告してください。

デモグラフィック変数には欠損が多いです

プラットフォームは初期の数年間、登録時に生物学的性別を収集しておらず、アカウントのかなりの割合で値が記録されていません。したがって、プラットフォームレベルでの性別構成に関する主張は支持できません。また、いかなる公平性分析も、記録された値を持つサブセットに限定して行い、そのサブセットを正直に説明する必要があります。研究でデモグラフィック変数が必要な場合は、取得を Case B として扱い、それに応じて計画してください。

認知バッテリーのスコアは臨床基準ではありません

要約レポートの合成スコアは、学生へのフィードバックのためのヒューリスティックな変換であり、標準化された規範参照尺度ではありません。分析には主要な試行レベルの指標を使用し、バッテリーを知能評価や臨床評価と同等であると説明しないでください。

コンテキストと一般化可能性

このコーパスは台湾の高等教育の中で育ち、AIプラットフォームの採用を選んだ教師が担当する授業における、中国語のデータが大半を占めています。これらの2つの事実はいずれも一般化を制約するものであり、レビュー担当者の報告書ではなく、あなたのlimitationsの段落に記載すべきです。

10. 方法、引用、謝辞

プラットフォームの説明

データは、Chia-Kai Chang(Center for General Education, National Central University, Taiwan)によって開発され、それ以外の 機関でも採用されている、高等教育コースで用いられる AI を介した学習プラットフォーム Uedu(uedu.tw)上で収集されました。

避けるべき2点に注意してください。すなわち、プラットフォームをいずれかの機関の製品として記述することと、 商業的であると記述することです。どちらも正確ではありません。

出典と倫理に関する声明

データは Uedu プラットフォーム上で収集され、研究倫理プロトコル NTU-REC 202507EM058 のもとで匿名化された形式で提供されました。研究参加 は授業参加とは独立しており、いかなる学生の 成績にも影響しませんでした。参加者はいつでも不利益なく撤回することができました。

もし所属機関やジャーナルがこれ以上を必要とする場合は、お知らせください。特定のデータセットに対する書面の出典声明は、 例外ではなく通常業務として作成しています。

利益相反

次の3点を開示してください。いずれかを査読者が自力で発見した場合、その人は 3点すべてについて最悪の判断をするからです。

  • データがどのプラットフォームから来たのか、またその人物が著者かどうか。
  • プラットフォームの利用が無償であり、いかなる商業的主体もそこから資金提供を受けたり利益を得たりしていないこと。
  • あなたの研究が消費したプラットフォームの運用能力の背後にある助成金、および所属機関が直接支払った API 料金のいずれも。

先行研究の引用

分析コンポーネント――認知レベル分類、検索、フォーラム採点、 cognitive battery――を使用する場合は、ウェブサイトではなく、それを説明している論文を引用してください。DOI 付きの一覧は /practice にあり、方法ノートは /doc/methodology(中国語)に、方法セクションに必要なパラメータレベルの詳細が含まれています。

11. 著者性と協働

  • 共著が通常の形です。プラットフォームでの作業が貢献の一部である場合です。たとえば、計測手段を構築する、抽出パイプラインを実行する、論文が依拠する仕組みを設計する、といった場合です。貢献が既存データの提供と出所の記述である場合は、謝辞で十分であり、通常それで足ります。
  • 決めるのは解析の前であって、投稿の前ではありません。 著者性についての話し合いが遅く行われると、うまくいきません。早ければ、5分で済みます。
  • データを提供した授業の先生には、著者であるかどうかにかかわらず、その授業について何が書かれているのかを伝えるべきです。これはプラットフォームが強制する規則というより、プラットフォームが期待する配慮であり、先生が研究の受け入れを続けるために必要なことです。
  • 重複する投稿。 もし先生の問いが、すでにプラットフォーム上で査読中の研究に近い場合、こちらからお伝えします。そして、同じことを返していただくことを期待します。同じコーパスに基づいて作られた2本の論文が、別の媒体で同じ主張をするのは、双方にとって問題です。

12. ラボと研究プロジェクト

生理学的研究および複数参加者による研究は、場当たり的にではなく、ラボとプロジェクトの構造を通じて実施されます。

  • ラボは、氏名付きの主任研究者とともに、プラットフォーム管理者が開設します。所属機関と肩書、ラボ名と研究方向、想定用途を書いてご連絡ください。
  • 研究プロジェクトは、PI が作成し、プラットフォームが審査して有効化し、その後、メンバーを個別に募集します。作成できるのはラボ PI のみです。これは意図的な制限であり、すべてのプロジェクトには、その倫理について責任を負う識別可能な1人が必要だからです。
  • 参加者にラボ会員資格は不要です。 参加者は招待を受け、プロジェクトの目的を読み、署名し、参加します。それが全体の流れです。
  • プロジェクトは期限切れになります。 閲覧権限はプロジェクト終了日に自動的に閉じられ、手動操作はなく、静かに延長する方法もありません。

完全なライフサイクル、PI の権利と義務、および関連する法的・倫理的用語の平易な用語集は、 研究ガバナンス文書(中国語)にあります。これは権威ある本文であり、この章はその要約です。

13. 始め方

提案ではなく、質問を送ってください。1段落あれば、実現可能性、該当する倫理ケース、そして誰かがすでに取り組んでいるかについて、実際の回答を得るのに十分です。

Subject: Uedu — research collaboration Question: [the thing you actually want to know] Data I think I need: [dialogue / assessment / cognitive battery / wearable / survey], for [which population], over [what period]. Am I collecting anything new? [yes / no / not sure] My timeline: [when you need results, and what for] My institution requires: [own ethics registration? DPA? English documents?]

[email protected]まで。 「そのデータは存在しない」や「誰かがすでにそれをやっている」といった、実際に当てはまる場合には、そのとおりの直接的な回答が返ってきます。

書く前に

各2分です。/practiceで、その質問がすでに回答されていないかを確認し、第2章を読み直して、ご自身の倫理ケースを整理してください。この2つの事実は、メッセージの他のどの内容よりも、受け取る返答を変えます。

Something in this handbook wrong, out of date, or missing? Write to [email protected] and say which chapter.

All handbooks · AI teaching overview · Publications · Research governance · uedu.tw

Uedu is developed by Chia-Kai Chang, Assistant Professor at the Center for General Education, National Central University, Taiwan, and is adopted by institutions beyond it. This handbook is available in English · 繁體中文 · 简体中文 · 日本語 · 한국어 · Tiếng Việt · Bahasa Indonesia · Bahasa Melayu · ไทย · Türkçe · Deutsch · Français · Español · Português · Italiano · Ελληνικά. The English version is the reference text. The platform interface itself is available in 16 languages.