オープンレスポンス評価の改善
オンラインコースの学習者を評価する良い方法は、エッセイ形式のテキストの回答を、明確に定義された一連の量子化された基準（ ルーブリック).
Open Response Assessment (ORA) は、Open edX プラットフォームで利用できるコンポーネントであり、フリーテキスト入力の作成を可能にし、ピア評価、スタッフ評価、自己評価など、ルーブリックに基づいたさまざまな評価方法を提供します。
2020 年初頭、edX は ORA ブロックの使いやすさとユーザー エクスペリエンスを向上させるとともに、OpenCraft との混合開発プロジェクトを通じて新しい機能を実装することを決定しました。
ブレンド型開発プロジェクトはedXの資金提供を受け、ロードマップ上の機能の実装、edXチームとコミュニティ内のパートナー間の連携促進、そしてedX全体の開発促進を目的としています。これらのプロジェクトに関する詳細は、 ブレンド開発ランブック.
開発プロジェクトの一環として行われた改善の概要は次のとおりです。
オーサリングの容易さと使いやすさの向上
このプロジェクトにおける多くの変更は、講師にとってORAの作成体験をより簡単でシンプルなものにすることを目的としていました。ORAブロックはStudioのトップレベルブロックとして表示され、いくつかの事前設定されたテンプレートが提供されるようになりました。
その ORA 設定メニューが改善されました。スケジュールと評価ステップの設定が別々のタブに移動され、ユーザーエクスペリエンスが簡素化されました。評価ステップタブでは、評価ステップの設定が簡単になり、不要な設定が非表示になりました。スケジュールタブでは、すべての日付と期限の設定が個別に処理されます。
報告とモデレーション
相互評価ステップが有効になっている場合、特にコースの開始時や終了時など、アクティビティがあまりない時間帯に、一部の学生が無期限に待機状態になることがよくあります。この状態にある学生は、相互評価による採点を待っているか、評価が採点されるのを待っている状態です。
新しい変更点の 1 つは、インストラクター ダッシュボードの画面で、待機ステップで停止している生徒のリストが表示され、インストラクターがその画面から直接成績を上書きしたり、スタッフの成績を適用したりできるようになったことです。
この機能の詳細については、 ORA割り当てのメトリクスへのアクセス.
以前は、ORAデータレポートは、人間が判読できるユーザー情報やブロックがエクスポートされなかったため、使いにくかったです。そのため、講師はプラットフォーム外でエクスポートされた匿名ユーザーIDマニュアルを使用して学生をマッピングする必要がありました。このプロジェクトでは、レポートが改善され、匿名IDユーザー名だけでなく、実際のユーザー名、ブロックID、そして判読可能な問題名も含まれるようになりました。これにより、ファイルの解釈、提出情報の解析、そしてこのデータと実際の学生のマッピングが容易になりました。
さらに、新たな報告書が発表された。 データのダウンロード 学生が提出したすべての回答をダウンロードしてオフライン採点に使用できるタブです。このレポートの詳細な説明は、 ORA割り当てのメトリクスへのアクセス.
学習者向けの改善
学習者は、プレーンテキストでの提出ではなく、WYSIWYG エディターを通じて適切にフォーマットされた回答を提出できるようになります。
詳細はこちら： オープンレスポンス評価課題を作成する インスタンスでこれを設定する方法については、こちらをご覧ください。
さらに、ピア評価の手順（仲間を評価する の三脚と 同僚の評価を待つ）は非ブロッキングとなり、学生はプロセスのどの時点でも自分の回答を評価し、スタッフから成績を取得できるようになりました。
最終メモ
これらの改善は開発され、Open edXのマスターブランチに統合されました。 Koaで部分的に利用可能 の三脚と Lilacリリースで完全に利用可能。 チェックアウトする オープンレスポンス評価ドキュメント 新しい ORA 機能の詳細と詳細な使用手順については、こちらをご覧ください。
最新のORA改善を使い始めるには、 OpenCraftのPro&Teacherを30日間無料でお試しいただけますプラットフォームの最新リリースで実行される、完全に専用の Open edX デプロイメントを入手できます。
