AI協働形式のレポート
各機能の説明レポートの主要機能
- スコア
- プレイバック
- 提出コード確認
- 深掘り質問生成機能
スコア
AI協働形式のスコアは、成果物への評価 と AIスコア の2軸で構成されています。
テストのトータルスコアに影響する問題単体の点数は、成果物への評価がそのまま反映されます。AIスコアはトータルスコアには影響せず、候補者のAI活用能力を把握するための参考情報として提供されます。
成果物への評価
候補者が提出した成果物をもとに評価します。
要件対応力 問題で提示された要件に対して、候補者がどこまで対応できているかを評価します。テストケースごとにアコーディオンメニューで詳細を展開でき、リクエストパラメーターの仕様・期待されるレスポンス形式・計算ロジックなど、各要件をどこまで正確に実装できているかを確認できます。
AIスコア（β）
候補者がAIツールをどのように活用したかをAIが自動で評価するスコアです。 問題形式によって評価軸が異なります。
- 対話型問題：「コミュニケーション能力」「課題解決能力」「AI協働力」の3軸で評価され、全体スコアとともにレーダーチャートで視覚的に確認できます。
- 非対話型問題：「AI協働力」のみで評価されます。
各軸はさらに細かい評価項目に分かれており、それぞれの項目に対して何ターン目のプロンプトが加点 / 減点となったかが可視化され、その理由が記載されています。
詳細についてはAIスコアの説明ページをご覧ください。
プレイバック
候補者が試験中にAIエージェントとやり取りしたログを確認できる機能です。「プレイバックを開く」ボタンから専用のビューアを起動します。
ビューアは、やり取りを読む「AGENTモード」と、候補者のエディタ操作を再生する「EDITORモード」を右上で切り替えて使います。EDITORモードは、編集履歴が記録された受験でのみ表示されます。
AGENTモード
候補者とAIエージェントのやり取りを読むモードです。以下の要素で構成されています。
上部 全体のターン数・トークン使用量・コストが表示されます。
左側 候補者がAIエージェントに送ったプロンプトがターンごとに一覧表示されます。各ターンごとの加点 / 減点の評価、トークン使用量、コスト、使用ツール数が表示されており、クリックすることで該当ターンの詳細に移動できます。対話型問題の場合は、AIステークホルダーとのチャット履歴も「Chat」タブから確認できます。
ターン詳細・ツール呼び出し（中央） 選択したターンの候補者のプロンプトとAIエージェントの返答を確認できます。「ターン詳細」タブではやり取りの内容を、「ツール呼び出し」タブではそのターンでAIが実行したツールの詳細を確認できます。
評価観点（右側） 選択したターンに対して、AIスコアのどの評価観点に該当するかが表示されます。プラス評価・マイナス評価それぞれの理由が記載されており、成果物だけでなくAIをどう使いこなしたかというプロセスを確認できます。
EDITORモード
候補者がエディタで行った編集を、記録された順に再生するモードです。
再生画面（中央） 編集を順に適用したコードが表示されます。各行は最後に書いた主体で色分けされ、AIエージェントが書いた行は薄い青、候補者が書いた行は薄い黄色で示されます。判別できなかった編集は「不明」として表示されます。下部には候補者が統合ターミナルで実行したコマンドが、実行ディレクトリと終了コードとあわせて表示されます。評価の根拠になったコマンドにはその旨が表示されます。
ファイル一覧（左側） 編集が記録されたファイルと、候補者が開いたファイルが一覧表示されます。各ファイルには候補者が開いた回数が付き、一度も開いていないファイルはその旨が表示されます。
提出コードの確認方法
レポートページ内の「提出コードを開く」ボタンから、候補者が提出したコードをHireRoo上で確認できます。
提出物一式を確認したい場合は、レポートページからダウンロードできます。
インタビュー準備
深掘り質問の自動生成
候補者の提出内容をもとに、AIが面接で活用できる深掘り質問を自動で生成します。候補者ごとの回答や設計判断に基づいた質問が生成されるため、面接の準備にそのままご活用いただけます。
閲覧方法
生成された深掘り質問は、HireRooのレポートで確認できます。提出コードの該当行に紐づいて表示されるため、候補者がどのような実装や判断をしたかを確認しながら、面接で深掘りするポイントを把握できます。