HeadlinesBriefing favicon HeadlinesBriefing.com

学生はエッセイ執筆でGeminiを好む

Hacker News •
×

Study Arenaのブラインドテストデータによると、大学の学生はAI支援エッセイ執筆においてChatGPTClaudeよりもGeminiを好む。6,851票の分析により、Geminiは39.6%の選択率を獲得し、続いてClaudeが31.8%、ChatGPT/OpenAIが29.2%を占めた。ブラインド比較では、学生はモデルの背後にあることを知らずに回答を選択し、選択が品質のみに基づくことを保証した。Geminiの優位性は、完成度、構造、明瞭さの間でバランスを取ることにあり、これは大学レベルの執筆の重要な特性である。より長い回答ももっと頻繁に選ばれ、選択された回答の平均長さは代替案より37%長かった。しかし、推論設定を増やしてもパフォーマンスは向上しなかった。低い設定と中程度の設定の方が、高い設定の方が高得点を得た。各モデルは特定の分野で優れていた:Geminiは執筆フィードバックで41.7%リード、Claudeは課題計画で43.2%リード、ChatGPTはリサーチサポートで39.3%リードした。この研究は、モデルを置き換えるのではなく編集ツールとして使用することを推奨し、ドラフトを精練するためのデフォルトの出発点としてGeminiを使用することを提案する。