小説の創作相談掲示板:小説の書き方Q&A。執筆の悩み相談をしよう!

AIの採点の返信の返信

元記事を読む

AIの採点の返信(元記事)

返信ありがとうございます。

読むせんさんへ
点数はどちらも80点以上は取れていたので、大丈夫だと思うのですが、AIの点数は甘めと聞いたので、不安になっていました。

サタンさんへ
>あなたがどう評価してほしいとAIに伝えたかどうかがわからないと何とも言えない。
「これを文学賞に応募したら、どうなりますか?」「点数をつけるとしたら、何点?」と尋ねていました。

AIの採点の返信の返信

投稿者 サタン 投稿日時: : 0

>「これを文学賞に応募したら、どうなりますか?」「点数をつけるとしたら、何点?」と尋ねていました。
それだと、「応募したら」という条件設定と「点数をつける」という評価形式しか設定してないので、たぶんほぼ意味を成さない評価だと思う。
まず評価基準が不明確。「その評価はどういう基準でつけられるか」っていう評価ルールが無いので、AIはあなたの作品から「あなたが喜ぶであろう基準(に見える出力)」で評価します。
AIの内部構造には詳しくないんで おそらく と頭につくけど、おそらくあなたの作品を100点と仮定して最もらしい形で「数字を出力してる」だけで、採点はしてない。なのでかなり高得点の出力だったのではないかと思う。
「どういう評価をしてほしいか」という基準を明確に詳細に事細かく設定しないと、ほとんど意味を成さないかな。

じゃあ、どうしたら信頼性のおける出力が得られるかって考えると、前述した通り評価基準をしっかり設定して近年の傾向などもちゃんとAIに教え込まないとダメ。
けど、それでもはっきり「信頼できる評価」とは言い難い。
何故なら、もし、AIの評価が完全に信頼できる評価を出せるとしたら、それは評価基準を完全にデータ化して扱えることを意味するので、評価だけでなく「AIがその評価を得られるレベルの作品を書ける」ってことになる。
これは現状技術的に可能だけど、そこまで創作に特化したAIはサービスの上で提供されていない。

ただ、AIは学習するので、システムごとに特徴があるけど、例えばGeminiだったら新しいチャットでも既に会話した別のチャット内容を閲覧し回答できるので、「作品の相談」や「創作論の相談」をしまくって「あなたの創作パートナー」になってるアカウントであれば、少なくとも「客観的な作品の評価」ではなく「あなたのイメージが形に出来ているか」という評価はしてくれるし、それはそこそこ信頼できる評価だと思う。
GPTなどでもそうした「前提」になることを事前に会話してAIに提示し、評価できる状態にしてから評価を依頼すれば、それなりに信頼できる評価になると思う。

カテゴリー : その他 スレッド: AIの採点

返信する!
コメントは4500文字以内。

「私はロボットではありません」にチェックを入れてください。

トップページへ ページの先頭へ

「AIの採点」の返信一覧

他の相談一覧

皆さんは「自作の酷評」はどこまで受け止めていますか?

投稿者 半額オソーザイ 回答数 : 27

投稿日時:

 お久しぶりです。結局、新人賞は三次選考で落ちて、ゼロから始める執筆生活に戻って新作のプロットと業界勉強に勤しんでいる半額です。 ... 続きを読む >>

殺しの是非

投稿者 まさまる 回答数 : 17

投稿日時:

特撮ヒーローの異世界転移を書きたいと思っているのですが、生態が人間種に近しいゴブリンやオークを殺すべきか否かで悩んでいます。 ... 続きを読む >>

よければ質問者が最優先で、雑談しませんか?

投稿者 読めません 回答数 : 0

投稿日時:

建ててみました。質問掲示板で雑談する基地害な私ですが嵐ではありあません。 続きを読む >>

▼書き込みの検索

▼投稿者の検索

小説の書き方Q&A:創作相談掲示板の使い方・利用規約(必ずお読みください)。お問い合わせ