小説の創作相談掲示板:小説の書き方Q&A。執筆の悩み相談をしよう!

AIの採点の返信の返信

元記事を読む

AIの採点の返信(元記事)

返信ありがとうございます。

読むせんさんへ
点数はどちらも80点以上は取れていたので、大丈夫だと思うのですが、AIの点数は甘めと聞いたので、不安になっていました。

サタンさんへ
>あなたがどう評価してほしいとAIに伝えたかどうかがわからないと何とも言えない。
「これを文学賞に応募したら、どうなりますか?」「点数をつけるとしたら、何点?」と尋ねていました。

AIの採点の返信の返信

投稿者 サタン 投稿日時: : 0

>「これを文学賞に応募したら、どうなりますか?」「点数をつけるとしたら、何点?」と尋ねていました。
それだと、「応募したら」という条件設定と「点数をつける」という評価形式しか設定してないので、たぶんほぼ意味を成さない評価だと思う。
まず評価基準が不明確。「その評価はどういう基準でつけられるか」っていう評価ルールが無いので、AIはあなたの作品から「あなたが喜ぶであろう基準(に見える出力)」で評価します。
AIの内部構造には詳しくないんで おそらく と頭につくけど、おそらくあなたの作品を100点と仮定して最もらしい形で「数字を出力してる」だけで、採点はしてない。なのでかなり高得点の出力だったのではないかと思う。
「どういう評価をしてほしいか」という基準を明確に詳細に事細かく設定しないと、ほとんど意味を成さないかな。

じゃあ、どうしたら信頼性のおける出力が得られるかって考えると、前述した通り評価基準をしっかり設定して近年の傾向などもちゃんとAIに教え込まないとダメ。
けど、それでもはっきり「信頼できる評価」とは言い難い。
何故なら、もし、AIの評価が完全に信頼できる評価を出せるとしたら、それは評価基準を完全にデータ化して扱えることを意味するので、評価だけでなく「AIがその評価を得られるレベルの作品を書ける」ってことになる。
これは現状技術的に可能だけど、そこまで創作に特化したAIはサービスの上で提供されていない。

ただ、AIは学習するので、システムごとに特徴があるけど、例えばGeminiだったら新しいチャットでも既に会話した別のチャット内容を閲覧し回答できるので、「作品の相談」や「創作論の相談」をしまくって「あなたの創作パートナー」になってるアカウントであれば、少なくとも「客観的な作品の評価」ではなく「あなたのイメージが形に出来ているか」という評価はしてくれるし、それはそこそこ信頼できる評価だと思う。
GPTなどでもそうした「前提」になることを事前に会話してAIに提示し、評価できる状態にしてから評価を依頼すれば、それなりに信頼できる評価になると思う。

カテゴリー : その他 スレッド: AIの採点

返信する!
コメントは4500文字以内。

「私はロボットではありません」にチェックを入れてください。

トップページへ ページの先頭へ

「AIの採点」の返信一覧

他の相談一覧

世界史丸パクリはあり?

投稿者 橋本梯子 回答数 : 5

投稿日時:

例えばゴブリンの国は龍の国に依存性の高い薬物で貿易する。龍の国の政府が突っぱねると、ゴブリンたちは戦争を始める。 ゴブリンの国... 続きを読む >>

一人称小説における独り言について

投稿者 ヤカンの助 回答数 : 5

投稿日時:

けたたましく鳴る目覚まし時計を止め、少し身体を震わせて、最近朝はよく冷えるな、なんて独り言を呟いた。 のように、誰もいない空間... 続きを読む >>

設定や構想が既存のものと似通ってしまう

投稿者 リーム 回答数 : 6

投稿日時:

どうも、リームと申します。 こちらの掲示板は初めてです。よろしくお願いいたします。 現在、「異世界転生」ものに初めて挑戦しよ... 続きを読む >>

▼書き込みの検索

▼投稿者の検索

小説の書き方Q&A:創作相談掲示板の使い方・利用規約(必ずお読みください)。お問い合わせ