PROTOCORE LAB
AI NEWS
01 / 07
AI NEWS / CONVERSATION QUALITY
AI返信は
正しさだけで
評価しない。
slop観察から決める人の確認線
2026.11.14 — ETHAN MOLLICK / X
AIらしい返信の「迷惑なパターン」
OTHER PATTERNS
- 投稿の繰り返し・言い換え
- 過剰な知識の演出
- 本人の立場を装う語り
測定済みの分類ではなく、SNS上で目にしたパターンを示した本人の観察です。
OBSERVATION & TRIAL
10.30
投稿にAIらしい返信が多数付き、
人の返信が見つけにくい。
11.03
5件ほどのコメントをまとめて
Pangramに通し、AIらしい返信を除けた。
いずれも本人の観察と試行。すべてのサービスで有効な検出精度を保証するものではありません。
TWO AXES OF EVALUATION
AI返信の評価を、二つに分ける。
+
CONVERSATION QUALITY
会話品質
- 相手の発言に具体的に応じているか
- 同じ内容を繰り返していないか
- 根拠のない立場や経験を名乗っていないか
基準は検出器の点数だけでなく、人が差し戻せる例文で作る(編集上の提案)。
BEFORE AUTO-REPLY
自動返信の前に、人へ戻す線を決める。
01
草稿に限定する
公開返信ではなく、
担当者が確認する草稿から。
02
差し戻し例を登録
繰り返し、根拠のない専門家らしさ、誘導的な質問、相手の困りごとを無視した定型文。
03
問いを変える
「AIらしいか」ではなく、
「この返信を会社の名前で出せるか」。
TAKEAWAY
正確さの検査に、
会話品質を足す。
返信数を増やす前に、相手の発言へ答えているか、
必要なら人へ戻せるかを確認する。
PROTOCORE
PROTOCORE LAB