PROTOCORE LAB
AI NEWS
01 / 07
AI NEWS / CONVERSATION QUALITY

AI返信は 正しさだけで 評価しない。

slop観察から決める人の確認線

2026.11.14 — ETHAN MOLLICK / X

AIらしい返信の「迷惑なパターン」

NO.1
好奇心を装う質問
OTHER PATTERNS
  • 投稿の繰り返し・言い換え
  • 過剰な知識の演出
  • 本人の立場を装う語り

測定済みの分類ではなく、SNS上で目にしたパターンを示した本人の観察です。

OBSERVATION & TRIAL
10.30

投稿にAIらしい返信が多数付き、
人の返信が見つけにくい。

11.03

5件ほどのコメントをまとめて
Pangramに通し、AIらしい返信を除けた。

いずれも本人の観察と試行。すべてのサービスで有効な検出精度を保証するものではありません。

TWO AXES OF EVALUATION

AI返信の評価を、二つに分ける。

ACCURACY

正確さ

  • 事実
  • リンク
  • 権限の範囲
+
CONVERSATION QUALITY

会話品質

  • 相手の発言に具体的に応じているか
  • 同じ内容を繰り返していないか
  • 根拠のない立場や経験を名乗っていないか

基準は検出器の点数だけでなく、人が差し戻せる例文で作る(編集上の提案)。

BEFORE AUTO-REPLY

自動返信の前に、人へ戻す線を決める。

01

草稿に限定する

公開返信ではなく、
担当者が確認する草稿から。

02

差し戻し例を登録

繰り返し、根拠のない専門家らしさ、誘導的な質問、相手の困りごとを無視した定型文。

03

問いを変える

「AIらしいか」ではなく、
「この返信を会社の名前で出せるか」。

TAKEAWAY
正確さの検査に、 会話品質を足す。

返信数を増やす前に、相手の発言へ答えているか、
必要なら人へ戻せるかを確認する。

PROTOCORE
PROTOCORE LAB