検証: 「AIっぽい」レビューコメントは文体チェックでは見抜けなかった

00:01:04 ・ source: https://zenn.dev/mskbhd/articles/lab-213-no-ai-slop

Transcript

hostenToday we explore whether AI-detection patterns can really catch low-quality code reviews.
guestja今日は、AI検知パターンが本当にコードレビューの品質不足を見抜けるのかについて探ります。
hostenThe author tested no-ai-slop patterns against real review comments and found a surprising gap.
guestja著者がno-ai-slopパターンを実際のレビューコメントに当てると、意外な盲点が見つかりました。
hostenAI-sounding comments with dramatic language scored high, but naturally-written thin comments scored zero.
guestja大げさな言い回しのAIっぽいコメントは検出されましたが、文体は自然で内容が薄いコメントは全く引っかかりませんでした。
hostenThe real problem isn't AI-like wording—it's missing evidence, verification, and decision rationale.
guestja本当の問題はAI文体ではなく、根拠・検証・判断根拠といった判断材料そのものが不足していることです。
hostenThe author recommends combining no-ai-slop's pattern labels with Algomatic's five-item judgment checklist for best results.
guestja著者は、no-ai-slopのパターン命名とAlgomatic式の5項目チェックを組み合わせるのが最も実用的だと提案しています。