AIスロップのセルフチェック
原題: Testing Oneself for AI Slop
日本語訳
# タイトル
AIスロップの自己診断
# 本文
Hackadayライターのフィードには、多くの驚きや、時にはゴミのような記事、そしてもちろん皆様にお届けすべきダイヤモンドのような素晴らしい記事が混ざっています。時には、Hackaday自体の記事ではないものの、興味深い読み物として目に留まるページがあります。今日見つけたのは、それ自体が記事というわけではありませんが、新たな物語のきっかけとなるような例でした。
それは、AIによる「スロップ(低品質な生成物)」作成作業を、いかにもスロップらしく見せないようにするためのAIスキルです。そこにはスロップ特有の振る舞いのリストが含まれているため、当然ながら自分自身をテストしてみずにはいられませんでした。いわば、アーカイブを掘り下げてみるわけです。では、あなたの執筆スタイルはどれくらいスロップっぽいでしょうか?
まずは定番の「Delve(深く掘り下げる)」から。おっと、これはHackadayのコーパス(文章群)の中でかなり頻出しています。初出は2016年。次に風景に関する用語ですが、そこでもまた「Sphere(領域)」が目に留まりました。これも2016年。では「Testament(証言)」はどうでしょう? これは2017年の言葉です。「Pivotal(極めて重要な)」は? Raspberry Piが登場した4年前の2016年にあります。「Showcase(披露する)」は? はい、2019年にあります。一方「Foster(育む)」は2017年に遡ります。
次は「Leverage(活用する)」と「Utilise(利用する)」です。ここは安全圏です。編集者には「Pet Peeves(個人的に嫌うもの)」と呼ばれる、見ただけでイラッとする言語的な癖がありますが、これら2つの残念なビジネス用語は、決して赤ペンを逃れることはありません。あなたが探すべき言葉は「Use(使う)」です。
そのページは、さらに多くの「兆候(tells)」となる言葉を挙げています。皆さんの楽しみのためにそれらを解剖し続けることもできますが、LLM以前のHackadayの文章を見れば、メッセージは伝わっていることでしょう。さらに興味深いのは段落構成についての記述で、そこにも見覚えのある兆候があります。スタッカートのような短い段落、インパクトを与えるための1行ずつの積み重ね、そして文頭の単語の繰り返しです。AIスロップがビジネス・インフルエンサーのLinkedInの投稿のように聞こえるのか、あるいはその逆なのかは、誰にも分かりません。それから、そう、Hackadayはエムダッシュ(—)を使います。文句を言わないでください。
自分の過去の執筆スタイルを軽くからかうのは楽しいものですが、もしそこに真面目な教訓があるとするならば、それは「スロップを見抜くことは、チェックリストにあるような兆候を探すことほど簡単ではない」ということです。実際には、単にプロレベルの言語運用能力を見ているだけかもしれないからです。結局のところ、Hackadayの文章がそのコーパスに含まれている以上、LLMは我々の仲間のように書くことさえ、それなりにこなせてしまいます。おそらく鍵となるのは、あの記事にあります。偽のHackaday記事が露呈したのは、本物の記事にある「推論(行間を読む力)」が欠けていたからなのです。
原文(英語)を表示
The feed of a Hackaday writer brings many surprises, some rubbish, and the occasional diamond which of course we bring to you. Sometimes a page catches the eye that’s not a Hackaday piece per se, but makes for interesting reading. Today there was an example which provides a catalyst for a story if not being one itself.
It’s an AI skill intended to make a slop-writing operation look less sloppy, and since it contains a list of slop behaviours, of course it’s irresistible to turn it on yourself. To delve into the archives, if you will. So here goes, how slop-like is your scribe?
It kicks off with the old favourite, “Delve“. Oh dear, that one’s in the List Hackaday corpus quite a bit. Earliest appearance: 2016. Then landscape terms, in which it’s easy to recognise “Sphere” again. Oops. 2016 again. How about “Testament“? Well, that one’s a 2017 word. “Pivotal“? Four years of the Raspberry Pi, back in 2016. How about “Showcase“? Yup, it’s there, in 2019. Meanwhile “Foster“, goes back to 2017.
Next up are “Leverage” and “Utilise“. Safe ground here. Editors have what are referred to a “Pet Peeves”, language tics that annoy them on sight, and those two regrettable pieces of business-speak never evade this red pencil. The word you are looking for is “Use”.
The page goes on to name a load more words as tells, and we could continue to dissect them for your amusement, but we think you get the message from long-pre-LLM Hackaday. It gets more interesting when it talks about paragraph structure, and there are the things we’d recognise as tells. Staccato paragraphs, one-line stacks for impact, and repeated sentence start words. Whether AI slop is sounding like a business influencer’s Linkedin posts, or the other way round, is anybody’s guess. And yes, Hackaday does use em-dashes — get over it.
It’s amusing to poke mild fun at your past writing style, but if there’s a serious point in there it’s that spotting slop is never as easy as having a check-box list of tells when in fact you’re just looking at professional-grade command of the language. After all, given that Hackaday is in its corpus, the LLM can even make a passable effort at writing like one of us. Perhaps the key lies in that article, when the fake Hackaday piece became obvious because it lacked the inference of the real one.