回帰– tag –

スコアは上がった、でも手元は変わらない 新しいAIが出るたびに、ベンチマークで何点向上、と大きく発表されます。それなのに、自分がいつも頼んでいる作業に使うと、前のモデルとの違いがよく分からない。そんなことないですか? 公開スコアは着実に伸びて...

規模は何倍、体感はほんの少し AIの新モデルが出るたびに、計算量やデータ量の桁が大きくなっています。それなのに実際に使うと、前よりは良いけれど、何倍も賢くなった感じまではしない。そんなことないですか? 発表資料に並ぶ巨大な数字と、普段のチャッ...

AIに「この中でどれが一番いい?」と候補を並べてもらうと、きれいに1位、2位、3位…と順位がつきますよね。でも中身を見ると、1位と2位はほとんど差がなさそうなのに、順位だけは妙にきっぱり分かれている。「これ、ほんとに1位と2位で分けていいの?」と引...

仕事でChatGPTに同じような相談を続けていると、昨日はびっくりするくらい使えたのに、今日は同じ頼み方なのに急にポンコツに感じる、ということないですか? 「アップデートでこっそり性能を落とされたのかな」「自分の頼み方が下手になった?」と、つい原...

自信たっぷりの答えが、あとで違っていた ChatGPTに何かを尋ねたら、よどみなく、断言口調で答えが返ってきた。 なるほどと思って、あとで念のため調べたら、その答えが事実と違っていた。 そんな経験、ないですか? 困るのは、間違っていたことそのものよ...

同じ相談なのに空気が変わる ChatGPTに同じ相談をしているのに、聞き方を少し変えただけで返事の温度感まで変わることないですか? たとえば「この文章を直して」と頼むと、無難に整った返事が返ってくる。 でも「この文章を、やわらかく失礼のない感じに直...