AIモデル比較
【逆転】Fable 5とOpus 4.8に画面録画アプリを作らせてみた
「最強で倍額のFable 5と、半額で速いOpus 4.8。結局どっちを使えばいいの？」——前回まったく同じ条件で『マリオカート風ゲームを作って』と投げたときは、倍額のFableが安く速く圧勝しました。ところが今回、同じフェアな条件で別のお題『FocuSee風の画面録画アプリを作って』を両モデルに投げたら、時間もお金も週次枠も、今度は半額のOpus 4.8の勝ちに逆転。なぜ勝者が入れ替わったのか、進め方の違いから実測数字、そして意外なオチまで一部始終を並べて実測しました。
📑 目次
前回の逆が起きた
こまりさんオート博士、前回 Fable 5 と Opus 4.8 にマリオカートを作らせた回、すごかったですよね。
オート博士はい。最強で倍額の Fable 5 のほうが、結果は安くて速くて、見た目まで良かった。あの時は、圧勝でした。
こまりさんだから、難しい制作はもう Fable でいいのかなって思ってました！
オート博士私も、そう思いかけたんです。ところが、です。
こまりさんところが…？
オート博士今回、条件はそっくりそのまま、お題だけ変えて両方に投げました。画面録画アプリを作って、と。そうしたら、結果がひっくり返りました。
こまりさんえっ、倍額の Fable が負けたってことですか！？
オート博士時間もお金も、今度は半額の Opus 4.8 の勝ち。お題が変わっただけで、勝者が入れ替わりました。
こまりさん同じ2つのAIなのに…どっちを信じたらいいんでしょう。
オート博士そこが今日の肝です。今回はそこをレクチャーしようと思います
Fable5とOpus4.8
こまりさんそもそも Fable 5 って、そんなに違うモデルなんですか？
オート博士はい、表にまとめました。ご覧ください。
オート博士Fable 5 は最上位で、常に深く考えてから動きます。賢いぶん、1手が遅い。プログラミングタスクのベンチマークの正答率では、たしかに Fable が上です。
こまりさんでも料金の欄、Fable だけ倍になってません？
オート博士よく気づきましたね。入力も出力も、きっちり Opus の倍。賢い分、やはり高いです。
オート博士ですから今日の問題は、あなたの仕事でその倍額の元が取れるのか、そこなんです。
ずるをしない約束
こまりさんでも、比べるって、どうやってフェアにするんですか？
オート博士勝負の前に、ずるをしない約束を決めておきました。
オート博士指示は296文字、一言一句同じ文をコピーして両方に貼りました。参考の画像も同じ。あとで機械で突き合わせても、一文字も違いません。
こまりさんどこまで出来たら合格、っていうのは？
オート博士それも先に紙に書いておきました。画面を録画できる、クリックした所に自動でズーム、保存できる、綺麗に飾って見せる。この4つが動けば合格です。
こまりさんなるほど…めちゃくちゃ厳密だ
進め方
こまりさんじゃあ、いよいよ両方に同じ指示を出したんですね。
オート博士はい、同時に投げました。動き出しを並べて見てください。
オート博士まず左の Fable。完成までの発言数、ゼロです。
こまりさんえ？ゼロ？一言もですか？
オート博士一言も喋らないまま、最後までひたすら書き続けました。
オート博士逆に右の Opus はよく喋ります。まず計画を立てて、発言17回、私への質問も2回ありました。
オート博士黙って一気に作る Fable と、確かめながら進める Opus。性格が作り方に出ています。
結果:Fable5
オート博士では、出来たアプリを動かしてみましょう。まずはFable 5から確認します。
オート博士こちらが、実際に作成されたアプリの最初の画面です。
オート博士ここで、どの画面を録画するかを選びます
オート博士そして、録画した後の編集画面がこちらです。
オート博士参考にしたアプリと同じで、ズームや、右パネルで細かい調整ができます。
こまりさんさすが最上級モデルですね
オート博士そして、もちろん、mp4でのダウンロードも可能でした。完璧に作ってくれましたね。
結果:Opus4.8
オート博士次にOpusの結果です。
こまりさんこちらはどうでしたか？
オート博士はい、こちらも問題なくできていました。画面のデザインはちょっとAIっぽいですかね。
オート博士録画後の編集画面がこちらです。
オート博士さきほどのFableと同じく、ズームや細かい編集も可能そうです。
オート博士そして書き出し。Opus のほうも動画ファイルの保存まできちんと出せました。
実測で逆転
こまりさん両方できたなら、どっちも優秀ってことですよね？
オート博士作れた、という点ではそうです。手直しも両方2回ずつで、行儀よく並んでいました。
オート博士ただ、時間とお金は並ばなかった。Opus が58分で16ドル、Fable が73分で36ドル。
こまりさんえっ、半額の Opus のほうが、速くて安い！？前回と真逆じゃないですか！
消費したサブスク内の％
オート博士そうなんです。週に使える枠の減り方も Opus 15パーセント、Fable 25パーセント。
オート博士時間もお金も枠も、今回は全部 Opus の勝ちでした。
こまりさん…なんで？なんで前回と逆になっちゃうんですか？
オート博士まず、前回はOpus側ではバグが起きていたが、今回は起きなかった。そして、おそらく今回のアプリ作成の場合はFableで作らせるには簡単すぎた、ということでしょう。
見た目はFable
こまりさんじゃあ、もう文句なしで Opus の勝ちですね！
オート博士と、思いますよね。ところが最後に、どんでん返しがあります。二つのアプリの見た目と作り込みを、並べてみてください。
こまりさんあれ…右のOpusのほうがちょっとAIっぽい？
オート博士そうなんです。この画面以外も Fable のほうが、仕上がりの見栄えは上でした。安さの Opus と、質の Fable。
こまりさん数字で全部勝ったのに、出来はFableが上って…どっちも捨てがたいじゃないですか。
今日のまとめ
オート博士今日のことを整理しましょう。
オート博士同じ2つのAIでも、マリオでは Fable が、録画アプリでは Opus が勝った。決め手は、手数が膨らむのはどっちか、の一点でした。
オート博士そして、安さと出来は別物。コストは Opus、でも見た目はFableが良かったです。
こまりさん最強を1個決めれば済む、じゃないんですね。
オート博士ええ。二回測って、勝者が二回とも違ったんですから。
使い分けと配布
こまりさん結局、わたしはどっちを使えばいいんですか？
オート博士結論から言うと、ふだんの仕事や速さとコスパが要るときは、まず Opus 4.8 で試す。
オート博士最高の作り込みや、腰を据えて設計する難しい仕事は、Fable 5。
こまりさん自分のタスクで測るのが一番、でしたもんね。
オート博士まずはあなたの仕事のひとつで、両方に同じことを頼んで、確かめてみてください。
こまりさんやってみます！
【こまり】のAI駆け込み寺
事業者のための「AIで困りごとを解決する」実演マガジン。オート博士（専門家）×こまりさん（事業者）の対話で、AI活用の全工程を実写ゼロで公開しています。