OpenAIのGPT4oは本当に圧倒的に強いのか？解説してみた

Рет қаралды 10,785

にゃんたのAIチャンネル

Күн бұрын

Пікірлер: 36

@kinpatsumania57 5 ай бұрын

Claude 3.5 Sonnet…いきなり何やらすごいものが出てきましたね…(ボソッ

@aivtuber2866 5 ай бұрын

めちゃ凄そうで撮りたかったのですが外出中で撮れず‥😢

@近藤宏二-f5q 5 ай бұрын

にゃんた様へ本当に技術用語やリテラシーが凄いですね❗ 僕なんかはまだよろよろというスピードでございます。

@aivtuber2866 5 ай бұрын

ありがとうございます！私もわからないことだらけで勉強中ですよ😆 マイペースで頑張りましょう😊

@hassy3001 5 ай бұрын

いつも勉強させて頂いております。 GPT-4oの強みは、マルチモーダル性にあると聞いたことがあります。全てのタスクを、一つのモデルで扱うこと、個々の性能で見ると下がるけれども、総合的性能では向上する。なのであえて、言語モデルに特化したGPT-4も選択できるのかなと思っています。

@aivtuber2866 5 ай бұрын

ありがとうございます！おっしゃるように音声とか画像などを含めて利用したい時はオムニを使ってテキストのみの場合は、GPT4を使うとか使い分けも良いかもしれませんね🤔

@takahironakagawa7730 5 ай бұрын

Gemini1.5proも凄いですが、本当に凄いのはGemini1.5flashだと思います。はっきり言って値段設定がおかしいと思うレベル。しかも、100万トークンまで使えますしね。 APIを使うサービスでは、Gemini1.5flash以外選択肢はないのではと思いますね。

@aivtuber2866 5 ай бұрын

あまり注目されていない？気がしますが flashコスパめちゃくちゃ良いですよね😆

@riho-u5g 5 ай бұрын

プログラミングに関する精度に関しては、GPT4>GPT4oだって言ってる人も結構いる印象がある気がしますねぇ

@aivtuber2866 5 ай бұрын

ありがとうございます！他のコメントでもGPT4の方が良いという方もいたのでここらへんは結構気になりますね🤔

@madeinhokkaido816 5 ай бұрын

4oは嘘をつくのが巧みになっている印象です。Tableauに関して言えば、完全にGPT4>4oですね。一方で、RAGの精度については、4oはかなりのものですね。

@aivtuber2866 5 ай бұрын

ありがとうございます！精度が上がっていくとハルシネーションも巧みになっていくのかもしれませんね･･･笑 GPT4に切り替えて検証はしていませんでしたが確かにタスクによっては最適なものを探すの良さそうですね😲

@brown0101 5 ай бұрын

GeminiはCoTなしなんでしょうか？

@aivtuber2866 5 ай бұрын

画像の評価に関してはCoT無しだと理解してます！

@salmon54561 5 ай бұрын

API経由で使う時は、レスポンスの速さが求められるケースも多いと思います。Groqのモデルが、あまり日本語が得意じゃないということで、4oは性能が高いのに速いので結構アドバンテージがあると思います！

@aivtuber2866 5 ай бұрын

実用性を考えたら速さも重要な評価指標ですよね！読んで理解するスピードより速く出力されている気がするので対話用途ではこれ以上は必要ないかもですが･･･笑

@re-sato4458 5 ай бұрын

今回のGPT-4oは、あくまでマイナーチェンジかなと思います！ Open AIは、わざと競合よりも少しだけ性能をアップさせている印象です笑それでもこの賢さは素晴らしいですし、より実用的です！現在も仕事でガシガシ使っていて、精度がかなり上がっていることを実感しています！ GPT-4oの一番の利点は、何度リクエストを投げても制限がかかりにくくなった点です！実用性の面では圧倒的にGPT-4oですねー。以前、課金してOpusも使っていましたが、GPT-4oの方が👍

@aivtuber2866 5 ай бұрын

確かに今回は、音声対話機能がメインでそのために速度重視にしただけで性能が高いモデルも持ってそうですよね😆 GPT-4o回数制限緩いのもヘビーユーザーにとっては嬉しいですね😊

@takaneABC 5 ай бұрын

88.7％でも86.8％でもいいのですが、誤差の範囲だと思います。ところで、ここまでくるとそろそろLLMの限界まで来ているように思えます。もし、GPT5が出て、性能が92％とかになったら、LLMは限界にきていると解釈できないでしょうか？

@tatami204 5 ай бұрын

言語モデルの比較データは英語でのパフォーマンスですよね？日本語だと結果がかなり違うのではないでしょうか。個人的にはGPT-4oよりもClaude3のほうがはるかに疎通性が高い気がします。

@aivtuber2866 5 ай бұрын

おっしゃるように日本語だと結果が変わってきそうですね！ Claude3の方がユーザーに質問を投げかけてくることが多く対話として意図を伝えやすいように感じますよね～🤔

@goisesan 5 ай бұрын

精度とは違った観点での比較も気になります…！個人的にはGPT4oは丁寧で文章が長くなる傾向があり要領を得てないなと感じることもあるのですが、Gemini1.5proは取捨選択できていて会話しやすくコミュニーケーションが気持ちいいなと感じます。これ精度とは違う論点ですよね？実装方針の違いとかあるのかなあと。たぶん多くのユーザーにとっては数%の精度の違いよりUXが優れてる方を選ぶん気もするんですよね。なんだかよく分からないので解説いただけると非常にありがたいです🙇‍♂️🙇‍♂️🙇‍♂️

@aivtuber2866 5 ай бұрын

ありがとうございます！単純に正しさとは別で、モデル毎に出力する文章の特徴(GPT4oは長い、Opusはユーザーに寄り添うなど？)があったりしますよね！そこらへんは好き嫌いもあるかもですが、 Gemini 1.5 Proも使い込んでみて各モデル解説できたら良さそうですね！🤔