Generative Pre-trained Transformer 4 Omni (GPT-4o)
開発元 OpenAI
初版 2024年5月13日 (8か月前) (2024-05-13)
前身 GPT-4 Turbo
種別
ライセンス プロプライエタリ
公式サイト openai.com/index/hello-gpt-4o
テンプレートを表示

GPT-4o (GPT-4 Omni) は、OpenAIによって作られた多言語対応かつマルチモーダル（英語版）なGPTである。

2024年5月13日の配信でOpenAIのCTOであるミラ・ムラティによって発表され、その日にリリースされた[1]。

GPT-4oは無料で使用することができるが、制限が存在する。ChatGPT Plusのユーザーは、制限が5倍に緩和される[2]。

GPT-4oはテキスト、画像、音声を入力および生成することが可能である[3]。

APIでは、GPT-4 Turboの半分の価格で2倍の速度で使用できる[1]。

音声入力には最短232ミリ秒で応答でき、平均320ミリ秒で人間の応答時間に近い応答が可能である[4]。

背景

もともと、GPT-4oはLarge Model Systems Organization's (LMSYS) のチャットボットとして、gpt2-chatbot、im-a-good-gpt2-chatbot、im-also-a-good-gpt2-chatbotの3つの異なるモデルとしてひそかにリリースされた[5]。

2024年5月7日には、サム・アルトマンは「im-a-good-gpt2-chatbot」とツイートした。これは、これらのモデルがA/Bテストされている新しいモデルであることの確認として解釈された[6]。

能力

GPT-4oは、音声、多言語、画像認識ベンチマークで最先端の結果を達成し、また音声音声認識と翻訳に関する分野で新記録を樹立した[7][8]。また、GPT-4oは、Massive Multitask Language Understanding（MMLU）ベンチマークで88.7というスコアを取得した。GPT-4は86.5である[9]。

GPT-3.5やGPT-4は、音声認識をする際に異なるモデルを使用している。一方GPT-4oは言語モデルとしてvoice-to-voiceに対応しているため、応答をほぼより速く生成することができる[9]。しかし、サム・アルトマンは2024年5月15日に、GPT-4oのこの機能はまだChatGPTに搭載されていないため、従来の方法が使用されている可能性があるとした[10]。

GPT-4oは50以上の言語に対応していて[1]、これは世界の言語話者の97%以上に及んでいるとOpenAIは主張している[11]。ミラ・ムラティは、2024年5月13日のOpenAIの配信において、モデルにイタリア語を伝え、それを英語とイタリア語に翻訳することで、モデルの多言語能力を実証していた。

さらに、GPT-4oの新しいトークナイザーは、特にラテンアルファベットに基づいていない言語などに使用するトークンが少ないという特徴がある。そのため、それらの言語を使用するときのコストを抑えることができる[9]。

GPT-4oは2023年10月までの学習データを保有している[12][13]。さらに、12万8000 (128k) トークンのコンテキスト長に対応していて、[12] また2048トークンまでを出力できる[13]。

2024年5月現在、カルフォルニア大学バークレー校のLarge Model Systems Organization (LMSYS) イロレーティングベンチマークに含まれている[14]。

音声に関する論争

GPT-4oの声として、Breeze、Cove、Ember、Juniper、Skyを提供した。リリースされた後にこのうちのSkyの声が、 スカーレット・ヨハンソンに似ているとされた。5月14日、エンターテインメント・ウィークリー誌は、この類似点は意図的なものなのかどうかを記述した[15]。2024年5月18日には、ヨハンソンの夫であるColin Jostが、 サタデー・ナイト・ライブでそれに関するジョークを言った[16]。5月20日、OpenAIはSkyを無効にし、「ChatGPT、特にSkyの声をどのように学習したかについて質問をもらった。私たちは、それらに対処しながら、Skyの使用を一時停止している」と声明を出した[17]。

スカーレット・ヨハンソンは、2013年にスパイク・ジョーンズのSF映画「Her」に主演し、女性の声の賢いバーチャルアシスタントであるサマンサを演じた。

GPT-4oのリリースの前のプロモーションの一環として、サム・アルトマンは5月13日に「Her」とをツイートした[18][19]。

OpenAIは、それぞれの声は雇われた声優によるものだと主張し、具体的には、「スカイの声はスカーレット・ヨハンソンの真似ではなく、別のプロの声優が声優自身の自然な話し声を使って作ったものだ」と主張した[17]。OpenAIはすでに2023年9月に、ChatGPTアシスタントの近々登場する新しい会話バージョンはスカーレット・ヨハンソンに似せることを意図したものではないと主張した。

CTOのミラ・ムラティ氏は、その声について分からないので、実際にスカーレット・ヨハンソンの声を聞きに行かなければならなかったと述べた。OpenAIはさらに、ヨハンソンに連絡する前に声優を募集したと主張した[20][19]。

この事件に対して人々は、ヨハンソンが以前、マーベル映画『ブラック・ウィドウ』のストリーミング配信をめぐる契約違反でウォルト・ディズニー社を訴えて和解した経緯との類似点を指摘した。この和解でヨハンソンは4000万ドルほどを手にしたと推測されている[21][22]。

また、5月21日にはワシントンポストのShira Ovide記者がテクノロジー企業による「most bone-headed self-owns」（最も間抜けな自己所有）のリストを発表し、ヨハンソンの不同意にもかかわらずヨハンソンに似た声を採用し、その後類似点を否定した決定は6位にランクされた[20]。5月24日、ポリティコのデレク・ロバートソン氏は「massive backlash（大規模な反発）」について書き、「世界で最も有名な映画スターの一人の声を盗用することは、 AI への過度の依存についての警告となるこの映画に関連しているが、すぐに世論をサム・アルトマン氏の主張に引き戻すのに役立つ可能性は低い」と結論付けた[23]。

関連項目

出典

  1. 1 2 3 Wiggers (2024年5月13日). “OpenAI debuts GPT-4o 'omni' model now powering ChatGPT” (英語). TechCrunch. 2024年5月13日閲覧。
  2. ↑ Field (2024年5月13日). “OpenAI launches new AI model GPT-4o and desktop version of ChatGPT” (英語). CNBC. 2024年5月14日閲覧。
  3. ↑ Claburn. “OpenAI unveils GPT-4o, a fresh multimodal AI flagship model” (英語). The Register. 2024年5月18日閲覧。
  4. ↑ “Hello GPT-4”. OpenAI. 2024年6月8日閲覧。
  5. ↑ Edwards (2024年5月13日). “Before launching, GPT-4o broke records on chatbot leaderboard under a secret name” (英語). Ars Technica. 2024年5月17日閲覧。
  6. ↑ Zeff (2024年5月7日). “Powerful New Chatbot Mysteriously Returns in the Middle of the Night” (英語). Gizmodo. 2024年5月17日閲覧。
  7. ↑ van Rijmenam (13 May 2024). “OpenAI Launched GPT-4o: The Future of AI Interactions Is Here”. The Digital Speaker. 17 May 2024閲覧。
  8. ↑ Daws (2024年5月14日). “GPT-4o delivers human-like AI interaction with text, audio, and vision integration” (英語). AI News. 2024年5月18日閲覧。
  9. 1 2 3 “Hello GPT-4o”. OpenAI. 2024年6月7日閲覧。
  10. ↑ “OpenAI GPT-4o: How to access GPT-4o voice mode; insights from Sam Altman”. The Times of India. (2024年5月16日). ISSN 0971-8257 2024年5月18日閲覧。
  11. ↑ Edwards (2024年5月13日). “Major ChatGPT-4o update allows audio-video talks with an “emotional” AI chatbot” (英語). Ars Technica. 2024年5月17日閲覧。
  12. 1 2 “Models - OpenAI API”. OpenAI. 17 May 2024閲覧。
  13. 1 2 Conway (2024年5月13日). “What is GPT-4o? Everything you need to know about the new OpenAI model that everyone can use for free” (英語). XDA Developers. 2024年5月17日閲覧。
  14. ↑ Franzen (2024年5月13日). “OpenAI announces new free model GPT-4o and ChatGPT for desktop” (英語). VentureBeat. 2024年5月18日閲覧。
  15. ↑ Stenzel (May 14, 2024). “ChatGPT launching talking AI that sounds exactly like Scarlett Johansson in 'Her' — on purpose?” (英語). Entertainment Weekly. 2024年5月21日閲覧。
  16. ↑ Caruso (2024年5月20日). “Scarlett Johansson Says She Was ‘Shocked, Angered and in Disbelief’ After Hearing ChatGPT Voice That Sounds Like Her — Read Statement” (英語). TVLine. 2024年5月21日閲覧。
  17. 1 2 “How the voices for ChatGPT were chosen”. OpenAI (May 19, 2024). 2024年6月7日閲覧。
  18. ↑ “her”. X (formerly Twitter) (May 13, 2024). 2024年5月21日閲覧。
  19. 1 2 Allyn, Bobby (May 20, 2024). “Scarlett Johansson says she is 'shocked, angered' over new ChatGPT voice”. NPR
  20. 1 2 Ovide, Shira (30 May 2024). “Perspective | Exactly how stupid was what OpenAI did to Scarlett Johansson?”. Washington Post
  21. ↑ “Scarlett Johansson took on Disney. Now she’s battling OpenAI over a ChatGPT voice that sounds like hers” (英語). Yahoo Finance (2024年5月21日). 2024年5月21日閲覧。
  22. ↑ Pulver, Andrew (2021年10月1日). “Scarlett Johansson settles Black Widow lawsuit with Disney” (英語). The Guardian. ISSN 0261-3077 2024年5月21日閲覧。
  23. ↑ “Sam Altman’s Scarlett Johansson Blunder Just Made AI a Harder Sell in DC - POLITICO”. 2024年6月7日閲覧。
⌬ Phoenix Mesh CID: 未登録 IPFS未登録 📡 0ピア N=1 CRITICAL PQS B75