**編集者: Xiaozhou、Chen Ping**> ラマ研究に参加した14人の著者の多くが去った。今年 2 月、Meta は、パラメータ量が 70 億から 650 億の範囲にある新しい大規模モデル シリーズ、Llama (Large Language Model Meta AI) を「オープンソース」しました。数か月後、Llama 2 のリリースにより大型モデルの商用化が始まり、多くの人が Llama 2 のオープンソースを大型モデルの「Android の瞬間」と表現しました。Llama および Llama 2 シリーズ モデルの優れたパフォーマンスにより、多くの人がこれらを ChatGPT などのより大規模なモデルに代わる無料のオープンソースの代替品とみなしています。 Meta のオープンソース コミュニティへの貢献は誰もが称賛しますが、Llama プロジェクトに携わる一部の科学者やエンジニアにとって、その称賛はあまりにも少なすぎ、遅すぎました。TheInformation によると、内部事情に詳しい関係者らによると、メタ社の別の研究チームがコンピューティングリソースを巡って内部抗争を起こし、暴露で言及された別の情報源がチームの活動を行っていたため、ラマプロジェクトに関わった多くの人が辞任したという。競合モデルに乗りましたが、何らかの理由で放棄されました。これは内部関係者からの暴露にすぎないが、彼らの辞任は、大小のテクノロジー企業が専用のチップを必要とする生成AIのモデルを開発する際に、コンピューティングリソースの不足によって引き起こされる緊張と格闘していることを思い出させるものであり、これらのチップは専用チップではない。無料で提供されます。大手テクノロジー企業はほとんどの企業よりも多くのコンピューティング リソースを持っており、Meta のような一部の企業は AI 研究者を雇用する際にこの事実を重視しています。大企業であってもリソースが限られていることがわかります。この流出はまた、AI人材の需要が急増する中、大手テクノロジー企業がAI人材の維持において直面する課題を浮き彫りにしている。Llama この論文「LLaMA: Open and Efficient Foundation Language Models」は今年の 2 月に出版されました。執筆者は 14 人ですが、現在数名が辞任し、新しいスタートアップ企業に行った人もいますし、起業を始めた人もいます。 用紙のアドレス:辞めた人を見てみましょう。**ゴーティエ イザカード** Gautier Izacard 氏は 2020 年に Meta で働き始め、2023 年 4 月に Meta を退職し、2022 年に設立されたスタートアップ Inflection AI に入社しました。Inflection AI の歴史は長く、共同創設者の 3 人は、元 DeepMind 共同創設者のムスタファ・スレイマン氏、Linkedln 共同創設者のリード・ホフマン氏、元 DeepMind の主任科学者カレン・シモニアン氏です。今年6月、Inflection AIはまた、Microsoft、Nvidia、リード・ホフマン、ビル・ゲイツ、元Google CEOのエリック・シュミットが率いる新たな資金調達ラウンドで13億米ドルを調達したと発表した。 *Inflection AI の 3 人の共同創設者。 ***ティモシー・ラクロワ** Timothee Lacroix は、2015 年に Facebook AI Research Lab に研究エンジニアとして入社しました。 2023年6月にMeta(Facebook)を退職し、フランスのスタートアップMistral AIに最高技術責任者(CTO)として入社した。**アルマンド・ジュラン** アルマンド・ジュランは、2012 年に INRIA と ENS から博士号を取得しました。 2014 年、Armand Joulin は Meta に入社し、研究科学者、上級研究マネージャー、研究ディレクターを歴任しました。 Meta に入社する前は、Armand はスタンフォード大学で博士研究員として、Daphne Koller および Feifei Li と共同研究していました。アルマンド・ジュラン氏は2023年5月にメタを退社する。**ギョーム・ランプル** Guillaume Lample は現在、Mistral AI の共同創設者兼主席科学者です。彼はメタ社で 6 年以上勤務し、今年 3 月に退職しました。メタ社での前職は研究員でした。Guillaume Lample は、カーネギーメロン大学で修士号を取得し、パリ第 6 大学で博士号を取得しています。最後に、今年5月に設立されたスタートアップMistral AIを紹介する。この組織は主に生成 AI モデルの研究開発に焦点を当てており、OpenAI と競合します。共同創設者には、Arthur MENSCH (および CEO)、Guillaume Lample (および主任科学者) が含まれており、Timothee Lacroix が最高技術責任者です。 Techcrunch によると、初のテキストベースの生成人工知能モデルを 2024 年にリリースする予定だという。今年6月、設立からわずか4週間だったMistral AIはシードラウンドで1億1,300万米ドルの資金調達を受けた。以前にもギョーム・ランプルとティモシー・ラクロワを紹介しました。 CEO としての Arthur MENSCH は、以前 DeepMind (現在は Google DeepMind に統合) で 2 年以上勤務し、視覚言語モデル Flamingo の研究に参加していました。 *参考文献:*
Meta はコンピューティング リソースをめぐる激しい内紛にさらされ、多くの Llama 作者が辞任した
編集者: Xiaozhou、Chen Ping
今年 2 月、Meta は、パラメータ量が 70 億から 650 億の範囲にある新しい大規模モデル シリーズ、Llama (Large Language Model Meta AI) を「オープンソース」しました。数か月後、Llama 2 のリリースにより大型モデルの商用化が始まり、多くの人が Llama 2 のオープンソースを大型モデルの「Android の瞬間」と表現しました。
Llama および Llama 2 シリーズ モデルの優れたパフォーマンスにより、多くの人がこれらを ChatGPT などのより大規模なモデルに代わる無料のオープンソースの代替品とみなしています。 Meta のオープンソース コミュニティへの貢献は誰もが称賛しますが、Llama プロジェクトに携わる一部の科学者やエンジニアにとって、その称賛はあまりにも少なすぎ、遅すぎました。
TheInformation によると、内部事情に詳しい関係者らによると、メタ社の別の研究チームがコンピューティングリソースを巡って内部抗争を起こし、暴露で言及された別の情報源がチームの活動を行っていたため、ラマプロジェクトに関わった多くの人が辞任したという。競合モデルに乗りましたが、何らかの理由で放棄されました。
これは内部関係者からの暴露にすぎないが、彼らの辞任は、大小のテクノロジー企業が専用のチップを必要とする生成AIのモデルを開発する際に、コンピューティングリソースの不足によって引き起こされる緊張と格闘していることを思い出させるものであり、これらのチップは専用チップではない。無料で提供されます。大手テクノロジー企業はほとんどの企業よりも多くのコンピューティング リソースを持っており、Meta のような一部の企業は AI 研究者を雇用する際にこの事実を重視しています。
大企業であってもリソースが限られていることがわかります。この流出はまた、AI人材の需要が急増する中、大手テクノロジー企業がAI人材の維持において直面する課題を浮き彫りにしている。
Llama この論文「LLaMA: Open and Efficient Foundation Language Models」は今年の 2 月に出版されました。執筆者は 14 人ですが、現在数名が辞任し、新しいスタートアップ企業に行った人もいますし、起業を始めた人もいます。
辞めた人を見てみましょう。
ゴーティエ イザカード
Inflection AI の歴史は長く、共同創設者の 3 人は、元 DeepMind 共同創設者のムスタファ・スレイマン氏、Linkedln 共同創設者のリード・ホフマン氏、元 DeepMind の主任科学者カレン・シモニアン氏です。今年6月、Inflection AIはまた、Microsoft、Nvidia、リード・ホフマン、ビル・ゲイツ、元Google CEOのエリック・シュミットが率いる新たな資金調達ラウンドで13億米ドルを調達したと発表した。
ティモシー・ラクロワ
アルマンド・ジュラン
ギョーム・ランプル
Guillaume Lample は、カーネギーメロン大学で修士号を取得し、パリ第 6 大学で博士号を取得しています。
最後に、今年5月に設立されたスタートアップMistral AIを紹介する。この組織は主に生成 AI モデルの研究開発に焦点を当てており、OpenAI と競合します。共同創設者には、Arthur MENSCH (および CEO)、Guillaume Lample (および主任科学者) が含まれており、Timothee Lacroix が最高技術責任者です。
以前にもギョーム・ランプルとティモシー・ラクロワを紹介しました。 CEO としての Arthur MENSCH は、以前 DeepMind (現在は Google DeepMind に統合) で 2 年以上勤務し、視覚言語モデル Flamingo の研究に参加していました。