半年後、「XLNet: Generalized autoregressive pretraining for language Understanding」では、従来の言語モデリングの問題を解決するための新しい「自己回帰 + 自己回帰フィルタリング」事前トレーニング手法が提案され、上記の情報をより適切に捕捉してモデルの能力を向上させました。遠距離依存関係に対処します。
Google Brain の創設メンバーである Quoc Le 氏もこれら 2 つの論文の研究に参加しており、Yang Zhilin 氏は Quoc Le 氏を「Google のメンター」と呼んでいます。博士号を取得した後、Facebook 人工知能研究所と Google Brain Research Institute で働きました。人工知能の分野における Google の重要な創設者である楊志林氏に加えて、アルゴリズム研究における楊志林氏の共同研究者には、チューリング賞を受賞した深層学習の 3 人の巨人、ヤン・ルカン氏、そしてヨシュア・ベンジオ氏 (もう 1 人はジェフリー・ヒントン氏) が含まれています。
This page may contain third-party content, which is provided for information purposes only (not representations/warranties) and should not be considered as an endorsement of its views by Gate, nor as financial or professional advice. See Disclaimer for details.
中国と米国のさまざまな AI マスターの指導の下、張一明の注目、評価額 3 億ドル…天才楊志林がついに自分の会社を所有
著者｜油酢
責任編集｜王昭陽
出典丨ピンワン
楊志林は張一明の前に座った。
Toutiao が Toutiao の準備をしていた 2012 年、チャイナ モバイル インターネットは最盛期にあり、若きプロダクト マネージャーの張 Yiming は Facebook で成功を求め、マイクロソフトとスターバックスの米国本社を視察するために何千マイルも旅しました。張一銘はまだ30歳にも満たない若いエンジニアでした。
世界は急速に変化しています。 2023 年の中国では、ChatGPT が台頭しており、モバイル インターネットは枯渇しており、後者は生成 AI によって救出される必要がある古いものであるように思われるとき、もはや ByteDance の前にはいない Zhang Yiming が戻ってきます。北京は再び人々に会い、AI のレッスンを補うために熱心に訪れ、今年 3 月と 4 月に彼が「尋ねた」若い後輩の 1 人が、Circular Intelligence の Yang Zhilin でした。
同じ30歳という年齢です。歴史は常に似ています。
最近、シリコンバレーで非常に影響力のあるテクノロジーメディアであるThe Informationは、「中国のOpenAI」になる可能性があると考えられる5社の候補者を挙げている。これにはMiniMax、Zhipu AI、Light Years Beyond、Lanzhou Technologyが含まれ、もう1社はYang Zhilinらである。は企業であり、彼は直接的には個人です。
誰もが彼の「単独飛行」を楽しみにしているようだと感じさせる。張一銘と連絡を取る前に、楊志林はすでに事業を始める明確な計画を持っていたことがわかります。
この計画は、最近「ダークサイド・オブ・ザ・ムーン」と呼ばれるAIスタートアップ企業の出現とともに正式に発表された。 Sequoia ChinaとZhenFundがAGIに注力するこの企業を支援しており、その時価評価額は約3億ドルであることが明らかになっているが、今回は主要創業者としてYang Zhilin氏が株式の84.92％を保有する。
宝物はすべて楊志林にある。
＃＃ "消える"
楊志林氏に近い関係者は、同氏がAI事業を始めることを決める前の昨年末に2週間「失踪」したことを明らかにした。周囲の人は彼がシリコンバレーに行ったことしか知りませんが、ごく親しい人以外は誰も彼に連絡を取ることができません。
Yang Zhilin 氏のアルゴリズム研究の深さを測るのに使用できる論文は 2 件だけであり、シリコン バレーとの接点も含まれています。
2019 年初めに公開された「Transformer-XL: 固定長コンテキストを超えた注意言語モデル」では、固定長コンテキストを超えた注意言語モデルが提案され、ループ メカニズムと相対位置エンコーディングという 2 つの重要なメカニズムが初めて導入されました。長いテキストを処理する場合、Transformer などの従来の言語モデルでは長さが制限されているため、長距離の依存関係を効果的にキャプチャできないという問題に対処します。
半年後、「XLNet: Generalized autoregressive pretraining for language Understanding」では、従来の言語モデリングの問題を解決するための新しい「自己回帰 + 自己回帰フィルタリング」事前トレーニング手法が提案され、上記の情報をより適切に捕捉してモデルの能力を向上させました。遠距離依存関係に対処します。
この 2 つの論文はディープラーニングの分野に広範な影響力を持ち、Google Scholar での引用の合計は驚くべきことに数万回に達しています。
Google Brain の創設メンバーである Quoc Le 氏もこれら 2 つの論文の研究に参加しており、Yang Zhilin 氏は Quoc Le 氏を「Google のメンター」と呼んでいます。博士号を取得した後、Facebook 人工知能研究所と Google Brain Research Institute で働きました。人工知能の分野における Google の重要な創設者である楊志林氏に加えて、アルゴリズム研究における楊志林氏の共同研究者には、チューリング賞を受賞した深層学習の 3 人の巨人、ヤン・ルカン氏、そしてヨシュア・ベンジオ氏 (もう 1 人はジェフリー・ヒントン氏) が含まれています。
過去には清華大学コンピューターサイエンス学部在学中、中国で最も有名なAI研究者の一人である唐潔教授に師事し、カーネギーメロン大学（CMU）博士課程在学中にはアップルに師事した。 AI研究のリーダー、ルスラン・サラハトディノフ氏とグーグルの主任科学者ウィリアム・コーエン氏。通常6年かかるCMU博士課程を4年かけて修了し、この期間中にICLR、NeurIPS、ICML、ACL、EMNLPなどのトップ学会で20本以上の論文を発表しました。
「彼は天才だ」と彼と定期的に連絡を取り合う関係者は語った。 "非常に賢い。"
シリコンバレーでの前回の経験が依然として循環型知性と関連していたとすれば、今年初めにシリコンバレーから戻った今回は全く異なるものとなった。関係者によると、楊志林氏は「失踪」して戻ってきた、新しい事業を始める予定です。
すべては楊志林に向かっている
「ダーク・サイド・オブ・ザ・ムーン」、これはピンク・フロイドの最も有名なアルバムの一つで、ジャケットは古典的な暗い三角形と虹の分散パターンです。
アルバム1曲目の歌詞には、学生時代にバンドを組んでいたヤン・ジーリンの現在の状況とそっくりな一節がある。
「Look around and select your own ground. (周りを見回して自分の地面を選択してください)」
テクノロジー マーケティング (SalesTech) に焦点を当てたサーキュラー インテリジェンスは、生成 AI によって一変したこの新しい世界では、2023 年には想像力の余地があまりなく、サーキュラー インテリジェンスの評価を超えています。しかし、ループから飛び出したこの新しい起業家物語は、実はまだ古い会社とのつながりを持っています。
例えば、サーキュラー・インテリジェンスの時代に楊志林氏が率いていた十数人からなる技術チームは、全員が前リーダーに従って今回の新会社に入社した。しかし、全月のダークサイドのオフィスの場所は、依然として循環型知性のオフィス空間にあります。
たとえば、Loop Intelligence の元従業員は、ToB 分野におけるすべてのアルゴリズム研究の結果は、他の企業ではなく、Loop Intelligence にのみ注ぎ込まれると明らかにしました。
これはある意味殻を変える話で、リサイクル・スマートビジネスは想像の余地が少なすぎて資金力もあまりありません。 ToB のビジネスは、Yang Zhilin のような頭脳にとって制限が多すぎるため、解放できる場所が必要です。
背後にある資本の役割を含めると、それは完了しなければならない第二の事業のようなものであり、主人公は楊志林でなければなりません。
「流通の話は、もはやより大きな評価額を裏付けるものではない。楊志林を流通から独立させるというのは、昔からの株主や投資家の考えでもある」と前述の関係者はピンワンに語った。
こうした作戦の必要性をさらに高めているのは、何光年も離れたところにある王恵文氏が設立した高額融資だ。中国のOpenAIのコンセプトを大々的に呼びかけた王恵文氏は、光年も離れた自分の会社に10億ドルの資金調達を完了させたが、これは中国の投資家の不安を完全に刺激し、この評価額を高く設定した。生成 AI 起業家精神の波 参照フレーム — 循環型インテリジェンスのフレームよりもはるかに優れた参照フレーム。
今回情報公開の先頭に立ったSequoiaとZhenFundは、自身もCircular Intelligenceの旧株主である。翌年には5,000万米ドルのエンジェル投資が確認された。プロジェクトの初期段階で多くのVCがYang Zhilin氏に連絡を取って参加について話し合おうとしたが、Yang Zhilin氏はこうした金をちりばめた熱烈な友人リクエストさえも通さなかったことがわかっている。
ダークサイド・オブ・ザ・ムーンとサーキュラー・インテリジェント・タイムとの間に関連性がまだあることを示すもう一つの手がかりは、ダークサイド・オブ・ザ・ムーンの創設チームのラインナップにヤン・ジーリンとともに登場した張裕涛氏がサーキュラー社のCTOを辞任していないことである。知的。
4 人の創設チームのうちの他の 2 人は、Zhou Xinyu と Wang Zhen です。前者はYang Zhilin氏やZhang Yutao氏と同じく清華大学コンピュータサイエンス学部出身で、後にMegviiでアルゴリズムの研究を行ったが、Wang Zhen氏は4人の中で唯一清華大学出身ではないが、 4人のうち投資機関での経験があるのは1人だけ。
しかし、影の部分となると、後者3社の中で最も株式保有比率が高い周新宇氏の保有率は10％に過ぎず、筆頭株主の楊志林氏は84.92％を保有している。
明らかに、この投資はすべてヤン・ジーリンのためのものであり、ダークサイド・オブ・ザ・ムーンは彼が完全にコントロールする会社となるだろう。天才が解放され、自分自身を証明する時が来た。