SigLIP2に匹敵する画像エンコーダーをフルスクラッチで開発した話
Source: Zenn ·
はじめに Noetraでは、フィジカルAIの実現に向けて、国産マルチモーダルLLMの開発を進めています。その基盤技術の一つとして、本記事では画像エンコーダーをフルスクラッチで構築した取り組みについて紹介します。 近年、国内外の企業・研究機関でマルチモーダルLLMの開発が活発化しています。多くのモデルは、言語モデルを独自開発している一方で、画像エンコーダーにはSigLIP2に代表される、非公開データで学習された高性能なモデルを利用しています。しかし、そのデータや学習過程が分からないままでは、透明性や安全性に関する懸念が残ります。 そこで我々のチームでは、自立した国産マルチモーダルLLM...
Frequently Asked Questions
What is SigLIP2に匹敵する画像エンコーダーをフルスクラッチで開発した話?
SigLIP2に匹敵する画像エンコーダーをフルスクラッチで開発した話 is a article discovery curated from Zenn. はじめに Noetraでは、フィジカルAIの実現に向けて、国産マルチモーダルLLMの開発を進めています。その基盤技術の一つとして、本記事では画像エンコーダーをフルスクラッチで構築した取り組みについて紹介します。 近年、国内外の企業・研究機関でマルチモーダルLLMの開発が活発化しています。多くのモデルは、言語モデルを独自開発している一方で、画像エンコーダーには
How can I access or experience this?
You can experience this content directly on its original host (Zenn) by clicking the "Open Original" button.
Where does this content come from?
Curated from Zenn by the OnSuggest team to surface the most interesting and serendipitous content on the web.
More like this
All Technology discoveries →「今日出す書類、忘れた!」を防ぎたい。セリアのマグネットフレームで冷蔵庫を掲示板に
セリアのマグネットフレームシートを活用して書類の提出忘れを防止する方法をレビューします。視界に入る場所に貼ることで、大切な書類をしっかりキープし日々のうっかりを防ぎます。
最後の一片まできれいにスライス。料理効率がアップするキッチンガジェット
我が家は野菜をよく食べるので、スライサーの出番も多め。でも、何度使っても指先を切りそうで怖いんですよね。結局、野菜が小さくなったら包丁に持ち替えるのがお決まりでした。そんな地味なストレスを減らしてくれたのが、Dreamfarm(ドリームファ…
Quick Shareにバックアップ機能追加。Androidスマホの写真がWindowsに自動保存される幸せ
Quick Shareの自動バックアップ機能によりAndroidスマホの写真がWindowsへ自動保存可能に。Googleフォトの容量を使わずPCストレージへ直接保存できる便利な新機能の仕組みを紹介します。
太陽の“500兆倍”。見逃されてきた宇宙一明るい天体
太陽の500兆倍の明るさを誇る宇宙一明るい天体「J0529-4351」の発見について解説します。40年間見逃されていた超巨大クエーサーの驚きの正体に迫ります。
Boseのオープンイヤー、スポーツ向けは音もデザインもGoodです。悩ましいのはモデル選び
Boseのスポーツ向けオープンイヤー型イヤホンをレビュー。装着感や音質、Ultra Open Earbudsとの違いを解説します。
【12月28日(月)22:00~・無料ウェビナー】なぜ大企業に選ばれないのか?紹介×ナラティブで突破するエンタープライズ営業戦略を解説!!
【12月28日(月)22:00~・無料ウェビナー】なぜ大企業に選ばれないのか?紹介×ナラティブで突破するエンタープライズ営業戦略を解説!!