登録して招待リンクを共有すると、動画再生報酬と紹介報酬を獲得できます。

検索結果 すとぱら
すとぱら コミュニティ
1つのキーワードが1つのコミュニティです。
コミュニティ作成
アカウント
見つかりません
すとぱら を含む検索結果
本日もご来場ありがとうございました🩶 おかむーさんコトスと!いい笑顔☺️ いつも袖で箱一緒に運んでくださりありがとうございます🙇 今日は裏での早着替えでヴェトモンズ着替えさせてくれました! やさむーさんです!🫶 #パラデュール# #ずいずい#
もっと見る
🧮 MoEのルーター、なんとなく学習させていませんか?「ルーター行を専門家行列の主特異方向に揃えるべき」という、数学的に裏づけられた設計原理が提案されました。 タイトル: Redesign Mixture-of-Experts Routers with Manifold Power Iteration URL: 📝 概要 MoEは入力ごとに一部の専門家だけを使う効率的な仕組みで、どの専門家を使うかを決めるのがルーターです。本論文は、ルーターの各行を対応する専門家行列の主特異方向に揃えることで、トークンと専門家の親和性をより良く表現できると主張します。 ❓ 解決する課題 ルーターの各行は「専門家の代理ベクトル」として類似度を計算しますが、その代理ベクトルをどう設計すべきかという原理的な指針がこれまでありませんでした。専門家の情報を代表ベクトルへ凝縮する明確な原則が欠けていたのです。 💡 方法論と提案手法 ・提案手法Manifold Power Iteration(MPI)は「Power-then-Retract(べき乗してから引き戻す)」というパラダイムを採用します ・ルーター重みにべき乗反復を行い、主特異方向へ収束させます ・ノルム制約を課すリトラクション操作で、計算効率と学習の安定性を両立します ・ルーター行が主特異方向へ収束することの理論的な証明も与えています 🎯 ユースケース 大規模MoE-LLMのルーティング設計に、経験則ではなく原理に基づく指針を提供します。専門家の利用効率(特定専門家への偏りなど)を改善したい場面に効きそうです。 📊 実験結果 ・1B〜11BパラメータのスケールにわたってMoEモデルを事前学習し、整合が有効性を高めることを検証しました ・主特異方向への整合により、専門家の活性化判断がより効果的になることを示しています MoEが大規模LLMの標準になりつつある中で、ルーティングの「なぜそう設計するか」に答える基礎的な貢献です。 #MoE# #LLM#
もっと見る
おはようございます🐒 7時3分スタートの梅本まどかです🚗💨 パラパラと雨が降ってきました☔️ じとじとパラパラ、湿度が高そうな1日になりそうです。 オトフケとイケダの2本×2🌟 今日もいつも通りで! 頑張ってきまーす😆🎶
もっと見る
気がついたら、旧交ワーミング茶会後に雨逃避とトイレで入った御茶ノ水の丸善で3時間半本ばかりいた。難しい本ばかり次々パラパラと。いろいろ買いそうになるが財布が地団駄。なんか気取ったような本とか文体が、モノホンにムリに思えてきたのであった。頑張るな、無理すな、ネガティブケイパビリティ大事やろ、みたいな弱っちい精神論の本が増えてる気がした。或いは時代の情勢の要請と強制性で、自分もこれらを手に取ったのかもではある。周回して逡巡した。 で、買ったのは、町田康の訳したらしい『宇治拾遺物語』っちゅう一冊。これだけが嘘がないように思えた。なんやめっちゃおもろい。
もっと見る
Tencentのロボティクスチームが、ロボットに「言葉で考えて、絵で確かめながら動く」能力を持たせる基盤モデル「RxBrain」を発表した(https://arxiv[.]org/abs/2607.14187)。 例えば「メガネを畳んでケースにしまう」というタスクなら、RxBrainは「つるを畳む」「ケースに入れる」と言葉で手順を計画し、それぞれの手順を終えた後の映像がどう見えるはずかを画像として想像しながらタスクを進めていく。 背景には、ロボット向けAIが抱えていた分業の問題がある。視覚言語モデル(VLM、画像を見て言葉で答えを返すAI)は「次に何をすべきか」の説明は得意だが結果の見た目までは示さず、逆に世界モデル(world model、未来の映像を予測するAI)は先の状態を絵で示せてもなぜそうすべきかという理由づけは苦手だった。RxBrainは6.2Bパラメータの単一モデルの中で、この2つの機能をMixture-of-Transformers(データの種類ごとに専門の処理経路を用意しつつ注意機構だけは共有するアーキテクチャ)で統合している。 学習データは実ロボットの操作映像、ハンドヘルドグリッパーでの人の動作、一人称視点の日常動画などから自動構築した5万時間超・2150万セグメント。新設ベンチマークRxBrain-Benchの「言葉と画像を組み合わせた計画」タスクではスコア0.68を記録し、既存のエージェント型手法(BAGEL-7B-MoTが0.50、Qwen-Agentが0.43)を上回った。一方、単純な状況理解を問うタスクでは総合スコア72.7にとどまり、Qwen3.5-4B(78.1)には及ばない。先を見通した計画は得意でも、細かい状況認識はまだ既存モデルに一歩譲るというバランスが見える。 さらに、大規模な行動データでの事前学習なしに実ロボットへ応用した結果も興味深い。食卓の準備・メガネの折りたたみ収納・ゴミ捨ての3タスクで平均成功率87%を達成し、ロボット操作の代表的な基盤モデルπ0.5(82%)やπ0(68%)を上回った。 「言葉で考え、絵で確かめる」というアプローチで、ロボットの計画立案を人間の思考プロセスに近づけようとしている点が面白い。
もっと見る
デルパラ9東浅川店様到着してまーす🙌 本日の対応時間は14:15〜、17:15〜✨ サインご希望の方は5分前にカウンター横にお集まりください❣️ 10名様以上だと抽選になります💁‍♀️ 色紙のご用意ございませんので、サインを書く用の私物をご持参ください✍️ お写真は皆様対応致します😊💫 #pr#
もっと見る
/ 『にじさんじ』とのコラボカフェ第16弾開催決定🎊 \ 10/2(金)より、スイーツパラダイス10店舗にて順次開催! (店舗ごとに開催期間が異なります) 今回は花籠つばささん、皇れおさん、城瀬いすみさん、篠宮ゆのさんの4人が登場!! メニューやグッズの詳細は後日発表します✨ ▼店舗や予約についての詳細は▼ #すぷれあパラダイス ##スイパラ ##にじさんじ#
もっと見る
【暑さが続くので…】 ず ー っ と 見 て い た い 画 像 で す #グレーテルのかまど# 「フルーツパラダイス!台湾のフングイ」 13(月)夜10:00 #Eテレ# ▼番組の情報はこっちを見てください▼ ▼私はこれをずっと見ています▼
もっと見る