登録して招待リンクを共有すると、動画再生報酬と紹介報酬を獲得できます。

検索結果 05【キレてんの
05【キレてんの コミュニティ
1つのキーワードが1つのコミュニティです。
コミュニティ作成
アカウント
見つかりません
05【キレてんの を含む検索結果
ザコシのどうされたんですか?#05【キレてんの#?キレてないですよ】【段取りになったら終わり】 @YouTubeより
クリステ編集部が10:55をお知らせします。 恵比寿は連日の雨模様🌧️ 東京国際映画祭が終幕しましたが、まだ興奮冷めやらぬ編集部。会期中お伝えしきれなかった作品の記事も今後公開予定です。 では、本日もよろしくお願い申し上げます。 #企業公式が朝の挨拶を言い合う#
もっと見る
# ADK 2.0の便利だけど知られていない機能 🌍 標準メトリクスだけでは測れない、自社独自の評価基準でエージェントを採点できたら理想的だと思いませんか? ADK 2.0のカスタム評価メトリクス機能は、Python関数として独自の評価ロジックを定義し、エージェントの品質を自由な基準で測定できる仕組みです。 📌 タイトル:カスタム評価メトリクス (Custom Metrics) 🔗 URL: 🧩 概要 カスタム評価メトリクスは、`EvaluationResult` を返すPython関数として定義します。関数には `eval_metric`(評価メトリクスの定義)、`actual_invocations`(実際のエージェントの応答)、`expected_invocations`(期待される応答)、`conversation_scenario`(会話シナリオ)がパラメータとして渡されます。非同期関数もサポートされており、外部サービスとの連携も可能です。 🛠 使い方 カスタムメトリクス関数を作成し、評価設定JSONに登録します。 ```python from google.adk.evaluation.eval_metrics import EvalStatus from google.adk.evaluation.evaluator import EvaluationResult async def response_length_metric( eval_metric, actual_invocations, expected_invocations, conversation_scenario ) -> EvaluationResult: # 応答の長さが適切か評価 last_response = "".join( part.text for part in actual_invocations[-1].final_response.parts ) score = 1.0 if len(last_response) < 500 else 0.5 return EvaluationResult( overall_score=score, overall_eval_status=( EvalStatus.PASSED if score >= eval_metric.criterion.threshold else EvalStatus.FAILED ), ) ``` 評価設定JSONでは、`criteria`(閾値)と `custom_metrics` の `code_config.name`(関数のインポートパス)を指定して登録します。 ```json { "criteria": { "response_length": {"threshold": 0.8} }, "custom_metrics": { "response_length": { "code_config": {"name": "my_metrics.response_length_metric"} } } } ``` 🏗 本番システムへの組み込み方 ・ドメイン固有の品質基準(正確性、トーン、コンプライアンス等)をメトリクスとして実装する ・CI/CDパイプラインでカスタムメトリクスを自動実行し、品質閾値を下回った場合にデプロイをブロックする ・非同期メトリクスを活用して、外部の評価APIやLLM-as-a-Judgeと連携する ・複数のメトリクスを組み合わせて、エージェントの総合的な品質スコアを算出する 💡 ユースケース 📏 応答の簡潔さや情報密度を独自基準で評価する 🏢 業界規制やコンプライアンス要件への準拠を自動チェックする 🎯 特定のツール呼び出しパターンが期待通りか検証する 🗣 応答のトーンや丁寧さをLLM-as-a-Judgeで自動採点する ⚠️ 注意点 カスタムメトリクス関数内で重い処理を行う場合、評価全体の実行時間に影響します。非同期関数を活用し、必要に応じてタイムアウトを設定してください。また、`code_config` のモジュールパスは評価実行環境からインポート可能である必要があります。 ✨ カスタム評価メトリクスにより、標準メトリクスではカバーしきれない独自の品質基準を体系的に運用できます。自社のユースケースに合わせた評価を構築しましょう。 #ADK# #AIAgent#
もっと見る
『システム障害の対応についてエンジニアの約6割が対応しきれないと回答…その要因には即戦力となる人材不足や体制の問題、過酷な労働時間、下請け構造などが考えられる』 障害から復旧できたことと、無理なく運用を続けられることは違う。PagerDutyの調査では、大企業で障害対応を担う316人のうち、66.2%が現体制では「恒常的に対応しきれていない」か「対応しきれないことがある」と回答した。改善・リファクタリングを後回しにした人は50.3%、再発防止策は40.5%。障害対応を続けるために、次の障害を減らす仕事が止まってしまっている。 この報道への反応を集めたTogetterには、開発後に人を減らして知識が残らない、増員しても必要な経験がない、深夜や休日の対応がつらい、といった声が並ぶ。これらは投稿者の経験や意見であり、調査で原因が証明されたわけではない。ただ、人数や個人の能力だけでなく、知識を引き継ぎ、改善の時間を確保する体制まで考える必要があると感じる。 誰かの頑張りで復旧していると、運用は回っているように見える。その裏で何が後回しになっているかも見たい。作ってリリースする成果と同じように、安定して動かし続けるための仕事を評価できているか。AIで作れるものが増えるなら、なおさら運用まで含めて仕事を設計することが大事だと思う。
もっと見る
今週のメルマガのトピック(1):AIによって「設備投資で勝負するインフラ・ビジネス」に変質したソフトウェアビジネス ——その変化を象徴するのが、Alphabetが2005年の上場以来初めて踏み切った$80 billion(約12兆円)の大型増資です。これまで自社株買いの王者だったGoogleが、なぜ突然、株主が嫌う新株発行に走ったのか。 鍵はAnthropicの爆発的な需要拡大と、xAIのインフラまで借りなければ追いつかない計算資源の不足です。今年に入って、AnthropicはGoogle・Amazonに加えてxAI(SpaceXの一部)にまでcomputeを求めた——つまりGoogleでさえ、自社の出資先であるAnthropicに十分な計算資源を提供しきれなかった、ということです。
もっと見る
#ニューヨーク単独# #虫の息# 観に行かせていただきました!! 初めてのニューヨークさんの単独ライブ、本当に楽しかった😆 漫才もコントも、合間のVTRまで全部が面白すぎて、105分の間ずーっと笑ってました!😂 最後まで怪我なく走りきれますように!😊✨
もっと見る
「#05」【シャインマスカット、まだ間に合います!】岡山県瀬戸内市のふるさと納税で11月23日まで受付中
05~女大,嗯~哼~~我~就~在聊城啊啊,有人~啊啊啊? #女大# #聊城#
05~女大,嗯~哼~~我~就~在镇江啊啊,有人~啊啊啊? #女大# #镇江#
05~女大,嗯~哼~~我~就在黄石啊啊,有人~啊啊啊? #女大# #黄石#