arXiv:2607.08093:CausalDS — データサイエンスタスクにおける AI エージェントの因果推論を測定する新ベンチマーク
CausalDS は arXiv で発表されたベンチマークで、AI エージェントがデータサイエンスのワークフロー内で因果性と相関性を区別できるかをテストします。自律的な分析エージェントの評価における空白を埋めるものです。標準的なテストは実行ステップの正確さを測るものの、正しい因果推論の能力は測っていませんでした。
6 件 — 🟡 3 重要 , 🟢 3 注目
CausalDS は arXiv で発表されたベンチマークで、AI エージェントがデータサイエンスのワークフロー内で因果性と相関性を区別できるかをテストします。自律的な分析エージェントの評価における空白を埋めるものです。標準的なテストは実行ステップの正確さを測るものの、正しい因果推論の能力は測っていませんでした。
SolarChain-Eval は arXiv で発表されたベンチマークで、実際のシステムの物理的制約を考慮した上で分散型エネルギー市場における経済的 AI エージェントを評価します。エージェントのリスク挙動を検出する言語モデルベースの監査レイヤーを含み、AI エージェントとサイバーフィジカルエネルギーインフラを統合します。
Claude Code v2.1.207 は Anthropic の CLI ツールの新バージョンで、opt-in 変数なしに Amazon Bedrock、Google Vertex AI、Microsoft Foundry 上で「auto mode」を自動的に利用可能にします。このリリースは hook 設定における shell-injection セキュリティ脆弱性を修正し、Bedrock、Vertex、AWS 上の Claude プラットフォームではデフォルトモデルを Claude Opus 4.8 に変更します。
Patient-Centered Conversational AI は arXiv の包括的な技術報告書(本文 36 ページ、付録 129 ページ)で、臨床対話システム構築の複雑さを論じています。臨床推論、患者安全、インタラクションの質を医療 AI アシスタントの三つの相互に絡み合う課題として分析しています。