-
設計原理と理論解析Design Principles and Theory
CMA-ES をはじめとする進化計算が「なぜうまく働くのか」を数理的に明らかにし,その理解を新しいアルゴリズムの設計に生かしています.We study mathematically why evolutionary algorithms such as CMA-ES work, and use this understanding to design new algorithms.
情報幾何に基づく CMA-ES の設計原理と収束解析Information-Geometric Foundations of CMA-ES and Their Convergence Analysis / ドリフト解析による進化計算の収束解析Convergence Analysis of Evolutionary Computation via Drift Analysis
-
CMA-ES の改良と拡張Improving and Extending CMA-ES
最新の CMA-ES である dd-CMA-ES をはじめ,高次元の問題,ハイパーパラメータの自動調整,離散変数と連続変数が混在する問題など,CMA-ES が扱える問題の範囲を広げています.Starting from dd-CMA-ES, the latest version of CMA-ES, we broaden the problems CMA-ES can handle, including high-dimensional problems, automatic hyperparameter adaptation, and problems with mixed discrete and continuous variables.
高次元最適化のための CMA-ES の高速化Accelerating CMA-ES for High-Dimensional Optimization / CMA-ES の集団サイズ適応と学習率適応Population Size Adaptation and Learning Rate Adaptation for CMA-ES / カテゴリ変数と連続変数が混在する問題の最適化Optimization of Mixed Categorical-Continuous Variables
-
最悪ケース・リスク・二段階の最適化Worst-Case, Risk-Aware, and Bilevel Optimization
シミュレーションのモデル誤差や環境の不確かさがあっても性能が保証される解を求める最悪ケース最適化やリスクを考慮した最適化と,上位の決定が下位の最適化の結果を通して評価される二段階の最適化を,ブラックボックスの設定で研究しています.We study, in black-box settings, worst-case and risk-aware optimization for solutions whose performance is guaranteed despite simulation model errors and environmental uncertainty, and bilevel optimization in which an upper-level decision is evaluated through the outcome of a lower-level optimization.
シミュレーションベース最適化においてモデルの不確実性を考慮したロバスト解探査Robust Solution Search under Model Uncertainty in Simulation-Based Optimization / ブラックボックス二段階最適化Black-Box Bilevel Optimization
-
二段階強化学習Bilevel Reinforcement Learning
上位の設計者がインセンティブや環境を決め,それに応じて学習する下位のエージェントの振る舞いを通して設計の良し悪しを評価する問題を扱います.下位のエージェントの学習過程は設計者から見ればブラックボックスであり,少ない試行で設計を改善する方法を研究しています.We study problems in which an upper-level designer sets incentives or environments, and the quality of the design is judged through the behavior of a lower-level agent that learns in response. The agent's learning process is a black box to the designer, and we develop methods that improve the design with few trials.
二段階強化学習によるインセンティブや環境の設計Designing Incentives and Environments via Bilevel Reinforcement Learning
-
人の選好からの学習とアラインメントLearning from Human Preferences and Alignment
大規模言語モデルを人の好みや安全性の要求に合わせる,人の選好からの強化学習(RLHF)とアラインメントの方法を研究しています.人の評価や選好データもまたブラックボックスであり,制約を守りながら選好に合わせる方法や,選好データの偏りや攻撃に対する弱さを分析しています.We study reinforcement learning from human feedback (RLHF) and alignment methods that make large language models follow human preferences and safety requirements. Human evaluations and preference data are also black boxes; we work on aligning models to preferences while respecting constraints, and on analyzing their vulnerability to biases and attacks in preference data.
大規模言語モデルのアラインメントAlignment of Large Language Models
-
信頼できる強化学習Reliable Reinforcement Learning
実世界で強化学習を使うために,学習から実際の運用までを通して安全性の制約を守る方法や,シミュレータと実環境の違いに対して最悪ケースでも性能を保つ方法を研究しています.Toward real-world use of reinforcement learning, we develop methods that satisfy safety constraints throughout, from learning to deployment, and methods that keep worst-case performance under discrepancies between simulators and real environments.
学習から運用まで安全な強化学習Safe Reinforcement Learning from Training to Deployment / シミュレータの不確かさを考慮した方策最適化Policy Optimization under Simulator Uncertainty
-
応用事例と共同研究Applications and Collaborations
国内外の大学や企業と共同で,船舶の自動運航,クローキングデバイスや構造のトポロジー最適化,CO₂ 地中貯留,データ分析など,さまざまな応用に私達の最適化技術を用いています.Together with universities and companies in Japan and abroad, we apply our optimization techniques to a range of applications, including autonomous ship navigation, topology optimization of cloaking devices and structures, CO₂ geological storage, and data analysis.
船舶の自動着桟・離桟と操縦運動モデルの同定(大阪大学 牧研究室)Autonomous Berthing and Unberthing of Ships and Identification of Maneuvering Models (Maki Lab, The University of Osaka) / クローキングデバイスのトポロジー最適化(信州大学 藤井研究室)Topology Optimization of Cloaking Devices (Fujii Lab, Shinshu University) / 構造のトポロジー最適化(本田技術研究所)Structural Topology Optimization (Honda R&D) / CO₂ 地中貯留の坑井配置の最適化(大成建設)Well Placement Optimization for CO₂ Geological Storage (Taisei Corporation) / PU 学習のための特徴量選択(日本総合研究所)Feature Selection for PU Learning (The Japan Research Institute) / 基礎研究での共同研究と学術指導Collaborations in Fundamental Research and Academic Consulting
-
これまでの研究Past Research
現在は主なテーマではありませんが,これまでに取り組んできた研究です.ニューラルネットワークの構造探索,深層生成モデルによる制約付き最適化,シミュレーション精度の自動選択を紹介します.These are topics we have worked on in the past, though they are not our main focus at present, including neural architecture search, constrained optimization with deep generative models, and automated selection of simulation fidelity.
One-shot Neural Architecture SearchOne-shot Neural Architecture Search / 明示的/非明示的な制約を持つ最適化のための深層生成モデルによる設計変数の構築Designing Decision Variables with Deep Generative Models for Optimization with Explicit and Implicit Constraints / ランク相関係数に基づくシミュレーション精度の自動選択Automated Simulation Fidelity Selection Based on Rank Correlation Coefficients