JP6513015B2 - 機械の動作を制御する方法、および機械の動作を反復的に制御する制御システム - Google Patents
機械の動作を制御する方法、および機械の動作を反復的に制御する制御システム Download PDFInfo
- Publication number
- JP6513015B2 JP6513015B2 JP2015218271A JP2015218271A JP6513015B2 JP 6513015 B2 JP6513015 B2 JP 6513015B2 JP 2015218271 A JP2015218271 A JP 2015218271A JP 2015218271 A JP2015218271 A JP 2015218271A JP 6513015 B2 JP6513015 B2 JP 6513015B2
- Authority
- JP
- Japan
- Prior art keywords
- machine
- model
- control
- constraint
- dynamics
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B13/00—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
- G05B13/02—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
- G05B13/04—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators
- G05B13/042—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators in which a parameter or coefficient is automatically adjusted to optimise the performance
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Feedback Control In General (AREA)
- General Engineering & Computer Science (AREA)
Description
本発明のいくつかの実施の形態は、モデルのパラメーターの真の値が不確実であっても、モデルのパラメーターの不確実性が既知の範囲内にあるという認識に基づいている。例えば、列車の質量は、空の列車および一杯に荷を積んだ列車の値の範囲内とすることができる。同様に、モデルのパラメーターの値に対する外乱には、限界が存在するとすることができる。不確実性モデル203は、公称モデルおよび不確実性モデルの組み合わせを用いてMPCの機械の現在のモデルを求めることができるように、モデルの少なくとも1つのパラメーターの可能な値の範囲を表す。
本発明のいくつかの実施の形態は、機械の運動に対する制約が、所定の範囲内のモデルのパラメーターの値の全ての変動について、機械の動作中満たされることを保証するために、状態の実現可能領域
本発明のいくつかの実施の形態では、制御入力に対する制約は、公称モデルおよび不確実性モデルによって規定された機械のモデルのパラメーターの全ての値について、機械の状態を目標値に収束させる安定性制約を含む。1つの実施の形態では、これらの安定性制約は、機械の制御リアプノフ関数を含む。例えば、式(4)のモデルの制御リアプノフ関数(CLF)は、以下の実現可能値低減を満たす関数νである。
1つの実施の形態では、機械の現在のモデル201は、公称モデル202に基づいて初期化される。この初期化では、一対の推定されたシステム行列
本発明のいくつかの実施の形態では、コスト関数モジュール207は、公称コスト関数に基づいて現在のコスト関数209を初期化する。1つの実施の形態では、この公称コスト関数は、多面的であり、相反する目的を有する。例えば、コスト関数は、動作の目的に従って制御入力の第1の値を求める第1の項を含むことができるとともに、機械の現在の状態と、機械のモデルを用いて推定された状態との間の相違を縮小する制御入力の第2の値を求める第2の項を含み、そのため、最適化は、これらの第1の項および第2の項の組み合わせを最適化し、コスト関数を更新することは、この組み合わせにおける第2の項の重みを変化させることを含む。
いくつかの実施の形態では、入力計算208は、以下の式の有限ホライズン数値最適化問題の形を取る。
i)モデル学習フェーズ、例えば、Lt=ψ(Pk)。このフェーズは、予測されたパラメーター誤差共分散行列の情報汎関数を最小化する入力シーケンスを生成することのみに関係する。
ii)制御フェーズ。このフェーズは、機械を起点に調整する入力シーケンスを生成することのみに関係し、例えば、以下の式である。
Claims (15)
- 機械動特性のモデルに従って機械の動作を制御する方法であって、
制御入力に対する制約、および前記機械の状態に対する制約を条件としたコスト関数の最適化に基づいて前記モデルを用いて求められた前記制御入力を用いて、前記機械の前記動作を反復的に制御することを含み、
前記動作は、複数の反復にわたってオンラインで制御され、
各反復は、
以前の反復について求められた以前の制御入力を用いて制御された前記機械の出力の測定結果を用いて、前記機械の現在の状態を求めることと、
前記機械の物理量を表す、前記機械動特性のモデルのパラメーターを更新し、前記現在の状態と、前記機械動特性の前記モデルを用いて推定された状態との間の予測誤差を縮小することと、
前記コスト関数を最適化し、制御入力を生成することと、
前記制御入力を用いて前記機械を制御することと、
を含み、
前記コスト関数は、前記機械の性能に関係する第1の項と、前記機械動特性の前記モデルの前記パラメーターの推定を改善する第2の項を含み、前記第2の項は、前記予測誤差の関数によって重み付けられ、前記第2の項は、前記機械動特性の前記モデルの予測されたパラメーター誤差共分散の情報汎関数を含み、
該方法は、方法を実行する格納された命令がプロセッサにより実行されるとき、前記命令は、前記方法の少なくともいくつかのステップを実行する、機械動特性のモデルに従って機械の動作を制御する方法。 - 前記予測誤差の関数は、非負の非減少関数である、請求項1に記載の方法。
- 前記機械動特性の前記モデルは、前記モデルのパラメーター間の関係を規定する公称モデルと、前記モデルの少なくとも1つのパラメーターの値の範囲を規定する不確実性モデルとを含み、前記機械動特性の前記モデルの前記パラメーターは、前記パラメーターの更新された値が前記値の範囲内になるように更新される、請求項1に記載の方法。
- 前記不確実性モデルは、前記公称モデルおよび前記不確実性モデルの組み合わせが、加法性外乱の凸結合を有する線形モデルの凸結合に含まれるように拡張される、請求項3に記載の方法。
- 前記機械動特性の前記モデルは、前記機械動特性の前記モデルの前記パラメーターが前記線形モデルの凸結合および前記加法性外乱の凸結合内になるように再帰的に更新される、請求項4に記載の方法。
- 前記機械動特性の前記モデルを更新することは、
前記線形モデルの組み合わせベクトルおよび前記加法性外乱の組み合わせベクトルを求めることと、
前記線形モデルの前記組み合わせベクトルを前記線形モデルの前記凸結合に投影することと、
前記加法性外乱の前記組み合わせベクトルを前記加法性外乱の前記凸結合に投影することと、
を含む、請求項4に記載の方法。 - 前記制御入力に対する前記制約は、前記制御入力に対する制御不変制約であって、該制御不変制約を満たす前記制御入力の任意の値が、前記機械の前記動作に対する制約を満たす状態の制御不変部分集合内に前記機械の状態を維持するように選択された前記制御入力に対する制御不変制約を含み、前記制御不変部分集合内の前記機械の任意の状態について、前記制御不変制約を満たすとともに、前記不確実性モデルによって規定された前記範囲内の前記機械動特性の前記モデルの前記パラメーターの全ての値について前記機械の前記状態を前記制御不変部分集合内に維持する、許容可能な制御入力が存在する、請求項3に記載の方法。
- 前記制御入力に対する前記制約は、前記機械の前記動作に対する制約を満たす状態の制御不変部分集合内の任意の状態について、制御不変制約が、前記公称モデルおよび前記不確実性モデルによって規定された前記機械動特性の前記モデルの前記パラメーターの全ての値について前記動作中満たされるような制御入力が存在することを保証する後方到達可能反復によって前記線形モデルの前記凸結合および前記加法性外乱の前記凸結合から求められた前記制御不変制約を含む、請求項4に記載の方法。
- 前記制御入力に対する前記制約は、前記公称モデルおよび前記不確実性モデルによって規定された前記機械動特性の前記モデルの前記パラメーターの全ての値について、前記機械の前記状態を目標値に収束させる安定性制約を含む、請求項7に記載の方法。
- 前記安定性制約は、前記機械の制御リアプノフ関数を含む、請求項9に記載の方法。
- 前記制御リアプノフ関数は、前記制御不変制約を満たす前記機械の全ての状態について実現可能値低減テストを満たす無限ノルム制御リアプノフ関数であり、前記実現可能値低減テストは、
前記無限ノルム制御リアプノフ関数を記述する行列の行を選択することと、
前記制御不変制約を満たす前記機械の少なくとも1つの入力について前記無限ノルム制御リアプノフ関数を記述する前記行列の前記行に対する実現可能値低減を、正の条件および負の条件について満たす前記機械の前記状態の凸成分を求めることと、
前記凸成分の和集合を求めることと、
前記機械の前記状態の前記制御不変部分集合内の前記機械の全ての前記状態が前記凸成分の前記和集合に含まれることを検証することと、
からなる、請求項10に記載の方法。 - 前記最適化は、数値最適化アルゴリズムによって解かれる、請求項1に記載の方法。
- 機械動特性のモデルのパラメーター間の関係を規定する公称モデルと、前記モデルの少なくとも1つのパラメーターの値の範囲を規定する不確実性モデルとを含む前記機械動特性の前記モデルに従って機械の動作を制御する方法であって、
コスト関数の最適化に基づいて前記機械動特性の前記モデルを用いて求められた制御入力を用いて、前記機械の前記動作を反復的に制御すること、
を含み、前記最適化は、前記制御入力に対する制約、および前記機械の状態に対する制約を含む前記機械の前記動作に対する制御不変制約であって、該制御不変制約を満たす前記制御入力の任意の値が、前記機械の前記動作に対する制約を満たす状態の制御不変部分集合内に前記機械の状態を維持するように選択された前記制御入力に対する制御不変制約を条件とし、前記制御不変部分集合内の前記機械の任意の状態について、前記制御不変制約を満たすとともに、前記不確実性モデルによって規定された前記範囲内の前記モデルの前記パラメーターの全ての値について前記機械の前記状態を前記制御不変部分集合内に維持する、許容可能な制御入力が存在し、前記機械動特性の前記モデルの前記パラメーターは、前記機械の物理量を表し、前記動作は、複数の反復にわたってオンラインで制御され、各反復は、
以前の反復について求められた以前の制御入力を用いて制御された前記機械の出力の測定結果を用いて、前記機械の現在の状態を求めることと、
前記パラメーターの更新された値が前記値の範囲内にあるように前記機械動特性のモデルのパラメーターを更新し、前記現在の状態と、前記機械動特性の前記以前のモデルを用いて推定された状態との間の予測誤差を縮小することと、
前記コスト関数を最適化し、制御入力を生成することと、
前記制御入力を用いて前記機械を制御することと、
を含み、
前記コスト関数は、前記機械の性能に関係する第1の項と、前記機械動特性の前記モデルの前記パラメーターの推定を改善する第2の項を含み、前記第2の項は、前記予測誤差の関数によって重み付けられ、前記第2の項は、前記機械動特性の前記モデルの予測されたパラメーター誤差共分散の情報汎関数を含み、
該方法は、方法を実行する格納された命令がプロセッサにより実行されるとき、前記命令は、前記方法の少なくともいくつかのステップを実行する、機械動特性のモデルに従って機械の動作を制御する方法。 - 機械動特性のモデルに従って機械の動作を反復的に制御する制御システムであって、
前記モデルのパラメーター間の関係を規定する公称モデルと、前記モデルの少なくとも1つのパラメーターの値の範囲を規定する不確実性モデルとを含む前記機械の前記モデル、および制御入力に対する制約と前記機械の状態に対する制約を含む前記機械の前記動作に対する前記制約を記憶するメモリと、
少なくとも1つのプロセッサであって、
前記機械の出力の測定結果を用いて、前記機械の現在の状態を求め、
前記機械動特性のモデルのパラメーターを更新し、前記現在の状態と、前記機械動特性の前記モデルを用いて推定された状態との間の予測誤差を縮小し、前記パラメーターの更新された値が前記値の範囲内になるようにし、
コスト関数を最適化して制御入力を生成し、前記コスト関数は、前記機械の性能に関係する第1の項と、前記機械動特性の前記モデルの前記パラメーターの推定を改善する第2の項を含み、前記第2の項は、前記予測誤差の関数によって重み付けられ、前記第2の項は、前記機械動特性の前記モデルの予測されたパラメーター誤差共分散の情報汎関数を含み、
前記制御入力を用いて前記機械を制御する、機械動特性のモデルに従って機械の動作を反復的に制御する制御システム。 - 前記制御入力に対する前記制約は、前記制御入力に対する制御不変制約であって、該制御不変制約を満たす制御入力の任意の値が、前記機械の前記動作に対する制約を満たす状態の制御不変部分集合内に前記機械の状態を維持するように選択された前記制御入力に対する制御不変制約を含み、前記制御不変部分集合内の前記機械の任意の状態について、前記制御不変制約を満たすとともに、前記不確実性モデルによって規定された前記範囲内の前記モデルの前記パラメーターの全ての値について前記機械の前記状態を前記制御不変部分集合内に維持する、許容可能な制御入力が存在する、請求項14に記載の制御システム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US14/552,788 US9983554B2 (en) | 2014-11-25 | 2014-11-25 | Model predictive control with uncertainties |
| US14/552,788 | 2014-11-25 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2016100009A JP2016100009A (ja) | 2016-05-30 |
| JP2016100009A5 JP2016100009A5 (ja) | 2018-10-18 |
| JP6513015B2 true JP6513015B2 (ja) | 2019-05-15 |
Family
ID=56010109
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015218271A Active JP6513015B2 (ja) | 2014-11-25 | 2015-11-06 | 機械の動作を制御する方法、および機械の動作を反復的に制御する制御システム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US9983554B2 (ja) |
| JP (1) | JP6513015B2 (ja) |
Families Citing this family (38)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9625196B2 (en) * | 2014-06-09 | 2017-04-18 | Mitsubishi Electric Research Laboratories, Inc. | System and method for controlling of vapor compression system |
| US9764858B2 (en) * | 2015-01-07 | 2017-09-19 | Mitsubishi Electric Research Laboratories, Inc. | Model predictive control of spacecraft |
| EP3051367B1 (en) * | 2015-01-28 | 2020-11-25 | Honeywell spol s.r.o. | An approach and system for handling constraints for measured disturbances with uncertain preview |
| US10023300B2 (en) * | 2015-06-05 | 2018-07-17 | University Of North Dakota | Systems and methods for intelligent attitude determination and control |
| US20160378078A1 (en) * | 2015-06-29 | 2016-12-29 | Steffen Lamparter | Triggering an Auto-Tuning Function of a PID Controller |
| US10235818B2 (en) * | 2016-05-13 | 2019-03-19 | Ford Global Technologies, Llc | Adaptive vehicle control |
| US10309059B2 (en) * | 2016-09-23 | 2019-06-04 | Honeywell International Inc. | Method of designing model predictive control for cross directional flat sheet manufacturing processes to guarantee temporal robust stability and performance |
| DE102016224207A1 (de) | 2016-12-06 | 2018-06-07 | Siemens Aktiengesellschaft | Verfahren und Steuereinrichtung zum Steuern eines technischen Systems |
| US20180275621A1 (en) | 2017-03-24 | 2018-09-27 | Mitsubishi Electric Research Laboratories, Inc. | Model Predictive Control with Uncertainties |
| EP3404497B1 (en) | 2017-05-15 | 2021-11-10 | Siemens Aktiengesellschaft | A method and system for providing an optimized control of a complex dynamical system |
| US10732586B2 (en) * | 2017-07-12 | 2020-08-04 | X Development Llc | Active disturbance compensation for physically changing systems |
| US20190056702A1 (en) * | 2017-08-21 | 2019-02-21 | General Electric Company | Model-based machine learing control system and method for tuning power production emissions |
| WO2019051435A1 (en) | 2017-09-11 | 2019-03-14 | Schlumberger Technology Corporation | WELL PLANNING SYSTEM |
| US10613490B2 (en) | 2018-02-05 | 2020-04-07 | Mitsubishi Electric Research Laboratories, Inc. | Method and apparatus for preconditioned predictive control |
| US10860002B2 (en) * | 2018-03-19 | 2020-12-08 | Mitsubishi Electric Research Laboratories, Inc. | Receding horizon reference governor |
| US10619879B2 (en) * | 2018-03-21 | 2020-04-14 | Mitsubishi Electric Research Laboratories, Inc. | System and method for controlling operations of air-conditioning system |
| DE102018109785A1 (de) * | 2018-04-24 | 2019-10-24 | Vaillant Gmbh | Prädiktive Regelung einer Wärmepumpe |
| US11321504B2 (en) * | 2018-05-09 | 2022-05-03 | Palo Alto Research Center Incorporated | Learning constitutive equations of physical components with constraints discovery |
| US11106189B2 (en) * | 2019-03-06 | 2021-08-31 | Mitsubishi Electric Research Laboratories, Inc. | System and method for data-driven control of constrained system |
| US10996639B2 (en) * | 2019-03-11 | 2021-05-04 | Mitsubishi Electric Research Laboratories, Inc. | Model predictive control of systems with continuous and discrete elements of operations |
| US12140938B2 (en) | 2019-03-15 | 2024-11-12 | 3M Innovative Properties Company | Manufacturing a product using causal models |
| US20220172139A1 (en) | 2019-03-15 | 2022-06-02 | 3M Innovative Properties Company | Operating a supply chain using causal models |
| CN113597305B (zh) | 2019-03-15 | 2025-03-04 | 舒万诺知识产权公司 | 使用因果模型制造生物药物 |
| US12487566B2 (en) | 2019-03-15 | 2025-12-02 | 3M Innovative Properties Company | Polishing semiconductor wafers using causal models |
| US11366697B2 (en) * | 2019-05-01 | 2022-06-21 | EMC IP Holding Company LLC | Adaptive controller for online adaptation of resource allocation policies for iterative workloads using reinforcement learning |
| US11586474B2 (en) | 2019-06-28 | 2023-02-21 | EMC IP Holding Company LLC | Adaptation of resource allocation for multiple workloads using interference effect of resource allocation of additional workloads on performance |
| US11676064B2 (en) * | 2019-08-16 | 2023-06-13 | Mitsubishi Electric Research Laboratories, Inc. | Constraint adaptor for reinforcement learning control |
| US11327801B2 (en) | 2019-08-29 | 2022-05-10 | EMC IP Holding Company LLC | Initialization of resource allocation for a workload characterized using a regression model |
| KR102231799B1 (ko) * | 2019-10-11 | 2021-03-23 | 서울대학교산학협력단 | 안정화된 비선형 최적 제어 방법 |
| US11868810B2 (en) | 2019-11-15 | 2024-01-09 | EMC IP Holding Company LLC | Resource adaptation using nonlinear relationship between system performance metric and resource usage |
| EP3822999B1 (en) | 2019-11-15 | 2023-10-04 | Hitachi Energy Switzerland AG | Circuit breaking apparatus |
| JP7288868B2 (ja) * | 2020-01-31 | 2023-06-08 | 株式会社日立製作所 | モデル更新装置及び方法並びにプロセス制御システム |
| EP3904972B1 (de) | 2020-04-28 | 2023-09-06 | Siemens Aktiengesellschaft | Verfahren und regeleinrichtung zum regeln eines technischen systems |
| US11334085B2 (en) * | 2020-05-22 | 2022-05-17 | The Regents Of The University Of California | Method to optimize robot motion planning using deep learning |
| US12246699B2 (en) * | 2020-06-26 | 2025-03-11 | Mitsubishi Electric Research Laboratories, Inc. | System and method for data-driven reference generation |
| EP4016404A1 (en) * | 2020-12-16 | 2022-06-22 | Fujitsu Limited | Method and apparatus for generating a control signal to control a device in accordance with a constrained hierarchy |
| US12038727B2 (en) * | 2021-03-29 | 2024-07-16 | Mitsubishi Electric Research Laboratories, Inc. | System for performing a task according to a reference trajectory |
| CN115835253B (zh) * | 2022-11-30 | 2025-08-22 | 西安电子科技大学 | 一种任务关键型控制系统的最优控制感知传输方法 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5659667A (en) | 1995-01-17 | 1997-08-19 | The Regents Of The University Of California Office Of Technology Transfer | Adaptive model predictive process control using neural networks |
| US6826521B1 (en) | 2000-04-06 | 2004-11-30 | Abb Automation Inc. | System and methodology and adaptive, linear model predictive control based on rigorous, nonlinear process model |
| US7797062B2 (en) * | 2001-08-10 | 2010-09-14 | Rockwell Automation Technologies, Inc. | System and method for dynamic multi-objective optimization of machine selection, integration and utilization |
| US7328074B2 (en) * | 2002-12-02 | 2008-02-05 | United Technologies Corporation | Real-time quadratic programming for control of dynamical systems |
| US6882889B2 (en) | 2002-12-02 | 2005-04-19 | United Technologies Corporation | Constrained dynamic inversion control algorithm |
| DE102004058238B4 (de) | 2003-12-03 | 2016-02-04 | Fisher-Rosemount Systems, Inc. | Adaptive, multivariable Prozesssteuerung, die Modellschaltung und Attribut-Interpolation nutzt |
| WO2006021125A1 (en) | 2004-08-27 | 2006-03-02 | Eidgenössische Technische Hochschule Zürich | System for controlling hydroelectric power plants |
| EP1881786B1 (en) | 2005-05-13 | 2017-11-15 | Trustees of Boston University | Fully automated control system for type 1 diabetes |
| US7447554B2 (en) | 2005-08-26 | 2008-11-04 | Cutler Technology Corporation | Adaptive multivariable MPC controller |
| US20070055392A1 (en) | 2005-09-06 | 2007-03-08 | D Amato Fernando J | Method and system for model predictive control of a power plant |
| US7599751B2 (en) | 2006-10-13 | 2009-10-06 | Cutler Technology Corporation | Adaptive multivariable MPC controller with LP constraints |
| US8126575B2 (en) | 2008-03-26 | 2012-02-28 | Fakhruddin T Attarwala | Universal model predictive controller |
| US8032236B2 (en) | 2008-09-30 | 2011-10-04 | Rockwell Automation Technologies, Inc. | Asymetrical process parameter control system and method |
| US20110016610A1 (en) | 2009-07-27 | 2011-01-27 | Steven Wieder | Sweatband with absorbent bamboo inner layer and related method of use |
| JP5569079B2 (ja) * | 2010-03-24 | 2014-08-13 | Jfeスチール株式会社 | オンラインモデル同定を用いたモデル予測制御方法および装置 |
| US8595162B2 (en) * | 2011-08-22 | 2013-11-26 | King Fahd University Of Petroleum And Minerals | Robust controller for nonlinear MIMO systems |
-
2014
- 2014-11-25 US US14/552,788 patent/US9983554B2/en active Active
-
2015
- 2015-11-06 JP JP2015218271A patent/JP6513015B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016100009A (ja) | 2016-05-30 |
| US9983554B2 (en) | 2018-05-29 |
| US20160147203A1 (en) | 2016-05-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6513015B2 (ja) | 機械の動作を制御する方法、および機械の動作を反復的に制御する制御システム | |
| JP6359182B2 (ja) | 機械の動作を制御するための方法およびシステム | |
| Kumar et al. | A workflow for offline model-free robotic reinforcement learning | |
| US20220146993A1 (en) | Machine learning method and machine learning device for learning fault conditions, and fault prediction device and fault prediction system including the machine learning device | |
| Yan et al. | Data-driven load frequency control for stochastic power systems: A deep reinforcement learning method with continuous action search | |
| JP7612727B2 (ja) | 制御方法、およびインストラクションがプログラムされたプロセッサ | |
| CN109690576B (zh) | 在多个机器学习任务上训练机器学习模型 | |
| CN115066695A (zh) | 使用目标特定动作值函数的多目标强化学习 | |
| US9946241B2 (en) | Model predictive control with uncertainties | |
| JP2016100009A5 (ja) | ||
| JP7263980B2 (ja) | 強化学習方法、強化学習プログラム、および強化学習装置 | |
| Radanovic et al. | Learning to collaborate in markov decision processes | |
| CN108427986A (zh) | 一种生产线电机故障预测方法及装置 | |
| JP7090734B2 (ja) | 制御システム、制御方法及び記憶媒体 | |
| CN113597582A (zh) | 使用因果模型调谐pid参数 | |
| US20240013054A1 (en) | Confronting Domain Shift in Trained Neural Networks | |
| JPWO2020121494A1 (ja) | 演算装置、アクション決定方法、及び制御プログラム | |
| JP7579632B2 (ja) | 推定装置、システム及び方法 | |
| Zhou et al. | GenSafe: A generalizable safety enhancer for safe reinforcement learning algorithms based on reduced order Markov decision process model | |
| Borah | Sensor Fault Detection and Isolation in Multi‐Agent Systems | |
| Palunko et al. | Learning near‐optimal broadcasting intervals in decentralized multi‐agent systems using online least‐square policy iteration | |
| CN120380430A (zh) | 用于控制机电系统的方法 | |
| US20200234123A1 (en) | Reinforcement learning method, recording medium, and reinforcement learning apparatus | |
| Tumu et al. | AdaptNC: Adaptive Nonconformity Scores for Uncertainty-Aware Autonomous Systems in Dynamic Environments | |
| Chriat et al. | Distributionally Safe Reinforcement Learning under Model Uncertainty: A Single-Level Approach by Differentiable Convex Programming |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180905 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180905 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180905 |
|
| A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20181203 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181211 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190110 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190312 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190409 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6513015 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |