Giải thích về Nguyên lý cực đại Pontryagin so với HJB

Một trạng thái X tiến triển dưới tác động của kiểm soát u, trong khi một mục tiêu kết hợp phần thưởng theo thời gian, giá trị cuối kỳ và có thể cả rủi ro hoặc ràng buộc

Các kiểm soát khả chấp phải chỉ rõ thông tin, tính khả tích, giới hạn trạng thái và việc quyết định sử dụng phản hồi hay vòng hở

Thay đổi mục tiêu hoặc tập khả chấp làm thay đổi cả các điều kiện của nguyên lý cực đại lẫn phương trình HJB

Một Hamilton kiểm soát kết hợp mục tiêu theo thời gian với costate nhân với độ trôi của trạng thái được kiểm soát

Quy ước dấu quyết định Hamilton được cực đại hóa hay cực tiểu hóa, vì vậy quy ước phải được nêu cùng với mục tiêu

Hamilton ở đây là một đối tượng của lý thuyết kiểm soát và không nên nhầm với năng lượng trong cơ học hoặc giá thị trường

Phương trình trạng thái tiến về phía trước từ điều kiện ban đầu dưới tác động của kiểm soát ứng viên

Phương trình costate tiến về phía sau từ điều kiện cuối kỳ và đo giá trị biên của việc làm nhiễu trạng thái

Kiểm soát ứng viên tối ưu hóa Hamilton tại từng điểm, liên kết với cả hai quỹ đạo và mọi ràng buộc đang hoạt động

Một quỹ đạo vi phạm điều kiện cực đại không thể là tối ưu theo các giả định của định lý

Một quỹ đạo thỏa mãn điều kiện đó chưa chắc tối ưu toàn cục; mục tiêu không lồi có thể tạo ra cực trị cục bộ hoặc nhiều ứng viên

Tính lõm, tính lồi, điều kiện xuyên qua và các điều kiện đủ về ràng buộc có thể biến các điều kiện ứng viên thành kết quả đủ trong những bối cảnh đặc biệt

Với rủi ro khuếch tán, biến liên hợp trở thành một quá trình ngẫu nhiên chạy ngược và Hamilton bao gồm mức phơi nhiễm với các cú sốc ngẫu nhiên

Nếu kiểm soát đi vào hệ số khuếch tán không lồi, các hạng biến liên hợp bậc hai có thể cần thiết trong nguyên lý cực đại ngẫu nhiên tổng quát

Bỏ các hạng đó chỉ vì công thức tất định trông quen thuộc có thể cho ra điều kiện bậc nhất sai

HJB là một phương trình phi tuyến cho hàm giá trị trên thời gian và không gian trạng thái, được xây dựng từ phép đệ quy của Bellman

Pontryagin theo dõi một tối ưu ứng viên bằng các phương trình trạng thái và costate, thường rút gọn bài toán PDE thành một hệ bài toán biên

Khi giá trị trơn, costate thường khớp với gradient của giá trị dọc theo quỹ đạo tối ưu, tùy thuộc các quy ước về dấu và tính chính quy

Lựa chọn danh mục, thực hiện tối ưu, tạo lập thị trường, kiểm soát tồn kho và hedge có chi phí có thể được xây dựng theo một trong hai hướng

HJB hỗ trợ các chính sách phản hồi trên các trạng thái; nguyên lý cực đại có thể thuận tiện trong không gian nhiều chiều hoặc với các ràng buộc theo quỹ đạo

Luôn xác minh tính khả chấp, điều kiện biên, điều kiện bậc hai và độ vững trước việc chỉ định sai mô hình hoặc mục tiêu