Prinsip Maksimum Pontryagin vs HJB Dijelaskan
Bandingkan costate dan maksimisasi Hamiltonian dengan fungsi nilai serta pemrograman dinamis dalam kontrol keuangan deterministik dan stokastik
Jawaban langsung
Prinsip maksimum Pontryagin menggunakan Hamiltonian dan costate mundur untuk memberikan kondisi perlu sepanjang lintasan optimal. HJB mengkarakterisasi nilai di semua state melalui pemrograman dinamis; solusi mulus menghubungkan kedua sudut pandang
Masalah kontrol muncul sebelum salah satu metode
State X berkembang di bawah kontrol u, sementara objektif menggabungkan reward berjalan, nilai terminal, dan mungkin risiko atau kendala
Kontrol admissible harus menetapkan informasi, integrabilitas, batas state, dan apakah keputusan menggunakan feedback atau open loop
Mengubah objektif atau himpunan admissible mengubah kondisi prinsip maksimum maupun persamaan HJB
Hamiltonian menetapkan harga konsekuensi lokal
Hamiltonian kontrol menggabungkan objektif berjalan dengan costate yang dikalikan drift state yang dikendalikan
Konvensi tanda menentukan apakah Hamiltonian dimaksimalkan atau diminimalkan, sehingga konvensinya harus dinyatakan bersama objektif
Hamiltonian di sini adalah objek teori kontrol dan tidak boleh disamakan dengan energi dalam mekanika atau harga pasar
State dan costate membentuk sistem maju-mundur
Persamaan state bergerak maju dari kondisi awal di bawah kontrol kandidat
Persamaan costate bergerak mundur dari kondisi terminal dan mengukur nilai marginal dari gangguan pada state
Kontrol kandidat mengoptimalkan Hamiltonian secara titik demi titik, terhubung ke kedua lintasan dan setiap kendala aktif
Prinsip ini biasanya merupakan uji perlu
Lintasan yang melanggar kondisi maksimum tidak dapat optimal di bawah asumsi teorema
Lintasan yang memenuhinya belum tentu optimal secara global; objektif nonkonveks dapat menghasilkan ekstremum lokal atau beberapa kandidat
Konkavitas, konveksitas, transversalitas, dan kualifikasi kendala dapat mengubah kondisi kandidat menjadi hasil cukup dalam pengaturan khusus
Kontrol stokastik menambahkan keacakan adjoin
Dengan risiko difusi, adjoin menjadi proses stokastik mundur dan Hamiltonian mencakup eksposur terhadap guncangan acak
Jika kontrol masuk ke koefisien difusi nonkonveks, suku adjoin orde kedua mungkin diperlukan dalam prinsip maksimum stokastik umum
Menghilangkan suku tersebut karena rumus deterministik tampak familiar dapat menghasilkan kondisi orde pertama yang salah
HJB menggambarkan setiap state, bukan satu lintasan
HJB adalah persamaan nonlinear untuk fungsi nilai di seluruh waktu dan ruang state, yang dibangun dari rekursi Bellman
Pontryagin mengikuti optimum kandidat dengan persamaan state dan costate, sering kali mengurangi masalah PDE menjadi sistem nilai batas
Ketika nilai mulus, costate sering kali sama dengan gradien nilai sepanjang lintasan optimal, sesuai konvensi tanda dan regularitas
Keuangan menggunakan kedua sudut pandang dengan hati-hati
Pilihan portofolio, eksekusi optimal, market making, kontrol inventaris, dan lindung nilai dengan biaya dapat dirumuskan melalui kedua jalur
HJB mendukung kebijakan feedback atas state; prinsip maksimum dapat nyaman dalam dimensi tinggi atau dengan kendala berbasis lintasan
Selalu verifikasi admissibilitas, kondisi batas, kondisi orde kedua, dan ketangguhan terhadap kesalahan spesifikasi model serta objektif
Pertanyaan umum
Apakah prinsip maksimum Pontryagin cukup untuk optimalitas?
Umumnya prinsip ini memberikan kondisi perlu; konkavitas, konveksitas, dan regularitas tambahan dapat membuatnya cukup dalam masalah tertentu
Apa perbedaan Pontryagin dan HJB?
Pontryagin mempelajari state dan costate sepanjang lintasan kandidat, sedangkan HJB menyelesaikan nilai optimal di seluruh ruang state
Apa itu variabel costate?
Costate adalah variabel adjoin yang mengukur pengaruh marginal objektif dari perubahan state sepanjang optimum kandidat
Di mana prinsip maksimum digunakan dalam keuangan?
Prinsip ini muncul dalam kontrol portofolio, eksekusi, market making, lindung nilai, pilihan konsumsi, dan masalah dengan kendala state atau lintasan