Two parameter optimal stopping and bi-Markov processes. (English) Zbl 0551.60045
In this paper, the optimal stopping problem is solved for particular two- parameter processes, here called bi-Markov processes. A subsequent potential theory is developed with respect to a pair of one-parameter semi-groups. We introduce a new notion of harmonicity for two-variable functions and we interpret it in the framework of the theory of bi-Markov processes.
MSC:
| 60G40 | Stopping times; optimal stopping problems; gambling theory |
| 60G60 | Random fields |
| 60J45 | Probabilistic potential theory |
References:
| [1] | Bakry, D., Théorèmes de section et de projection pour processus à deux indices, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 55, 51-71 (1981) · Zbl 0431.60057 |
| [2] | Bakry, D.; Korezlioglu, H.; Mazziotto, G.; Szpirglas, J., Limites quadrantales des martingales, Processus aléatoires à deux indices, 40-49 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0461.60065 |
| [3] | Baxter, J. R.; Chacon, R. V., Compactness of stopping times, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 40, 169-181 (1981) · Zbl 0349.60048 |
| [4] | Bensoussan, A.; Lions, J. L., Applications des inéquations variationnelles au contrôle stochastique (1978), Paris: Dunod, Paris · Zbl 0411.49002 |
| [5] | Bismut, J. M., Contrôle de processus alternants et applications, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 47, 241-288 (1979) · Zbl 0381.60033 |
| [6] | Bismut, J. M., Temps d’arrêt optimal, quasi-temps d’arrêt et retournement du temps, Ann. Probability, 7-6, 933-964 (1979) · Zbl 0432.60052 |
| [7] | Bismut, J. M.; Skalli, B., Temps d’arrêt optimal, théorie générale des processus et processus de Markov, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 39, 301-313 (1979) · Zbl 0342.60036 |
| [8] | Blumenthal, R. M.; Getoor, R. K., Markov processes and potential theory (1968), New York: Academic Press, New York · Zbl 0169.49204 |
| [9] | Bourbaki, N., Espaces vectoriels topologiques (1971), Paris: Hermann, Paris · Zbl 0042.35302 |
| [10] | Brezis, H.; Evans, L. C., A variational inequality approach to the Bellmann-Dirichlet equation for two elliptic operators, Arch. Rational Mech. Anal., 71, 1-14 (1979) · Zbl 0447.49022 |
| [11] | Brossard, J.; Chevalier, L., Calcul stochastique et inégalités de normes pour les martingales bi-Browniennes. Applications aux fonctions bi-harmoniques, Ann. Inst. Fourier (Grenoble), 30-4, 97-120 (1981) · Zbl 0427.60060 |
| [12] | Cairoli, R., Produits de semi-groupes de transition et produits de processus, Publ. Inst. Statist. Univ. Paris, 15, 311-384 (1966) · Zbl 0161.14603 |
| [13] | Cairoli, R., Une représentation intégrale pour fonctions séparément excessives, Ann. Inst. Fourier (Grenoble), 18-1, 317-338 (1968) · Zbl 0165.52601 |
| [14] | Cairoli, R., Enveloppe de Snell d’un processus à paramètre bidimensionnel, Ann. Inst. Henri Poincaré, 18-1, 47-54 (1982) · Zbl 0482.60041 |
| [15] | Cairoli, R.; Walsh, J. B., Stochastic integrals in the plane, Acta Mathematica, 134, 11-183 (1975) · Zbl 0334.60026 |
| [16] | Cairoli, R.; Gabriel, J. P.; Dellacherie, C.; Meyer, P. A.; Weil, M., Arrêt de certaines suites multiples de variables aléatoires indépendantes, Séminaire de Probabilités XIII, 174-198 (1979), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0417.60057 |
| [17] | Cairoli, R., Ledoux, M.: Une topologie fine associée au produit de deux processus markoviens. Preprint · Zbl 0557.60057 |
| [18] | Carnal, E.: Processus markoviens à plusieurs paramètres. Thèse Ecole Polytechnique Fédérale de Lausanne (1979) |
| [19] | Dalang, R.C.: Sur l’arrêt optimal de processus à temps multidimensionnel continu. Preprint · Zbl 0537.60035 |
| [20] | Dellacherie, C.; Meyer, P. A., Probabilités et potentiel. Tome 1 (1975), Paris: Hermann, Paris · Zbl 0323.60039 |
| [21] | Dozzi, M., Propriétés markoviennes de processus sur ℝ^2, Ann. Inst. Henri Poincaré, 19-2, 209-221 (1983) · Zbl 0522.60076 |
| [22] | Dynkin, E. B., Harmonic functions associated with several Markov processes, Advances in Applied Mathematics, 2, 260-283 (1981) · Zbl 0479.60057 |
| [23] | Edgar, G. A.; Millet, A.; Sucheston, L.; Chao, J. A.; Woyczynski, W. A., On compactness and optimality of stopping times, Martingale Theory in Harmonic Analysis and Banach Spaces, 36-61 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0496.60039 |
| [24] | El Karoui, N.; Hennequin, P. L., Les aspects probabilistes du contrôle stochastique, Ecole d’Eté de Probabilités de Saint-Flour IX-1979, 74-239 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0472.60002 |
| [25] | Ghoussoub, N.; Azéma, J.; Yor, M., An integral representation of randomized probabilities and its applications, Séminaire de Probabilités XVI, 519-543 (1982), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0493.60005 |
| [26] | Haggstrom, G. W., Optimal stopping and experimental design, Ann. Math. Stat., 37, 7-20 (1966) · Zbl 0202.49201 |
| [27] | Korezlioglu, H.; Lefort, P.; Mazziotto, G.; Korezlioglu, H.; Mazziotto, G.; Szpirglas, J., Une propriété markovienne et diffusions associées, Processus aléatoires à deux indices, 245-274 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0456.60073 |
| [28] | Krengel, U.; Sucheston, L., Stopping rules and tactics for processes indexed by directed sets, J. Multivariate Anal., 11, 199-229 (1981) · Zbl 0461.60059 |
| [29] | Kurtz, T. G., The optional sampling theorem for martingales indexed by a directed set, Ann. Probability, 8, 675-681 (1980) · Zbl 0442.60045 |
| [30] | Jacod, J., Calcul stochastique et problème de martingales, Lecture Notes in Mathematics 714 (1979), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0414.60053 |
| [31] | Lawler, G. F.; Vanderbei, R. J., Markov strategies for optimal control problems indexed by a partially ordered set, Ann. Probability, 11, 642-647 (1983) · Zbl 0519.60042 |
| [32] | Lions, P. L.; Menaldi, J. L., Optimal control of stochastic integrals and Hamilton-Jacobi-Bellman equations, SIAM J. Control and Optimization, 20, 58-95 (1982) · Zbl 0478.93069 |
| [33] | Lions, P. L., Optimal control of diffusion processes and Hamilton-Jacobi-Bellman equations, Non-linear PDE and their applications, Collège de France Seminar V (1983), London: Pittman, London · Zbl 0716.49023 |
| [34] | Mandelbaum, A.; Vanderbei, R. J., Optimal stopping and supermartingales over partially ordered sets, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 57, 253-264 (1981) · Zbl 0445.60036 |
| [35] | Mazziotto, G., Arrêt optimal d’un bi-Markov et fonctions harmoniques, C.R. Acad. Sci. Paris, 295, 173-176 (1982) · Zbl 0501.60053 |
| [36] | Mazziotto, G.; Kohlmann, M.; Christopeit, N., Sur l’arrêt optimal de processus à deux indices réels, Stochastic Differential Systems, 320-328 (1982), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0507.60037 |
| [37] | Mazziotto, G.; Korezlioglu, H.; Mazziotto, G.; Szpirglas, J., Optimal stopping of bi-Markov processes, Filtering and Control of Random Processes, 172-205 (1984), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0527.00042 |
| [38] | Mazziotto, G.; Szpirglas, J., Arrêt optimal sur le plan, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 62, 215-233 (1983) · Zbl 0488.60057 |
| [39] | Mertens, J. F., Théorie des processus stochastiques généraux, applications aux surmartingales, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 22, 45-68 (1972) · Zbl 0236.60033 |
| [40] | Merzbach, E., Stopping for two-dimensional stochastic processes, Stochastic Processes and Their Applications, 10, 49-63 (1980) · Zbl 0428.60050 |
| [41] | Meyer, P. A., Processus de Markov, Lecture Notes in Mathematics 26 (1967), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0189.51403 |
| [42] | Meyer, P. A.; Badrikian, A.; Hennequin, P. L., Transformation des processus de Markov, Ecole d’Eté de Probabilités de Saint-Flour III-1973, 2-36 (1974), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0401.60067 |
| [43] | Meyer, P. A.; Dellacherie, C.; Meyer, P. A.; Weil, M., Convergence faible et compacité des temps d’arrêt d’après Baxter et Chacon, Séminaire de Probabilités XII, 411-423 (1978), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0378.60022 |
| [44] | Meyer, P. A.; Korezlioglu, H.; Mazziotto, G.; Szpirglas, J., Théorie élémentaire des processus à deux indices, Processus aléatoires à deux indices, 1-39 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0461.60072 |
| [45] | Millet, A., On randomized tactics and optimal stopping in the plane, C.R. Acad. Scie. Paris, 295, 587-590 (1982) · Zbl 0509.60040 |
| [46] | Millet, A.; Sucheston, L., Convergence and regularity of multiparameter amarts and martingales, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 56, 21-45 (1981) · Zbl 0438.60042 |
| [47] | Nisio, M.; Maruyama, G.; Prokhorov, J. V., Some remarks on stochastic optimal control, Third Japan-USSR Symposium, 446-460 (1976), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York |
| [48] | Nualart, D.; Sanz, M., A Markov property for two-parameter gaussian processes, Stochastica, 3-1, 1-16 (1979) · Zbl 0417.60084 |
| [49] | Shiryayev, A. N., Optimal stopping rules (1979), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York |
| [50] | Stroock, D. W.; Varadhan, S. R.S., Multidimensional diffusion processes (1979), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0426.60069 |
| [51] | Vanderbei, R. J., Towards a stochastic calculus for several Markov processes, Advances in Applied Mathematics, 4, 125-144 (1983) · Zbl 0519.60077 |
| [52] | Walsh, J. B.; Korezlioglu, H.; Mazziotto, G.; Szpirglas, J., Optional increasing paths, Processes aléatoires à deux indices, 172-201 (1981), Berlin-Heidelberg-New York: Springer, Berlin-Heidelberg-New York · Zbl 0456.60051 |
| [53] | Wong, E.; Zakai, M., Martingales and stochastic integrals for processes with a multidimensional parameter, Z. Wahrscheinlichkeitstheorie verw. Gebiete, 29, 109-122 (1974) · Zbl 0282.60030 |
This reference list is based on information provided by the publisher or from digital mathematics libraries. Its items are heuristically matched to zbMATH identifiers and may contain data conversion errors. In some cases that data have been complemented/enhanced by data from zbMATH Open. This attempts to reflect the references listed in the original paper as accurately as possible without claiming completeness or a perfect matching.
