Summary
In this paper, the optimal stopping problem is solved for particular two-parameter processes, here called bi-Markov processes. A subsequent potential theory is developed with respect to a pair of one-parameter semi-groups. We introduce a new notion of harmonicity for two-variable functions and we interpret it in the framework of the theory of bi-Markov processes.
Article PDF
Similar content being viewed by others
Avoid common mistakes on your manuscript.
References
Bakry, D.: Théorèmes de section et de projection pour processus à deux indices. Z. Wahrscheinlichkeitstheorie verw. Gebiete 55, 51–71 (1981)
Bakry, D.: Limites quadrantales des martingales. In: Processus aléatoires à deux indices, ed. H. Korezlioglu, G. Mazziotto, J. Szpirglas, 40–49. Lecture Notes in Mathematics 863. Berlin-Heidelberg-New York: Springer 1981
Baxter, J.R., Chacon, R.V.: Compactness of stopping times. Z. Wahrscheinlichkeitstheorie verw. Gebiete 40, 169–181 (1981)
Bensoussan, A., Lions, J.L.: Applications des inéquations variationnelles au contrôle stochastique. Paris: Dunod 1978
Bismut, J.M.: Contrôle de processus alternants et applications. Z. Wahrscheinlichkeitstheorie verw. Gebiete 47, 241–288 (1979)
Bismut, J.M.: Temps d'arrêt optimal, quasi-temps d'arrêt et retournement du temps. Ann. Probability 7–6, 933–964 (1979)
Bismut, J.M., Skalli, B.: Temps d'arrêt optimal, théorie générale des processus et processus de Markov. Z. Wahrscheinlichkeitstheorie verw. Gebiete 39, 301–313 (1979)
Blumenthal, R.M., Getoor, R.K.: Markov processes and potential theory. New York: Academic Press 1968
Bourbaki, N.: Espaces vectoriels topologiques. Paris: Hermann 1971
Brezis, H., Evans, L.C.: A variational inequality approach to the Bellmann-Dirichlet equation for two elliptic operators. Arch. Rational Mech. Anal. 71, 1–14 (1979)
Brossard, J., Chevalier, L.: Calcul stochastique et inégalités de normes pour les martingales bi-Browniennes. Applications aux fonctions bi-harmoniques. Ann. Inst. Fourier (Grenoble) 30-4, 97–120 (1981)
Cairoli, R.: Produits de semi-groupes de transition et produits de processus. Publ. Inst. Statist. Univ. Paris 15, 311–384 (1966)
Cairoli, R.: Une représentation intégrale pour fonctions séparément excessives. Ann. Inst. Fourier (Grenoble) 18-1, 317–338 (1968)
Cairoli, R.: Enveloppe de Snell d'un processus à paramètre bidimensionnel. Ann. Inst. Henri Poincaré 18-1, 47–54 (1982)
Cairoli, R., Walsh, J.B.: Stochastic integrals in the plane. Acta Mathematica 134, 11–183 (1975)
Cairoli, R., Gabriel, J.P.: Arrêt de certaines suites multiples de variables aléatoires indépendantes. In: Séminaire de Probabilités XIII, ed. C. Dellacherie, P.A. Meyer, M. Weil, 174–198. Lecture Notes in Mathematic 721. Berlin-Heidelberg-New York: Springer 1979
Cairoli, R., Ledoux, M.: Une topologie fine associée au produit de deux processus markoviens. Preprint
Carnal, E.: Processus markoviens à plusieurs paramètres. Thèse Ecole Polytechnique Fédérale de Lausanne (1979)
Dalang, R.C.: Sur l'arrêt optimal de processus à temps multidimensionnel continu. Preprint
Dellacherie, C., Meyer, P.A.: Probabilités et potentiel. Tome 1, Paris: Hermann 1975. Tome 2, Paris: Hermann 1980
Dozzi, M.: Propriétés markoviennes de processus sur ℝ2. Ann. Inst. Henri Poincaré 19-2, 209–221 (1983)
Dynkin, E.B.: Harmonic functions associated with several Markov processes. Advances in Applied Mathematics 2, 260–283 (1981)
Edgar, G.A., Millet, A., Sucheston, L.: On compactness and optimality of stopping times. In: Martingale Theory in Harmonic Analysis and Banach Spaces, ed. Chao, J.A., Woyczynski, W.A., 36–61. Lecture Notes in Mathematics 939. Berlin-Heidelberg-New York: Springer 1981
El Karoui, N.: Les aspects probabilistes du contrôle stochastique. In: Ecole d'Eté de Probabilités de Saint-Flour IX-1979, ed. Hennequin, P.L., 74–239. Lecture Notes in Mathematic 876. Berlin-Heidelberg-New York: Springer 1981
Ghoussoub, N.: An integral representation of randomized probabilities and its applications. In: Séminaire de Probabilités XVI, ed. Azéma, J., Yor, M., 519–543. Lecture Notes in Mathematics 920. Berlin-Heidelberg-New York: Springer 1982
Haggstrom, G.W.: Optimal stopping and experimental design. Ann. Math. Stat. 37, 7–20 (1966)
Korezlioglu, H., Lefort, P., Mazziotto, G.: Une propriété markovienne et diffusions associées. In: Processus aléatoires à deux indices, ed. H. Korezlioglu, G. Mazziotto, J. Szpirglas, 245–274. Lecture Notes in Mathematics 863. Berlin-Heidelberg-New York: Springer 1981
Krengel, U., Sucheston, L.: Stopping rules and tactics for processes indexed by directed sets. J. Multivariate Anal. 11, 199–229 (1981)
Kurtz, T.G.: The optional sampling theorem for martingales indexed by a directed set. Ann. Probability 8, 675–681 (1980)
Jacod, J.: Calcul stochastique et problème de martingales. Lecture Notes in Mathematics 714. Berlin-Heidelberg-New York: Springer 1979
Lawler, G.F., Vanderbei, R.J.: Markov strategies for optimal control problems indexed by a partially ordered set. Ann. Probability 11, 642–647 (1983)
Lions, P.L., Menaldi, J.L.: Optimal control of stochastic integrals and Hamilton-Jacobi-Bellman equations. SIAM J. Control and Optimization 20, 58–95 (1982)
Lions, P.L.: Optimal control of diffusion processes and Hamilton-Jacobi-Bellman equations; part 3. In: Non-linear PDE and their applications, Collège de France Seminar V. London: Pittman 1983
Mandelbaum, A., Vanderbei, R.J.: Optimal stopping and supermartingales over partially ordered sets. Z. Wahrscheinlichkeitstheorie verw. Gebiete 57, 253–264 (1981)
Mazziotto, G.: Arrêt optimal d'un bi-Markov et fonctions harmoniques. C.R. Acad. Sci. Paris 295, Série I, 173–176 (1982)
Mazziotto, G.: Sur l'arrêt optimal de processus à deux indices réels. In: Stochastic Differential Systems, ed. M. Kohlmann, N. Christopeit, 320–328. Lecture Notes in Control and Information Sciences 43. Berlin-Heidelberg-New York: Springer 1982
Mazziotto, G.: Optimal stopping of bi-Markov processes. In: Filtering and Control of Random Processes, ed. H. Korezlioglu, G. Mazziotto, J. Szpirglas, 172–205. Lecture Notes in Control and Information Sciences 61. Berlin-Heidelberg-New York: Springer 1984
Mazziotto, G., Szpirglas, J.: Arrêt optimal sur le plan. Z. Wahrscheinlichkeitstheorie verw. Gebiete 62, 215–233 (1983)
Mertens, J.F.: Théorie des processus stochastiques généraux, applications aux surmartingales. Z. Wahrscheinlichkeitstheorie verw. Gebiete 22, 45–68 (1972)
Merzbach, E.: Stopping for two-dimensional stochastic processes. Stochastic Processes and Their Applications 10, 49–63 (1980)
Meyer, P.A.: Processus de Markov. Lecture Notes in Mathematics 26. Berlin-Heidelberg-New York: Springer 1967
Meyer, P.A.: Transformation des processus de Markov. In: Ecole d'Eté de Probabilités de Saint-Flour III-1973, ed. A. Badrikian, P.L. Hennequin, 2–36. Lecture Notes in Mathematics 390. Berlin-Heidelberg-New York: Springer 1974
Meyer, P.A.: Convergence faible et compacité des temps d'arrêt d'après Baxter et Chacon. In: Séminaire de Probabilités XII, ed. C. Dellacherie, P.A. Meyer, M. Weil, 411–423. Lecture Notes in Mathematics 649. Berlin-Heidelberg-New York: Springer 1978
Meyer, P.A.: Théorie élémentaire des processus à deux indices. In: Processus aléatoires à deux indices, ed. H. Korezlioglu, G. Mazziotto, J. Szpirglas, 1–39. Lecture Notes in Mathematics 863. Berlin-Heidelberg-New York: Springer 1981
Millet, A.: On randomized tactics and optimal stopping in the plane. C.R. Acad. Scie. Paris 295, Série I, 587–590 (1982)
Millet, A., Sucheston, L.: Convergence and regularity of multiparameter amarts and martingales. Z. Wahrscheinlichkeitstheorie verw. Gebiete 56, 21–45 (1981)
Nisio, M.: Some remarks on stochastic optimal control. In: Third Japan-USSR Symposium, ed. G. Maruyama, J.V. Prokhorov, 446–460. Lecture Notes in Mathematics 550. Berlin-Heidelberg-New York: Springer 1976
Nualart, D., Sanz, M.: A Markov property for two-parameter gaussian processes. Stochastica 3–1, 1–16, Barcelone (1979)
Shiryayev, A.N.: Optimal stopping rules. Berlin-Heidelberg-New York: Springer 1979
Stroock, D.W., Varadhan, S.R.S.: Multidimensional diffusion processes. Berlin-Heidelberg-New York: Springer 1979
Vanderbei, R.J.: Towards a stochastic calculus for several Markov processes. Advances in Applied Mathematics 4, 125–144 (1983)
Walsh, J.B.: Optional increasing paths. In: Processes aléatoires à deux indices, ed. H. Korezlioglu, G. Mazziotto, J. Szpirglas, 172–201. Lecture Notes in Mathematics 863. Berlin-Heidelberg-New York: Springer 1981
Wong, E., Zakai, M.: Martingales and stochastic integrals for processes with a multidimensional parameter. Z. Wahrscheinlichkeitstheorie verw. Gebiete 29, 109–122 (1974)
Author information
Authors and Affiliations
Rights and permissions
About this article
Cite this article
Mazziotto, G. Two parameter optimal stopping and bi-Markov processes. Z. Wahrscheinlichkeitstheorie verw Gebiete 69, 99–135 (1985). https://doi.org/10.1007/BF00532587
Received:
Issue Date:
DOI: https://doi.org/10.1007/BF00532587