Random walk and the heat equation

While physical models are classical, random walks are statistical models. Historically, Karl Pearson was the first to propose the random walk. This study will focus on the essential of the random walk, and additionally, this essay will offer some application guidelines and explain when the random walk is applicable. The random walk means that the performance of an event is based on the past, as people cannot predict the future development steps and directions. The random walk, which dates to the 16th century, is a significant area of probability with many applications. The random walk and Brownian motion are the main topics of this paper. The four applications of random walks that are highlighted in this paper are the following. They include the multi-particle random walk immune algorithm, the density peak clustering algorithm, a review of random walk-based community discovery techniques, and interactive image segmentation that combines random walk and random forest. This work paves the way to unravel the importance of random walk.

Consider a simple symmetric random walk on the integer lattice $\ZB$. For each n, let $V(n)$ denote a favorite site (or most visited site) of the random walk in the first n steps. A somewhat surprising theorem of Bass and Griffin [Z. Wahrsch. Verw. Gebiete 70 (1985) 417--436] says that V is almost surely transient, thus disproving a previous conjecture of Erdős and Révész [Mathematical Structures--Computational Mathematics--Mathematical Modeling 2 (1984) 152--157]. More precisely, Bass and Griffin proved that almost surely, $\liminf_{n\to \infty} {|V(n)| \over n^{1/2}(\log n)^{-\gamma}}$ equals $0$ if $\gamma<:1$, and is infinity if $\gamma>11$ (eleven). The present paper studies the rate of escape of $V(n)$. We show that almost surely, the "lim\,inf'' expression in question is 0 if $\gamma\leq 1$, and is infinity otherwise. The corresponding problem for Brownian motion is also studied.

What Exactly does a Random Walk Simulation Simulate?

We determine: (a) the joint almost sure asymptotic behaviour of the most visited site and the maximum local time of a one-dimensional simple random walk or Brownian motion; (b) the maximal jump size of the most visited site. In so doing, we solve two open problems of Erdos and Revesz.

This article provides a glimpse of some of the highlights of the joint work of Endre Csaki and Pal Revesz since 1979. The topics of this short exploration of the rich stochastic milieu of this inspiring collaboration revolve around Brownian motion, random walks and their long excursions, local times and additive functionals, iterated processes, almost sure local and global central limit theorems, integral functionals of geometric stochastic processes, favourite sites--favourite values and jump sizes for random walk and Brownian motion, random walking in a random scenery, and large void zones and occupation times for coalescing random walks.

We prove a strengthened form of a conjecture of Erickson to the effect that any genuinely d-dimensional random walk S n , d ⩾ 3 {S_n},d \geqslant 3 , goes to infinity at least as fast as a simple random walk or Brownian motion in dimension d. More precisely, if S n ∗ S_n^\ast is a simple random walk and B t {B_t} , a Brownian motion in dimension d, and ψ : [ 1 , ∞ ) → ( 0 , ∞ ) \psi :[1,\infty ) \to (0,\infty ) a function for which t − 1 / 2 ψ ( t ) ↓ 0 {t^{ - 1/2}}\psi (t) \downarrow 0 , then ψ ( n ) − 1 | S n ∗ | → ∞ \psi {(n)^{ - 1}}|S_n^\ast | \to \infty w.p.l, or equivalently, ψ ( t ) − 1 | B t | → ∞ \psi {(t)^{ - 1}}|{B_t}| \to \infty w.p.l, iff ∫ 1 ∞ ψ ( t ) d − 2 t − d / 2 &gt; ∞ \smallint _1^\infty \psi {(t)^{d - 2}}{t^{ - d/2}} &gt; \infty ; if this is the case, then also ψ ( n ) − 1 | S n | → ∞ \psi {(n)^{ - 1}}|{S_n}| \to \infty w.p.l for any random walk Sn of dimension d.

Die Untersuchung der Ähnlichkeiten zwischen der mikroskopischen und makroskopischen&#13;\nGrößenordnung ist Teil dieser Arbeit, die sich in der Forschungsfrage&#13;\nwiderspiegelt: Was können wir über die mikroskopische Skala durch Untersuchung&#13;\nder Makroskala erfahren? Untersuchungen der Umgebung, in der das&#13;\nSelbst-assembly stattfindet, und das Selbst-assembly an sich helfen diese Frage zu&#13;\nbeantworten.&#13;\nWir imitierten die Mikroskala und identifizierten mehrere analoge Parameter.&#13;\nAnstelle von Hitze verwenden wir Turbulenz, statt mikroskopisch kleine Partikel&#13;\nkommen zentimetergroße Partikel zum Einsatz. Der Schwerkraft wurde durch&#13;\neinen nach oben gerichteten Wasserstrom entgegengewirkt, da ihr Einfluss auf&#13;\nmakroskopische Partikel beträchtlich ist. Auf mikroskopische Partikel hat sie dagegen&#13;\nnur einen geringen Einfluss. Auf die gleiche Art und Weise hat Wärme einen&#13;\ngroßen Einfluss auf die mikroskopische Skala, aber einen geringen Einfluss auf&#13;\ndie makroskopische Partikel. Die Turbulenz erwies sich als geeignetes Analogon&#13;\nfür Wärme und wurde wie im mikroskopischen Maßstab modelliert. Dabei kamen&#13;\nthermodynamische Konzepte wie Brownsche Bewegung, Diffusion, Kinetik und&#13;\ndie Einstein-Relation zum Einsatz. Diese Konzepte erwiesen sich auch im makroskopischen&#13;\nMaßstab als geeignet.&#13;\nDie Teilchengeschwindigkeit ist Maxwell-Boltzmann verteilt und die durchschnittliche&#13;\nquadratische Verschiebung ist in Übereinstimmung mit einer begrenzten&#13;\nZufallsverschiebung. Der Diffusionskoeffizient und die Geschwindigkeit sind&#13;\nunabhängig von der Partikelgröße. Dies führt zu der Interpretation, dass die&#13;\nBewegung einer einzelnen zentimetergroßen Kugel der Bewegung eines mikroskopischen&#13;\nTeilchens a¨hnelt, indem sie eine Zufallsverschiebung und eine Brownsche&#13;\nBewegung ausführt. Um mikro- oder nanoskopische Partikel sichtbar zu machen,&#13;\nwerden häufig Rasterelektronen- oder Lichtmikroskopie verwendet. Anstelle von&#13;\nMikroskopen verwendeten wir Videokameras, um die Experimente mit zentimetergroßen&#13;\nPartikeln aufzuzeichnen. Eine Schwimmbadpumpe und asymmetrische Einströmung&#13;\n(eines von vier Einlassventilen ist immer geschlossen) wurden eingesetzt,&#13;\num Turbulenzen und asymmetrische Strömung zu erzeugen. Dieser asymmetrische&#13;\nZufluss kann große makroskopische Wirbel verursachen, die die Eingangswärme&#13;\nim Mikromaßstab darstellen. Im mikroskopischen Fall ist die Brownsche Bewegung&#13;\n90&#13;\nZusammenfassung 91&#13;\nder Teilchen das Ergebnis derAusbreitung vonWärme, die von ihrer Quelle ausgeht,&#13;\nwährend im makroskopischen Maßstab die von der Asymmetrie der Strömung herrührende&#13;\nVermehrung die Brownsche Bewegung großer Teilchen verursacht. Trotz&#13;\ndieser Ähnlichkeiten zwischen Wärme und Turbulenz variieren die Werte für die&#13;\nPerturbationsenergie erheblich, je nachdem, ob sie über eine Einzelkugel-Diffusion&#13;\n(Einstein-Beziehung) und Geschwindigkeit (kinetische Energie) oder über Wechselwirkungen&#13;\nzwischen zwei magnetische Kugeln über die Entfernung bestimmt&#13;\nwurden. Der letztere Fall ist um eine Größenordnung niedriger, etwa 6.5 μJ verglichen&#13;\nmit 80 μJ. Dies legt nahe, dass die Wärme- oder Turbulenzenergie-Spektren&#13;\nin Bezug auf ihreWirkung auf die Partikel unterschiedlich sein können. Es besteht&#13;\neine gerichtete Abhängigkeit von Teilchengeschwindigkeit, Diffusion und Perturbationsenergie.&#13;\nDie horizontalen Dimensionen sind ähnlich, aber die vertikale&#13;\nKomponente zeigt eine stärkere Abhängigkeit in Bezug auf Strömungsasymmetrie&#13;\nund Turbulenz. Der Richtungsabhängigkeit kann voraussichtlich über zukünftige&#13;\ntechnische Anpassungen entgegengewirkt werden. Die gerichtete Abhängigkeit&#13;\nkann auch als Temperaturgradient interpretiert werden.&#13;\nDas Self-assembly wurde durch Strukturbildung mehrerer magnetischer Kugeln&#13;\noder eines Dodekaheders aus zwölf heptagonalen magnetischen Plättchen durch&#13;\nsystematische Variation von Turbulenz und Asymmetrie untersucht. Die multiplen&#13;\nmagnetischen Kugeln bilden Linien und Ringe, und ihr Auftreten entsprach der&#13;\nTheorie, jedoch wichen die absoluten Energien der Strukturen von der Theorie ab.&#13;\nFür Experimente mit zunehmender Anzahl von Kugeln stellen vier Kugeln einen&#13;\nÜbergang zwischen Linien und Ringen dar. Das System erwies sich als geeignet&#13;\num die minimale Energiestruktur anzustreben, was wiederum zeigt, dass sich unser&#13;\nmakroskopisches System ähnlich wie die Mikroskala verhält. Die Turbulenz wirkte&#13;\nähnlich wie dieWärme, da fast nur einzelne Teilchen bei hoher Turbulenz beobachtet&#13;\nwurden, während sich Linien und Ringe, bei abnehmender Turbulenz bildeten,&#13;\nwas einem Phasenübergang zwischen einer Flüssigkeit und einem Feststoff oder&#13;\neinem Gas und einer Flüssigkeit ähnelt.&#13;\nDas Self-assembly von zwölf Zentimeter großen pentagonalen Plättchen&#13;\nzeigte das gleiche Energieminimierungsverhalten wie die Kugelstrukturen. Ein&#13;\nvollständiges Self-assembly des Dodekaeders wurde nicht erreicht. Vorherrschend&#13;\nwaren intermediäre Strukturen mit maximalen Kontakten zwischen jedem Partikel&#13;\n(Trimer und Tetramer etc.), was der minimalen Energiestruktur entspricht. Auch in&#13;\ndiesem komplexeren Fall verhält sich das System ähnlich wie im Mikromaßstab.&#13;\nDie beiden Beispiele des Self-assembly repräsentieren zum einen die Bildung&#13;\neinfacher Strukturen (Ringe und Linien) und zum anderen einen komplexeren Fall&#13;\ndes Self-assembly (ein hohles Dodekaeder). Das letztere Beispiel kann als Selfassembly&#13;\neines geometrischen Konstrukts oder als Modell f ür das Selbst-assembly&#13;\neines sphärischen Virus interpretiert werden. Dies unterstreicht das Potenzial des&#13;\nmakroskopischen Self-assembly; es kann bei der Untersuchung von allgemein&#13;\nweitgehend größenunabhängigen Problemen oder als analoge Darstellung bei der&#13;\nUntersuchung von natürlich vorkommenden Phänomenen eingesetzt werden.

. In this note, by an elementary use of Girsanov’s transform, we show that the exit time for either a biased random walk or a drifted Brownian motion on a symmetric interval is stochastically monotone with respect to the drift parameter. In the random walk case, this gives an alternative proof of a recent result of E. Peköz and R. Righter in 2024, while the Brownian motion case is the continuous analogue as discussed in the same paper. Our arguments in both discrete and continuous cases are parallel to each other. We also outline a simple SDE proof for the Brownian case based on a standard comparison theorem.

A local time curiosity in random environment

Suppose two players A and B are engaged in independent repeated plays of a fair game in which each player wins or loses one unit with equal probability. The implicit symmetry of this scenario results in the counterintuitive phenomena that in a long series of plays it is not unlikely that one of the players will remain on the winning side while the other player loses for more than half of the series. This chapter derives the distribution of (a) the last time in 2m steps that a simple symmetric random walk visits zero in a finite interval, (b) the time spent on the positive side in a finite interval, and (c) the time of the last zero in a finite interval and the arcsine limit distribution for corresponding functionals of Brownian motion. The reference to first, second, and third arcsine laws largely follows nomenclature of Feller (Feller W (1968, 1971) An introduction to probability theory and its applications, vol 1, 3rd edn., vol 2, 2nd edn. Wiley, New York), commonly cited in the probability literature, although they are not derived in that order here, the first being due to Levy. Apart from its aid in illustrating an important nuance for decision makers when dealing with random phenomena, the arcsine law involves rather non-intuitive distribution of natural functionals of the random walk and Brownian motion. The asymptotic results for random walk are obtained by an application of the local limit theorem from Chapter 16. Although the functional central limit theorem of the previous Chapter 17 can also be applied, it is not required beyond identifying the random walk limits with corresponding functionals of Brownian motion.

Random walks or Brownian motions appear as a useful tool in algorithm analysis. Recently P. Flajolet ([2]) obtained a complete and detailed analysis of the two stacks problem with the help of properties of simple random walks on lattices. G. Louchard ([7], [8]) proved that the Brownian motion permits to give easily asymptotic results on the complexity of manipulation algorithms for sorted tables, dictonaries and priority queues. In [4], J. Francon and the author proved that random walks on some homogeneous trees can be analysed with simple combinatorial technics : generating functions, continued and multicontinued fractions, orthogonal polynomials, theorem of Darboux etc.. In this paper we show that random walks on more general trees can be related to random walks on N and that on general Cayley graphs (i.e. graphs corresponding to finitely generated groups with relations between the generators) the asymptotic behavior of the random walks can be obtained using proporties of the Brownian motions on Riemannian manifolds and a simple criteria can be given in terms of γ(n) the number of different words was length is less than or equal to n .

We prove an estimate for the probability that a simple random walk in a simply connected subset $A$ of $Z^2$ starting on the boundary exits $A$ at another specified boundary point. The estimates are uniform over all domains of a given inradius. We apply these estimates to prove a conjecture of S. Fomin in 2001 concerning a relationship between crossing probabilities of loop-erased random walk and Brownian motion.

We show that Sine$_\beta$, the bulk limit of the Gaussian $\beta$-ensembles is the spectrum of a self-adjoint random differential operator \[ f\to 2 {R_t^{-1}} \left[ \begin{array}{cc} 0 &-\tfrac{d}{dt} \tfrac{d}{dt} &0 \end{array} \right] f, \qquad f:[0,1)\to \mathbb R^2, \] where $R_t$ is the positive definite matrix representation of hyperbolic Brownian motion with variance $4/\beta$ in logarithmic time. The result connects the Montgomery-Dyson conjecture about the Sine$_2$ process and the non-trivial zeros of the Riemann zeta function, the Hilbert-P\'olya conjecture and de Brange's attempt to prove the Riemann hypothesis. We identify the Brownian carousel as the Sturm-Liouville phase function of this operator. We provide similar operator representations for several other finite dimensional random ensembles and their limits: finite unitary or orthogonal ensembles, Hua-Pickrell ensembles and their limits, hard-edge $\beta$-ensembles, as well as the Schr\"odinger point process. In this more general setting, hyperbolic Brownian motion is replaced by a random walk or Brownian motion on the affine group. Our approach provides a unified framework to study $\beta$-ensembles that has so far been missing in the literature. In particular, we connect It\^o's classification of affine Brownian motions with the classification of limits of random matrix ensembles.

Preface to the Classics Edition Preface Sample course outline 1. Random walk and Brownian motion 2, Discrete-parameter Markov chains 3. Birth-death Markov chains 4. Continuous-parameter Markov chains 5. Brownian motion and diffusions 6. Dynamic programming and stochastic optimization 7. An introduction to stochastic differential equations 8. A probability and measure theory overview Author index Subject index Errata.

A new symbolic dynamic approach is applied to the research of the random walk and Brownian motion (BM) on Koch fractal. Base on the arithmetic analytic expression of Koch curve We give some accurate formulas of the random walk including, the muscle-shaped G-density in Gauss process, and the comb-shaped probability distribution of echo classes on the basis of the symbolic description of the echo classes, and then constitute the BM in terms of Hausdorff measure, discuss particularly the relationship between the chemical distance and the Hausdorff measure. Finally, the Wiener process in terms of Hausdorff measure is parallel constructed.