Knowledge

Multivariate random variable

Source 📝

39: 7315: 2208: 6876: 8618: 8865: 3394: 2989: 5883: 2028: 7310:{\displaystyle {\begin{aligned}\operatorname {E} &=\operatorname {Cov} +\operatorname {E} \operatorname {E} ^{T}\\\operatorname {E} &=\operatorname {Cov} +\operatorname {E} \operatorname {E} ^{T}\\&=\operatorname {Cov} +\mu ^{T}(\mu ^{T}A^{T})^{T}\\&=\operatorname {Cov} +\mu ^{T}A\mu ,\end{aligned}}} 7870: 374:
each of whose value is unknown, either because the value has not yet occurred or because there is imperfect knowledge of its value. The individual variables in a random vector are grouped together because they are all part of a single mathematical system — often they represent different properties
8287: 8947:, an objective often is to choose a portfolio of risky assets such that the distribution of the random portfolio return has desirable properties. For example, one might want to choose the portfolio return having the lowest variance for a given expected value. Here the random vector is the vector 3638: 8135: 8660: 4774: 4669: 9542: 8276: 6394: 3177: 2780: 2339: 5588: 5200: 2203:{\displaystyle \left.f_{\mathbf {Y} }(\mathbf {y} )={\frac {f_{\mathbf {X} }(\mathbf {x} )}{\left|\det {\frac {\partial \mathbf {x} }{\partial \mathbf {y} }}\right|}}\right|_{\mathbf {x} =g^{-1}(\mathbf {y} )}\mathbf {1} (\mathbf {y} \in R_{\mathbf {Y} })} 3788: 3541: 6217: 1642: 1074: 6865: 2546: 8613:{\displaystyle {\begin{aligned}\operatorname {Cov} \left&=E\left\\&=E\left\\&=\operatorname {tr} \left({A\cdot \operatorname {E} \left((z-\mu )(z-\mu )^{T}\right)}\right)\\&=\operatorname {tr} (AV).\end{aligned}}} 7484: 4546: 4299: 8860:{\displaystyle \operatorname {E} \left=2\operatorname {tr} (AK_{\mathbf {X} \mathbf {X} }BK_{\mathbf {X} \mathbf {X} })+\operatorname {tr} (AK_{\mathbf {X} \mathbf {X} })\operatorname {tr} (BK_{\mathbf {X} \mathbf {X} })} 3557: 7959: 4681: 4576: 4040: 6042: 7944: 7470: 1160: 958: 483: 9394: 9108:(not denoting a random vector in this context) of observations on the independent variables. Then the following regression equation is postulated as a description of the process that generated the data: 7407: 4078: 1263: 5459: 3389:{\displaystyle \operatorname {K} _{\mathbf {X} \mathbf {Y} }=\operatorname {Cov} =\operatorname {E} )(\mathbf {Y} -\operatorname {E} )^{T}]=\operatorname {E} -\operatorname {E} \operatorname {E} ^{T}} 2984:{\displaystyle \operatorname {K} _{\mathbf {X} \mathbf {X} }=\operatorname {Var} =\operatorname {E} )(\mathbf {X} -\operatorname {E} )^{T}]=\operatorname {E} -\operatorname {E} \operatorname {E} ^{T}} 889: 8146: 6265: 5581: 1329: 5878:{\displaystyle F_{X_{1},\ldots ,X_{m},Y_{1},\ldots ,Y_{n}}(x_{1},\ldots ,x_{m},y_{1},\ldots ,y_{n})=F_{X_{1},\ldots ,X_{m}}(x_{1},\ldots ,x_{m})\cdot F_{Y_{1},\ldots ,Y_{n}}(y_{1},\ldots ,y_{n})} 2242: 8292: 7489: 6881: 1981: 6744: 5379: 4928: 4855: 3943: 3870: 5975: 9283: 5283: 5243: 1934: 6697: 8902: 6431: 5101: 4225: 2020: 540: 6571: 1473: 6611: 3734: 3487: 4987: 3726: 3684: 6473: 9584: 6050: 2429: 1532: 969: 9669: 1780: 1727: 1502: 663: 9315: 9191: 1872: 1824: 1751: 1698: 588: 9610: 9382: 9147: 9060: 9030: 9004: 8967: 8924: 8652: 6505: 6453: 6257: 5918: 5503: 5481: 5423: 5401: 5327: 5305: 5094: 5072: 5046: 5024: 4428: 4386: 4364: 4342: 3467: 3441: 3120: 3078: 3056: 3034: 2395: 2361: 2233: 1894: 1524: 1449: 1351: 1285: 1210: 9344: 9224: 6657: 6531: 4474: 4191: 4153: 4127: 3166: 2680: 2635: 2609: 1423: 1377: 6479:
of a matrix — that is, to the sum of the elements on its main diagonal (from upper left to lower right). Since the quadratic form is a scalar, so is its expectation.
6752: 560: 2769: 821: 794: 767: 740: 705: 2440: 6631: 5938: 4448: 4406: 3140: 3098: 1848: 1800: 1674: 1397: 612: 7865:{\displaystyle {\begin{aligned}\operatorname {Cov} &=\operatorname {E} \left\\&=\operatorname {E} \left\\&=\operatorname {E} \left.\end{aligned}}} 330: 4485: 4236: 3633:{\displaystyle \mathbf {a} ^{T}\operatorname {K} _{\mathbf {X} \mathbf {X} }\mathbf {a} \geq 0\quad {\text{for all }}\mathbf {a} \in \mathbb {R} ^{n}} 8130:{\displaystyle (z-\mu )^{T}(Az-A\mu )=\operatorname {tr} \left({(z-\mu )^{T}(Az-A\mu )}\right)=\operatorname {tr} \left((z-\mu )^{T}A(z-\mu )\right)} 4769:{\displaystyle \operatorname {R} _{\mathbf {X} \mathbf {Y} }=\operatorname {K} _{\mathbf {X} \mathbf {Y} }+\operatorname {E} \operatorname {E} ^{T}} 4664:{\displaystyle \operatorname {R} _{\mathbf {X} \mathbf {X} }=\operatorname {K} _{\mathbf {X} \mathbf {X} }+\operatorname {E} \operatorname {E} ^{T}} 3955: 5980: 5895: 9101:; the observations on each independent variable are also stacked into column vectors, and these latter column vectors are combined into a 8926:. Again, since both quadratic forms are scalars and hence their product is a scalar, the expectation of their product is also a scalar. 9537:{\displaystyle \mathbf {X} _{t}=c+A_{1}\mathbf {X} _{t-1}+A_{2}\mathbf {X} _{t-2}+\cdots +A_{p}\mathbf {X} _{t-p}+\mathbf {e} _{t},\,} 7881: 7419: 1096: 894: 419: 7326: 4049: 1218: 8271:{\displaystyle \operatorname {tr} \left({(z-\mu )^{T}A(z-\mu )}\right)=\operatorname {tr} \left({A(z-\mu )(z-\mu )^{T}}\right),} 6389:{\displaystyle \operatorname {E} =\operatorname {E} ^{T}A\operatorname {E} +\operatorname {tr} (AK_{\mathbf {X} \mathbf {X} }),} 5428: 832: 323: 9855: 9773: 9739: 9705: 5508: 2334:{\displaystyle R_{\mathbf {Y} }=\{\mathbf {y} =g(\mathbf {x} ):f_{\mathbf {X} }(\mathbf {x} )>0\}\subseteq {\mathcal {R}}} 1293: 631: 9879: 712: 1939: 6702: 5332: 4860: 4787: 3875: 3802: 9676: 9160:
is an unknown random vector reflecting random influences on the dependent variable. By some chosen technique such as
5943: 9826: 9798: 5195:{\displaystyle F_{\mathbf {X,Y} }(\mathbf {x,y} )=F_{\mathbf {X} }(\mathbf {x} )\cdot F_{\mathbf {Y} }(\mathbf {y} )} 4999: 316: 304: 263: 9232: 5248: 5208: 1899: 9874: 6665: 379:. For example, while a given person has a specific age, height and weight, the representation of these features of 8873: 6402: 4196: 1986: 1827: 194: 130: 503: 3783:{\displaystyle \operatorname {K} _{\mathbf {Y} \mathbf {X} }=\operatorname {K} _{\mathbf {X} \mathbf {Y} }^{T}} 3536:{\displaystyle \operatorname {K} _{\mathbf {X} \mathbf {X} }^{T}=\operatorname {K} _{\mathbf {X} \mathbf {X} }} 670: 242: 103: 6536: 1454: 6576: 6212:{\displaystyle \varphi _{\mathbf {X} }(\mathbf {\omega } )=\operatorname {E} \left=\operatorname {E} \left} 3548: 1637:{\displaystyle f_{\mathbf {Y} }(y)={\frac {f_{\mathbf {X} }(\mathbf {A} ^{-1}(y-b))}{|\det \mathbf {A} |}}} 7413: 4940: 3689: 3647: 1069:{\displaystyle F_{\mathbf {X} }(\mathbf {x} )=\operatorname {P} (X_{1}\leq x_{1},\ldots ,X_{n}\leq x_{n})} 6458: 6234: 9554: 2400: 98: 9645: 1756: 1703: 1478: 639: 9291: 9167: 214: 1853: 1805: 1732: 1679: 1171: 569: 677: 273: 268: 157: 142: 9593: 9365: 9114: 9043: 9013: 8987: 8950: 8907: 8635: 6488: 6436: 6240: 5901: 5486: 5464: 5406: 5384: 5310: 5288: 5077: 5055: 5029: 5007: 4411: 4369: 4347: 4325: 3450: 3424: 3103: 3061: 3039: 3017: 2378: 2344: 2216: 1877: 1507: 1432: 1334: 1268: 1193: 3010: 344: 252: 123: 9320: 9200: 6860:{\displaystyle \operatorname {Cov} =\operatorname {E} -\operatorname {E} \operatorname {E} ^{T}} 9161: 6636: 6510: 6476: 4453: 4170: 4132: 4106: 4095: 3145: 2659: 2614: 2588: 1402: 1356: 371: 147: 9385: 8977:
of portfolio weights — the fractions of the portfolio placed in the respective assets. Since
2683: 2541:{\displaystyle \operatorname {E} =(\operatorname {E} ,...,\operatorname {E} )^{\mathrm {T} }} 1213: 708: 545: 390:
Random vectors are often used as the underlying implementation of various types of aggregate
288: 247: 152: 118: 8628:
One can take the expectation of the product of two different quadratic forms in a zero-mean
2688: 383:
from within a group would be a random vector. Normally each element of a random vector is a
9639: 7950: 4167:
random variables. The correlation matrix is the expected value, element by element, of the
2637: 1175: 799: 772: 745: 718: 683: 367: 278: 172: 65: 2656:
random variables. The covariance matrix is the expected value, element by element, of the
8: 615: 237: 179: 167: 162: 3413:
where again the matrix expectation is taken element-by-element in the matrix. Here the (
6616: 5923: 4433: 4391: 3125: 3083: 2236: 1833: 1785: 1659: 1382: 597: 407: 351: 224: 113: 53: 30: 9851: 9822: 9794: 9769: 9735: 9701: 9071: 8973:(a random scalar) is the inner product of the vector of random returns with a vector 2577: 498: 283: 189: 88: 8940: 3478: 376: 108: 38: 7476: 8629: 673:, the joint distribution, or the multivariate distribution of the random vector. 494: 403: 391: 184: 135: 4541:{\displaystyle \operatorname {R} _{\mathbf {X} \mathbf {Y} }=\operatorname {E} } 4294:{\displaystyle \operatorname {R} _{\mathbf {X} \mathbf {X} }=\operatorname {E} } 2372: 199: 9346:, which are viewed as random vectors since a randomly different selection of 9097:. The observations on the dependent variable are stacked into a column vector 8623: 9868: 9102: 666: 591: 414: 395: 72: 4675:
Similarly for the cross-correlation matrix and the cross-covariance matrix:
4227:, where the superscript T refers to the transpose of the indicated vector: 4035:{\displaystyle \operatorname {E} =\operatorname {E} \operatorname {E} ^{T}} 2771:, where the superscript T refers to the transpose of the indicated vector: 2431:
whose elements are the expected values of the respective random variables.
563: 299: 209: 93: 9621: 1179: 619: 399: 384: 219: 60: 48: 6037:{\displaystyle \mathbf {\omega } =(\omega _{1},\ldots ,\omega _{n})^{T}} 2645: 490: 355: 77: 23: 9766:
Probability and Random Processes for Electrical and Computer Engineers
5381:
denotes their joint cumulative distribution function. Independence of
1174:
as can non-random vectors: addition, subtraction, multiplication by a
8969:
of random returns on the individual assets, and the portfolio return
486: 9350:
cases to observe would have resulted in different values for them.
4046:
They are uncorrelated if and only if their cross-covariance matrix
1653:
More generally we can study invertible mappings of random vectors.
669:
as the underlying sigma-algebra. This measure is also known as the
204: 8944: 7939:{\displaystyle \left({z-\mu }\right)^{T}\left({Az-A\mu }\right)} 7465:{\displaystyle \operatorname {tr} (AB)=\operatorname {tr} (BA)} 1155:{\displaystyle \mathbf {x} =(x_{1},\dots ,x_{n})^{\mathsf {T}}} 953:{\displaystyle \mathbf {X} =(X_{1},\dots ,X_{n})^{\mathsf {T}}} 478:{\displaystyle \mathbf {X} =(X_{1},\dots ,X_{n})^{\mathsf {T}}} 9193:
is chosen as an estimate of β, and the estimate of the vector
9032:) and the variance of the portfolio return can be shown to be 4570:
The correlation matrix is related to the covariance matrix by
7402:{\displaystyle \operatorname {Cov} =\operatorname {tr} (AV).} 4073:{\displaystyle \operatorname {K} _{\mathbf {X} \mathbf {Y} }} 1258:{\displaystyle g\colon \mathbb {R} ^{n}\to \mathbb {R} ^{n}} 9848:
Probability, Statistics, and Random Processes for Engineers
8624:
Expectation of the product of two different quadratic forms
6662:
Then based on the formula for the covariance, if we denote
2034: 636:
Every random vector gives rise to a probability measure on
5454:{\displaystyle \mathbf {X} \perp \!\!\!\perp \mathbf {Y} } 884:{\displaystyle F_{\mathbf {X} }:\mathbb {R} ^{n}\mapsto } 9846:
Stark, Henry; Woods, John W. (2012). "Random Vectors".
8281:
and by plugging this into the original formula we get:
5576:{\displaystyle x_{1},\ldots ,x_{m},y_{1},\ldots ,y_{n}} 1324:{\displaystyle \mathbf {Y} =\mathbf {A} \mathbf {X} +b} 9791:
Probability, Random Variables and Stochastic Processes
1458: 9648: 9596: 9557: 9397: 9368: 9323: 9294: 9288:
Then the statistician must analyze the properties of
9235: 9203: 9170: 9117: 9046: 9016: 8990: 8953: 8910: 8876: 8663: 8638: 8290: 8149: 7962: 7884: 7487: 7422: 7329: 6879: 6755: 6705: 6668: 6639: 6619: 6579: 6539: 6513: 6491: 6461: 6439: 6405: 6268: 6243: 6053: 5983: 5946: 5926: 5904: 5591: 5511: 5489: 5467: 5431: 5409: 5387: 5335: 5313: 5291: 5251: 5211: 5104: 5080: 5058: 5032: 5010: 4943: 4863: 4790: 4684: 4579: 4488: 4456: 4436: 4414: 4394: 4372: 4350: 4328: 4239: 4199: 4173: 4135: 4109: 4052: 3958: 3878: 3805: 3737: 3692: 3650: 3560: 3490: 3453: 3427: 3180: 3148: 3128: 3106: 3086: 3064: 3042: 3020: 2783: 2691: 2662: 2617: 2591: 2443: 2403: 2381: 2347: 2245: 2219: 2031: 1989: 1942: 1902: 1880: 1856: 1836: 1808: 1788: 1759: 1735: 1706: 1682: 1662: 1535: 1510: 1481: 1457: 1435: 1405: 1385: 1359: 1337: 1296: 1271: 1221: 1196: 1170:
Random vectors can be subjected to the same kinds of
1099: 972: 897: 835: 802: 775: 748: 721: 686: 642: 600: 572: 548: 506: 422: 9152:
where β is a postulated fixed but unknown vector of
4083: 1976:{\displaystyle P(\mathbf {X} \in {\mathcal {D}})=1} 9663: 9604: 9578: 9536: 9376: 9338: 9309: 9277: 9218: 9185: 9141: 9054: 9024: 8998: 8961: 8918: 8896: 8859: 8646: 8612: 8270: 8129: 7938: 7864: 7464: 7401: 7309: 6859: 6739:{\displaystyle \mathbf {z} ^{T}A^{T}=\mathbf {Y} } 6738: 6691: 6651: 6625: 6605: 6565: 6525: 6499: 6467: 6447: 6425: 6388: 6251: 6228: 6211: 6036: 5969: 5932: 5912: 5877: 5575: 5497: 5475: 5453: 5417: 5395: 5374:{\displaystyle F_{\mathbf {X,Y} }(\mathbf {x,y} )} 5373: 5321: 5299: 5277: 5237: 5194: 5088: 5066: 5040: 5018: 4981: 4923:{\displaystyle \mathbf {Y} =(Y_{1},...,Y_{n})^{T}} 4922: 4850:{\displaystyle \mathbf {X} =(X_{1},...,X_{n})^{T}} 4849: 4768: 4663: 4540: 4468: 4442: 4422: 4400: 4380: 4358: 4336: 4293: 4219: 4185: 4147: 4121: 4072: 4034: 3938:{\displaystyle \mathbf {Y} =(Y_{1},...,Y_{n})^{T}} 3937: 3865:{\displaystyle \mathbf {X} =(X_{1},...,X_{m})^{T}} 3864: 3782: 3720: 3678: 3632: 3535: 3461: 3435: 3388: 3160: 3134: 3114: 3092: 3072: 3050: 3028: 2983: 2763: 2674: 2629: 2603: 2565: 2540: 2423: 2389: 2355: 2333: 2227: 2202: 2014: 1975: 1928: 1888: 1866: 1842: 1818: 1794: 1774: 1745: 1721: 1692: 1668: 1636: 1518: 1496: 1467: 1443: 1417: 1391: 1371: 1345: 1323: 1279: 1257: 1204: 1154: 1068: 952: 883: 815: 788: 761: 734: 699: 657: 606: 582: 554: 534: 477: 16:Random variable with multiple component dimensions 5442: 5441: 5440: 9866: 9006:, the expected value of the portfolio return is 5970:{\displaystyle \mathbb {R} ^{n}\to \mathbb {C} } 5285:denote the cumulative distribution functions of 2095: 1618: 7414:cyclically permute matrices when taking a trace 1165: 9850:(Fourth ed.). Pearson. pp. 295–339. 9278:{\displaystyle {\hat {e}}=y-X{\hat {\beta }}.} 5278:{\displaystyle F_{\mathbf {Y} }(\mathbf {y} )} 5238:{\displaystyle F_{\mathbf {X} }(\mathbf {x} )} 1929:{\displaystyle f_{\mathbf {X} }(\mathbf {x} )} 413:Formally, a multivariate random variable is a 6692:{\displaystyle \mathbf {z} ^{T}=\mathbf {X} } 324: 9698:Stochastic Processes Theory for Applications 8897:{\displaystyle K_{\mathbf {X} \mathbf {X} }} 7412:This is true based on the fact that one can 6426:{\displaystyle K_{\mathbf {X} \mathbf {X} }} 4220:{\displaystyle \mathbf {X} \mathbf {X} ^{T}} 2318: 2261: 2015:{\displaystyle \mathbf {Y} =g(\mathbf {X} )} 1676:be a one-to-one mapping from an open subset 625: 9845: 9812: 9810: 9725: 9723: 9721: 9719: 9717: 5889: 680:of each of the component random variables 535:{\displaystyle (\Omega ,{\mathcal {F}},P)} 331: 317: 9533: 8140:trivially. Using the permutation we get: 5963: 5949: 4159:) element is the correlation between the 3620: 1762: 1709: 1245: 1230: 1185: 853: 645: 9816: 9788: 9759: 9757: 9755: 9753: 9751: 9729: 9695: 3417:) element is the covariance between the 343:For broader coverage of this topic, see 9807: 9782: 9714: 9689: 7416:without changing the end result (e.g.: 6566:{\displaystyle \operatorname {E} =\mu } 1802:have continuous partial derivatives in 1468:{\displaystyle \textstyle \mathbf {X} } 9867: 9819:Stochastic Control for Economic Models 9763: 9040:, where C is the covariance matrix of 6606:{\displaystyle \operatorname {Cov} =V} 6044:to a complex number. It is defined by 3686:is simply the transpose of the matrix 1648: 1146: 944: 469: 9748: 9732:A Foundation in Digital Communication 9353: 9078:observations on a dependent variable 6223: 2585:or variance-covariance matrix) of an 1874:. Assume that the real random vector 632:Multivariate probability distribution 9620: × 1 vector of constants ( 9065: 4982:{\displaystyle \operatorname {E} =0} 4784:Two random vectors of the same size 4479: 4230: 3721:{\displaystyle \operatorname {Cov} } 3679:{\displaystyle \operatorname {Cov} } 3171: 2774: 2434: 963: 713:conditional probability distribution 594:(the collection of all events), and 8934: 6468:{\displaystyle \operatorname {tr} } 3794: 1896:has a probability density function 1475:has a probability density function 823:is known to be a particular value. 769:is the probability distribution of 618:(a function returning each event's 13: 9839: 9579:{\displaystyle \mathbf {X} _{t-i}} 9384:through time can be modelled as a 8664: 8517: 7796: 7685: 7544: 7086: 7064: 6981: 6955: 6940: 6884: 6833: 6816: 6784: 6540: 6331: 6304: 6269: 6233:One can take the expectation of a 6130: 6080: 5505:are called independent if for all 4944: 4742: 4725: 4706: 4686: 4637: 4620: 4601: 4581: 4509: 4490: 4282: 4260: 4241: 4054: 4008: 3991: 3959: 3759: 3739: 3574: 3517: 3492: 3362: 3345: 3313: 3280: 3249: 3229: 3182: 2957: 2940: 2908: 2875: 2844: 2824: 2785: 2734: 2703: 2532: 2504: 2467: 2444: 2424:{\displaystyle \operatorname {E} } 2404: 2326: 2111: 2101: 1959: 1859: 1811: 1738: 1685: 1504:, then the probability density of 999: 575: 549: 518: 510: 14: 9891: 9551:-periods-back vector observation 5000:Independence (probability theory) 4084:Correlation and cross-correlation 2366: 9675: × 1 random vector of 9664:{\displaystyle \mathbf {e} _{t}} 9651: 9598: 9560: 9520: 9499: 9462: 9431: 9400: 9370: 9048: 9018: 8992: 8955: 8912: 8888: 8883: 8848: 8843: 8816: 8811: 8781: 8776: 8761: 8756: 8720: 8706: 8694: 8680: 8640: 6843: 6826: 6800: 6794: 6774: 6766: 6732: 6708: 6685: 6671: 6590: 6550: 6493: 6441: 6417: 6412: 6374: 6369: 6341: 6314: 6294: 6280: 6245: 6114: 6060: 5906: 5491: 5469: 5447: 5433: 5411: 5389: 5364: 5361: 5358: 5348: 5345: 5342: 5315: 5293: 5268: 5258: 5228: 5218: 5185: 5175: 5159: 5149: 5133: 5130: 5127: 5117: 5114: 5111: 5082: 5060: 5034: 5012: 4966: 4955: 4865: 4792: 4779: 4752: 4735: 4716: 4711: 4696: 4691: 4647: 4630: 4611: 4606: 4591: 4586: 4525: 4519: 4500: 4495: 4416: 4374: 4352: 4330: 4276: 4270: 4251: 4246: 4207: 4201: 4088: 4064: 4059: 4018: 4001: 3975: 3969: 3880: 3807: 3769: 3764: 3749: 3744: 3711: 3703: 3669: 3661: 3611: 3594: 3584: 3579: 3563: 3527: 3522: 3502: 3497: 3455: 3429: 3372: 3355: 3329: 3323: 3290: 3273: 3259: 3242: 3219: 3211: 3192: 3187: 3108: 3066: 3044: 3022: 2967: 2950: 2924: 2918: 2885: 2868: 2854: 2837: 2814: 2795: 2790: 2744: 2727: 2713: 2696: 2454: 2414: 2383: 2349: 2305: 2295: 2279: 2265: 2252: 2221: 2191: 2178: 2170: 2160: 2136: 2115: 2105: 2082: 2072: 2053: 2043: 2005: 1991: 1950: 1919: 1909: 1882: 1775:{\displaystyle \mathbb {R} ^{n}} 1722:{\displaystyle \mathbb {R} ^{n}} 1622: 1580: 1569: 1542: 1512: 1497:{\displaystyle f_{\mathbf {X} }} 1488: 1460: 1437: 1339: 1311: 1306: 1298: 1273: 1198: 1101: 989: 979: 899: 842: 828:cumulative distribution function 658:{\displaystyle \mathbb {R} ^{n}} 424: 37: 9793:(Third ed.). McGraw-Hill. 9310:{\displaystyle {\hat {\beta }}} 9186:{\displaystyle {\hat {\beta }}} 8929: 6229:Expectation of a quadratic form 4993: 4565: 3604: 2566:Covariance and cross-covariance 1190:Similarly, a new random vector 9768:. Cambridge University Press. 9734:. Cambridge University Press. 9700:. Cambridge University Press. 9330: 9301: 9266: 9242: 9210: 9177: 8854: 8831: 8822: 8799: 8787: 8744: 8724: 8701: 8698: 8675: 8600: 8591: 8556: 8543: 8540: 8528: 8471: 8458: 8455: 8443: 8403: 8385: 8251: 8238: 8235: 8223: 8198: 8186: 8174: 8161: 8119: 8107: 8095: 8082: 8060: 8042: 8033: 8020: 8003: 7985: 7976: 7963: 7847: 7829: 7820: 7807: 7772: 7725: 7722: 7696: 7589: 7576: 7534: 7498: 7459: 7450: 7438: 7429: 7393: 7384: 7372: 7336: 7278: 7242: 7217: 7193: 7177: 7141: 7116: 7092: 7083: 7070: 7058: 7022: 7006: 6987: 6968: 6961: 6952: 6946: 6934: 6922: 6906: 6890: 6848: 6839: 6830: 6822: 6810: 6790: 6778: 6762: 6594: 6586: 6554: 6546: 6380: 6357: 6345: 6337: 6319: 6310: 6298: 6275: 6200: 6148: 6118: 6098: 6074: 6066: 6025: 5992: 5959: 5872: 5840: 5798: 5766: 5724: 5660: 5368: 5354: 5272: 5264: 5232: 5224: 5189: 5181: 5163: 5155: 5137: 5123: 4970: 4950: 4911: 4872: 4838: 4799: 4757: 4748: 4739: 4731: 4652: 4643: 4634: 4626: 4554: 4535: 4515: 4307: 4288: 4266: 4023: 4014: 4005: 3997: 3985: 3965: 3926: 3887: 3853: 3814: 3715: 3699: 3673: 3657: 3402: 3377: 3368: 3359: 3351: 3339: 3319: 3307: 3298: 3294: 3286: 3269: 3266: 3263: 3255: 3238: 3235: 3223: 3207: 2997: 2972: 2963: 2954: 2946: 2934: 2914: 2902: 2893: 2889: 2881: 2864: 2861: 2858: 2850: 2833: 2830: 2818: 2810: 2752: 2748: 2740: 2723: 2720: 2717: 2709: 2692: 2570: 2554: 2527: 2523: 2510: 2486: 2473: 2464: 2458: 2450: 2418: 2410: 2309: 2301: 2283: 2275: 2197: 2174: 2164: 2156: 2086: 2078: 2057: 2049: 2009: 2001: 1964: 1946: 1923: 1915: 1867:{\displaystyle {\mathcal {D}}} 1819:{\displaystyle {\mathcal {D}}} 1746:{\displaystyle {\mathcal {R}}} 1693:{\displaystyle {\mathcal {D}}} 1627: 1614: 1608: 1605: 1593: 1575: 1554: 1548: 1240: 1212:can be defined by applying an 1141: 1108: 1082: 1063: 1005: 993: 985: 939: 906: 878: 866: 863: 671:joint probability distribution 583:{\displaystyle {\mathcal {F}}} 529: 507: 464: 431: 104:Collectively exhaustive events 1: 9789:Papoulis, Athanasius (1991). 9682: 7320:which leaves us to show that 3472: 9696:Gallager, Robert G. (2013). 9605:{\displaystyle \mathbf {X} } 9377:{\displaystyle \mathbf {X} } 9142:{\displaystyle y=X\beta +e,} 9055:{\displaystyle \mathbf {r} } 9025:{\displaystyle \mathbf {r} } 8999:{\displaystyle \mathbf {r} } 8962:{\displaystyle \mathbf {r} } 8919:{\displaystyle \mathbf {X} } 8904:is the covariance matrix of 8647:{\displaystyle \mathbf {X} } 6500:{\displaystyle \mathbf {z} } 6448:{\displaystyle \mathbf {X} } 6433:is the covariance matrix of 6252:{\displaystyle \mathbf {X} } 5913:{\displaystyle \mathbf {X} } 5498:{\displaystyle \mathbf {Y} } 5476:{\displaystyle \mathbf {X} } 5418:{\displaystyle \mathbf {Y} } 5396:{\displaystyle \mathbf {X} } 5322:{\displaystyle \mathbf {Y} } 5300:{\displaystyle \mathbf {X} } 5089:{\displaystyle \mathbf {y} } 5067:{\displaystyle \mathbf {x} } 5041:{\displaystyle \mathbf {Y} } 5019:{\displaystyle \mathbf {X} } 4423:{\displaystyle \mathbf {Y} } 4381:{\displaystyle \mathbf {X} } 4359:{\displaystyle \mathbf {Y} } 4337:{\displaystyle \mathbf {X} } 3644:The cross-covariance matrix 3549:positive semidefinite matrix 3462:{\displaystyle \mathbf {Y} } 3436:{\displaystyle \mathbf {X} } 3115:{\displaystyle \mathbf {Y} } 3073:{\displaystyle \mathbf {X} } 3051:{\displaystyle \mathbf {Y} } 3029:{\displaystyle \mathbf {X} } 2390:{\displaystyle \mathbf {X} } 2356:{\displaystyle \mathbf {Y} } 2228:{\displaystyle \mathbf {1} } 1889:{\displaystyle \mathbf {X} } 1519:{\displaystyle \mathbf {Y} } 1451:is an invertible matrix and 1444:{\displaystyle \mathbf {A} } 1346:{\displaystyle \mathbf {A} } 1280:{\displaystyle \mathbf {X} } 1205:{\displaystyle \mathbf {Y} } 1166:Operations on random vectors 360:multivariate random variable 7: 9880:Algebra of random variables 9156:response coefficients, and 4322:between two random vectors 3547:The covariance matrix is a 3477:The covariance matrix is a 3014:between two random vectors 2375:or mean of a random vector 10: 9896: 9339:{\displaystyle {\hat {e}}} 9219:{\displaystyle {\hat {e}}} 5461:. Written component-wise, 4997: 2022:is of probability density 629: 342: 6652:{\displaystyle m\times m} 6526:{\displaystyle m\times 1} 5940:components is a function 4469:{\displaystyle n\times p} 4186:{\displaystyle n\times n} 4148:{\displaystyle n\times n} 4122:{\displaystyle n\times 1} 3161:{\displaystyle n\times p} 2675:{\displaystyle n\times n} 2630:{\displaystyle n\times n} 2604:{\displaystyle n\times 1} 1983:. Then the random vector 1418:{\displaystyle n\times 1} 1372:{\displaystyle n\times n} 9817:Kendrick, David (1981). 9764:Gubner, John A. (2006). 9086:observations on each of 9074:theory, we have data on 4320:cross-correlation matrix 626:Probability distribution 274:Law of total probability 269:Conditional independence 158:Exponential distribution 143:Probability distribution 9875:Multivariate statistics 9730:Lapidoth, Amos (2009). 6659:non-stochastic matrix. 5977:that maps every vector 5896:characteristic function 5890:Characteristic function 3011:cross-covariance matrix 1850:be zero at no point of 555:{\displaystyle \Omega } 493:) whose components are 345:Multivariate statistics 253:Conditional probability 9665: 9606: 9580: 9538: 9378: 9340: 9311: 9279: 9220: 9187: 9162:ordinary least squares 9143: 9090:independent variables 9056: 9026: 9000: 8963: 8920: 8898: 8861: 8648: 8614: 8272: 8131: 7940: 7866: 7466: 7403: 7311: 6861: 6740: 6693: 6653: 6627: 6607: 6567: 6527: 6501: 6469: 6449: 6427: 6390: 6253: 6213: 6038: 5971: 5934: 5914: 5879: 5577: 5499: 5477: 5455: 5419: 5397: 5375: 5323: 5301: 5279: 5239: 5196: 5090: 5068: 5042: 5020: 4983: 4924: 4851: 4770: 4665: 4542: 4470: 4444: 4424: 4402: 4382: 4360: 4338: 4295: 4221: 4187: 4149: 4123: 4074: 4036: 3939: 3866: 3784: 3722: 3680: 3634: 3537: 3463: 3437: 3390: 3162: 3136: 3116: 3094: 3074: 3052: 3030: 2985: 2765: 2764:{\displaystyle ]]^{T}} 2676: 2631: 2605: 2542: 2425: 2391: 2357: 2335: 2229: 2204: 2016: 1977: 1930: 1890: 1868: 1844: 1820: 1796: 1776: 1747: 1723: 1694: 1670: 1638: 1520: 1498: 1469: 1445: 1419: 1393: 1373: 1347: 1325: 1281: 1259: 1206: 1186:Affine transformations 1156: 1070: 954: 885: 817: 790: 763: 736: 709:marginal distributions 701: 659: 608: 584: 556: 536: 479: 195:Continuous or discrete 148:Bernoulli distribution 9666: 9607: 9581: 9539: 9386:vector autoregression 9379: 9341: 9312: 9280: 9221: 9188: 9144: 9057: 9027: 9001: 8964: 8921: 8899: 8862: 8649: 8615: 8273: 8132: 7941: 7867: 7467: 7404: 7312: 6862: 6741: 6694: 6654: 6628: 6608: 6568: 6528: 6502: 6470: 6450: 6428: 6391: 6254: 6237:in the random vector 6214: 6039: 5972: 5935: 5915: 5880: 5578: 5500: 5478: 5456: 5420: 5398: 5376: 5324: 5302: 5280: 5240: 5197: 5091: 5069: 5043: 5021: 4984: 4925: 4852: 4771: 4666: 4543: 4471: 4445: 4425: 4403: 4383: 4361: 4339: 4296: 4222: 4188: 4150: 4124: 4075: 4037: 3940: 3867: 3785: 3723: 3681: 3635: 3538: 3464: 3438: 3391: 3163: 3137: 3117: 3095: 3075: 3053: 3031: 2986: 2766: 2677: 2632: 2606: 2583:second central moment 2543: 2426: 2392: 2358: 2336: 2230: 2205: 2017: 1978: 1931: 1891: 1869: 1845: 1821: 1797: 1777: 1748: 1724: 1695: 1671: 1639: 1521: 1499: 1470: 1446: 1420: 1394: 1374: 1348: 1326: 1282: 1260: 1214:affine transformation 1207: 1157: 1071: 955: 886: 818: 816:{\displaystyle X_{j}} 791: 789:{\displaystyle X_{i}} 764: 762:{\displaystyle X_{j}} 737: 735:{\displaystyle X_{i}} 702: 700:{\displaystyle X_{i}} 660: 609: 585: 557: 537: 480: 381:an unspecified person 153:Binomial distribution 9646: 9631:is a time-invariant 9594: 9555: 9395: 9366: 9321: 9292: 9233: 9201: 9168: 9115: 9044: 9014: 8988: 8951: 8908: 8874: 8661: 8636: 8288: 8147: 7960: 7882: 7485: 7420: 7327: 6877: 6753: 6703: 6666: 6637: 6617: 6577: 6537: 6511: 6489: 6459: 6437: 6403: 6266: 6241: 6051: 5981: 5944: 5924: 5902: 5589: 5509: 5487: 5465: 5429: 5425:is often denoted by 5407: 5385: 5333: 5311: 5289: 5249: 5209: 5102: 5078: 5056: 5030: 5008: 4941: 4861: 4788: 4682: 4577: 4486: 4454: 4434: 4412: 4392: 4370: 4348: 4326: 4237: 4197: 4171: 4133: 4129:random vector is an 4107: 4050: 3956: 3876: 3803: 3735: 3690: 3648: 3558: 3488: 3451: 3425: 3178: 3146: 3126: 3104: 3084: 3062: 3040: 3018: 2781: 2689: 2660: 2615: 2611:random vector is an 2589: 2441: 2401: 2379: 2345: 2243: 2217: 2029: 1987: 1940: 1900: 1878: 1854: 1834: 1828:Jacobian determinant 1806: 1786: 1757: 1733: 1704: 1680: 1660: 1533: 1508: 1479: 1455: 1433: 1403: 1383: 1357: 1335: 1294: 1269: 1219: 1194: 1178:, and the taking of 1172:algebraic operations 1097: 970: 895: 833: 800: 773: 746: 719: 684: 640: 598: 570: 546: 504: 420: 279:Law of large numbers 248:Marginal probability 173:Poisson distribution 22:Part of a series on 9358:The evolution of a 6533:random vector with 5898:of a random vector 5004:Two random vectors 4193:matrix computed as 3799:Two random vectors 3779: 3512: 2341:denotes support of 1649:Invertible mappings 1265:to a random vector 891:of a random vector 616:probability measure 238:Complementary event 180:Probability measure 168:Pareto distribution 163:Normal distribution 9661: 9602: 9576: 9534: 9388:(VAR) as follows: 9374: 9354:Vector time series 9336: 9307: 9275: 9216: 9183: 9139: 9052: 9022: 8996: 8959: 8916: 8894: 8857: 8644: 8610: 8608: 8268: 8127: 7936: 7862: 7860: 7462: 7399: 7307: 7305: 6857: 6736: 6689: 6649: 6623: 6603: 6563: 6523: 6497: 6465: 6445: 6423: 6386: 6249: 6224:Further properties 6209: 6034: 5967: 5930: 5910: 5875: 5573: 5495: 5473: 5451: 5415: 5393: 5371: 5319: 5297: 5275: 5235: 5192: 5086: 5064: 5038: 5016: 4979: 4920: 4847: 4766: 4661: 4538: 4466: 4440: 4420: 4398: 4378: 4356: 4334: 4318:By extension, the 4291: 4217: 4183: 4145: 4119: 4096:correlation matrix 4070: 4032: 3935: 3862: 3780: 3758: 3718: 3676: 3630: 3533: 3491: 3459: 3433: 3386: 3158: 3132: 3112: 3090: 3070: 3048: 3026: 3008:By extension, the 2981: 2761: 2672: 2627: 2601: 2538: 2421: 2397:is a fixed vector 2387: 2353: 2331: 2237:indicator function 2225: 2200: 2012: 1973: 1926: 1886: 1864: 1840: 1816: 1792: 1772: 1743: 1719: 1690: 1666: 1634: 1516: 1494: 1465: 1464: 1441: 1415: 1389: 1369: 1343: 1321: 1277: 1255: 1202: 1152: 1066: 950: 881: 813: 786: 759: 732: 697: 655: 604: 580: 552: 532: 475: 408:stochastic process 289:Boole's inequality 225:Stochastic process 114:Mutual exclusivity 31:Probability theory 9857:978-0-13-231123-6 9775:978-0-521-86470-1 9741:978-0-521-19395-5 9707:978-1-107-03975-9 9362:×1 random vector 9333: 9304: 9269: 9245: 9226:, is computed as 9213: 9180: 9072:linear regression 9066:Regression theory 6626:{\displaystyle A} 5933:{\displaystyle n} 4562: 4561: 4450:elements) is the 4443:{\displaystyle p} 4401:{\displaystyle n} 4315: 4314: 3608: 3410: 3409: 3142:elements) is the 3135:{\displaystyle p} 3093:{\displaystyle n} 3005: 3004: 2644:) element is the 2578:covariance matrix 2562: 2561: 2127: 2120: 1843:{\displaystyle g} 1795:{\displaystyle g} 1669:{\displaystyle g} 1632: 1392:{\displaystyle b} 1090: 1089: 607:{\displaystyle P} 499:probability space 375:of an individual 341: 340: 243:Joint probability 190:Bernoulli process 89:Probability space 9887: 9861: 9833: 9832: 9814: 9805: 9804: 9786: 9780: 9779: 9761: 9746: 9745: 9727: 9712: 9711: 9693: 9670: 9668: 9667: 9662: 9660: 9659: 9654: 9611: 9609: 9608: 9603: 9601: 9585: 9583: 9582: 9577: 9575: 9574: 9563: 9543: 9541: 9540: 9535: 9529: 9528: 9523: 9514: 9513: 9502: 9496: 9495: 9477: 9476: 9465: 9459: 9458: 9446: 9445: 9434: 9428: 9427: 9409: 9408: 9403: 9383: 9381: 9380: 9375: 9373: 9345: 9343: 9342: 9337: 9335: 9334: 9326: 9316: 9314: 9313: 9308: 9306: 9305: 9297: 9284: 9282: 9281: 9276: 9271: 9270: 9262: 9247: 9246: 9238: 9225: 9223: 9222: 9217: 9215: 9214: 9206: 9192: 9190: 9189: 9184: 9182: 9181: 9173: 9148: 9146: 9145: 9140: 9061: 9059: 9058: 9053: 9051: 9031: 9029: 9028: 9023: 9021: 9005: 9003: 9002: 8997: 8995: 8968: 8966: 8965: 8960: 8958: 8941:portfolio theory 8935:Portfolio theory 8925: 8923: 8922: 8917: 8915: 8903: 8901: 8900: 8895: 8893: 8892: 8891: 8886: 8866: 8864: 8863: 8858: 8853: 8852: 8851: 8846: 8821: 8820: 8819: 8814: 8786: 8785: 8784: 8779: 8766: 8765: 8764: 8759: 8731: 8727: 8723: 8715: 8714: 8709: 8697: 8689: 8688: 8683: 8653: 8651: 8650: 8645: 8643: 8619: 8617: 8616: 8611: 8609: 8578: 8574: 8570: 8569: 8565: 8564: 8563: 8493: 8489: 8485: 8484: 8480: 8479: 8478: 8414: 8410: 8406: 8384: 8383: 8378: 8374: 8343: 8339: 8338: 8337: 8328: 8327: 8315: 8314: 8277: 8275: 8274: 8269: 8264: 8260: 8259: 8258: 8205: 8201: 8182: 8181: 8136: 8134: 8133: 8128: 8126: 8122: 8103: 8102: 8067: 8063: 8041: 8040: 7984: 7983: 7945: 7943: 7942: 7937: 7935: 7931: 7910: 7909: 7904: 7900: 7871: 7869: 7868: 7863: 7861: 7854: 7850: 7828: 7827: 7789: 7785: 7781: 7780: 7779: 7770: 7769: 7760: 7759: 7747: 7746: 7737: 7736: 7721: 7720: 7708: 7707: 7678: 7674: 7670: 7669: 7668: 7663: 7659: 7658: 7654: 7653: 7652: 7643: 7642: 7622: 7621: 7612: 7611: 7596: 7592: 7588: 7587: 7569: 7568: 7533: 7532: 7523: 7522: 7510: 7509: 7471: 7469: 7468: 7463: 7408: 7406: 7405: 7400: 7371: 7370: 7361: 7360: 7348: 7347: 7316: 7314: 7313: 7308: 7306: 7293: 7292: 7277: 7276: 7267: 7266: 7254: 7253: 7229: 7225: 7224: 7215: 7214: 7205: 7204: 7192: 7191: 7176: 7175: 7166: 7165: 7153: 7152: 7128: 7124: 7123: 7114: 7113: 7104: 7103: 7082: 7081: 7057: 7056: 7047: 7046: 7034: 7033: 6999: 6998: 6976: 6975: 6905: 6904: 6866: 6864: 6863: 6858: 6856: 6855: 6846: 6829: 6809: 6808: 6803: 6797: 6777: 6769: 6745: 6743: 6742: 6737: 6735: 6727: 6726: 6717: 6716: 6711: 6698: 6696: 6695: 6690: 6688: 6680: 6679: 6674: 6658: 6656: 6655: 6650: 6632: 6630: 6629: 6624: 6612: 6610: 6609: 6604: 6593: 6572: 6570: 6569: 6564: 6553: 6532: 6530: 6529: 6524: 6506: 6504: 6503: 6498: 6496: 6474: 6472: 6471: 6466: 6454: 6452: 6451: 6446: 6444: 6432: 6430: 6429: 6424: 6422: 6421: 6420: 6415: 6395: 6393: 6392: 6387: 6379: 6378: 6377: 6372: 6344: 6327: 6326: 6317: 6297: 6289: 6288: 6283: 6258: 6256: 6255: 6250: 6248: 6218: 6216: 6215: 6210: 6208: 6204: 6203: 6199: 6198: 6189: 6188: 6170: 6169: 6160: 6159: 6126: 6122: 6121: 6117: 6112: 6111: 6106: 6073: 6065: 6064: 6063: 6043: 6041: 6040: 6035: 6033: 6032: 6023: 6022: 6004: 6003: 5988: 5976: 5974: 5973: 5968: 5966: 5958: 5957: 5952: 5939: 5937: 5936: 5931: 5919: 5917: 5916: 5911: 5909: 5884: 5882: 5881: 5876: 5871: 5870: 5852: 5851: 5839: 5838: 5837: 5836: 5818: 5817: 5797: 5796: 5778: 5777: 5765: 5764: 5763: 5762: 5744: 5743: 5723: 5722: 5704: 5703: 5691: 5690: 5672: 5671: 5659: 5658: 5657: 5656: 5638: 5637: 5625: 5624: 5606: 5605: 5582: 5580: 5579: 5574: 5572: 5571: 5553: 5552: 5540: 5539: 5521: 5520: 5504: 5502: 5501: 5496: 5494: 5482: 5480: 5479: 5474: 5472: 5460: 5458: 5457: 5452: 5450: 5436: 5424: 5422: 5421: 5416: 5414: 5402: 5400: 5399: 5394: 5392: 5380: 5378: 5377: 5372: 5367: 5353: 5352: 5351: 5328: 5326: 5325: 5320: 5318: 5306: 5304: 5303: 5298: 5296: 5284: 5282: 5281: 5276: 5271: 5263: 5262: 5261: 5244: 5242: 5241: 5236: 5231: 5223: 5222: 5221: 5201: 5199: 5198: 5193: 5188: 5180: 5179: 5178: 5162: 5154: 5153: 5152: 5136: 5122: 5121: 5120: 5095: 5093: 5092: 5087: 5085: 5073: 5071: 5070: 5065: 5063: 5047: 5045: 5044: 5039: 5037: 5025: 5023: 5022: 5017: 5015: 4988: 4986: 4985: 4980: 4969: 4964: 4963: 4958: 4929: 4927: 4926: 4921: 4919: 4918: 4909: 4908: 4884: 4883: 4868: 4856: 4854: 4853: 4848: 4846: 4845: 4836: 4835: 4811: 4810: 4795: 4775: 4773: 4772: 4767: 4765: 4764: 4755: 4738: 4721: 4720: 4719: 4714: 4701: 4700: 4699: 4694: 4670: 4668: 4667: 4662: 4660: 4659: 4650: 4633: 4616: 4615: 4614: 4609: 4596: 4595: 4594: 4589: 4556: 4547: 4545: 4544: 4539: 4534: 4533: 4528: 4522: 4505: 4504: 4503: 4498: 4480: 4475: 4473: 4472: 4467: 4449: 4447: 4446: 4441: 4429: 4427: 4426: 4421: 4419: 4407: 4405: 4404: 4399: 4387: 4385: 4384: 4379: 4377: 4365: 4363: 4362: 4357: 4355: 4343: 4341: 4340: 4335: 4333: 4309: 4300: 4298: 4297: 4292: 4287: 4286: 4285: 4279: 4273: 4256: 4255: 4254: 4249: 4231: 4226: 4224: 4223: 4218: 4216: 4215: 4210: 4204: 4192: 4190: 4189: 4184: 4154: 4152: 4151: 4146: 4128: 4126: 4125: 4120: 4079: 4077: 4076: 4071: 4069: 4068: 4067: 4062: 4041: 4039: 4038: 4033: 4031: 4030: 4021: 4004: 3984: 3983: 3978: 3972: 3944: 3942: 3941: 3936: 3934: 3933: 3924: 3923: 3899: 3898: 3883: 3871: 3869: 3868: 3863: 3861: 3860: 3851: 3850: 3826: 3825: 3810: 3795:Uncorrelatedness 3789: 3787: 3786: 3781: 3778: 3773: 3772: 3767: 3754: 3753: 3752: 3747: 3727: 3725: 3724: 3719: 3714: 3706: 3685: 3683: 3682: 3677: 3672: 3664: 3639: 3637: 3636: 3631: 3629: 3628: 3623: 3614: 3609: 3606: 3597: 3589: 3588: 3587: 3582: 3572: 3571: 3566: 3542: 3540: 3539: 3534: 3532: 3531: 3530: 3525: 3511: 3506: 3505: 3500: 3479:symmetric matrix 3468: 3466: 3465: 3460: 3458: 3442: 3440: 3439: 3434: 3432: 3404: 3395: 3393: 3392: 3387: 3385: 3384: 3375: 3358: 3338: 3337: 3332: 3326: 3306: 3305: 3293: 3276: 3262: 3245: 3222: 3214: 3197: 3196: 3195: 3190: 3172: 3167: 3165: 3164: 3159: 3141: 3139: 3138: 3133: 3121: 3119: 3118: 3113: 3111: 3099: 3097: 3096: 3091: 3079: 3077: 3076: 3071: 3069: 3057: 3055: 3054: 3049: 3047: 3035: 3033: 3032: 3027: 3025: 2999: 2990: 2988: 2987: 2982: 2980: 2979: 2970: 2953: 2933: 2932: 2927: 2921: 2901: 2900: 2888: 2871: 2857: 2840: 2817: 2800: 2799: 2798: 2793: 2775: 2770: 2768: 2767: 2762: 2760: 2759: 2747: 2730: 2716: 2699: 2681: 2679: 2678: 2673: 2636: 2634: 2633: 2628: 2610: 2608: 2607: 2602: 2556: 2547: 2545: 2544: 2539: 2537: 2536: 2535: 2522: 2521: 2485: 2484: 2457: 2435: 2430: 2428: 2427: 2422: 2417: 2396: 2394: 2393: 2388: 2386: 2362: 2360: 2359: 2354: 2352: 2340: 2338: 2337: 2332: 2330: 2329: 2308: 2300: 2299: 2298: 2282: 2268: 2257: 2256: 2255: 2234: 2232: 2231: 2226: 2224: 2209: 2207: 2206: 2201: 2196: 2195: 2194: 2181: 2173: 2168: 2167: 2163: 2155: 2154: 2139: 2133: 2129: 2128: 2126: 2122: 2121: 2119: 2118: 2109: 2108: 2099: 2089: 2085: 2077: 2076: 2075: 2064: 2056: 2048: 2047: 2046: 2021: 2019: 2018: 2013: 2008: 1994: 1982: 1980: 1979: 1974: 1963: 1962: 1953: 1935: 1933: 1932: 1927: 1922: 1914: 1913: 1912: 1895: 1893: 1892: 1887: 1885: 1873: 1871: 1870: 1865: 1863: 1862: 1849: 1847: 1846: 1841: 1825: 1823: 1822: 1817: 1815: 1814: 1801: 1799: 1798: 1793: 1781: 1779: 1778: 1773: 1771: 1770: 1765: 1752: 1750: 1749: 1744: 1742: 1741: 1728: 1726: 1725: 1720: 1718: 1717: 1712: 1699: 1697: 1696: 1691: 1689: 1688: 1675: 1673: 1672: 1667: 1643: 1641: 1640: 1635: 1633: 1631: 1630: 1625: 1617: 1611: 1592: 1591: 1583: 1574: 1573: 1572: 1561: 1547: 1546: 1545: 1525: 1523: 1522: 1517: 1515: 1503: 1501: 1500: 1495: 1493: 1492: 1491: 1474: 1472: 1471: 1466: 1463: 1450: 1448: 1447: 1442: 1440: 1424: 1422: 1421: 1416: 1398: 1396: 1395: 1390: 1378: 1376: 1375: 1370: 1352: 1350: 1349: 1344: 1342: 1330: 1328: 1327: 1322: 1314: 1309: 1301: 1286: 1284: 1283: 1278: 1276: 1264: 1262: 1261: 1256: 1254: 1253: 1248: 1239: 1238: 1233: 1211: 1209: 1208: 1203: 1201: 1161: 1159: 1158: 1153: 1151: 1150: 1149: 1139: 1138: 1120: 1119: 1104: 1084: 1075: 1073: 1072: 1067: 1062: 1061: 1049: 1048: 1030: 1029: 1017: 1016: 992: 984: 983: 982: 964: 959: 957: 956: 951: 949: 948: 947: 937: 936: 918: 917: 902: 890: 888: 887: 882: 862: 861: 856: 847: 846: 845: 822: 820: 819: 814: 812: 811: 795: 793: 792: 787: 785: 784: 768: 766: 765: 760: 758: 757: 741: 739: 738: 733: 731: 730: 706: 704: 703: 698: 696: 695: 664: 662: 661: 656: 654: 653: 648: 613: 611: 610: 605: 589: 587: 586: 581: 579: 578: 561: 559: 558: 553: 541: 539: 538: 533: 522: 521: 495:random variables 484: 482: 481: 476: 474: 473: 472: 462: 461: 443: 442: 427: 392:random variables 377:statistical unit 370:of mathematical 333: 326: 319: 109:Elementary event 41: 19: 18: 9895: 9894: 9890: 9889: 9888: 9886: 9885: 9884: 9865: 9864: 9858: 9842: 9840:Further reading 9837: 9836: 9829: 9821:. McGraw-Hill. 9815: 9808: 9801: 9787: 9783: 9776: 9762: 9749: 9742: 9728: 9715: 9708: 9694: 9690: 9685: 9655: 9650: 9649: 9647: 9644: 9643: 9629: 9597: 9595: 9592: 9591: 9564: 9559: 9558: 9556: 9553: 9552: 9524: 9519: 9518: 9503: 9498: 9497: 9491: 9487: 9466: 9461: 9460: 9454: 9450: 9435: 9430: 9429: 9423: 9419: 9404: 9399: 9398: 9396: 9393: 9392: 9369: 9367: 9364: 9363: 9356: 9325: 9324: 9322: 9319: 9318: 9296: 9295: 9293: 9290: 9289: 9261: 9260: 9237: 9236: 9234: 9231: 9230: 9205: 9204: 9202: 9199: 9198: 9172: 9171: 9169: 9166: 9165: 9116: 9113: 9112: 9095: 9068: 9047: 9045: 9042: 9041: 9017: 9015: 9012: 9011: 8991: 8989: 8986: 8985: 8954: 8952: 8949: 8948: 8937: 8932: 8911: 8909: 8906: 8905: 8887: 8882: 8881: 8877: 8875: 8872: 8871: 8847: 8842: 8841: 8837: 8815: 8810: 8809: 8805: 8780: 8775: 8774: 8770: 8760: 8755: 8754: 8750: 8719: 8710: 8705: 8704: 8693: 8684: 8679: 8678: 8674: 8670: 8662: 8659: 8658: 8639: 8637: 8634: 8633: 8626: 8607: 8606: 8576: 8575: 8559: 8555: 8527: 8523: 8510: 8506: 8491: 8490: 8474: 8470: 8439: 8435: 8428: 8424: 8412: 8411: 8379: 8364: 8360: 8359: 8358: 8354: 8344: 8333: 8329: 8323: 8319: 8310: 8306: 8305: 8301: 8291: 8289: 8286: 8285: 8254: 8250: 8219: 8215: 8177: 8173: 8160: 8156: 8148: 8145: 8144: 8098: 8094: 8081: 8077: 8036: 8032: 8019: 8015: 7979: 7975: 7961: 7958: 7957: 7915: 7911: 7905: 7890: 7886: 7885: 7883: 7880: 7879: 7859: 7858: 7823: 7819: 7806: 7802: 7787: 7786: 7775: 7771: 7765: 7761: 7755: 7751: 7742: 7738: 7732: 7728: 7716: 7712: 7703: 7699: 7695: 7691: 7676: 7675: 7664: 7648: 7644: 7638: 7634: 7633: 7629: 7617: 7613: 7607: 7603: 7602: 7598: 7597: 7583: 7579: 7564: 7560: 7559: 7555: 7554: 7550: 7537: 7528: 7524: 7518: 7514: 7505: 7501: 7488: 7486: 7483: 7482: 7421: 7418: 7417: 7366: 7362: 7356: 7352: 7343: 7339: 7328: 7325: 7324: 7304: 7303: 7288: 7284: 7272: 7268: 7262: 7258: 7249: 7245: 7227: 7226: 7220: 7216: 7210: 7206: 7200: 7196: 7187: 7183: 7171: 7167: 7161: 7157: 7148: 7144: 7126: 7125: 7119: 7115: 7109: 7105: 7099: 7095: 7077: 7073: 7052: 7048: 7042: 7038: 7029: 7025: 7009: 6994: 6990: 6978: 6977: 6971: 6967: 6909: 6900: 6896: 6880: 6878: 6875: 6874: 6851: 6847: 6842: 6825: 6804: 6799: 6798: 6793: 6773: 6765: 6754: 6751: 6750: 6746:, we see that: 6731: 6722: 6718: 6712: 6707: 6706: 6704: 6701: 6700: 6684: 6675: 6670: 6669: 6667: 6664: 6663: 6638: 6635: 6634: 6618: 6615: 6614: 6589: 6578: 6575: 6574: 6549: 6538: 6535: 6534: 6512: 6509: 6508: 6492: 6490: 6487: 6486: 6460: 6457: 6456: 6440: 6438: 6435: 6434: 6416: 6411: 6410: 6406: 6404: 6401: 6400: 6373: 6368: 6367: 6363: 6340: 6322: 6318: 6313: 6293: 6284: 6279: 6278: 6267: 6264: 6263: 6244: 6242: 6239: 6238: 6231: 6226: 6194: 6190: 6184: 6180: 6165: 6161: 6155: 6151: 6144: 6140: 6136: 6113: 6107: 6102: 6101: 6094: 6090: 6086: 6069: 6059: 6058: 6054: 6052: 6049: 6048: 6028: 6024: 6018: 6014: 5999: 5995: 5984: 5982: 5979: 5978: 5962: 5953: 5948: 5947: 5945: 5942: 5941: 5925: 5922: 5921: 5905: 5903: 5900: 5899: 5892: 5866: 5862: 5847: 5843: 5832: 5828: 5813: 5809: 5808: 5804: 5792: 5788: 5773: 5769: 5758: 5754: 5739: 5735: 5734: 5730: 5718: 5714: 5699: 5695: 5686: 5682: 5667: 5663: 5652: 5648: 5633: 5629: 5620: 5616: 5601: 5597: 5596: 5592: 5590: 5587: 5586: 5567: 5563: 5548: 5544: 5535: 5531: 5516: 5512: 5510: 5507: 5506: 5490: 5488: 5485: 5484: 5468: 5466: 5463: 5462: 5446: 5432: 5430: 5427: 5426: 5410: 5408: 5405: 5404: 5388: 5386: 5383: 5382: 5357: 5341: 5340: 5336: 5334: 5331: 5330: 5314: 5312: 5309: 5308: 5292: 5290: 5287: 5286: 5267: 5257: 5256: 5252: 5250: 5247: 5246: 5227: 5217: 5216: 5212: 5210: 5207: 5206: 5184: 5174: 5173: 5169: 5158: 5148: 5147: 5143: 5126: 5110: 5109: 5105: 5103: 5100: 5099: 5081: 5079: 5076: 5075: 5059: 5057: 5054: 5053: 5033: 5031: 5028: 5027: 5011: 5009: 5006: 5005: 5002: 4996: 4965: 4959: 4954: 4953: 4942: 4939: 4938: 4914: 4910: 4904: 4900: 4879: 4875: 4864: 4862: 4859: 4858: 4841: 4837: 4831: 4827: 4806: 4802: 4791: 4789: 4786: 4785: 4782: 4760: 4756: 4751: 4734: 4715: 4710: 4709: 4705: 4695: 4690: 4689: 4685: 4683: 4680: 4679: 4655: 4651: 4646: 4629: 4610: 4605: 4604: 4600: 4590: 4585: 4584: 4580: 4578: 4575: 4574: 4568: 4563: 4529: 4524: 4523: 4518: 4499: 4494: 4493: 4489: 4487: 4484: 4483: 4455: 4452: 4451: 4435: 4432: 4431: 4415: 4413: 4410: 4409: 4393: 4390: 4389: 4373: 4371: 4368: 4367: 4351: 4349: 4346: 4345: 4329: 4327: 4324: 4323: 4316: 4281: 4280: 4275: 4274: 4269: 4250: 4245: 4244: 4240: 4238: 4235: 4234: 4211: 4206: 4205: 4200: 4198: 4195: 4194: 4172: 4169: 4168: 4134: 4131: 4130: 4108: 4105: 4104: 4091: 4086: 4063: 4058: 4057: 4053: 4051: 4048: 4047: 4026: 4022: 4017: 4000: 3979: 3974: 3973: 3968: 3957: 3954: 3953: 3929: 3925: 3919: 3915: 3894: 3890: 3879: 3877: 3874: 3873: 3856: 3852: 3846: 3842: 3821: 3817: 3806: 3804: 3801: 3800: 3797: 3774: 3768: 3763: 3762: 3748: 3743: 3742: 3738: 3736: 3733: 3732: 3710: 3702: 3691: 3688: 3687: 3668: 3660: 3649: 3646: 3645: 3624: 3619: 3618: 3610: 3605: 3593: 3583: 3578: 3577: 3573: 3567: 3562: 3561: 3559: 3556: 3555: 3526: 3521: 3520: 3516: 3507: 3501: 3496: 3495: 3489: 3486: 3485: 3475: 3454: 3452: 3449: 3448: 3428: 3426: 3423: 3422: 3411: 3380: 3376: 3371: 3354: 3333: 3328: 3327: 3322: 3301: 3297: 3289: 3272: 3258: 3241: 3218: 3210: 3191: 3186: 3185: 3181: 3179: 3176: 3175: 3147: 3144: 3143: 3127: 3124: 3123: 3107: 3105: 3102: 3101: 3085: 3082: 3081: 3065: 3063: 3060: 3059: 3043: 3041: 3038: 3037: 3021: 3019: 3016: 3015: 3006: 2975: 2971: 2966: 2949: 2928: 2923: 2922: 2917: 2896: 2892: 2884: 2867: 2853: 2836: 2813: 2794: 2789: 2788: 2784: 2782: 2779: 2778: 2755: 2751: 2743: 2726: 2712: 2695: 2690: 2687: 2686: 2661: 2658: 2657: 2616: 2613: 2612: 2590: 2587: 2586: 2573: 2568: 2563: 2531: 2530: 2526: 2517: 2513: 2480: 2476: 2453: 2442: 2439: 2438: 2413: 2402: 2399: 2398: 2382: 2380: 2377: 2376: 2369: 2348: 2346: 2343: 2342: 2325: 2324: 2304: 2294: 2293: 2289: 2278: 2264: 2251: 2250: 2246: 2244: 2241: 2240: 2220: 2218: 2215: 2214: 2190: 2189: 2185: 2177: 2169: 2159: 2147: 2143: 2135: 2134: 2114: 2110: 2104: 2100: 2098: 2094: 2090: 2081: 2071: 2070: 2066: 2065: 2063: 2052: 2042: 2041: 2037: 2036: 2033: 2032: 2030: 2027: 2026: 2004: 1990: 1988: 1985: 1984: 1958: 1957: 1949: 1941: 1938: 1937: 1918: 1908: 1907: 1903: 1901: 1898: 1897: 1881: 1879: 1876: 1875: 1858: 1857: 1855: 1852: 1851: 1835: 1832: 1831: 1810: 1809: 1807: 1804: 1803: 1787: 1784: 1783: 1766: 1761: 1760: 1758: 1755: 1754: 1737: 1736: 1734: 1731: 1730: 1713: 1708: 1707: 1705: 1702: 1701: 1684: 1683: 1681: 1678: 1677: 1661: 1658: 1657: 1651: 1626: 1621: 1613: 1612: 1584: 1579: 1578: 1568: 1567: 1563: 1562: 1560: 1541: 1540: 1536: 1534: 1531: 1530: 1511: 1509: 1506: 1505: 1487: 1486: 1482: 1480: 1477: 1476: 1459: 1456: 1453: 1452: 1436: 1434: 1431: 1430: 1404: 1401: 1400: 1384: 1381: 1380: 1358: 1355: 1354: 1338: 1336: 1333: 1332: 1310: 1305: 1297: 1295: 1292: 1291: 1272: 1270: 1267: 1266: 1249: 1244: 1243: 1234: 1229: 1228: 1220: 1217: 1216: 1197: 1195: 1192: 1191: 1188: 1168: 1145: 1144: 1140: 1134: 1130: 1115: 1111: 1100: 1098: 1095: 1094: 1091: 1057: 1053: 1044: 1040: 1025: 1021: 1012: 1008: 988: 978: 977: 973: 971: 968: 967: 943: 942: 938: 932: 928: 913: 909: 898: 896: 893: 892: 857: 852: 851: 841: 840: 836: 834: 831: 830: 807: 803: 801: 798: 797: 780: 776: 774: 771: 770: 753: 749: 747: 744: 743: 726: 722: 720: 717: 716: 691: 687: 685: 682: 681: 649: 644: 643: 641: 638: 637: 634: 628: 599: 596: 595: 574: 573: 571: 568: 567: 547: 544: 543: 517: 516: 505: 502: 501: 468: 467: 463: 457: 453: 438: 434: 423: 421: 418: 417: 404:random sequence 348: 337: 185:Random variable 136:Bernoulli trial 17: 12: 11: 5: 9893: 9883: 9882: 9877: 9863: 9862: 9856: 9841: 9838: 9835: 9834: 9827: 9806: 9799: 9781: 9774: 9747: 9740: 9713: 9706: 9687: 9686: 9684: 9681: 9658: 9653: 9627: 9600: 9586:is called the 9573: 9570: 9567: 9562: 9545: 9544: 9532: 9527: 9522: 9517: 9512: 9509: 9506: 9501: 9494: 9490: 9486: 9483: 9480: 9475: 9472: 9469: 9464: 9457: 9453: 9449: 9444: 9441: 9438: 9433: 9426: 9422: 9418: 9415: 9412: 9407: 9402: 9372: 9355: 9352: 9332: 9329: 9303: 9300: 9286: 9285: 9274: 9268: 9265: 9259: 9256: 9253: 9250: 9244: 9241: 9212: 9209: 9179: 9176: 9150: 9149: 9138: 9135: 9132: 9129: 9126: 9123: 9120: 9093: 9067: 9064: 9050: 9020: 8994: 8957: 8936: 8933: 8931: 8928: 8914: 8890: 8885: 8880: 8868: 8867: 8856: 8850: 8845: 8840: 8836: 8833: 8830: 8827: 8824: 8818: 8813: 8808: 8804: 8801: 8798: 8795: 8792: 8789: 8783: 8778: 8773: 8769: 8763: 8758: 8753: 8749: 8746: 8743: 8740: 8737: 8734: 8730: 8726: 8722: 8718: 8713: 8708: 8703: 8700: 8696: 8692: 8687: 8682: 8677: 8673: 8669: 8666: 8642: 8632:random vector 8625: 8622: 8621: 8620: 8605: 8602: 8599: 8596: 8593: 8590: 8587: 8584: 8581: 8579: 8577: 8573: 8568: 8562: 8558: 8554: 8551: 8548: 8545: 8542: 8539: 8536: 8533: 8530: 8526: 8522: 8519: 8516: 8513: 8509: 8505: 8502: 8499: 8496: 8494: 8492: 8488: 8483: 8477: 8473: 8469: 8466: 8463: 8460: 8457: 8454: 8451: 8448: 8445: 8442: 8438: 8434: 8431: 8427: 8423: 8420: 8417: 8415: 8413: 8409: 8405: 8402: 8399: 8396: 8393: 8390: 8387: 8382: 8377: 8373: 8370: 8367: 8363: 8357: 8353: 8350: 8347: 8345: 8342: 8336: 8332: 8326: 8322: 8318: 8313: 8309: 8304: 8300: 8297: 8294: 8293: 8279: 8278: 8267: 8263: 8257: 8253: 8249: 8246: 8243: 8240: 8237: 8234: 8231: 8228: 8225: 8222: 8218: 8214: 8211: 8208: 8204: 8200: 8197: 8194: 8191: 8188: 8185: 8180: 8176: 8172: 8169: 8166: 8163: 8159: 8155: 8152: 8138: 8137: 8125: 8121: 8118: 8115: 8112: 8109: 8106: 8101: 8097: 8093: 8090: 8087: 8084: 8080: 8076: 8073: 8070: 8066: 8062: 8059: 8056: 8053: 8050: 8047: 8044: 8039: 8035: 8031: 8028: 8025: 8022: 8018: 8014: 8011: 8008: 8005: 8002: 7999: 7996: 7993: 7990: 7987: 7982: 7978: 7974: 7971: 7968: 7965: 7947: 7946: 7934: 7930: 7927: 7924: 7921: 7918: 7914: 7908: 7903: 7899: 7896: 7893: 7889: 7873: 7872: 7857: 7853: 7849: 7846: 7843: 7840: 7837: 7834: 7831: 7826: 7822: 7818: 7815: 7812: 7809: 7805: 7801: 7798: 7795: 7792: 7790: 7788: 7784: 7778: 7774: 7768: 7764: 7758: 7754: 7750: 7745: 7741: 7735: 7731: 7727: 7724: 7719: 7715: 7711: 7706: 7702: 7698: 7694: 7690: 7687: 7684: 7681: 7679: 7677: 7673: 7667: 7662: 7657: 7651: 7647: 7641: 7637: 7632: 7628: 7625: 7620: 7616: 7610: 7606: 7601: 7595: 7591: 7586: 7582: 7578: 7575: 7572: 7567: 7563: 7558: 7553: 7549: 7546: 7543: 7540: 7538: 7536: 7531: 7527: 7521: 7517: 7513: 7508: 7504: 7500: 7497: 7494: 7491: 7490: 7461: 7458: 7455: 7452: 7449: 7446: 7443: 7440: 7437: 7434: 7431: 7428: 7425: 7410: 7409: 7398: 7395: 7392: 7389: 7386: 7383: 7380: 7377: 7374: 7369: 7365: 7359: 7355: 7351: 7346: 7342: 7338: 7335: 7332: 7318: 7317: 7302: 7299: 7296: 7291: 7287: 7283: 7280: 7275: 7271: 7265: 7261: 7257: 7252: 7248: 7244: 7241: 7238: 7235: 7232: 7230: 7228: 7223: 7219: 7213: 7209: 7203: 7199: 7195: 7190: 7186: 7182: 7179: 7174: 7170: 7164: 7160: 7156: 7151: 7147: 7143: 7140: 7137: 7134: 7131: 7129: 7127: 7122: 7118: 7112: 7108: 7102: 7098: 7094: 7091: 7088: 7085: 7080: 7076: 7072: 7069: 7066: 7063: 7060: 7055: 7051: 7045: 7041: 7037: 7032: 7028: 7024: 7021: 7018: 7015: 7012: 7010: 7008: 7005: 7002: 6997: 6993: 6989: 6986: 6983: 6980: 6979: 6974: 6970: 6966: 6963: 6960: 6957: 6954: 6951: 6948: 6945: 6942: 6939: 6936: 6933: 6930: 6927: 6924: 6921: 6918: 6915: 6912: 6910: 6908: 6903: 6899: 6895: 6892: 6889: 6886: 6883: 6882: 6868: 6867: 6854: 6850: 6845: 6841: 6838: 6835: 6832: 6828: 6824: 6821: 6818: 6815: 6812: 6807: 6802: 6796: 6792: 6789: 6786: 6783: 6780: 6776: 6772: 6768: 6764: 6761: 6758: 6734: 6730: 6725: 6721: 6715: 6710: 6687: 6683: 6678: 6673: 6648: 6645: 6642: 6622: 6602: 6599: 6596: 6592: 6588: 6585: 6582: 6562: 6559: 6556: 6552: 6548: 6545: 6542: 6522: 6519: 6516: 6495: 6475:refers to the 6464: 6443: 6419: 6414: 6409: 6397: 6396: 6385: 6382: 6376: 6371: 6366: 6362: 6359: 6356: 6353: 6350: 6347: 6343: 6339: 6336: 6333: 6330: 6325: 6321: 6316: 6312: 6309: 6306: 6303: 6300: 6296: 6292: 6287: 6282: 6277: 6274: 6271: 6247: 6235:quadratic form 6230: 6227: 6225: 6222: 6221: 6220: 6207: 6202: 6197: 6193: 6187: 6183: 6179: 6176: 6173: 6168: 6164: 6158: 6154: 6150: 6147: 6143: 6139: 6135: 6132: 6129: 6125: 6120: 6116: 6110: 6105: 6100: 6097: 6093: 6089: 6085: 6082: 6079: 6076: 6072: 6068: 6062: 6057: 6031: 6027: 6021: 6017: 6013: 6010: 6007: 6002: 5998: 5994: 5991: 5987: 5965: 5961: 5956: 5951: 5929: 5908: 5891: 5888: 5887: 5886: 5874: 5869: 5865: 5861: 5858: 5855: 5850: 5846: 5842: 5835: 5831: 5827: 5824: 5821: 5816: 5812: 5807: 5803: 5800: 5795: 5791: 5787: 5784: 5781: 5776: 5772: 5768: 5761: 5757: 5753: 5750: 5747: 5742: 5738: 5733: 5729: 5726: 5721: 5717: 5713: 5710: 5707: 5702: 5698: 5694: 5689: 5685: 5681: 5678: 5675: 5670: 5666: 5662: 5655: 5651: 5647: 5644: 5641: 5636: 5632: 5628: 5623: 5619: 5615: 5612: 5609: 5604: 5600: 5595: 5570: 5566: 5562: 5559: 5556: 5551: 5547: 5543: 5538: 5534: 5530: 5527: 5524: 5519: 5515: 5493: 5471: 5449: 5445: 5439: 5435: 5413: 5391: 5370: 5366: 5363: 5360: 5356: 5350: 5347: 5344: 5339: 5317: 5295: 5274: 5270: 5266: 5260: 5255: 5234: 5230: 5226: 5220: 5215: 5203: 5202: 5191: 5187: 5183: 5177: 5172: 5168: 5165: 5161: 5157: 5151: 5146: 5142: 5139: 5135: 5132: 5129: 5125: 5119: 5116: 5113: 5108: 5084: 5062: 5036: 5014: 4998:Main article: 4995: 4992: 4991: 4990: 4978: 4975: 4972: 4968: 4962: 4957: 4952: 4949: 4946: 4917: 4913: 4907: 4903: 4899: 4896: 4893: 4890: 4887: 4882: 4878: 4874: 4871: 4867: 4844: 4840: 4834: 4830: 4826: 4823: 4820: 4817: 4814: 4809: 4805: 4801: 4798: 4794: 4781: 4778: 4777: 4776: 4763: 4759: 4754: 4750: 4747: 4744: 4741: 4737: 4733: 4730: 4727: 4724: 4718: 4713: 4708: 4704: 4698: 4693: 4688: 4673: 4672: 4658: 4654: 4649: 4645: 4642: 4639: 4636: 4632: 4628: 4625: 4622: 4619: 4613: 4608: 4603: 4599: 4593: 4588: 4583: 4567: 4564: 4560: 4559: 4550: 4548: 4537: 4532: 4527: 4521: 4517: 4514: 4511: 4508: 4502: 4497: 4492: 4478: 4465: 4462: 4459: 4439: 4418: 4397: 4376: 4354: 4332: 4313: 4312: 4303: 4301: 4290: 4284: 4278: 4272: 4268: 4265: 4262: 4259: 4253: 4248: 4243: 4229: 4214: 4209: 4203: 4182: 4179: 4176: 4155:matrix whose ( 4144: 4141: 4138: 4118: 4115: 4112: 4090: 4087: 4085: 4082: 4066: 4061: 4056: 4044: 4043: 4029: 4025: 4020: 4016: 4013: 4010: 4007: 4003: 3999: 3996: 3993: 3990: 3987: 3982: 3977: 3971: 3967: 3964: 3961: 3932: 3928: 3922: 3918: 3914: 3911: 3908: 3905: 3902: 3897: 3893: 3889: 3886: 3882: 3859: 3855: 3849: 3845: 3841: 3838: 3835: 3832: 3829: 3824: 3820: 3816: 3813: 3809: 3796: 3793: 3792: 3791: 3777: 3771: 3766: 3761: 3757: 3751: 3746: 3741: 3717: 3713: 3709: 3705: 3701: 3698: 3695: 3675: 3671: 3667: 3663: 3659: 3656: 3653: 3642: 3641: 3627: 3622: 3617: 3613: 3603: 3600: 3596: 3592: 3586: 3581: 3576: 3570: 3565: 3545: 3544: 3529: 3524: 3519: 3515: 3510: 3504: 3499: 3494: 3474: 3471: 3457: 3431: 3408: 3407: 3398: 3396: 3383: 3379: 3374: 3370: 3367: 3364: 3361: 3357: 3353: 3350: 3347: 3344: 3341: 3336: 3331: 3325: 3321: 3318: 3315: 3312: 3309: 3304: 3300: 3296: 3292: 3288: 3285: 3282: 3279: 3275: 3271: 3268: 3265: 3261: 3257: 3254: 3251: 3248: 3244: 3240: 3237: 3234: 3231: 3228: 3225: 3221: 3217: 3213: 3209: 3206: 3203: 3200: 3194: 3189: 3184: 3170: 3157: 3154: 3151: 3131: 3110: 3089: 3068: 3046: 3024: 3003: 3002: 2993: 2991: 2978: 2974: 2969: 2965: 2962: 2959: 2956: 2952: 2948: 2945: 2942: 2939: 2936: 2931: 2926: 2920: 2916: 2913: 2910: 2907: 2904: 2899: 2895: 2891: 2887: 2883: 2880: 2877: 2874: 2870: 2866: 2863: 2860: 2856: 2852: 2849: 2846: 2843: 2839: 2835: 2832: 2829: 2826: 2823: 2820: 2816: 2812: 2809: 2806: 2803: 2797: 2792: 2787: 2773: 2758: 2754: 2750: 2746: 2742: 2739: 2736: 2733: 2729: 2725: 2722: 2719: 2715: 2711: 2708: 2705: 2702: 2698: 2694: 2671: 2668: 2665: 2626: 2623: 2620: 2600: 2597: 2594: 2572: 2569: 2567: 2564: 2560: 2559: 2550: 2548: 2534: 2529: 2525: 2520: 2516: 2512: 2509: 2506: 2503: 2500: 2497: 2494: 2491: 2488: 2483: 2479: 2475: 2472: 2469: 2466: 2463: 2460: 2456: 2452: 2449: 2446: 2433: 2420: 2416: 2412: 2409: 2406: 2385: 2373:expected value 2368: 2367:Expected value 2365: 2351: 2328: 2323: 2320: 2317: 2314: 2311: 2307: 2303: 2297: 2292: 2288: 2285: 2281: 2277: 2274: 2271: 2267: 2263: 2260: 2254: 2249: 2223: 2211: 2210: 2199: 2193: 2188: 2184: 2180: 2176: 2172: 2166: 2162: 2158: 2153: 2150: 2146: 2142: 2138: 2132: 2125: 2117: 2113: 2107: 2103: 2097: 2093: 2088: 2084: 2080: 2074: 2069: 2062: 2059: 2055: 2051: 2045: 2040: 2035: 2011: 2007: 2003: 2000: 1997: 1993: 1972: 1969: 1966: 1961: 1956: 1952: 1948: 1945: 1936:and satisfies 1925: 1921: 1917: 1911: 1906: 1884: 1861: 1839: 1813: 1791: 1769: 1764: 1740: 1729:onto a subset 1716: 1711: 1687: 1665: 1650: 1647: 1646: 1645: 1629: 1624: 1620: 1616: 1610: 1607: 1604: 1601: 1598: 1595: 1590: 1587: 1582: 1577: 1571: 1566: 1559: 1556: 1553: 1550: 1544: 1539: 1514: 1490: 1485: 1462: 1439: 1427: 1426: 1425:column vector. 1414: 1411: 1408: 1388: 1368: 1365: 1362: 1341: 1320: 1317: 1313: 1308: 1304: 1300: 1275: 1252: 1247: 1242: 1237: 1232: 1227: 1224: 1200: 1187: 1184: 1180:inner products 1167: 1164: 1148: 1143: 1137: 1133: 1129: 1126: 1123: 1118: 1114: 1110: 1107: 1103: 1088: 1087: 1078: 1076: 1065: 1060: 1056: 1052: 1047: 1043: 1039: 1036: 1033: 1028: 1024: 1020: 1015: 1011: 1007: 1004: 1001: 998: 995: 991: 987: 981: 976: 962: 960:is defined as 946: 941: 935: 931: 927: 924: 921: 916: 912: 908: 905: 901: 880: 877: 874: 871: 868: 865: 860: 855: 850: 844: 839: 810: 806: 783: 779: 756: 752: 729: 725: 694: 690: 652: 647: 630:Main article: 627: 624: 603: 577: 551: 531: 528: 525: 520: 515: 512: 509: 471: 466: 460: 456: 452: 449: 446: 441: 437: 433: 430: 426: 339: 338: 336: 335: 328: 321: 313: 310: 309: 308: 307: 302: 294: 293: 292: 291: 286: 284:Bayes' theorem 281: 276: 271: 266: 258: 257: 256: 255: 250: 245: 240: 232: 231: 230: 229: 228: 227: 222: 217: 215:Observed value 212: 207: 202: 200:Expected value 197: 192: 182: 177: 176: 175: 170: 165: 160: 155: 150: 140: 139: 138: 128: 127: 126: 121: 116: 111: 106: 96: 91: 83: 82: 81: 80: 75: 70: 69: 68: 58: 57: 56: 43: 42: 34: 33: 27: 26: 15: 9: 6: 4: 3: 2: 9892: 9881: 9878: 9876: 9873: 9872: 9870: 9859: 9853: 9849: 9844: 9843: 9830: 9828:0-07-033962-7 9824: 9820: 9813: 9811: 9802: 9800:0-07-048477-5 9796: 9792: 9785: 9777: 9771: 9767: 9760: 9758: 9756: 9754: 9752: 9743: 9737: 9733: 9726: 9724: 9722: 9720: 9718: 9709: 9703: 9699: 9692: 9688: 9680: 9678: 9674: 9656: 9641: 9638: 9635: ×  9634: 9630: 9623: 9619: 9615: 9589: 9571: 9568: 9565: 9550: 9530: 9525: 9515: 9510: 9507: 9504: 9492: 9488: 9484: 9481: 9478: 9473: 9470: 9467: 9455: 9451: 9447: 9442: 9439: 9436: 9424: 9420: 9416: 9413: 9410: 9405: 9391: 9390: 9389: 9387: 9361: 9351: 9349: 9327: 9298: 9272: 9263: 9257: 9254: 9251: 9248: 9239: 9229: 9228: 9227: 9207: 9196: 9174: 9163: 9159: 9155: 9136: 9133: 9130: 9127: 9124: 9121: 9118: 9111: 9110: 9109: 9107: 9104: 9103:design matrix 9100: 9096: 9089: 9085: 9081: 9077: 9073: 9063: 9039: 9035: 9009: 8984: 8980: 8976: 8972: 8946: 8942: 8927: 8878: 8838: 8834: 8828: 8825: 8806: 8802: 8796: 8793: 8790: 8771: 8767: 8751: 8747: 8741: 8738: 8735: 8732: 8728: 8716: 8711: 8690: 8685: 8671: 8667: 8657: 8656: 8655: 8631: 8603: 8597: 8594: 8588: 8585: 8582: 8580: 8571: 8566: 8560: 8552: 8549: 8546: 8537: 8534: 8531: 8524: 8520: 8514: 8511: 8507: 8503: 8500: 8497: 8495: 8486: 8481: 8475: 8467: 8464: 8461: 8452: 8449: 8446: 8440: 8436: 8432: 8429: 8425: 8421: 8418: 8416: 8407: 8400: 8397: 8394: 8391: 8388: 8380: 8375: 8371: 8368: 8365: 8361: 8355: 8351: 8348: 8346: 8340: 8334: 8330: 8324: 8320: 8316: 8311: 8307: 8302: 8298: 8295: 8284: 8283: 8282: 8265: 8261: 8255: 8247: 8244: 8241: 8232: 8229: 8226: 8220: 8216: 8212: 8209: 8206: 8202: 8195: 8192: 8189: 8183: 8178: 8170: 8167: 8164: 8157: 8153: 8150: 8143: 8142: 8141: 8123: 8116: 8113: 8110: 8104: 8099: 8091: 8088: 8085: 8078: 8074: 8071: 8068: 8064: 8057: 8054: 8051: 8048: 8045: 8037: 8029: 8026: 8023: 8016: 8012: 8009: 8006: 8000: 7997: 7994: 7991: 7988: 7980: 7972: 7969: 7966: 7956: 7955: 7954: 7952: 7932: 7928: 7925: 7922: 7919: 7916: 7912: 7906: 7901: 7897: 7894: 7891: 7887: 7878: 7877: 7876: 7855: 7851: 7844: 7841: 7838: 7835: 7832: 7824: 7816: 7813: 7810: 7803: 7799: 7793: 7791: 7782: 7776: 7766: 7762: 7756: 7752: 7748: 7743: 7739: 7733: 7729: 7717: 7713: 7709: 7704: 7700: 7692: 7688: 7682: 7680: 7671: 7665: 7660: 7655: 7649: 7645: 7639: 7635: 7630: 7626: 7623: 7618: 7614: 7608: 7604: 7599: 7593: 7584: 7580: 7573: 7570: 7565: 7561: 7556: 7551: 7547: 7541: 7539: 7529: 7525: 7519: 7515: 7511: 7506: 7502: 7495: 7492: 7481: 7480: 7479: 7478: 7473: 7456: 7453: 7447: 7444: 7441: 7435: 7432: 7426: 7423: 7415: 7396: 7390: 7387: 7381: 7378: 7375: 7367: 7363: 7357: 7353: 7349: 7344: 7340: 7333: 7330: 7323: 7322: 7321: 7300: 7297: 7294: 7289: 7285: 7281: 7273: 7269: 7263: 7259: 7255: 7250: 7246: 7239: 7236: 7233: 7231: 7221: 7211: 7207: 7201: 7197: 7188: 7184: 7180: 7172: 7168: 7162: 7158: 7154: 7149: 7145: 7138: 7135: 7132: 7130: 7120: 7110: 7106: 7100: 7096: 7089: 7078: 7074: 7067: 7061: 7053: 7049: 7043: 7039: 7035: 7030: 7026: 7019: 7016: 7013: 7011: 7003: 7000: 6995: 6991: 6984: 6972: 6964: 6958: 6949: 6943: 6937: 6931: 6928: 6925: 6919: 6916: 6913: 6911: 6901: 6897: 6893: 6887: 6873: 6872: 6871: 6852: 6836: 6819: 6813: 6805: 6787: 6781: 6770: 6759: 6756: 6749: 6748: 6747: 6728: 6723: 6719: 6713: 6681: 6676: 6660: 6646: 6643: 6640: 6620: 6600: 6597: 6583: 6580: 6560: 6557: 6543: 6520: 6517: 6514: 6484: 6480: 6478: 6462: 6407: 6383: 6364: 6360: 6354: 6351: 6348: 6334: 6328: 6323: 6307: 6301: 6290: 6285: 6272: 6262: 6261: 6260: 6236: 6205: 6195: 6191: 6185: 6181: 6177: 6174: 6171: 6166: 6162: 6156: 6152: 6145: 6141: 6137: 6133: 6127: 6123: 6108: 6103: 6095: 6091: 6087: 6083: 6077: 6070: 6055: 6047: 6046: 6045: 6029: 6019: 6015: 6011: 6008: 6005: 6000: 5996: 5989: 5985: 5954: 5927: 5897: 5867: 5863: 5859: 5856: 5853: 5848: 5844: 5833: 5829: 5825: 5822: 5819: 5814: 5810: 5805: 5801: 5793: 5789: 5785: 5782: 5779: 5774: 5770: 5759: 5755: 5751: 5748: 5745: 5740: 5736: 5731: 5727: 5719: 5715: 5711: 5708: 5705: 5700: 5696: 5692: 5687: 5683: 5679: 5676: 5673: 5668: 5664: 5653: 5649: 5645: 5642: 5639: 5634: 5630: 5626: 5621: 5617: 5613: 5610: 5607: 5602: 5598: 5593: 5585: 5584: 5583: 5568: 5564: 5560: 5557: 5554: 5549: 5545: 5541: 5536: 5532: 5528: 5525: 5522: 5517: 5513: 5443: 5437: 5337: 5253: 5213: 5170: 5166: 5144: 5140: 5106: 5098: 5097: 5096: 5051: 5001: 4976: 4973: 4960: 4947: 4937: 4936: 4935: 4933: 4915: 4905: 4901: 4897: 4894: 4891: 4888: 4885: 4880: 4876: 4869: 4842: 4832: 4828: 4824: 4821: 4818: 4815: 4812: 4807: 4803: 4796: 4780:Orthogonality 4761: 4745: 4728: 4722: 4702: 4678: 4677: 4676: 4656: 4640: 4623: 4617: 4597: 4573: 4572: 4571: 4558: 4551: 4549: 4530: 4512: 4506: 4482: 4481: 4477: 4463: 4460: 4457: 4437: 4408:elements and 4395: 4321: 4311: 4304: 4302: 4263: 4257: 4233: 4232: 4228: 4212: 4180: 4177: 4174: 4166: 4162: 4158: 4142: 4139: 4136: 4116: 4113: 4110: 4102: 4101:second moment 4099:(also called 4098: 4097: 4081: 4027: 4011: 3994: 3988: 3980: 3962: 3952: 3951: 3950: 3948: 3930: 3920: 3916: 3912: 3909: 3906: 3903: 3900: 3895: 3891: 3884: 3857: 3847: 3843: 3839: 3836: 3833: 3830: 3827: 3822: 3818: 3811: 3775: 3755: 3731: 3730: 3729: 3707: 3696: 3693: 3665: 3654: 3651: 3625: 3615: 3607:for all  3601: 3598: 3590: 3568: 3554: 3553: 3552: 3550: 3513: 3508: 3484: 3483: 3482: 3480: 3470: 3446: 3420: 3416: 3406: 3399: 3397: 3381: 3365: 3348: 3342: 3334: 3316: 3310: 3302: 3283: 3277: 3252: 3246: 3232: 3226: 3215: 3204: 3201: 3198: 3174: 3173: 3169: 3155: 3152: 3149: 3129: 3100:elements and 3087: 3013: 3012: 3001: 2994: 2992: 2976: 2960: 2943: 2937: 2929: 2911: 2905: 2897: 2878: 2872: 2847: 2841: 2827: 2821: 2807: 2804: 2801: 2777: 2776: 2772: 2756: 2737: 2731: 2706: 2700: 2685: 2669: 2666: 2663: 2655: 2651: 2647: 2643: 2639: 2624: 2621: 2618: 2598: 2595: 2592: 2584: 2581:(also called 2580: 2579: 2558: 2551: 2549: 2518: 2514: 2507: 2501: 2498: 2495: 2492: 2489: 2481: 2477: 2470: 2461: 2447: 2437: 2436: 2432: 2407: 2374: 2364: 2321: 2315: 2312: 2290: 2286: 2272: 2269: 2258: 2247: 2238: 2186: 2182: 2151: 2148: 2144: 2140: 2130: 2123: 2091: 2067: 2060: 2038: 2025: 2024: 2023: 1998: 1995: 1970: 1967: 1954: 1943: 1904: 1837: 1829: 1789: 1767: 1714: 1663: 1654: 1602: 1599: 1596: 1588: 1585: 1564: 1557: 1551: 1537: 1529: 1528: 1527: 1483: 1412: 1409: 1406: 1386: 1366: 1363: 1360: 1318: 1315: 1302: 1290: 1289: 1288: 1250: 1235: 1225: 1222: 1215: 1183: 1181: 1177: 1173: 1163: 1135: 1131: 1127: 1124: 1121: 1116: 1112: 1105: 1086: 1079: 1077: 1058: 1054: 1050: 1045: 1041: 1037: 1034: 1031: 1026: 1022: 1018: 1013: 1009: 1002: 996: 974: 966: 965: 961: 933: 929: 925: 922: 919: 914: 910: 903: 875: 872: 869: 858: 848: 837: 829: 824: 808: 804: 781: 777: 754: 750: 727: 723: 714: 710: 692: 688: 679: 678:distributions 674: 672: 668: 667:Borel algebra 650: 633: 623: 621: 617: 601: 593: 592:sigma-algebra 565: 526: 523: 513: 500: 496: 492: 489:, which is a 488: 458: 454: 450: 447: 444: 439: 435: 428: 416: 415:column vector 411: 409: 405: 401: 397: 396:random matrix 393: 388: 386: 382: 378: 373: 369: 366:is a list or 365: 364:random vector 361: 357: 353: 346: 334: 329: 327: 322: 320: 315: 314: 312: 311: 306: 303: 301: 298: 297: 296: 295: 290: 287: 285: 282: 280: 277: 275: 272: 270: 267: 265: 262: 261: 260: 259: 254: 251: 249: 246: 244: 241: 239: 236: 235: 234: 233: 226: 223: 221: 218: 216: 213: 211: 208: 206: 203: 201: 198: 196: 193: 191: 188: 187: 186: 183: 181: 178: 174: 171: 169: 166: 164: 161: 159: 156: 154: 151: 149: 146: 145: 144: 141: 137: 134: 133: 132: 129: 125: 122: 120: 117: 115: 112: 110: 107: 105: 102: 101: 100: 97: 95: 92: 90: 87: 86: 85: 84: 79: 76: 74: 73:Indeterminism 71: 67: 64: 63: 62: 59: 55: 52: 51: 50: 47: 46: 45: 44: 40: 36: 35: 32: 29: 28: 25: 21: 20: 9847: 9818: 9790: 9784: 9765: 9731: 9697: 9691: 9672: 9636: 9632: 9625: 9617: 9613: 9587: 9548: 9546: 9359: 9357: 9347: 9287: 9194: 9157: 9153: 9151: 9105: 9098: 9091: 9087: 9083: 9079: 9075: 9069: 9037: 9033: 9007: 8982: 8978: 8974: 8970: 8938: 8930:Applications 8870:where again 8869: 8654:as follows: 8627: 8280: 8139: 7948: 7874: 7474: 7411: 7319: 6869: 6661: 6482: 6481: 6398: 6259:as follows: 6232: 5893: 5204: 5049: 5003: 4994:Independence 4931: 4783: 4674: 4569: 4552: 4319: 4317: 4305: 4164: 4160: 4156: 4100: 4094: 4092: 4045: 3947:uncorrelated 3946: 3798: 3643: 3546: 3476: 3444: 3418: 3414: 3412: 3400: 3009: 3007: 2995: 2653: 2649: 2648:between the 2641: 2582: 2576: 2574: 2552: 2370: 2235:denotes the 2212: 1826:and let the 1655: 1652: 1428: 1189: 1169: 1092: 1080: 827: 825: 675: 635: 564:sample space 412: 389: 380: 363: 359: 349: 305:Tree diagram 300:Venn diagram 264:Independence 210:Markov chain 94:Sample space 9590:-th lag of 9164:, a vector 5052:if for all 5050:independent 5048:are called 4930:are called 4089:Definitions 3945:are called 3447:element of 3421:element of 2684:computed as 2571:Definitions 1379:matrix and 707:are called 620:probability 400:random tree 385:real number 352:probability 220:Random walk 61:Determinism 49:Probability 9869:Categories 9683:References 9622:intercepts 9547:where the 9197:, denoted 7875:And since 4932:orthogonal 4566:Properties 3473:Properties 2646:covariance 491:row vector 356:statistics 131:Experiment 78:Randomness 24:statistics 9569:− 9508:− 9482:⋯ 9471:− 9440:− 9331:^ 9302:^ 9299:β 9267:^ 9264:β 9255:− 9243:^ 9211:^ 9178:^ 9175:β 9128:β 8829:⁡ 8797:⁡ 8742:⁡ 8668:⁡ 8589:⁡ 8553:μ 8550:− 8538:μ 8535:− 8521:⁡ 8515:⋅ 8504:⁡ 8468:μ 8465:− 8453:μ 8450:− 8433:⁡ 8401:μ 8395:− 8372:μ 8369:− 8299:⁡ 8248:μ 8245:− 8233:μ 8230:− 8213:⁡ 8196:μ 8193:− 8171:μ 8168:− 8154:⁡ 8117:μ 8114:− 8092:μ 8089:− 8075:⁡ 8058:μ 8052:− 8030:μ 8027:− 8013:⁡ 8001:μ 7995:− 7973:μ 7970:− 7929:μ 7923:− 7898:μ 7895:− 7845:μ 7839:− 7817:μ 7814:− 7800:⁡ 7753:μ 7749:− 7714:μ 7710:− 7689:⁡ 7624:− 7571:− 7548:⁡ 7496:⁡ 7448:⁡ 7427:⁡ 7382:⁡ 7334:⁡ 7298:μ 7286:μ 7240:⁡ 7198:μ 7185:μ 7139:⁡ 7090:⁡ 7068:⁡ 7020:⁡ 6985:⁡ 6959:⁡ 6944:⁡ 6920:⁡ 6888:⁡ 6837:⁡ 6820:⁡ 6814:− 6788:⁡ 6760:⁡ 6644:× 6584:⁡ 6561:μ 6544:⁡ 6518:× 6355:⁡ 6335:⁡ 6308:⁡ 6273:⁡ 6182:ω 6175:… 6153:ω 6134:⁡ 6104:ω 6084:⁡ 6071:ω 6056:φ 6016:ω 6009:… 5997:ω 5986:ω 5960:→ 5857:… 5823:… 5802:⋅ 5783:… 5749:… 5709:… 5677:… 5643:… 5611:… 5558:… 5526:… 5444:⊥ 5438:⊥ 5167:⋅ 4948:⁡ 4746:⁡ 4729:⁡ 4641:⁡ 4624:⁡ 4513:⁡ 4461:× 4264:⁡ 4178:× 4140:× 4114:× 4080:is zero. 4012:⁡ 3995:⁡ 3963:⁡ 3697:⁡ 3655:⁡ 3616:∈ 3599:≥ 3591:⁡ 3366:⁡ 3349:⁡ 3343:− 3317:⁡ 3284:⁡ 3278:− 3253:⁡ 3247:− 3233:⁡ 3205:⁡ 3153:× 2961:⁡ 2944:⁡ 2938:− 2912:⁡ 2879:⁡ 2873:− 2848:⁡ 2842:− 2828:⁡ 2808:⁡ 2738:⁡ 2732:− 2707:⁡ 2701:− 2667:× 2622:× 2596:× 2508:⁡ 2471:⁡ 2448:⁡ 2408:⁡ 2322:⊆ 2183:∈ 2149:− 2112:∂ 2102:∂ 1955:∈ 1600:− 1586:− 1410:× 1364:× 1241:→ 1226:: 1125:… 1051:≤ 1035:… 1019:≤ 1003:⁡ 923:… 864:↦ 665:with the 550:Ω 511:Ω 487:transpose 448:… 394:, e.g. a 372:variables 124:Singleton 8630:Gaussian 6613:and let 4163:and the 4103:) of an 3443:and the 2652:and the 2239:and set 1331:, where 542:, where 485:(or its 205:Variance 9679:terms. 8945:finance 7953:, then 7475:We see 4476:matrix 4430:having 4388:having 3728:, i.e. 3551:, i.e. 3481:, i.e. 3168:matrix 3122:having 3080:having 2682:matrix 2640:whose ( 614:is the 590:is the 562:is the 497:on the 410:, etc. 119:Outcome 9854:  9825:  9797:  9772:  9738:  9704:  9640:matrix 7951:scalar 6870:Hence 6633:be an 6507:be an 6485:: Let 6399:where 5205:where 2638:matrix 2213:where 1782:, let 1399:is an 1353:is an 1176:scalar 1093:where 742:given 711:. The 368:vector 354:, and 66:System 54:Axioms 9677:error 9671:is a 9616:is a 7949:is a 6483:Proof 6477:trace 5920:with 796:when 99:Event 9852:ISBN 9823:ISBN 9795:ISBN 9770:ISBN 9736:ISBN 9702:ISBN 9642:and 9317:and 9082:and 7477:that 6699:and 6573:and 6455:and 5894:The 5483:and 5403:and 5307:and 5245:and 5074:and 5026:and 4857:and 4555:Eq.6 4344:and 4308:Eq.5 4093:The 3872:and 3403:Eq.4 3036:and 2998:Eq.3 2575:The 2555:Eq.2 2371:The 2313:> 1656:Let 1083:Eq.1 826:The 676:The 358:, a 9624:), 9070:In 8943:in 8939:In 8296:Cov 7493:Cov 7472:). 7331:Cov 7237:Cov 7136:Cov 7017:Cov 6917:Cov 6757:Cov 6581:Cov 5329:and 4934:if 4157:i,j 3949:if 3694:Cov 3652:Cov 3415:i,j 3202:Cov 2805:Var 2642:i,j 2096:det 1830:of 1753:of 1700:of 1619:det 1526:is 1429:If 715:of 622:). 362:or 350:In 9871:: 9809:^ 9750:^ 9716:^ 9612:, 9062:. 9010:E( 8981:= 8826:tr 8794:tr 8739:tr 8586:tr 8501:tr 8430:tr 8210:tr 8151:tr 8072:tr 8010:tr 7445:tr 7424:tr 7379:tr 6463:tr 6352:tr 3469:. 2363:. 1287:: 1182:. 1162:. 566:, 406:, 402:, 398:, 387:. 9860:. 9831:. 9803:. 9778:. 9744:. 9710:. 9673:k 9657:t 9652:e 9637:k 9633:k 9628:i 9626:A 9618:k 9614:c 9599:X 9588:i 9572:i 9566:t 9561:X 9549:i 9531:, 9526:t 9521:e 9516:+ 9511:p 9505:t 9500:X 9493:p 9489:A 9485:+ 9479:+ 9474:2 9468:t 9463:X 9456:2 9452:A 9448:+ 9443:1 9437:t 9432:X 9425:1 9421:A 9417:+ 9414:c 9411:= 9406:t 9401:X 9371:X 9360:k 9348:n 9328:e 9273:. 9258:X 9252:y 9249:= 9240:e 9208:e 9195:e 9158:e 9154:k 9137:, 9134:e 9131:+ 9125:X 9122:= 9119:y 9106:X 9099:y 9094:j 9092:x 9088:k 9084:n 9080:y 9076:n 9049:r 9038:w 9036:C 9034:w 9019:r 9008:w 8993:r 8983:w 8979:p 8975:w 8971:p 8956:r 8913:X 8889:X 8884:X 8879:K 8855:) 8849:X 8844:X 8839:K 8835:B 8832:( 8823:) 8817:X 8812:X 8807:K 8803:A 8800:( 8791:+ 8788:) 8782:X 8777:X 8772:K 8768:B 8762:X 8757:X 8752:K 8748:A 8745:( 8736:2 8733:= 8729:] 8725:) 8721:X 8717:B 8712:T 8707:X 8702:( 8699:) 8695:X 8691:A 8686:T 8681:X 8676:( 8672:[ 8665:E 8641:X 8604:. 8601:) 8598:V 8595:A 8592:( 8583:= 8572:) 8567:) 8561:T 8557:) 8547:z 8544:( 8541:) 8532:z 8529:( 8525:( 8518:E 8512:A 8508:( 8498:= 8487:] 8482:) 8476:T 8472:) 8462:z 8459:( 8456:) 8447:z 8444:( 8441:A 8437:( 8426:[ 8422:E 8419:= 8408:] 8404:) 8398:A 8392:z 8389:A 8386:( 8381:T 8376:) 8366:z 8362:( 8356:[ 8352:E 8349:= 8341:] 8335:T 8331:A 8325:T 8321:z 8317:, 8312:T 8308:z 8303:[ 8266:, 8262:) 8256:T 8252:) 8242:z 8239:( 8236:) 8227:z 8224:( 8221:A 8217:( 8207:= 8203:) 8199:) 8190:z 8187:( 8184:A 8179:T 8175:) 8165:z 8162:( 8158:( 8124:) 8120:) 8111:z 8108:( 8105:A 8100:T 8096:) 8086:z 8083:( 8079:( 8069:= 8065:) 8061:) 8055:A 8049:z 8046:A 8043:( 8038:T 8034:) 8024:z 8021:( 8017:( 8007:= 8004:) 7998:A 7992:z 7989:A 7986:( 7981:T 7977:) 7967:z 7964:( 7933:) 7926:A 7920:z 7917:A 7913:( 7907:T 7902:) 7892:z 7888:( 7856:. 7852:] 7848:) 7842:A 7836:z 7833:A 7830:( 7825:T 7821:) 7811:z 7808:( 7804:[ 7797:E 7794:= 7783:] 7777:T 7773:) 7767:T 7763:A 7757:T 7744:T 7740:A 7734:T 7730:z 7726:( 7723:) 7718:T 7705:T 7701:z 7697:( 7693:[ 7686:E 7683:= 7672:] 7666:T 7661:) 7656:) 7650:T 7646:A 7640:T 7636:z 7631:( 7627:E 7619:T 7615:A 7609:T 7605:z 7600:( 7594:) 7590:) 7585:T 7581:z 7577:( 7574:E 7566:T 7562:z 7557:( 7552:[ 7545:E 7542:= 7535:] 7530:T 7526:A 7520:T 7516:z 7512:, 7507:T 7503:z 7499:[ 7460:) 7457:A 7454:B 7451:( 7442:= 7439:) 7436:B 7433:A 7430:( 7397:. 7394:) 7391:V 7388:A 7385:( 7376:= 7373:] 7368:T 7364:A 7358:T 7354:z 7350:, 7345:T 7341:z 7337:[ 7301:, 7295:A 7290:T 7282:+ 7279:] 7274:T 7270:A 7264:T 7260:z 7256:, 7251:T 7247:z 7243:[ 7234:= 7222:T 7218:) 7212:T 7208:A 7202:T 7194:( 7189:T 7181:+ 7178:] 7173:T 7169:A 7163:T 7159:z 7155:, 7150:T 7146:z 7142:[ 7133:= 7121:T 7117:] 7111:T 7107:A 7101:T 7097:z 7093:[ 7087:E 7084:] 7079:T 7075:z 7071:[ 7065:E 7062:+ 7059:] 7054:T 7050:A 7044:T 7040:z 7036:, 7031:T 7027:z 7023:[ 7014:= 7007:] 7004:z 7001:A 6996:T 6992:z 6988:[ 6982:E 6973:T 6969:] 6965:Y 6962:[ 6956:E 6953:] 6950:X 6947:[ 6941:E 6938:+ 6935:] 6932:Y 6929:, 6926:X 6923:[ 6914:= 6907:] 6902:T 6898:Y 6894:X 6891:[ 6885:E 6853:T 6849:] 6844:Y 6840:[ 6834:E 6831:] 6827:X 6823:[ 6817:E 6811:] 6806:T 6801:Y 6795:X 6791:[ 6785:E 6782:= 6779:] 6775:Y 6771:, 6767:X 6763:[ 6733:Y 6729:= 6724:T 6720:A 6714:T 6709:z 6686:X 6682:= 6677:T 6672:z 6647:m 6641:m 6621:A 6601:V 6598:= 6595:] 6591:z 6587:[ 6558:= 6555:] 6551:z 6547:[ 6541:E 6521:1 6515:m 6494:z 6442:X 6418:X 6413:X 6408:K 6384:, 6381:) 6375:X 6370:X 6365:K 6361:A 6358:( 6349:+ 6346:] 6342:X 6338:[ 6332:E 6329:A 6324:T 6320:] 6315:X 6311:[ 6305:E 6302:= 6299:] 6295:X 6291:A 6286:T 6281:X 6276:[ 6270:E 6246:X 6219:. 6206:] 6201:) 6196:n 6192:X 6186:n 6178:+ 6172:+ 6167:1 6163:X 6157:1 6149:( 6146:i 6142:e 6138:[ 6131:E 6128:= 6124:] 6119:) 6115:X 6109:T 6099:( 6096:i 6092:e 6088:[ 6081:E 6078:= 6075:) 6067:( 6061:X 6030:T 6026:) 6020:n 6012:, 6006:, 6001:1 5993:( 5990:= 5964:C 5955:n 5950:R 5928:n 5907:X 5885:. 5873:) 5868:n 5864:y 5860:, 5854:, 5849:1 5845:y 5841:( 5834:n 5830:Y 5826:, 5820:, 5815:1 5811:Y 5806:F 5799:) 5794:m 5790:x 5786:, 5780:, 5775:1 5771:x 5767:( 5760:m 5756:X 5752:, 5746:, 5741:1 5737:X 5732:F 5728:= 5725:) 5720:n 5716:y 5712:, 5706:, 5701:1 5697:y 5693:, 5688:m 5684:x 5680:, 5674:, 5669:1 5665:x 5661:( 5654:n 5650:Y 5646:, 5640:, 5635:1 5631:Y 5627:, 5622:m 5618:X 5614:, 5608:, 5603:1 5599:X 5594:F 5569:n 5565:y 5561:, 5555:, 5550:1 5546:y 5542:, 5537:m 5533:x 5529:, 5523:, 5518:1 5514:x 5492:Y 5470:X 5448:Y 5434:X 5412:Y 5390:X 5369:) 5365:y 5362:, 5359:x 5355:( 5349:Y 5346:, 5343:X 5338:F 5316:Y 5294:X 5273:) 5269:y 5265:( 5259:Y 5254:F 5233:) 5229:x 5225:( 5219:X 5214:F 5190:) 5186:y 5182:( 5176:Y 5171:F 5164:) 5160:x 5156:( 5150:X 5145:F 5141:= 5138:) 5134:y 5131:, 5128:x 5124:( 5118:Y 5115:, 5112:X 5107:F 5083:y 5061:x 5035:Y 5013:X 4989:. 4977:0 4974:= 4971:] 4967:Y 4961:T 4956:X 4951:[ 4945:E 4916:T 4912:) 4906:n 4902:Y 4898:, 4895:. 4892:. 4889:. 4886:, 4881:1 4877:Y 4873:( 4870:= 4866:Y 4843:T 4839:) 4833:n 4829:X 4825:, 4822:. 4819:. 4816:. 4813:, 4808:1 4804:X 4800:( 4797:= 4793:X 4762:T 4758:] 4753:Y 4749:[ 4743:E 4740:] 4736:X 4732:[ 4726:E 4723:+ 4717:Y 4712:X 4707:K 4703:= 4697:Y 4692:X 4687:R 4671:. 4657:T 4653:] 4648:X 4644:[ 4638:E 4635:] 4631:X 4627:[ 4621:E 4618:+ 4612:X 4607:X 4602:K 4598:= 4592:X 4587:X 4582:R 4557:) 4553:( 4536:] 4531:T 4526:Y 4520:X 4516:[ 4510:E 4507:= 4501:Y 4496:X 4491:R 4464:p 4458:n 4438:p 4417:Y 4396:n 4375:X 4366:( 4353:Y 4331:X 4310:) 4306:( 4289:] 4283:T 4277:X 4271:X 4267:[ 4261:E 4258:= 4252:X 4247:X 4242:R 4213:T 4208:X 4202:X 4181:n 4175:n 4165:j 4161:i 4143:n 4137:n 4117:1 4111:n 4065:Y 4060:X 4055:K 4042:. 4028:T 4024:] 4019:Y 4015:[ 4009:E 4006:] 4002:X 3998:[ 3992:E 3989:= 3986:] 3981:T 3976:Y 3970:X 3966:[ 3960:E 3931:T 3927:) 3921:n 3917:Y 3913:, 3910:. 3907:. 3904:. 3901:, 3896:1 3892:Y 3888:( 3885:= 3881:Y 3858:T 3854:) 3848:m 3844:X 3840:, 3837:. 3834:. 3831:. 3828:, 3823:1 3819:X 3815:( 3812:= 3808:X 3790:. 3776:T 3770:Y 3765:X 3760:K 3756:= 3750:X 3745:Y 3740:K 3716:] 3712:Y 3708:, 3704:X 3700:[ 3674:] 3670:X 3666:, 3662:Y 3658:[ 3640:. 3626:n 3621:R 3612:a 3602:0 3595:a 3585:X 3580:X 3575:K 3569:T 3564:a 3543:. 3528:X 3523:X 3518:K 3514:= 3509:T 3503:X 3498:X 3493:K 3456:Y 3445:j 3430:X 3419:i 3405:) 3401:( 3382:T 3378:] 3373:Y 3369:[ 3363:E 3360:] 3356:X 3352:[ 3346:E 3340:] 3335:T 3330:Y 3324:X 3320:[ 3314:E 3311:= 3308:] 3303:T 3299:) 3295:] 3291:Y 3287:[ 3281:E 3274:Y 3270:( 3267:) 3264:] 3260:X 3256:[ 3250:E 3243:X 3239:( 3236:[ 3230:E 3227:= 3224:] 3220:Y 3216:, 3212:X 3208:[ 3199:= 3193:Y 3188:X 3183:K 3156:p 3150:n 3130:p 3109:Y 3088:n 3067:X 3058:( 3045:Y 3023:X 3000:) 2996:( 2977:T 2973:] 2968:X 2964:[ 2958:E 2955:] 2951:X 2947:[ 2941:E 2935:] 2930:T 2925:X 2919:X 2915:[ 2909:E 2906:= 2903:] 2898:T 2894:) 2890:] 2886:X 2882:[ 2876:E 2869:X 2865:( 2862:) 2859:] 2855:X 2851:[ 2845:E 2838:X 2834:( 2831:[ 2825:E 2822:= 2819:] 2815:X 2811:[ 2802:= 2796:X 2791:X 2786:K 2757:T 2753:] 2749:] 2745:X 2741:[ 2735:E 2728:X 2724:[ 2721:] 2718:] 2714:X 2710:[ 2704:E 2697:X 2693:[ 2670:n 2664:n 2654:j 2650:i 2625:n 2619:n 2599:1 2593:n 2557:) 2553:( 2533:T 2528:) 2524:] 2519:n 2515:X 2511:[ 2505:E 2502:, 2499:. 2496:. 2493:. 2490:, 2487:] 2482:1 2478:X 2474:[ 2468:E 2465:( 2462:= 2459:] 2455:X 2451:[ 2445:E 2419:] 2415:X 2411:[ 2405:E 2384:X 2350:Y 2327:R 2319:} 2316:0 2310:) 2306:x 2302:( 2296:X 2291:f 2287:: 2284:) 2280:x 2276:( 2273:g 2270:= 2266:y 2262:{ 2259:= 2253:Y 2248:R 2222:1 2198:) 2192:Y 2187:R 2179:y 2175:( 2171:1 2165:) 2161:y 2157:( 2152:1 2145:g 2141:= 2137:x 2131:| 2124:| 2116:y 2106:x 2092:| 2087:) 2083:x 2079:( 2073:X 2068:f 2061:= 2058:) 2054:y 2050:( 2044:Y 2039:f 2010:) 2006:X 2002:( 1999:g 1996:= 1992:Y 1971:1 1968:= 1965:) 1960:D 1951:X 1947:( 1944:P 1924:) 1920:x 1916:( 1910:X 1905:f 1883:X 1860:D 1838:g 1812:D 1790:g 1768:n 1763:R 1739:R 1715:n 1710:R 1686:D 1664:g 1644:. 1628:| 1623:A 1615:| 1609:) 1606:) 1603:b 1597:y 1594:( 1589:1 1581:A 1576:( 1570:X 1565:f 1558:= 1555:) 1552:y 1549:( 1543:Y 1538:f 1513:Y 1489:X 1484:f 1461:X 1438:A 1413:1 1407:n 1387:b 1367:n 1361:n 1340:A 1319:b 1316:+ 1312:X 1307:A 1303:= 1299:Y 1274:X 1251:n 1246:R 1236:n 1231:R 1223:g 1199:Y 1147:T 1142:) 1136:n 1132:x 1128:, 1122:, 1117:1 1113:x 1109:( 1106:= 1102:x 1085:) 1081:( 1064:) 1059:n 1055:x 1046:n 1042:X 1038:, 1032:, 1027:1 1023:x 1014:1 1010:X 1006:( 1000:P 997:= 994:) 990:x 986:( 980:X 975:F 945:T 940:) 934:n 930:X 926:, 920:, 915:1 911:X 907:( 904:= 900:X 879:] 876:1 873:, 870:0 867:[ 859:n 854:R 849:: 843:X 838:F 809:j 805:X 782:i 778:X 755:j 751:X 728:i 724:X 693:i 689:X 651:n 646:R 602:P 576:F 530:) 527:P 524:, 519:F 514:, 508:( 470:T 465:) 459:n 455:X 451:, 445:, 440:1 436:X 432:( 429:= 425:X 347:. 332:e 325:t 318:v

Index

statistics
Probability theory

Probability
Axioms
Determinism
System
Indeterminism
Randomness
Probability space
Sample space
Event
Collectively exhaustive events
Elementary event
Mutual exclusivity
Outcome
Singleton
Experiment
Bernoulli trial
Probability distribution
Bernoulli distribution
Binomial distribution
Exponential distribution
Normal distribution
Pareto distribution
Poisson distribution
Probability measure
Random variable
Bernoulli process
Continuous or discrete

Text is available under the Creative Commons Attribution-ShareAlike License. Additional terms may apply.