Knowledge

MINQUE

Source đź“ť

7356: 2215: 5111: 5868: 3344: 2025: 4744: 5642: 3081: 2210:{\displaystyle {\begin{aligned}{\hat {\theta }}&=\mathbf {Y} ^{\top }\mathbf {A} \mathbf {Y} \\&=(\mathbf {X} {\boldsymbol {\beta }}+\mathbf {U} {\boldsymbol {\xi }})^{\top }\mathbf {A} (\mathbf {X} {\boldsymbol {\beta }}+\mathbf {U} {\boldsymbol {\xi }})\\&={\boldsymbol {\xi }}^{\top }\mathbf {U} ^{\top }\mathbf {A} \mathbf {U} {\boldsymbol {\xi }}\end{aligned}}} 5106:{\displaystyle {\begin{aligned}\lVert \mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }}\rVert _{2}^{2}&=(\mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }})^{\top }(\mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }})\\&=\mathrm {Tr} -\mathrm {Tr} +\mathrm {Tr} \\&=\mathrm {Tr} -\mathrm {Tr} \end{aligned}}} 1468: 5863:{\displaystyle {\begin{aligned}{\hat {\theta }}&=\mathbf {Y} ^{\top }\mathbf {A} _{\star }\mathbf {Y} \\&=\sum _{i=1}^{k}\lambda _{i}\mathbf {Y} ^{\top }\mathbf {R} \mathbf {V} _{i}\mathbf {R} \mathbf {Y} \\&\equiv \sum _{i=1}^{k}\lambda _{i}Q_{i}\\&\equiv {\boldsymbol {\lambda }}^{\top }\mathbf {Q} \end{aligned}}} 6855: 6685: 3339:{\displaystyle {\frac {p_{1}}{c_{1}}}{\boldsymbol {\xi }}_{1}^{\top }{\boldsymbol {\xi }}_{1}+\cdots +{\frac {p_{k}}{c_{k}}}{\boldsymbol {\xi }}_{k}^{\top }{\boldsymbol {\xi }}_{k}={\boldsymbol {\xi }}^{\top }\left{\boldsymbol {\xi }}\equiv {\boldsymbol {\xi }}^{\top }{\boldsymbol {\Delta }}{\boldsymbol {\xi }}} 2620: 3919: 6293: 1274: 222: 1836: 1743: 3416: 5525: 6734: 6422: 5361: 6944: 4521: 3978: 3654: 3473: 1196: 2776: 2321: 1673: 817: 3807: 1463:{\displaystyle \mathbb {V} =\sigma _{1}^{2}\mathbf {U} _{1}\mathbf {U} _{1}^{\top }+\cdots +\sigma _{k}^{2}\mathbf {U} _{k}\mathbf {U} _{k}^{\top }\equiv \sigma _{1}^{2}\mathbf {V} _{1}+\cdots +\sigma _{k}^{2}\mathbf {V} _{k}} 6014: 4395: 4219: 132: 1593: 4737: 7066: 7076:
MINQUE estimators can be obtained without the invariance criteria, in which case the estimator is only unbiased and minimizes the norm. Such estimators have slightly different constraints on the minimization problem.
5423: 6729: 1750: 4290: 6330: 7295: 585: 436: 365: 1680: 1268: 3351: 5428: 1975: 1879: 921: 3579: 1539: 661: 308: 267: 4088: 717: 3692: 2018: 1936: 7174: 7126: 6019: 5647: 4749: 2326: 2030: 1146: 3048: 2910: 771: 7017: 125: 6007: 6850:{\displaystyle {\hat {\theta }}={\boldsymbol {\lambda }}^{\top }\mathbf {Q} =\mathbf {p} ^{\top }(\mathbf {S} ^{-})^{\top }\mathbf {Q} =\mathbf {p} ^{\top }\mathbf {S} ^{-}\mathbf {Q} } 858: 508: 5892: 5613: 4443: 2314: 3070: 7345: 6680:{\displaystyle \mathbf {S} ={\begin{bmatrix}\mathrm {Tr} &\cdots &\mathrm {Tr} \\\vdots &\ddots &\vdots \\\mathrm {Tr} &\cdots &\mathrm {Tr} \end{bmatrix}}} 6393: 7218: 2943: 5960: 4032: 3755: 1057: 5281: 3510: 981: 4120: 2283:. Below, the expectation of the estimator can be decomposed for each component since the components are uncorrelated with each other. Furthermore, the cyclic property of the 6860: 4448: 5249: 5154: 6415: 5635: 5584: 5551: 5274: 5198: 5176: 3601: 2798: 2261: 1901: 1615: 1220: 952: 3800: 3930: 3606: 3425: 2963: 2281: 1153: 2631: 7080:
The model can be extended to estimate covariance components. In such a model, the random effects of a component are assumed to have a common covariance structure
2615:{\displaystyle {\begin{aligned}\mathbb {E} &=\mathbb {E} \\&=\sum _{i=1}^{k}\mathbb {E} \\&=\sum _{i=1}^{k}\sigma _{i}^{2}\mathrm {Tr} \end{aligned}}} 460: 385: 1633: 779: 3914:{\displaystyle s^{2}={\frac {1}{n-m}}(\mathbf {Y} -\mathbf {X} {\hat {\boldsymbol {\beta }}})^{\top }(\mathbf {Y} -\mathbf {X} {\hat {\boldsymbol {\beta }}})} 6288:{\displaystyle {\begin{aligned}\mathrm {Tr} &=p_{j}\\\mathrm {Tr} \left&=p_{j}\\\sum _{i=1}^{k}\lambda _{i}\mathrm {Tr} &=p_{j}\end{aligned}}} 217:{\displaystyle \mathbf {Y} =\mathbf {X} {\boldsymbol {\beta }}+\mathbf {U} _{1}{\boldsymbol {\xi }}_{1}+\cdots +\mathbf {U} _{k}{\boldsymbol {\xi }}_{k}} 4295: 4125: 1544: 4530: 7022: 5369: 1831:{\displaystyle (\mathbf {Y} -\mathbf {X} {\boldsymbol {\beta }}_{0})^{\top }\mathbf {A} (\mathbf {Y} -\mathbf {X} {\boldsymbol {\beta }}_{0})} 7586: 6692: 4224: 1738:{\displaystyle \mathbf {Y} -\mathbf {X} {\boldsymbol {\beta }}_{0}=\mathbf {X} {\boldsymbol {\gamma }}+\mathbf {U} {\boldsymbol {\xi }}} 6300: 7223: 3411:{\displaystyle {\boldsymbol {\xi }}^{\top }(\mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }}){\boldsymbol {\xi }}} 513: 390: 313: 7397: 5520:{\displaystyle \mathbf {P} =\mathbf {X} (\mathbf {X} ^{\top }\mathbf {V} ^{-1}\mathbf {X} )^{-}\mathbf {X} ^{\top }\mathbf {V} ^{-1}} 1227: 1941: 1845: 863: 3515: 1475: 63: 590: 276: 66:
error variance in multiple linear regression. MINQUE estimators also provide an alternative to maximum likelihood estimators or
229: 4037: 666: 3662: 1988: 1906: 7131: 7083: 1062: 2968: 2803: 732: 6949: 93: 1086: 1007: 5965: 3483:
Given the constraints and optimization strategy derived from the optimal properties above, the MINQUE estimator
1675:, which represents a translation of the original fixed effect. The new, equivalent model is now the following. 822: 465: 47: 5875: 5596: 4415: 2290: 7390: 3053: 67: 51: 7300: 7128:. A MINQUE estimator for a mixture of variance and covariance components was also proposed. In this model, 6335: 439: 7179: 2926: 5897: 5356:{\displaystyle \mathbf {A} _{\star }=\sum _{i=1}^{k}\lambda _{i}\mathbf {R} \mathbf {V} _{i}\mathbf {R} } 4445:
is the square root of the sum of squares of all elements in the matrix. When evaluating this norm below,
3991: 3699: 990: 7581: 6939:{\displaystyle \theta =\sum _{i=1}^{k}p_{i}\sigma _{i}^{2}=\mathbf {p} ^{\top }{\boldsymbol {\sigma }}} 4516:{\displaystyle \mathbf {V} =\mathbf {V} _{1}+\cdots +\mathbf {V} _{k}=\mathbf {U} \mathbf {U} ^{\top }} 3486: 957: 7576: 4093: 954:
that shares a common variance can be modeled as an individual variance component with an appropriate
7383: 5203: 5118: 3980:. Thus, the standard estimator for error variance in the Gauss-Markov model is a MINQUE estimator. 3772: 774: 55: 6398: 5618: 5556: 5534: 5257: 5181: 5159: 3973:{\displaystyle \lVert \mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }}\rVert } 3649:{\displaystyle \lVert \mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }}\rVert } 3584: 3468:{\displaystyle \lVert \mathbf {U} ^{\top }\mathbf {A} \mathbf {U} -{\boldsymbol {\Delta }}\rVert } 2781: 2226: 1884: 1598: 1203: 935: 3778: 1191:{\displaystyle \mathbf {Y} =\mathbf {X} {\boldsymbol {\beta }}+\mathbf {U} {\boldsymbol {\xi }}} 4524: 2771:{\displaystyle \sum _{i=1}^{k}\sigma _{i}^{2}\mathrm {Tr} =\sum _{i=1}^{k}p_{i}\sigma _{i}^{2}} 2284: 17: 2948: 2266: 2220: 1842:
argued that since the underlying models are equivalent, this estimator should be equal to
8: 5587: 1668:{\displaystyle {\boldsymbol {\gamma }}={\boldsymbol {\beta }}-{\boldsymbol {\beta }}_{0}} 812:{\displaystyle \mathbf {Y} =\mathbf {X} {\boldsymbol {\beta }}+{\boldsymbol {\epsilon }}} 7553: 7536:
Rao, C.R. (1972). "Estimation of variance and covariance components in linear models".
7451: 445: 370: 78:
of the response variable and are used to estimate a linear function of the variances.
4408:
proposed a MINQUE estimator for the variance components model based on minimizing the
7493: 5528: 59: 43: 7480:
Rao, C.R. (1971). "Estimation of variance and covariance components MINQUE theory".
7355: 2020:, as argued in the section above. Then, the MINQUE estimator has the following form 7549: 7545: 7497: 7489: 7447: 7443: 5962:. That is, the vector represents the solution to the following system of equations 3073: 7371: 4390:{\displaystyle s^{2}={\frac {1}{n-1}}\sum _{i=1}^{n}(Y_{i}-{\overline {Y}})^{2}} 4214:{\displaystyle {\frac {n}{n-2}}(Y_{i}-{\overline {Y}})^{2}-{\frac {s^{2}}{n-2}}} 7367: 462:-th random-effect component. The random effects are assumed to have zero mean ( 75: 7502: 7434:
Rao, C.R. (1970). "Estimation of heteroscedastic variances in linear models".
3983: 722:
This is a general model that captures commonly used linear regression models.
7570: 1588:{\displaystyle {\hat {\theta }}=\mathbf {Y} ^{\top }\mathbf {A} \mathbf {Y} } 270: 4732:{\displaystyle \mathrm {Tr} =\mathrm {Tr} =\mathrm {Tr} \left=\mathrm {Tr} } 7061:{\displaystyle {\hat {\boldsymbol {\sigma }}}=\mathbf {S} ^{-}\mathbf {Q} } 5178:, the MINQUE with the Euclidean norm is obtained by identifying the matrix 3348:
The difference between the proposed estimator and the natural estimator is
5418:{\displaystyle \mathbf {R} =\mathbf {V} ^{-1}(\mathbf {I} -\mathbf {P} )} 4409: 3924: 3419: 87: 71: 1617:
such that the estimator has some desirable properties, described below.
7557: 7455: 7363: 31: 6724:{\displaystyle {\boldsymbol {\lambda }}=\mathbf {S} ^{-}\mathbf {p} } 4405: 2920: 2625: 1839: 587:). Furthermore, any two random effect vectors are also uncorrelated ( 39: 5593:
Therefore, the MINQUE estimator is the following, where the vectors
1620: 4285:{\displaystyle {\overline {Y}}={\frac {1}{n}}\sum _{i=1}^{n}Y_{i}} 6325:{\displaystyle \mathbf {S} {\boldsymbol {\lambda }}=\mathbf {p} } 1625: 7290:{\displaystyle \mathbb {V} =\sigma _{i}^{2}\mathbf {I} _{c_{i}}} 580:{\displaystyle \mathbb {V} =\sigma _{i}^{2}\mathbf {I} _{c_{i}}} 431:{\displaystyle {\boldsymbol {\xi }}_{i}\in \mathbb {R} ^{c_{i}}} 360:{\displaystyle \mathbf {U} _{i}\in \mathbb {R} ^{n\times c_{i}}} 1263:{\displaystyle \mathbb {E} =\mathbf {X} {\boldsymbol {\beta }}} 1200:
Note that this model makes no distributional assumptions about
987:
A compact representation for the model is the following, where
3766: 3923:
This estimator is unbiased and can be shown to minimize the
1970:{\displaystyle \mathbf {Y} ^{\top }\mathbf {A} \mathbf {Y} } 1874:{\displaystyle \mathbf {Y} ^{\top }\mathbf {A} \mathbf {Y} } 916:{\displaystyle \mathbb {V} =\sigma _{1}^{2}\mathbf {I} _{n}} 3984:
Random Variables with Common Mean and Heteroscedastic Error
3574:{\displaystyle \theta =\sum _{i=1}^{k}p_{i}\sigma _{i}^{2}} 1534:{\displaystyle \theta =\sum _{i=1}^{k}p_{i}\sigma _{i}^{2}} 42:. MINQUE is a theory alongside other estimation methods in 7019:. Therefore, the estimator for the variance components is 656:{\displaystyle \mathbb {V} =\mathbf {0} \,\forall i\neq j} 303:{\displaystyle {\boldsymbol {\beta }}\in \mathbb {R} ^{m}} 1747:
Under this equivalent model, the MINQUE estimator is now
1595:. MINQUE estimators are derived by identifying a matrix 262:{\displaystyle \mathbf {X} \in \mathbb {R} ^{n\times m}} 62:
models. The method was originally conceived to estimate
4083:{\displaystyle \sigma _{1}^{2},\cdots ,\sigma _{n}^{2}} 712:{\displaystyle \sigma _{1}^{2},\cdots ,\sigma _{k}^{2}} 6439: 7303: 7226: 7182: 7134: 7086: 7025: 6952: 6863: 6737: 6695: 6425: 6401: 6338: 6303: 6017: 5968: 5900: 5878: 5645: 5621: 5599: 5559: 5537: 5431: 5372: 5284: 5260: 5251:, subject to the MINQUE constraints discussed above. 5206: 5184: 5162: 5121: 4747: 4533: 4451: 4418: 4298: 4227: 4128: 4096: 4040: 3994: 3933: 3810: 3781: 3702: 3687:{\displaystyle \mathbf {A} \mathbf {X} =\mathbf {0} } 3665: 3609: 3587: 3518: 3489: 3428: 3418:. This difference can be minimized by minimizing the 3354: 3084: 3056: 2971: 2951: 2929: 2806: 2784: 2634: 2324: 2293: 2269: 2229: 2028: 2013:{\displaystyle \mathbf {A} \mathbf {X} =\mathbf {0} } 1991: 1944: 1931:{\displaystyle \mathbf {A} \mathbf {X} =\mathbf {0} } 1909: 1887: 1848: 1753: 1683: 1636: 1601: 1547: 1478: 1277: 1230: 1206: 1156: 1065: 993: 960: 938: 866: 825: 782: 735: 669: 593: 516: 468: 448: 393: 373: 316: 279: 232: 135: 96: 7169:{\displaystyle \mathbb {V} ={\boldsymbol {\Sigma }}} 7121:{\displaystyle \mathbb {V} ={\boldsymbol {\Sigma }}} 4400: 2287:
is used to evaluate the expectation with respect to
36:
minimum norm quadratic unbiased estimation (MINQUE)
7339: 7289: 7212: 7168: 7120: 7060: 7011: 6938: 6849: 6723: 6679: 6409: 6387: 6324: 6287: 6001: 5954: 5886: 5862: 5629: 5607: 5578: 5545: 5519: 5417: 5355: 5268: 5243: 5192: 5170: 5148: 5105: 4731: 4515: 4437: 4389: 4284: 4213: 4114: 4082: 4026: 3972: 3913: 3794: 3749: 3686: 3648: 3595: 3573: 3504: 3467: 3410: 3338: 3064: 3042: 2957: 2937: 2904: 2792: 2770: 2614: 2308: 2275: 2255: 2209: 2012: 1969: 1930: 1895: 1873: 1830: 1737: 1667: 1609: 1587: 1533: 1462: 1262: 1214: 1190: 1141:{\displaystyle {\boldsymbol {\xi }}^{\top }=\left} 1140: 1051: 975: 946: 915: 852: 811: 765: 711: 655: 579: 502: 454: 430: 379: 359: 302: 261: 216: 119: 3043:{\displaystyle \mathbb {E} =c_{i}\sigma _{i}^{2}} 2905:{\displaystyle \mathrm {Tr} =\mathrm {Tr} =p_{i}} 1977:in the expansion of the quadratic form are zero. 766:{\displaystyle \mathbf {U} _{1}=\mathbf {I} _{n}} 7568: 7012:{\displaystyle {\boldsymbol {\sigma }}=^{\top }} 1621:Optimal Estimator Properties to Constrain MINQUE 719:represent the variance components of the model. 310:represents the unknown fixed-effect parameters, 120:{\displaystyle \mathbf {Y} \in \mathbb {R} ^{n}} 7538:Journal of the American Statistical Association 7436:Journal of the American Statistical Association 1626:Invariance to translation of the fixed effects 7391: 7334: 7310: 7207: 7189: 6002:{\displaystyle \forall j\in \{1,\cdots ,k\}} 5996: 5978: 5276:that satisfies this optimization problem is 4786: 4752: 4523:. Furthermore, using the cyclic property of 4426: 4419: 3967: 3934: 3643: 3610: 3462: 3429: 2778:, which can be accomplished by constraining 4034:with a common mean and different variances 2624:To ensure that this estimator is unbiased, 729:If we consider a one-component model where 7398: 7384: 3767:Standard Estimator for Homoscedastic Error 1938:, which ensures that all terms other than 7501: 7228: 7136: 7088: 6983: 6979: 6364: 6360: 3761: 2973: 2945:were observed, a "natural" estimator for 2441: 2360: 2330: 2231: 1279: 1232: 1222:other than the first and second moments. 868: 853:{\displaystyle \mathbb {E} =\mathbf {0} } 827: 640: 595: 518: 503:{\displaystyle \mathbb {E} =\mathbf {0} } 470: 411: 334: 290: 243: 107: 6297:This can be written as a matrix product 5887:{\displaystyle {\boldsymbol {\lambda }}} 5608:{\displaystyle {\boldsymbol {\lambda }}} 4438:{\displaystyle \lVert \cdot \rVert _{2}} 2309:{\displaystyle {\boldsymbol {\xi }}_{i}} 58:, MINQUE is specifically concerned with 7237: 7145: 7097: 7029: 6954: 6932: 6755: 6697: 6310: 5880: 5841: 5601: 3899: 3861: 3404: 3357: 3332: 3316: 3307: 3205: 3190: 3173: 3128: 3111: 3065:{\displaystyle {\boldsymbol {\Delta }}} 2999: 2982: 2931: 2501: 2450: 2402: 2369: 2296: 2199: 2166: 2147: 2134: 2106: 2093: 1881:. This can be achieved by constraining 1815: 1772: 1731: 1718: 1699: 1655: 1646: 1638: 1256: 1184: 1171: 1115: 1091: 1068: 876: 835: 805: 797: 619: 604: 527: 479: 396: 281: 204: 171: 150: 14: 7569: 7340:{\displaystyle i\in \{s+1,\cdots ,k\}} 2263:must equal the parameter of interest, 1980: 1630:Consider a new fixed-effect parameter 773:, then the model is equivalent to the 70:estimators for variance components in 6388:{\displaystyle \mathbf {p} =^{\top }} 127:with the following linear structure. 7587:Statistical deviation and dispersion 7531: 7529: 7527: 7525: 7523: 7521: 7519: 7517: 7515: 7513: 7475: 7473: 7471: 7469: 7467: 7465: 7429: 7427: 7425: 7423: 7421: 7419: 7350: 7213:{\displaystyle i\in \{1,\cdots ,s\}} 5894:is obtained by using the constraint 2938:{\displaystyle {\boldsymbol {\xi }}} 7535: 7479: 7433: 5955:{\displaystyle \mathrm {Tr} =p_{i}} 4027:{\displaystyle Y_{1},\cdots ,Y_{n}} 3750:{\displaystyle \mathrm {Tr} =p_{i}} 2223:, the expectation of the estimator 24: 7004: 6926: 6825: 6805: 6780: 6760: 6731:. This implies that the MINQUE is 6625: 6622: 6570: 6567: 6501: 6498: 6446: 6443: 6380: 6220: 6217: 6085: 6082: 6026: 6023: 5969: 5905: 5902: 5846: 5746: 5676: 5497: 5455: 5211: 5208: 5126: 5123: 5079: 5076: 5042: 5039: 5008: 5005: 4978: 4961: 4958: 4946: 4914: 4900: 4897: 4860: 4845: 4817: 4762: 4709: 4706: 4626: 4623: 4611: 4582: 4579: 4552: 4538: 4535: 4508: 3944: 3875: 3802:is estimated using the following. 3707: 3704: 3620: 3439: 3377: 3362: 3321: 3230: 3227: 3224: 3221: 3210: 3183: 3121: 2992: 2862: 2859: 2830: 2811: 2808: 2694: 2675: 2672: 2583: 2564: 2561: 2477: 2460: 2386: 2374: 2183: 2171: 2115: 2059: 1952: 1856: 1787: 1570: 1472:The goal in MINQUE is to estimate 1389: 1336: 1125: 1101: 1073: 1052:{\displaystyle \mathbf {U} =\left} 641: 25: 7598: 7510: 7462: 7416: 4401:Estimator for Variance Components 2219:To ensure that this estimator is 387:-th random-effect component, and 27:Theory in the field of statistics 7354: 7270: 7162: 7114: 7054: 7043: 6921: 6843: 6832: 6820: 6811: 6790: 6775: 6766: 6717: 6706: 6656: 6650: 6639: 6633: 6601: 6595: 6584: 6578: 6532: 6526: 6515: 6509: 6477: 6471: 6460: 6454: 6427: 6403: 6340: 6318: 6305: 6251: 6245: 6234: 6228: 6149: 6143: 6132: 6126: 6047: 6035: 5926: 5914: 5852: 5774: 5769: 5758: 5752: 5741: 5694: 5683: 5671: 5623: 5539: 5504: 5492: 5476: 5462: 5450: 5441: 5433: 5408: 5400: 5383: 5374: 5349: 5338: 5332: 5287: 5262: 5234: 5229: 5224: 5219: 5186: 5164: 5139: 5134: 5092: 5087: 5065: 5060: 5055: 5050: 5021: 5016: 4994: 4989: 4984: 4973: 4941: 4935: 4930: 4925: 4920: 4909: 4879: 4871: 4866: 4855: 4836: 4828: 4823: 4812: 4781: 4773: 4768: 4757: 4722: 4717: 4687: 4681: 4606: 4600: 4595: 4590: 4568: 4563: 4558: 4547: 4503: 4497: 4483: 4462: 4453: 3963: 3955: 3950: 3939: 3892: 3884: 3854: 3846: 3721: 3715: 3680: 3672: 3667: 3639: 3631: 3626: 3615: 3589: 3581:is derived by choosing a matrix 3505:{\displaystyle {\hat {\theta }}} 3458: 3450: 3445: 3434: 3396: 3388: 3383: 3372: 3327: 3058: 2876: 2870: 2842: 2836: 2820: 2786: 2706: 2700: 2684: 2595: 2589: 2573: 2489: 2483: 2467: 2397: 2392: 2381: 2194: 2189: 2178: 2142: 2129: 2121: 2101: 2088: 2070: 2065: 2054: 2006: 1998: 1993: 1963: 1958: 1947: 1924: 1916: 1911: 1889: 1867: 1862: 1851: 1809: 1801: 1793: 1766: 1758: 1726: 1713: 1693: 1685: 1603: 1581: 1576: 1565: 1450: 1414: 1379: 1367: 1326: 1314: 1287: 1251: 1240: 1208: 1179: 1166: 1158: 1031: 1012: 995: 976:{\displaystyle \mathbf {U} _{i}} 963: 940: 932:Each set of random variables in 903: 846: 792: 784: 753: 738: 636: 560: 496: 319: 234: 192: 159: 145: 137: 98: 4115:{\displaystyle \sigma _{i}^{2}} 2915: 56:best linear unbiased estimation 7550:10.1080/01621459.1972.10481212 7448:10.1080/01621459.1970.10481070 7247: 7232: 7155: 7140: 7107: 7092: 7032: 7000: 6961: 6801: 6785: 6744: 6666: 6629: 6611: 6574: 6542: 6505: 6487: 6450: 6376: 6347: 6261: 6224: 6057: 6030: 5936: 5909: 5656: 5637:are defined based on the sum. 5567: 5560: 5481: 5445: 5412: 5396: 5238: 5215: 5143: 5130: 5096: 5083: 5069: 5046: 5025: 5012: 4998: 4965: 4951: 4904: 4883: 4850: 4841: 4807: 4726: 4713: 4616: 4586: 4572: 4542: 4378: 4351: 4174: 4147: 3908: 3902: 3880: 3871: 3864: 3842: 3731: 3711: 3496: 3400: 3367: 3009: 2977: 2886: 2866: 2852: 2815: 2716: 2679: 2605: 2568: 2511: 2445: 2406: 2364: 2349: 2343: 2334: 2250: 2244: 2235: 2151: 2125: 2111: 2084: 2039: 1825: 1797: 1783: 1754: 1554: 1291: 1283: 1244: 1236: 880: 872: 839: 831: 629: 599: 537: 522: 489: 474: 13: 1: 7410: 7071: 5244:{\displaystyle \mathrm {Tr} } 5149:{\displaystyle \mathrm {Tr} } 3656:, subject to the constraints 2965:would be the following since 81: 68:restricted maximum likelihood 52:maximum likelihood estimation 7494:10.1016/0047-259x(71)90001-7 7370:. You can help Knowledge by 6410:{\displaystyle \mathbf {S} } 5630:{\displaystyle \mathbf {Q} } 5579:{\displaystyle (\cdot )^{-}} 5546:{\displaystyle \mathbf {X} } 5269:{\displaystyle \mathbf {A} } 5193:{\displaystyle \mathbf {A} } 5171:{\displaystyle \mathbf {A} } 4372: 4233: 4168: 3596:{\displaystyle \mathbf {A} } 3478: 2793:{\displaystyle \mathbf {A} } 2256:{\displaystyle \mathbb {E} } 1896:{\displaystyle \mathbf {A} } 1610:{\displaystyle \mathbf {A} } 1215:{\displaystyle \mathbf {Y} } 947:{\displaystyle \mathbf {Y} } 7: 5254:Rao showed that the matrix 4090:, the MINQUE estimator for 3795:{\displaystyle \sigma ^{2}} 367:is a design matrix for the 54:. Similar to the theory of 10: 7603: 7349: 1985:Suppose that we constrain 5531:into the column space of 663:). The unknown variances 86:We are concerned with a 74:. MINQUE estimators are 2958:{\displaystyle \theta } 2276:{\displaystyle \theta } 1541:using a quadratic form 510:) and be uncorrelated ( 273:for the fixed effects, 7366:-related article is a 7341: 7291: 7214: 7170: 7122: 7062: 7013: 6940: 6890: 6851: 6725: 6681: 6411: 6389: 6326: 6289: 6205: 6114: 6003: 5956: 5888: 5864: 5808: 5728: 5631: 5609: 5580: 5547: 5521: 5419: 5357: 5320: 5270: 5245: 5194: 5172: 5150: 5107: 4733: 4655: 4517: 4439: 4391: 4350: 4286: 4271: 4215: 4116: 4084: 4028: 3974: 3915: 3796: 3762:Examples of Estimators 3751: 3688: 3650: 3597: 3575: 3545: 3506: 3469: 3412: 3340: 3066: 3044: 2959: 2939: 2906: 2794: 2772: 2742: 2655: 2616: 2544: 2439: 2310: 2277: 2257: 2211: 2014: 1971: 1932: 1897: 1875: 1832: 1739: 1669: 1611: 1589: 1535: 1505: 1464: 1264: 1216: 1192: 1142: 1053: 977: 948: 917: 854: 813: 767: 713: 657: 581: 504: 456: 432: 381: 361: 304: 263: 218: 121: 90:for the random vector 7342: 7292: 7215: 7171: 7123: 7063: 7014: 6941: 6870: 6852: 6726: 6682: 6412: 6390: 6327: 6290: 6185: 6094: 6004: 5957: 5889: 5865: 5788: 5708: 5632: 5610: 5581: 5548: 5522: 5420: 5358: 5300: 5271: 5246: 5195: 5173: 5151: 5108: 4734: 4635: 4518: 4440: 4412:. The Euclidean norm 4392: 4330: 4287: 4251: 4216: 4117: 4085: 4029: 3988:For random variables 3975: 3916: 3797: 3775:, the error variance 3752: 3689: 3651: 3598: 3576: 3525: 3507: 3470: 3413: 3341: 3067: 3045: 2960: 2940: 2907: 2795: 2773: 2722: 2635: 2617: 2524: 2419: 2311: 2278: 2258: 2212: 2015: 1972: 1933: 1898: 1876: 1833: 1740: 1670: 1612: 1590: 1536: 1485: 1465: 1265: 1217: 1193: 1143: 1054: 978: 949: 927:Heteroscedastic Model 918: 855: 814: 768: 714: 658: 582: 505: 457: 433: 382: 362: 305: 264: 219: 122: 7301: 7224: 7180: 7132: 7084: 7023: 6950: 6861: 6735: 6693: 6423: 6399: 6336: 6301: 6015: 5966: 5898: 5876: 5643: 5619: 5597: 5557: 5535: 5429: 5370: 5282: 5258: 5204: 5182: 5160: 5119: 4745: 4531: 4449: 4416: 4296: 4225: 4126: 4094: 4038: 3992: 3931: 3808: 3779: 3700: 3663: 3607: 3585: 3516: 3487: 3426: 3352: 3082: 3054: 2969: 2949: 2927: 2912:for all components. 2804: 2782: 2632: 2322: 2291: 2267: 2227: 2026: 1989: 1942: 1907: 1885: 1846: 1751: 1681: 1634: 1599: 1545: 1476: 1275: 1228: 1204: 1154: 1063: 991: 958: 936: 864: 823: 780: 733: 667: 591: 514: 466: 446: 391: 371: 314: 277: 230: 133: 94: 72:mixed effects models 7267: 6998: 6978: 6915: 5588:generalized inverse 5156:does not depend on 4799: 4111: 4079: 4055: 3570: 3187: 3125: 3039: 2996: 2834: 2767: 2698: 2670: 2587: 2559: 2481: 2464: 1981:Unbiased estimation 1530: 1447: 1411: 1393: 1364: 1340: 1311: 1129: 1105: 900: 727:Gauss-Markov Model: 708: 684: 557: 88:mixed effects model 7503:10338.dmlcz/104230 7337: 7287: 7253: 7210: 7166: 7118: 7058: 7009: 6984: 6964: 6936: 6901: 6847: 6721: 6677: 6671: 6417:is the following. 6407: 6385: 6322: 6285: 6283: 5999: 5952: 5884: 5860: 5858: 5627: 5605: 5576: 5543: 5517: 5415: 5353: 5266: 5241: 5190: 5168: 5146: 5103: 5101: 4785: 4729: 4513: 4435: 4387: 4282: 4211: 4112: 4097: 4080: 4065: 4041: 4024: 3970: 3911: 3792: 3773:Gauss-Markov model 3747: 3684: 3646: 3593: 3571: 3556: 3502: 3465: 3408: 3336: 3171: 3109: 3062: 3040: 3025: 2980: 2955: 2935: 2902: 2818: 2790: 2768: 2753: 2682: 2656: 2628:suggested setting 2612: 2610: 2571: 2545: 2465: 2448: 2306: 2273: 2253: 2207: 2205: 2010: 1967: 1928: 1893: 1871: 1828: 1735: 1665: 1607: 1585: 1531: 1516: 1460: 1433: 1397: 1377: 1350: 1324: 1297: 1260: 1212: 1188: 1138: 1132: 1113: 1089: 1049: 1043: 973: 944: 913: 886: 850: 809: 775:Gauss-Markov model 763: 709: 694: 670: 653: 577: 543: 500: 452: 428: 377: 357: 300: 259: 214: 117: 7582:Estimation theory 7379: 7378: 7035: 6747: 5659: 5529:projection matrix 4678: 4375: 4328: 4249: 4236: 4209: 4171: 4145: 3905: 3867: 3840: 3499: 3294: 3261: 3169: 3107: 2346: 2247: 2042: 1557: 455:{\displaystyle i} 380:{\displaystyle i} 60:linear regression 48:method of moments 44:estimation theory 38:was developed by 16:(Redirected from 7594: 7577:Statistics stubs 7562: 7561: 7544:(337): 112–115. 7533: 7508: 7507: 7505: 7477: 7460: 7459: 7442:(329): 161–172. 7431: 7400: 7393: 7386: 7358: 7351: 7346: 7344: 7343: 7338: 7296: 7294: 7293: 7288: 7286: 7285: 7284: 7283: 7273: 7266: 7261: 7246: 7245: 7240: 7231: 7219: 7217: 7216: 7211: 7175: 7173: 7172: 7167: 7165: 7154: 7153: 7148: 7139: 7127: 7125: 7124: 7119: 7117: 7106: 7105: 7100: 7091: 7067: 7065: 7064: 7059: 7057: 7052: 7051: 7046: 7037: 7036: 7028: 7018: 7016: 7015: 7010: 7008: 7007: 6997: 6992: 6977: 6972: 6957: 6945: 6943: 6942: 6937: 6935: 6930: 6929: 6924: 6914: 6909: 6900: 6899: 6889: 6884: 6856: 6854: 6853: 6848: 6846: 6841: 6840: 6835: 6829: 6828: 6823: 6814: 6809: 6808: 6799: 6798: 6793: 6784: 6783: 6778: 6769: 6764: 6763: 6758: 6749: 6748: 6740: 6730: 6728: 6727: 6722: 6720: 6715: 6714: 6709: 6700: 6686: 6684: 6683: 6678: 6676: 6675: 6665: 6664: 6659: 6653: 6648: 6647: 6642: 6636: 6628: 6610: 6609: 6604: 6598: 6593: 6592: 6587: 6581: 6573: 6541: 6540: 6535: 6529: 6524: 6523: 6518: 6512: 6504: 6486: 6485: 6480: 6474: 6469: 6468: 6463: 6457: 6449: 6430: 6416: 6414: 6413: 6408: 6406: 6394: 6392: 6391: 6386: 6384: 6383: 6374: 6373: 6359: 6358: 6343: 6331: 6329: 6328: 6323: 6321: 6313: 6308: 6294: 6292: 6291: 6286: 6284: 6280: 6279: 6260: 6259: 6254: 6248: 6243: 6242: 6237: 6231: 6223: 6215: 6214: 6204: 6199: 6180: 6179: 6163: 6159: 6158: 6157: 6152: 6146: 6141: 6140: 6135: 6129: 6124: 6123: 6113: 6108: 6088: 6076: 6075: 6056: 6055: 6050: 6044: 6043: 6038: 6029: 6008: 6006: 6005: 6000: 5961: 5959: 5958: 5953: 5951: 5950: 5935: 5934: 5929: 5923: 5922: 5917: 5908: 5893: 5891: 5890: 5885: 5883: 5869: 5867: 5866: 5861: 5859: 5855: 5850: 5849: 5844: 5832: 5828: 5827: 5818: 5817: 5807: 5802: 5781: 5777: 5772: 5767: 5766: 5761: 5755: 5750: 5749: 5744: 5738: 5737: 5727: 5722: 5701: 5697: 5692: 5691: 5686: 5680: 5679: 5674: 5661: 5660: 5652: 5636: 5634: 5633: 5628: 5626: 5614: 5612: 5611: 5606: 5604: 5585: 5583: 5582: 5577: 5575: 5574: 5552: 5550: 5549: 5544: 5542: 5526: 5524: 5523: 5518: 5516: 5515: 5507: 5501: 5500: 5495: 5489: 5488: 5479: 5474: 5473: 5465: 5459: 5458: 5453: 5444: 5436: 5424: 5422: 5421: 5416: 5411: 5403: 5395: 5394: 5386: 5377: 5362: 5360: 5359: 5354: 5352: 5347: 5346: 5341: 5335: 5330: 5329: 5319: 5314: 5296: 5295: 5290: 5275: 5273: 5272: 5267: 5265: 5250: 5248: 5247: 5242: 5237: 5232: 5227: 5222: 5214: 5199: 5197: 5196: 5191: 5189: 5177: 5175: 5174: 5169: 5167: 5155: 5153: 5152: 5147: 5142: 5137: 5129: 5115:Note that since 5112: 5110: 5109: 5104: 5102: 5095: 5090: 5082: 5068: 5063: 5058: 5053: 5045: 5031: 5024: 5019: 5011: 4997: 4992: 4987: 4982: 4981: 4976: 4964: 4950: 4949: 4944: 4938: 4933: 4928: 4923: 4918: 4917: 4912: 4903: 4889: 4882: 4874: 4869: 4864: 4863: 4858: 4849: 4848: 4839: 4831: 4826: 4821: 4820: 4815: 4798: 4793: 4784: 4776: 4771: 4766: 4765: 4760: 4738: 4736: 4735: 4730: 4725: 4720: 4712: 4701: 4697: 4696: 4695: 4690: 4684: 4679: 4677: 4676: 4667: 4666: 4657: 4654: 4649: 4629: 4615: 4614: 4609: 4603: 4598: 4593: 4585: 4571: 4566: 4561: 4556: 4555: 4550: 4541: 4522: 4520: 4519: 4514: 4512: 4511: 4506: 4500: 4492: 4491: 4486: 4471: 4470: 4465: 4456: 4444: 4442: 4441: 4436: 4434: 4433: 4396: 4394: 4393: 4388: 4386: 4385: 4376: 4368: 4363: 4362: 4349: 4344: 4329: 4327: 4313: 4308: 4307: 4291: 4289: 4288: 4283: 4281: 4280: 4270: 4265: 4250: 4242: 4237: 4229: 4220: 4218: 4217: 4212: 4210: 4208: 4197: 4196: 4187: 4182: 4181: 4172: 4164: 4159: 4158: 4146: 4144: 4130: 4121: 4119: 4118: 4113: 4110: 4105: 4089: 4087: 4086: 4081: 4078: 4073: 4054: 4049: 4033: 4031: 4030: 4025: 4023: 4022: 4004: 4003: 3979: 3977: 3976: 3971: 3966: 3958: 3953: 3948: 3947: 3942: 3920: 3918: 3917: 3912: 3907: 3906: 3898: 3895: 3887: 3879: 3878: 3869: 3868: 3860: 3857: 3849: 3841: 3839: 3825: 3820: 3819: 3801: 3799: 3798: 3793: 3791: 3790: 3756: 3754: 3753: 3748: 3746: 3745: 3730: 3729: 3724: 3718: 3710: 3693: 3691: 3690: 3685: 3683: 3675: 3670: 3655: 3653: 3652: 3647: 3642: 3634: 3629: 3624: 3623: 3618: 3602: 3600: 3599: 3594: 3592: 3580: 3578: 3577: 3572: 3569: 3564: 3555: 3554: 3544: 3539: 3511: 3509: 3508: 3503: 3501: 3500: 3492: 3474: 3472: 3471: 3466: 3461: 3453: 3448: 3443: 3442: 3437: 3417: 3415: 3414: 3409: 3407: 3399: 3391: 3386: 3381: 3380: 3375: 3366: 3365: 3360: 3345: 3343: 3342: 3337: 3335: 3330: 3325: 3324: 3319: 3310: 3305: 3301: 3300: 3296: 3295: 3293: 3292: 3283: 3282: 3273: 3262: 3260: 3259: 3250: 3249: 3240: 3233: 3214: 3213: 3208: 3199: 3198: 3193: 3186: 3181: 3176: 3170: 3168: 3167: 3158: 3157: 3148: 3137: 3136: 3131: 3124: 3119: 3114: 3108: 3106: 3105: 3096: 3095: 3086: 3072:is defined as a 3071: 3069: 3068: 3063: 3061: 3049: 3047: 3046: 3041: 3038: 3033: 3024: 3023: 3008: 3007: 3002: 2995: 2990: 2985: 2976: 2964: 2962: 2961: 2956: 2944: 2942: 2941: 2936: 2934: 2911: 2909: 2908: 2903: 2901: 2900: 2885: 2884: 2879: 2873: 2865: 2851: 2850: 2845: 2839: 2833: 2828: 2823: 2814: 2799: 2797: 2796: 2791: 2789: 2777: 2775: 2774: 2769: 2766: 2761: 2752: 2751: 2741: 2736: 2715: 2714: 2709: 2703: 2697: 2692: 2687: 2678: 2669: 2664: 2654: 2649: 2621: 2619: 2618: 2613: 2611: 2604: 2603: 2598: 2592: 2586: 2581: 2576: 2567: 2558: 2553: 2543: 2538: 2517: 2510: 2509: 2504: 2498: 2497: 2492: 2486: 2480: 2475: 2470: 2463: 2458: 2453: 2444: 2438: 2433: 2412: 2405: 2400: 2395: 2390: 2389: 2384: 2378: 2377: 2372: 2363: 2348: 2347: 2339: 2333: 2315: 2313: 2312: 2307: 2305: 2304: 2299: 2282: 2280: 2279: 2274: 2262: 2260: 2259: 2254: 2249: 2248: 2240: 2234: 2216: 2214: 2213: 2208: 2206: 2202: 2197: 2192: 2187: 2186: 2181: 2175: 2174: 2169: 2157: 2150: 2145: 2137: 2132: 2124: 2119: 2118: 2109: 2104: 2096: 2091: 2077: 2073: 2068: 2063: 2062: 2057: 2044: 2043: 2035: 2019: 2017: 2016: 2011: 2009: 2001: 1996: 1976: 1974: 1973: 1968: 1966: 1961: 1956: 1955: 1950: 1937: 1935: 1934: 1929: 1927: 1919: 1914: 1902: 1900: 1899: 1894: 1892: 1880: 1878: 1877: 1872: 1870: 1865: 1860: 1859: 1854: 1837: 1835: 1834: 1829: 1824: 1823: 1818: 1812: 1804: 1796: 1791: 1790: 1781: 1780: 1775: 1769: 1761: 1744: 1742: 1741: 1736: 1734: 1729: 1721: 1716: 1708: 1707: 1702: 1696: 1688: 1674: 1672: 1671: 1666: 1664: 1663: 1658: 1649: 1641: 1616: 1614: 1613: 1608: 1606: 1594: 1592: 1591: 1586: 1584: 1579: 1574: 1573: 1568: 1559: 1558: 1550: 1540: 1538: 1537: 1532: 1529: 1524: 1515: 1514: 1504: 1499: 1469: 1467: 1466: 1461: 1459: 1458: 1453: 1446: 1441: 1423: 1422: 1417: 1410: 1405: 1392: 1387: 1382: 1376: 1375: 1370: 1363: 1358: 1339: 1334: 1329: 1323: 1322: 1317: 1310: 1305: 1290: 1282: 1269: 1267: 1266: 1261: 1259: 1254: 1243: 1235: 1221: 1219: 1218: 1213: 1211: 1197: 1195: 1194: 1189: 1187: 1182: 1174: 1169: 1161: 1147: 1145: 1144: 1139: 1137: 1133: 1128: 1123: 1118: 1104: 1099: 1094: 1077: 1076: 1071: 1058: 1056: 1055: 1050: 1048: 1044: 1040: 1039: 1034: 1021: 1020: 1015: 998: 982: 980: 979: 974: 972: 971: 966: 953: 951: 950: 945: 943: 922: 920: 919: 914: 912: 911: 906: 899: 894: 879: 871: 859: 857: 856: 851: 849: 838: 830: 818: 816: 815: 810: 808: 800: 795: 787: 772: 770: 769: 764: 762: 761: 756: 747: 746: 741: 718: 716: 715: 710: 707: 702: 683: 678: 662: 660: 659: 654: 639: 628: 627: 622: 613: 612: 607: 598: 586: 584: 583: 578: 576: 575: 574: 573: 563: 556: 551: 536: 535: 530: 521: 509: 507: 506: 501: 499: 488: 487: 482: 473: 461: 459: 458: 453: 437: 435: 434: 429: 427: 426: 425: 424: 414: 405: 404: 399: 386: 384: 383: 378: 366: 364: 363: 358: 356: 355: 354: 353: 337: 328: 327: 322: 309: 307: 306: 301: 299: 298: 293: 284: 268: 266: 265: 260: 258: 257: 246: 237: 223: 221: 220: 215: 213: 212: 207: 201: 200: 195: 180: 179: 174: 168: 167: 162: 153: 148: 140: 126: 124: 123: 118: 116: 115: 110: 101: 34:, the theory of 21: 7602: 7601: 7597: 7596: 7595: 7593: 7592: 7591: 7567: 7566: 7565: 7534: 7511: 7482:J Multivar Anal 7478: 7463: 7432: 7417: 7413: 7407: 7405: 7404: 7302: 7299: 7298: 7279: 7275: 7274: 7269: 7268: 7262: 7257: 7241: 7236: 7235: 7227: 7225: 7222: 7221: 7181: 7178: 7177: 7161: 7149: 7144: 7143: 7135: 7133: 7130: 7129: 7113: 7101: 7096: 7095: 7087: 7085: 7082: 7081: 7074: 7053: 7047: 7042: 7041: 7027: 7026: 7024: 7021: 7020: 7003: 6999: 6993: 6988: 6973: 6968: 6953: 6951: 6948: 6947: 6931: 6925: 6920: 6919: 6910: 6905: 6895: 6891: 6885: 6874: 6862: 6859: 6858: 6842: 6836: 6831: 6830: 6824: 6819: 6818: 6810: 6804: 6800: 6794: 6789: 6788: 6779: 6774: 6773: 6765: 6759: 6754: 6753: 6739: 6738: 6736: 6733: 6732: 6716: 6710: 6705: 6704: 6696: 6694: 6691: 6690: 6670: 6669: 6660: 6655: 6654: 6649: 6643: 6638: 6637: 6632: 6621: 6619: 6614: 6605: 6600: 6599: 6594: 6588: 6583: 6582: 6577: 6566: 6563: 6562: 6557: 6552: 6546: 6545: 6536: 6531: 6530: 6525: 6519: 6514: 6513: 6508: 6497: 6495: 6490: 6481: 6476: 6475: 6470: 6464: 6459: 6458: 6453: 6442: 6435: 6434: 6426: 6424: 6421: 6420: 6402: 6400: 6397: 6396: 6379: 6375: 6369: 6365: 6354: 6350: 6339: 6337: 6334: 6333: 6317: 6309: 6304: 6302: 6299: 6298: 6282: 6281: 6275: 6271: 6264: 6255: 6250: 6249: 6244: 6238: 6233: 6232: 6227: 6216: 6210: 6206: 6200: 6189: 6182: 6181: 6175: 6171: 6164: 6153: 6148: 6147: 6142: 6136: 6131: 6130: 6125: 6119: 6115: 6109: 6098: 6093: 6089: 6081: 6078: 6077: 6071: 6067: 6060: 6051: 6046: 6045: 6039: 6034: 6033: 6022: 6018: 6016: 6013: 6012: 5967: 5964: 5963: 5946: 5942: 5930: 5925: 5924: 5918: 5913: 5912: 5901: 5899: 5896: 5895: 5879: 5877: 5874: 5873: 5857: 5856: 5851: 5845: 5840: 5839: 5830: 5829: 5823: 5819: 5813: 5809: 5803: 5792: 5779: 5778: 5773: 5768: 5762: 5757: 5756: 5751: 5745: 5740: 5739: 5733: 5729: 5723: 5712: 5699: 5698: 5693: 5687: 5682: 5681: 5675: 5670: 5669: 5662: 5651: 5650: 5646: 5644: 5641: 5640: 5622: 5620: 5617: 5616: 5600: 5598: 5595: 5594: 5586:represents the 5570: 5566: 5558: 5555: 5554: 5538: 5536: 5533: 5532: 5508: 5503: 5502: 5496: 5491: 5490: 5484: 5480: 5475: 5466: 5461: 5460: 5454: 5449: 5448: 5440: 5432: 5430: 5427: 5426: 5407: 5399: 5387: 5382: 5381: 5373: 5371: 5368: 5367: 5348: 5342: 5337: 5336: 5331: 5325: 5321: 5315: 5304: 5291: 5286: 5285: 5283: 5280: 5279: 5261: 5259: 5256: 5255: 5233: 5228: 5223: 5218: 5207: 5205: 5202: 5201: 5200:that minimizes 5185: 5183: 5180: 5179: 5163: 5161: 5158: 5157: 5138: 5133: 5122: 5120: 5117: 5116: 5100: 5099: 5091: 5086: 5075: 5064: 5059: 5054: 5049: 5038: 5029: 5028: 5020: 5015: 5004: 4993: 4988: 4983: 4977: 4972: 4971: 4957: 4945: 4940: 4939: 4934: 4929: 4924: 4919: 4913: 4908: 4907: 4896: 4887: 4886: 4878: 4870: 4865: 4859: 4854: 4853: 4844: 4840: 4835: 4827: 4822: 4816: 4811: 4810: 4800: 4794: 4789: 4780: 4772: 4767: 4761: 4756: 4755: 4748: 4746: 4743: 4742: 4721: 4716: 4705: 4691: 4686: 4685: 4680: 4672: 4668: 4662: 4658: 4656: 4650: 4639: 4634: 4630: 4622: 4610: 4605: 4604: 4599: 4594: 4589: 4578: 4567: 4562: 4557: 4551: 4546: 4545: 4534: 4532: 4529: 4528: 4507: 4502: 4501: 4496: 4487: 4482: 4481: 4466: 4461: 4460: 4452: 4450: 4447: 4446: 4429: 4425: 4417: 4414: 4413: 4403: 4381: 4377: 4367: 4358: 4354: 4345: 4334: 4317: 4312: 4303: 4299: 4297: 4294: 4293: 4276: 4272: 4266: 4255: 4241: 4228: 4226: 4223: 4222: 4198: 4192: 4188: 4186: 4177: 4173: 4163: 4154: 4150: 4134: 4129: 4127: 4124: 4123: 4106: 4101: 4095: 4092: 4091: 4074: 4069: 4050: 4045: 4039: 4036: 4035: 4018: 4014: 3999: 3995: 3993: 3990: 3989: 3986: 3962: 3954: 3949: 3943: 3938: 3937: 3932: 3929: 3928: 3897: 3896: 3891: 3883: 3874: 3870: 3859: 3858: 3853: 3845: 3829: 3824: 3815: 3811: 3809: 3806: 3805: 3786: 3782: 3780: 3777: 3776: 3769: 3764: 3741: 3737: 3725: 3720: 3719: 3714: 3703: 3701: 3698: 3697: 3679: 3671: 3666: 3664: 3661: 3660: 3638: 3630: 3625: 3619: 3614: 3613: 3608: 3605: 3604: 3603:that minimizes 3588: 3586: 3583: 3582: 3565: 3560: 3550: 3546: 3540: 3529: 3517: 3514: 3513: 3491: 3490: 3488: 3485: 3484: 3481: 3457: 3449: 3444: 3438: 3433: 3432: 3427: 3424: 3423: 3403: 3395: 3387: 3382: 3376: 3371: 3370: 3361: 3356: 3355: 3353: 3350: 3349: 3331: 3326: 3320: 3315: 3314: 3306: 3288: 3284: 3278: 3274: 3272: 3255: 3251: 3245: 3241: 3239: 3238: 3234: 3220: 3219: 3215: 3209: 3204: 3203: 3194: 3189: 3188: 3182: 3177: 3172: 3163: 3159: 3153: 3149: 3147: 3132: 3127: 3126: 3120: 3115: 3110: 3101: 3097: 3091: 3087: 3085: 3083: 3080: 3079: 3074:diagonal matrix 3057: 3055: 3052: 3051: 3034: 3029: 3019: 3015: 3003: 2998: 2997: 2991: 2986: 2981: 2972: 2970: 2967: 2966: 2950: 2947: 2946: 2930: 2928: 2925: 2924: 2923:argues that if 2918: 2896: 2892: 2880: 2875: 2874: 2869: 2858: 2846: 2841: 2840: 2835: 2829: 2824: 2819: 2807: 2805: 2802: 2801: 2785: 2783: 2780: 2779: 2762: 2757: 2747: 2743: 2737: 2726: 2710: 2705: 2704: 2699: 2693: 2688: 2683: 2671: 2665: 2660: 2650: 2639: 2633: 2630: 2629: 2609: 2608: 2599: 2594: 2593: 2588: 2582: 2577: 2572: 2560: 2554: 2549: 2539: 2528: 2515: 2514: 2505: 2500: 2499: 2493: 2488: 2487: 2482: 2476: 2471: 2466: 2459: 2454: 2449: 2440: 2434: 2423: 2410: 2409: 2401: 2396: 2391: 2385: 2380: 2379: 2373: 2368: 2367: 2359: 2352: 2338: 2337: 2329: 2325: 2323: 2320: 2319: 2300: 2295: 2294: 2292: 2289: 2288: 2268: 2265: 2264: 2239: 2238: 2230: 2228: 2225: 2224: 2204: 2203: 2198: 2193: 2188: 2182: 2177: 2176: 2170: 2165: 2164: 2155: 2154: 2146: 2141: 2133: 2128: 2120: 2114: 2110: 2105: 2100: 2092: 2087: 2075: 2074: 2069: 2064: 2058: 2053: 2052: 2045: 2034: 2033: 2029: 2027: 2024: 2023: 2005: 1997: 1992: 1990: 1987: 1986: 1983: 1962: 1957: 1951: 1946: 1945: 1943: 1940: 1939: 1923: 1915: 1910: 1908: 1905: 1904: 1888: 1886: 1883: 1882: 1866: 1861: 1855: 1850: 1849: 1847: 1844: 1843: 1819: 1814: 1813: 1808: 1800: 1792: 1786: 1782: 1776: 1771: 1770: 1765: 1757: 1752: 1749: 1748: 1730: 1725: 1717: 1712: 1703: 1698: 1697: 1692: 1684: 1682: 1679: 1678: 1659: 1654: 1653: 1645: 1637: 1635: 1632: 1631: 1628: 1623: 1602: 1600: 1597: 1596: 1580: 1575: 1569: 1564: 1563: 1549: 1548: 1546: 1543: 1542: 1525: 1520: 1510: 1506: 1500: 1489: 1477: 1474: 1473: 1454: 1449: 1448: 1442: 1437: 1418: 1413: 1412: 1406: 1401: 1388: 1383: 1378: 1371: 1366: 1365: 1359: 1354: 1335: 1330: 1325: 1318: 1313: 1312: 1306: 1301: 1286: 1278: 1276: 1273: 1272: 1255: 1250: 1239: 1231: 1229: 1226: 1225: 1207: 1205: 1202: 1201: 1183: 1178: 1170: 1165: 1157: 1155: 1152: 1151: 1131: 1130: 1124: 1119: 1114: 1111: 1106: 1100: 1095: 1090: 1085: 1081: 1072: 1067: 1066: 1064: 1061: 1060: 1042: 1041: 1035: 1030: 1029: 1027: 1022: 1016: 1011: 1010: 1006: 1002: 994: 992: 989: 988: 967: 962: 961: 959: 956: 955: 939: 937: 934: 933: 907: 902: 901: 895: 890: 875: 867: 865: 862: 861: 845: 834: 826: 824: 821: 820: 804: 796: 791: 783: 781: 778: 777: 757: 752: 751: 742: 737: 736: 734: 731: 730: 703: 698: 679: 674: 668: 665: 664: 635: 623: 618: 617: 608: 603: 602: 594: 592: 589: 588: 569: 565: 564: 559: 558: 552: 547: 531: 526: 525: 517: 515: 512: 511: 495: 483: 478: 477: 469: 467: 464: 463: 447: 444: 443: 420: 416: 415: 410: 409: 400: 395: 394: 392: 389: 388: 372: 369: 368: 349: 345: 338: 333: 332: 323: 318: 317: 315: 312: 311: 294: 289: 288: 280: 278: 275: 274: 247: 242: 241: 233: 231: 228: 227: 208: 203: 202: 196: 191: 190: 175: 170: 169: 163: 158: 157: 149: 144: 136: 134: 131: 130: 111: 106: 105: 97: 95: 92: 91: 84: 76:quadratic forms 64:heteroscedastic 28: 23: 22: 15: 12: 11: 5: 7600: 7590: 7589: 7584: 7579: 7564: 7563: 7509: 7461: 7414: 7412: 7409: 7403: 7402: 7395: 7388: 7380: 7377: 7376: 7359: 7336: 7333: 7330: 7327: 7324: 7321: 7318: 7315: 7312: 7309: 7306: 7282: 7278: 7272: 7265: 7260: 7256: 7252: 7249: 7244: 7239: 7234: 7230: 7209: 7206: 7203: 7200: 7197: 7194: 7191: 7188: 7185: 7164: 7160: 7157: 7152: 7147: 7142: 7138: 7116: 7112: 7109: 7104: 7099: 7094: 7090: 7073: 7070: 7056: 7050: 7045: 7040: 7034: 7031: 7006: 7002: 6996: 6991: 6987: 6982: 6976: 6971: 6967: 6963: 6960: 6956: 6934: 6928: 6923: 6918: 6913: 6908: 6904: 6898: 6894: 6888: 6883: 6880: 6877: 6873: 6869: 6866: 6845: 6839: 6834: 6827: 6822: 6817: 6813: 6807: 6803: 6797: 6792: 6787: 6782: 6777: 6772: 6768: 6762: 6757: 6752: 6746: 6743: 6719: 6713: 6708: 6703: 6699: 6674: 6668: 6663: 6658: 6652: 6646: 6641: 6635: 6631: 6627: 6624: 6620: 6618: 6615: 6613: 6608: 6603: 6597: 6591: 6586: 6580: 6576: 6572: 6569: 6565: 6564: 6561: 6558: 6556: 6553: 6551: 6548: 6547: 6544: 6539: 6534: 6528: 6522: 6517: 6511: 6507: 6503: 6500: 6496: 6494: 6491: 6489: 6484: 6479: 6473: 6467: 6462: 6456: 6452: 6448: 6445: 6441: 6440: 6438: 6433: 6429: 6405: 6382: 6378: 6372: 6368: 6363: 6357: 6353: 6349: 6346: 6342: 6320: 6316: 6312: 6307: 6278: 6274: 6270: 6267: 6265: 6263: 6258: 6253: 6247: 6241: 6236: 6230: 6226: 6222: 6219: 6213: 6209: 6203: 6198: 6195: 6192: 6188: 6184: 6183: 6178: 6174: 6170: 6167: 6165: 6162: 6156: 6151: 6145: 6139: 6134: 6128: 6122: 6118: 6112: 6107: 6104: 6101: 6097: 6092: 6087: 6084: 6080: 6079: 6074: 6070: 6066: 6063: 6061: 6059: 6054: 6049: 6042: 6037: 6032: 6028: 6025: 6021: 6020: 5998: 5995: 5992: 5989: 5986: 5983: 5980: 5977: 5974: 5971: 5949: 5945: 5941: 5938: 5933: 5928: 5921: 5916: 5911: 5907: 5904: 5882: 5854: 5848: 5843: 5838: 5835: 5833: 5831: 5826: 5822: 5816: 5812: 5806: 5801: 5798: 5795: 5791: 5787: 5784: 5782: 5780: 5776: 5771: 5765: 5760: 5754: 5748: 5743: 5736: 5732: 5726: 5721: 5718: 5715: 5711: 5707: 5704: 5702: 5700: 5696: 5690: 5685: 5678: 5673: 5668: 5665: 5663: 5658: 5655: 5649: 5648: 5625: 5603: 5573: 5569: 5565: 5562: 5541: 5514: 5511: 5506: 5499: 5494: 5487: 5483: 5478: 5472: 5469: 5464: 5457: 5452: 5447: 5443: 5439: 5435: 5414: 5410: 5406: 5402: 5398: 5393: 5390: 5385: 5380: 5376: 5351: 5345: 5340: 5334: 5328: 5324: 5318: 5313: 5310: 5307: 5303: 5299: 5294: 5289: 5264: 5240: 5236: 5231: 5226: 5221: 5217: 5213: 5210: 5188: 5166: 5145: 5141: 5136: 5132: 5128: 5125: 5098: 5094: 5089: 5085: 5081: 5078: 5074: 5071: 5067: 5062: 5057: 5052: 5048: 5044: 5041: 5037: 5034: 5032: 5030: 5027: 5023: 5018: 5014: 5010: 5007: 5003: 5000: 4996: 4991: 4986: 4980: 4975: 4970: 4967: 4963: 4960: 4956: 4953: 4948: 4943: 4937: 4932: 4927: 4922: 4916: 4911: 4906: 4902: 4899: 4895: 4892: 4890: 4888: 4885: 4881: 4877: 4873: 4868: 4862: 4857: 4852: 4847: 4843: 4838: 4834: 4830: 4825: 4819: 4814: 4809: 4806: 4803: 4801: 4797: 4792: 4788: 4783: 4779: 4775: 4770: 4764: 4759: 4754: 4751: 4750: 4728: 4724: 4719: 4715: 4711: 4708: 4704: 4700: 4694: 4689: 4683: 4675: 4671: 4665: 4661: 4653: 4648: 4645: 4642: 4638: 4633: 4628: 4625: 4621: 4618: 4613: 4608: 4602: 4597: 4592: 4588: 4584: 4581: 4577: 4574: 4570: 4565: 4560: 4554: 4549: 4544: 4540: 4537: 4510: 4505: 4499: 4495: 4490: 4485: 4480: 4477: 4474: 4469: 4464: 4459: 4455: 4432: 4428: 4424: 4421: 4410:Euclidean norm 4402: 4399: 4384: 4380: 4374: 4371: 4366: 4361: 4357: 4353: 4348: 4343: 4340: 4337: 4333: 4326: 4323: 4320: 4316: 4311: 4306: 4302: 4279: 4275: 4269: 4264: 4261: 4258: 4254: 4248: 4245: 4240: 4235: 4232: 4207: 4204: 4201: 4195: 4191: 4185: 4180: 4176: 4170: 4167: 4162: 4157: 4153: 4149: 4143: 4140: 4137: 4133: 4109: 4104: 4100: 4077: 4072: 4068: 4064: 4061: 4058: 4053: 4048: 4044: 4021: 4017: 4013: 4010: 4007: 4002: 3998: 3985: 3982: 3969: 3965: 3961: 3957: 3952: 3946: 3941: 3936: 3925:Euclidean norm 3910: 3904: 3901: 3894: 3890: 3886: 3882: 3877: 3873: 3866: 3863: 3856: 3852: 3848: 3844: 3838: 3835: 3832: 3828: 3823: 3818: 3814: 3789: 3785: 3768: 3765: 3763: 3760: 3759: 3758: 3744: 3740: 3736: 3733: 3728: 3723: 3717: 3713: 3709: 3706: 3695: 3682: 3678: 3674: 3669: 3645: 3641: 3637: 3633: 3628: 3622: 3617: 3612: 3591: 3568: 3563: 3559: 3553: 3549: 3543: 3538: 3535: 3532: 3528: 3524: 3521: 3498: 3495: 3480: 3477: 3464: 3460: 3456: 3452: 3447: 3441: 3436: 3431: 3422:of the matrix 3406: 3402: 3398: 3394: 3390: 3385: 3379: 3374: 3369: 3364: 3359: 3334: 3329: 3323: 3318: 3313: 3309: 3304: 3299: 3291: 3287: 3281: 3277: 3271: 3268: 3265: 3258: 3254: 3248: 3244: 3237: 3232: 3229: 3226: 3223: 3218: 3212: 3207: 3202: 3197: 3192: 3185: 3180: 3175: 3166: 3162: 3156: 3152: 3146: 3143: 3140: 3135: 3130: 3123: 3118: 3113: 3104: 3100: 3094: 3090: 3060: 3037: 3032: 3028: 3022: 3018: 3014: 3011: 3006: 3001: 2994: 2989: 2984: 2979: 2975: 2954: 2933: 2917: 2914: 2899: 2895: 2891: 2888: 2883: 2878: 2872: 2868: 2864: 2861: 2857: 2854: 2849: 2844: 2838: 2832: 2827: 2822: 2817: 2813: 2810: 2788: 2765: 2760: 2756: 2750: 2746: 2740: 2735: 2732: 2729: 2725: 2721: 2718: 2713: 2708: 2702: 2696: 2691: 2686: 2681: 2677: 2674: 2668: 2663: 2659: 2653: 2648: 2645: 2642: 2638: 2607: 2602: 2597: 2591: 2585: 2580: 2575: 2570: 2566: 2563: 2557: 2552: 2548: 2542: 2537: 2534: 2531: 2527: 2523: 2520: 2518: 2516: 2513: 2508: 2503: 2496: 2491: 2485: 2479: 2474: 2469: 2462: 2457: 2452: 2447: 2443: 2437: 2432: 2429: 2426: 2422: 2418: 2415: 2413: 2411: 2408: 2404: 2399: 2394: 2388: 2383: 2376: 2371: 2366: 2362: 2358: 2355: 2353: 2351: 2345: 2342: 2336: 2332: 2328: 2327: 2303: 2298: 2272: 2252: 2246: 2243: 2237: 2233: 2201: 2196: 2191: 2185: 2180: 2173: 2168: 2163: 2160: 2158: 2156: 2153: 2149: 2144: 2140: 2136: 2131: 2127: 2123: 2117: 2113: 2108: 2103: 2099: 2095: 2090: 2086: 2083: 2080: 2078: 2076: 2072: 2067: 2061: 2056: 2051: 2048: 2046: 2041: 2038: 2032: 2031: 2008: 2004: 2000: 1995: 1982: 1979: 1965: 1960: 1954: 1949: 1926: 1922: 1918: 1913: 1891: 1869: 1864: 1858: 1853: 1827: 1822: 1817: 1811: 1807: 1803: 1799: 1795: 1789: 1785: 1779: 1774: 1768: 1764: 1760: 1756: 1733: 1728: 1724: 1720: 1715: 1711: 1706: 1701: 1695: 1691: 1687: 1662: 1657: 1652: 1648: 1644: 1640: 1627: 1624: 1622: 1619: 1605: 1583: 1578: 1572: 1567: 1562: 1556: 1553: 1528: 1523: 1519: 1513: 1509: 1503: 1498: 1495: 1492: 1488: 1484: 1481: 1457: 1452: 1445: 1440: 1436: 1432: 1429: 1426: 1421: 1416: 1409: 1404: 1400: 1396: 1391: 1386: 1381: 1374: 1369: 1362: 1357: 1353: 1349: 1346: 1343: 1338: 1333: 1328: 1321: 1316: 1309: 1304: 1300: 1296: 1293: 1289: 1285: 1281: 1258: 1253: 1249: 1246: 1242: 1238: 1234: 1210: 1186: 1181: 1177: 1173: 1168: 1164: 1160: 1136: 1127: 1122: 1117: 1112: 1110: 1107: 1103: 1098: 1093: 1088: 1087: 1084: 1080: 1075: 1070: 1047: 1038: 1033: 1028: 1026: 1023: 1019: 1014: 1009: 1008: 1005: 1001: 997: 985: 984: 970: 965: 942: 924: 910: 905: 898: 893: 889: 885: 882: 878: 874: 870: 848: 844: 841: 837: 833: 829: 807: 803: 799: 794: 790: 786: 760: 755: 750: 745: 740: 706: 701: 697: 693: 690: 687: 682: 677: 673: 652: 649: 646: 643: 638: 634: 631: 626: 621: 616: 611: 606: 601: 597: 572: 568: 562: 555: 550: 546: 542: 539: 534: 529: 524: 520: 498: 494: 491: 486: 481: 476: 472: 451: 423: 419: 413: 408: 403: 398: 376: 352: 348: 344: 341: 336: 331: 326: 321: 297: 292: 287: 283: 256: 253: 250: 245: 240: 236: 211: 206: 199: 194: 189: 186: 183: 178: 173: 166: 161: 156: 152: 147: 143: 139: 114: 109: 104: 100: 83: 80: 46:, such as the 26: 9: 6: 4: 3: 2: 7599: 7588: 7585: 7583: 7580: 7578: 7575: 7574: 7572: 7559: 7555: 7551: 7547: 7543: 7539: 7532: 7530: 7528: 7526: 7524: 7522: 7520: 7518: 7516: 7514: 7504: 7499: 7495: 7491: 7487: 7483: 7476: 7474: 7472: 7470: 7468: 7466: 7457: 7453: 7449: 7445: 7441: 7437: 7430: 7428: 7426: 7424: 7422: 7420: 7415: 7408: 7401: 7396: 7394: 7389: 7387: 7382: 7381: 7375: 7373: 7369: 7365: 7360: 7357: 7353: 7352: 7348: 7331: 7328: 7325: 7322: 7319: 7316: 7313: 7307: 7304: 7280: 7276: 7263: 7258: 7254: 7250: 7242: 7204: 7201: 7198: 7195: 7192: 7186: 7183: 7158: 7150: 7110: 7102: 7078: 7069: 7048: 7038: 6994: 6989: 6985: 6980: 6974: 6969: 6965: 6958: 6916: 6911: 6906: 6902: 6896: 6892: 6886: 6881: 6878: 6875: 6871: 6867: 6864: 6837: 6815: 6795: 6770: 6750: 6741: 6711: 6701: 6687: 6672: 6661: 6644: 6616: 6606: 6589: 6559: 6554: 6549: 6537: 6520: 6492: 6482: 6465: 6436: 6431: 6418: 6370: 6366: 6361: 6355: 6351: 6344: 6314: 6295: 6276: 6272: 6268: 6266: 6256: 6239: 6211: 6207: 6201: 6196: 6193: 6190: 6186: 6176: 6172: 6168: 6166: 6160: 6154: 6137: 6120: 6116: 6110: 6105: 6102: 6099: 6095: 6090: 6072: 6068: 6064: 6062: 6052: 6040: 6010: 5993: 5990: 5987: 5984: 5981: 5975: 5972: 5947: 5943: 5939: 5931: 5919: 5870: 5836: 5834: 5824: 5820: 5814: 5810: 5804: 5799: 5796: 5793: 5789: 5785: 5783: 5763: 5734: 5730: 5724: 5719: 5716: 5713: 5709: 5705: 5703: 5688: 5666: 5664: 5653: 5638: 5591: 5590:of a matrix. 5589: 5571: 5563: 5530: 5512: 5509: 5485: 5470: 5467: 5437: 5404: 5391: 5388: 5378: 5364: 5343: 5326: 5322: 5316: 5311: 5308: 5305: 5301: 5297: 5292: 5277: 5252: 5113: 5072: 5035: 5033: 5001: 4968: 4954: 4893: 4891: 4875: 4832: 4804: 4802: 4795: 4790: 4777: 4740: 4702: 4698: 4692: 4673: 4669: 4663: 4659: 4651: 4646: 4643: 4640: 4636: 4631: 4619: 4575: 4526: 4493: 4488: 4478: 4475: 4472: 4467: 4457: 4430: 4422: 4411: 4407: 4398: 4382: 4369: 4364: 4359: 4355: 4346: 4341: 4338: 4335: 4331: 4324: 4321: 4318: 4314: 4309: 4304: 4300: 4277: 4273: 4267: 4262: 4259: 4256: 4252: 4246: 4243: 4238: 4230: 4205: 4202: 4199: 4193: 4189: 4183: 4178: 4165: 4160: 4155: 4151: 4141: 4138: 4135: 4131: 4107: 4102: 4098: 4075: 4070: 4066: 4062: 4059: 4056: 4051: 4046: 4042: 4019: 4015: 4011: 4008: 4005: 4000: 3996: 3981: 3959: 3926: 3921: 3888: 3850: 3836: 3833: 3830: 3826: 3821: 3816: 3812: 3803: 3787: 3783: 3774: 3742: 3738: 3734: 3726: 3696: 3676: 3659: 3658: 3657: 3635: 3566: 3561: 3557: 3551: 3547: 3541: 3536: 3533: 3530: 3526: 3522: 3519: 3493: 3476: 3454: 3421: 3392: 3346: 3311: 3302: 3297: 3289: 3285: 3279: 3275: 3269: 3266: 3263: 3256: 3252: 3246: 3242: 3235: 3216: 3200: 3195: 3178: 3164: 3160: 3154: 3150: 3144: 3141: 3138: 3133: 3116: 3102: 3098: 3092: 3088: 3077: 3075: 3035: 3030: 3026: 3020: 3016: 3012: 3004: 2987: 2952: 2922: 2913: 2897: 2893: 2889: 2881: 2855: 2847: 2825: 2763: 2758: 2754: 2748: 2744: 2738: 2733: 2730: 2727: 2723: 2719: 2711: 2689: 2666: 2661: 2657: 2651: 2646: 2643: 2640: 2636: 2627: 2622: 2600: 2578: 2555: 2550: 2546: 2540: 2535: 2532: 2529: 2525: 2521: 2519: 2506: 2494: 2472: 2455: 2435: 2430: 2427: 2424: 2420: 2416: 2414: 2356: 2354: 2340: 2317: 2301: 2286: 2270: 2241: 2222: 2217: 2161: 2159: 2138: 2097: 2081: 2079: 2049: 2047: 2036: 2021: 2002: 1978: 1920: 1841: 1820: 1805: 1777: 1762: 1745: 1722: 1709: 1704: 1689: 1676: 1660: 1650: 1642: 1618: 1560: 1551: 1526: 1521: 1517: 1511: 1507: 1501: 1496: 1493: 1490: 1486: 1482: 1479: 1470: 1455: 1443: 1438: 1434: 1430: 1427: 1424: 1419: 1407: 1402: 1398: 1394: 1384: 1372: 1360: 1355: 1351: 1347: 1344: 1341: 1331: 1319: 1307: 1302: 1298: 1294: 1270: 1247: 1223: 1198: 1175: 1162: 1149: 1134: 1120: 1108: 1096: 1082: 1078: 1045: 1036: 1024: 1017: 1003: 999: 968: 931: 928: 925: 908: 896: 891: 887: 883: 842: 801: 788: 776: 758: 748: 743: 728: 725: 724: 723: 720: 704: 699: 695: 691: 688: 685: 680: 675: 671: 650: 647: 644: 632: 624: 614: 609: 570: 566: 553: 548: 544: 540: 532: 492: 484: 449: 441: 440:random vector 421: 417: 406: 401: 374: 350: 346: 342: 339: 329: 324: 295: 285: 272: 271:design matrix 254: 251: 248: 238: 224: 209: 197: 187: 184: 181: 176: 164: 154: 141: 128: 112: 102: 89: 79: 77: 73: 69: 65: 61: 57: 53: 49: 45: 41: 37: 33: 19: 7541: 7537: 7485: 7481: 7439: 7435: 7406: 7372:expanding it 7361: 7079: 7075: 6857:. Note that 6688: 6419: 6296: 6011: 5871: 5639: 5592: 5365: 5278: 5253: 5114: 4741: 4404: 3987: 3927:of the form 3922: 3804: 3770: 3482: 3347: 3078: 2919: 2916:Minimum Norm 2623: 2318: 2218: 2022: 1984: 1746: 1677: 1629: 1471: 1271: 1224: 1199: 1150: 986: 929: 926: 726: 721: 225: 129: 85: 35: 29: 7488:: 257–275. 5872:The vector 7571:Categories 7411:References 7364:statistics 7072:Extensions 2800:such that 1903:such that 82:Principles 32:statistics 7326:⋯ 7308:∈ 7255:σ 7238:ξ 7199:⋯ 7187:∈ 7163:Σ 7146:ξ 7115:Σ 7098:ξ 7049:− 7033:^ 7030:σ 7005:⊤ 6986:σ 6981:⋯ 6966:σ 6955:σ 6933:σ 6927:⊤ 6903:σ 6872:∑ 6865:θ 6838:− 6826:⊤ 6806:⊤ 6796:− 6781:⊤ 6761:⊤ 6756:λ 6745:^ 6742:θ 6712:− 6698:λ 6617:⋯ 6560:⋮ 6555:⋱ 6550:⋮ 6493:⋯ 6381:⊤ 6362:⋯ 6311:λ 6208:λ 6187:∑ 6117:λ 6096:∑ 6041:⋆ 5988:⋯ 5976:∈ 5970:∀ 5920:⋆ 5881:λ 5847:⊤ 5842:λ 5837:≡ 5811:λ 5790:∑ 5786:≡ 5747:⊤ 5731:λ 5710:∑ 5689:⋆ 5677:⊤ 5657:^ 5654:θ 5602:λ 5572:− 5564:⋅ 5510:− 5498:⊤ 5486:− 5468:− 5456:⊤ 5405:− 5389:− 5323:λ 5302:∑ 5293:⋆ 5140:Δ 5135:Δ 5093:Δ 5088:Δ 5073:− 5022:Δ 5017:Δ 4995:Δ 4979:⊤ 4955:− 4947:⊤ 4915:⊤ 4880:Δ 4876:− 4861:⊤ 4846:⊤ 4837:Δ 4833:− 4818:⊤ 4787:‖ 4782:Δ 4778:− 4763:⊤ 4753:‖ 4723:Δ 4718:Δ 4637:∑ 4612:⊤ 4601:Δ 4569:Δ 4553:⊤ 4509:⊤ 4476:⋯ 4427:‖ 4423:⋅ 4420:‖ 4373:¯ 4365:− 4332:∑ 4322:− 4253:∑ 4234:¯ 4203:− 4184:− 4169:¯ 4161:− 4139:− 4099:σ 4067:σ 4060:⋯ 4043:σ 4009:⋯ 3968:‖ 3964:Δ 3960:− 3945:⊤ 3935:‖ 3903:^ 3900:β 3889:− 3876:⊤ 3865:^ 3862:β 3851:− 3834:− 3784:σ 3644:‖ 3640:Δ 3636:− 3621:⊤ 3611:‖ 3558:σ 3527:∑ 3520:θ 3497:^ 3494:θ 3479:Procedure 3463:‖ 3459:Δ 3455:− 3440:⊤ 3430:‖ 3405:ξ 3397:Δ 3393:− 3378:⊤ 3363:⊤ 3358:ξ 3333:ξ 3328:Δ 3322:⊤ 3317:ξ 3312:≡ 3308:ξ 3267:⋯ 3211:⊤ 3206:ξ 3191:ξ 3184:⊤ 3174:ξ 3142:⋯ 3129:ξ 3122:⊤ 3112:ξ 3059:Δ 3027:σ 3000:ξ 2993:⊤ 2983:ξ 2953:θ 2932:ξ 2831:⊤ 2755:σ 2724:∑ 2695:⊤ 2658:σ 2637:∑ 2584:⊤ 2547:σ 2526:∑ 2502:ξ 2478:⊤ 2461:⊤ 2451:ξ 2421:∑ 2403:ξ 2387:⊤ 2375:⊤ 2370:ξ 2344:^ 2341:θ 2297:ξ 2271:θ 2245:^ 2242:θ 2200:ξ 2184:⊤ 2172:⊤ 2167:ξ 2148:ξ 2135:β 2116:⊤ 2107:ξ 2094:β 2060:⊤ 2040:^ 2037:θ 1953:⊤ 1857:⊤ 1816:β 1806:− 1788:⊤ 1773:β 1763:− 1732:ξ 1719:γ 1700:β 1690:− 1656:β 1651:− 1647:β 1639:γ 1571:⊤ 1555:^ 1552:θ 1518:σ 1487:∑ 1480:θ 1435:σ 1428:⋯ 1399:σ 1395:≡ 1390:⊤ 1352:σ 1345:⋯ 1337:⊤ 1299:σ 1257:β 1185:ξ 1172:β 1126:⊤ 1116:ξ 1109:⋯ 1102:⊤ 1092:ξ 1074:⊤ 1069:ξ 1025:⋯ 888:σ 877:ϵ 836:ϵ 806:ϵ 798:β 696:σ 689:⋯ 672:σ 648:≠ 642:∀ 620:ξ 605:ξ 545:σ 528:ξ 480:ξ 407:∈ 397:ξ 343:× 330:∈ 286:∈ 282:β 252:× 239:∈ 205:ξ 185:⋯ 172:ξ 151:β 103:∈ 40:C. R. Rao 6946:, where 6332:, where 4221:, where 3050:. Here, 2221:unbiased 442:for the 7558:2284708 7456:2283583 5527:is the 3771:In the 7556:  7454:  6689:Then, 5553:, and 5366:where 4525:traces 226:Here, 18:Minque 7554:JSTOR 7452:JSTOR 7362:This 3694:, and 2285:trace 819:with 438:is a 269:is a 7368:stub 7297:for 7220:and 7176:for 6395:and 5615:and 4292:and 3512:for 3420:norm 1059:and 860:and 7546:doi 7498:hdl 7490:doi 7444:doi 4406:Rao 4122:is 2921:Rao 2626:Rao 1840:Rao 50:or 30:In 7573:: 7552:. 7542:67 7540:. 7512:^ 7496:. 7484:. 7464:^ 7450:. 7440:65 7438:. 7418:^ 7347:. 7068:. 6009:. 5425:, 5363:, 4739:. 4527:, 4397:. 3475:. 3076:. 2316:. 1838:. 1148:. 7560:. 7548:: 7506:. 7500:: 7492:: 7486:1 7458:. 7446:: 7399:e 7392:t 7385:v 7374:. 7335:} 7332:k 7329:, 7323:, 7320:1 7317:+ 7314:s 7311:{ 7305:i 7281:i 7277:c 7271:I 7264:2 7259:i 7251:= 7248:] 7243:i 7233:[ 7229:V 7208:} 7205:s 7202:, 7196:, 7193:1 7190:{ 7184:i 7159:= 7156:] 7151:i 7141:[ 7137:V 7111:= 7108:] 7103:i 7093:[ 7089:V 7055:Q 7044:S 7039:= 7001:] 6995:2 6990:k 6975:2 6970:1 6962:[ 6959:= 6922:p 6917:= 6912:2 6907:i 6897:i 6893:p 6887:k 6882:1 6879:= 6876:i 6868:= 6844:Q 6833:S 6821:p 6816:= 6812:Q 6802:) 6791:S 6786:( 6776:p 6771:= 6767:Q 6751:= 6718:p 6707:S 6702:= 6673:] 6667:] 6662:k 6657:V 6651:R 6645:k 6640:V 6634:R 6630:[ 6626:r 6623:T 6612:] 6607:k 6602:V 6596:R 6590:1 6585:V 6579:R 6575:[ 6571:r 6568:T 6543:] 6538:1 6533:V 6527:R 6521:k 6516:V 6510:R 6506:[ 6502:r 6499:T 6488:] 6483:1 6478:V 6472:R 6466:1 6461:V 6455:R 6451:[ 6447:r 6444:T 6437:[ 6432:= 6428:S 6404:S 6377:] 6371:k 6367:p 6356:1 6352:p 6348:[ 6345:= 6341:p 6319:p 6315:= 6306:S 6277:j 6273:p 6269:= 6262:] 6257:j 6252:V 6246:R 6240:i 6235:V 6229:R 6225:[ 6221:r 6218:T 6212:i 6202:k 6197:1 6194:= 6191:i 6177:j 6173:p 6169:= 6161:] 6155:j 6150:V 6144:R 6138:i 6133:V 6127:R 6121:i 6111:k 6106:1 6103:= 6100:i 6091:[ 6086:r 6083:T 6073:j 6069:p 6065:= 6058:] 6053:j 6048:V 6036:A 6031:[ 6027:r 6024:T 5997:} 5994:k 5991:, 5985:, 5982:1 5979:{ 5973:j 5948:i 5944:p 5940:= 5937:] 5932:i 5927:V 5915:A 5910:[ 5906:r 5903:T 5853:Q 5825:i 5821:Q 5815:i 5805:k 5800:1 5797:= 5794:i 5775:Y 5770:R 5764:i 5759:V 5753:R 5742:Y 5735:i 5725:k 5720:1 5717:= 5714:i 5706:= 5695:Y 5684:A 5672:Y 5667:= 5624:Q 5568:) 5561:( 5540:X 5513:1 5505:V 5493:X 5482:) 5477:X 5471:1 5463:V 5451:X 5446:( 5442:X 5438:= 5434:P 5413:) 5409:P 5401:I 5397:( 5392:1 5384:V 5379:= 5375:R 5350:R 5344:i 5339:V 5333:R 5327:i 5317:k 5312:1 5309:= 5306:i 5298:= 5288:A 5263:A 5239:] 5235:V 5230:A 5225:V 5220:A 5216:[ 5212:r 5209:T 5187:A 5165:A 5144:] 5131:[ 5127:r 5124:T 5097:] 5084:[ 5080:r 5077:T 5070:] 5066:V 5061:A 5056:V 5051:A 5047:[ 5043:r 5040:T 5036:= 5026:] 5013:[ 5009:r 5006:T 5002:+ 4999:] 4990:U 4985:A 4974:U 4969:2 4966:[ 4962:r 4959:T 4952:] 4942:U 4936:A 4931:U 4926:U 4921:A 4910:U 4905:[ 4901:r 4898:T 4894:= 4884:) 4872:U 4867:A 4856:U 4851:( 4842:) 4829:U 4824:A 4813:U 4808:( 4805:= 4796:2 4791:2 4774:U 4769:A 4758:U 4727:] 4714:[ 4710:r 4707:T 4703:= 4699:] 4693:i 4688:V 4682:A 4674:i 4670:c 4664:i 4660:p 4652:k 4647:1 4644:= 4641:i 4632:[ 4627:r 4624:T 4620:= 4617:] 4607:U 4596:U 4591:A 4587:[ 4583:r 4580:T 4576:= 4573:] 4564:U 4559:A 4548:U 4543:[ 4539:r 4536:T 4504:U 4498:U 4494:= 4489:k 4484:V 4479:+ 4473:+ 4468:1 4463:V 4458:= 4454:V 4431:2 4383:2 4379:) 4370:Y 4360:i 4356:Y 4352:( 4347:n 4342:1 4339:= 4336:i 4325:1 4319:n 4315:1 4310:= 4305:2 4301:s 4278:i 4274:Y 4268:n 4263:1 4260:= 4257:i 4247:n 4244:1 4239:= 4231:Y 4206:2 4200:n 4194:2 4190:s 4179:2 4175:) 4166:Y 4156:i 4152:Y 4148:( 4142:2 4136:n 4132:n 4108:2 4103:i 4076:2 4071:n 4063:, 4057:, 4052:2 4047:1 4020:n 4016:Y 4012:, 4006:, 4001:1 3997:Y 3956:U 3951:A 3940:U 3909:) 3893:X 3885:Y 3881:( 3872:) 3855:X 3847:Y 3843:( 3837:m 3831:n 3827:1 3822:= 3817:2 3813:s 3788:2 3757:. 3743:i 3739:p 3735:= 3732:] 3727:i 3722:V 3716:A 3712:[ 3708:r 3705:T 3681:0 3677:= 3673:X 3668:A 3632:U 3627:A 3616:U 3590:A 3567:2 3562:i 3552:i 3548:p 3542:k 3537:1 3534:= 3531:i 3523:= 3451:U 3446:A 3435:U 3401:) 3389:U 3384:A 3373:U 3368:( 3303:] 3298:) 3290:k 3286:c 3280:k 3276:p 3270:, 3264:, 3257:i 3253:c 3247:1 3243:p 3236:( 3231:g 3228:a 3225:i 3222:d 3217:[ 3201:= 3196:k 3179:k 3165:k 3161:c 3155:k 3151:p 3145:+ 3139:+ 3134:1 3117:1 3103:1 3099:c 3093:1 3089:p 3036:2 3031:i 3021:i 3017:c 3013:= 3010:] 3005:i 2988:i 2978:[ 2974:E 2898:i 2894:p 2890:= 2887:] 2882:i 2877:V 2871:A 2867:[ 2863:r 2860:T 2856:= 2853:] 2848:i 2843:U 2837:A 2826:i 2821:U 2816:[ 2812:r 2809:T 2787:A 2764:2 2759:i 2749:i 2745:p 2739:k 2734:1 2731:= 2728:i 2720:= 2717:] 2712:i 2707:U 2701:A 2690:i 2685:U 2680:[ 2676:r 2673:T 2667:2 2662:i 2652:k 2647:1 2644:= 2641:i 2606:] 2601:i 2596:U 2590:A 2579:i 2574:U 2569:[ 2565:r 2562:T 2556:2 2551:i 2541:k 2536:1 2533:= 2530:i 2522:= 2512:] 2507:i 2495:i 2490:U 2484:A 2473:i 2468:U 2456:i 2446:[ 2442:E 2436:k 2431:1 2428:= 2425:i 2417:= 2407:] 2398:U 2393:A 2382:U 2365:[ 2361:E 2357:= 2350:] 2335:[ 2331:E 2302:i 2251:] 2236:[ 2232:E 2195:U 2190:A 2179:U 2162:= 2152:) 2143:U 2139:+ 2130:X 2126:( 2122:A 2112:) 2102:U 2098:+ 2089:X 2085:( 2082:= 2071:Y 2066:A 2055:Y 2050:= 2007:0 2003:= 1999:X 1994:A 1964:Y 1959:A 1948:Y 1925:0 1921:= 1917:X 1912:A 1890:A 1868:Y 1863:A 1852:Y 1826:) 1821:0 1810:X 1802:Y 1798:( 1794:A 1784:) 1778:0 1767:X 1759:Y 1755:( 1727:U 1723:+ 1714:X 1710:= 1705:0 1694:X 1686:Y 1661:0 1643:= 1604:A 1582:Y 1577:A 1566:Y 1561:= 1527:2 1522:i 1512:i 1508:p 1502:k 1497:1 1494:= 1491:i 1483:= 1456:k 1451:V 1444:2 1439:k 1431:+ 1425:+ 1420:1 1415:V 1408:2 1403:1 1385:k 1380:U 1373:k 1368:U 1361:2 1356:k 1348:+ 1342:+ 1332:1 1327:U 1320:1 1315:U 1308:2 1303:1 1295:= 1292:] 1288:Y 1284:[ 1280:V 1252:X 1248:= 1245:] 1241:Y 1237:[ 1233:E 1209:Y 1180:U 1176:+ 1167:X 1163:= 1159:Y 1135:] 1121:k 1097:1 1083:[ 1079:= 1046:] 1037:k 1032:U 1018:1 1013:U 1004:[ 1000:= 996:U 983:. 969:i 964:U 941:Y 930:: 923:. 909:n 904:I 897:2 892:1 884:= 881:] 873:[ 869:V 847:0 843:= 840:] 832:[ 828:E 802:+ 793:X 789:= 785:Y 759:n 754:I 749:= 744:1 739:U 705:2 700:k 692:, 686:, 681:2 676:1 651:j 645:i 637:0 633:= 630:] 625:j 615:, 610:i 600:[ 596:V 571:i 567:c 561:I 554:2 549:i 541:= 538:] 533:i 523:[ 519:V 497:0 493:= 490:] 485:i 475:[ 471:E 450:i 422:i 418:c 412:R 402:i 375:i 351:i 347:c 340:n 335:R 325:i 320:U 296:m 291:R 255:m 249:n 244:R 235:X 210:k 198:k 193:U 188:+ 182:+ 177:1 165:1 160:U 155:+ 146:X 142:= 138:Y 113:n 108:R 99:Y 20:)

Index

Minque
statistics
C. R. Rao
estimation theory
method of moments
maximum likelihood estimation
best linear unbiased estimation
linear regression
heteroscedastic
restricted maximum likelihood
mixed effects models
quadratic forms
mixed effects model
design matrix
random vector
Gauss-Markov model
Rao
unbiased
trace
Rao
Rao
diagonal matrix
norm
Gauss-Markov model
Euclidean norm
Rao
Euclidean norm
traces
projection matrix
generalized inverse

Text is available under the Creative Commons Attribution-ShareAlike License. Additional terms may apply.

↑