Uma estimativa imparcial da mediana

16

Suponha que tenhamos uma variável aleatória X suportada em [0,1] partir da qual podemos extrair amostras. Como podemos chegar a uma estimativa imparcial da mediana de X ?

É claro que podemos gerar algumas amostras e tirar a mediana da amostra, mas entendo que isso geralmente não será imparcial.

Nota: esta questão está relacionada, mas não é idêntica, à minha última pergunta , caso em que X só poderia ser amostrado aproximadamente.

Robinson
fonte

Respostas:

13

Esse estimador não existe.

A intuição é que a mediana pode permanecer fixa enquanto mudamos livremente a densidade de probabilidade em ambos os lados, para que qualquer estimador cujo valor médio seja a mediana de uma distribuição tenha uma média diferente para a distribuição alterada, tornando-a enviesada. A exposição a seguir dá um pouco mais de rigor a essa intuição.


Nós concentrar em distribuições tendo medianas únicas m , de modo que, por definição, F ( m ) 1 / 2 e M ( X ) < 1 / 2 para todos os x < m . Corrija um tamanho de amostra n 1 e suponha que t : [ 0 , 1 ] n[ 0 , 1 ] calcule m . (Basta que tFmF(m)1/2F(x)<1/2x<mn1t:[0,1]n[0,1]mtsó pode ser limitada, mas que geralmente não se considerar seriamente estimadores que produzem valores obviamente impossível) Nós fazemos. suposições sobre ; nem precisa ser contínuo em qualquer lugar.t

O significado de ser imparcial (para esse tamanho fixo de amostra) é quet

EF[t(X1,,Xn)]=m

para qualquer amostra iid com . Um "estimador" t é um com esta propriedade para todos tais F .XiFtF

Suponha que exista um estimador imparcial. Derivaremos uma contradição aplicando-a a um conjunto particularmente simples de distribuições. Considere as distribuições com estas propriedades:F=Fx,y,m,ε

  1. ;0x<y1

  2. ;0<ε<(yx)/4

  3. ;x+ε<m<yε

  4. ;Pr(X=x)=Pr(X=y)=(1ε)/2

  5. ; ePr(mεXm+ε)=ε

  6. é uniforme em [ m - ε , m + ε ] .F[mε,m+ε]

Essas distribuições colocam a probabilidade em cada um de x e y e uma pequena quantidade de probabilidade simetricamente colocada em torno de m entre x e y . Isso faz com que estou a mediana única de F . (Se você está preocupado com o fato de essa não ser uma distribuição contínua, envolva-a com uma gaussiana muito estreita e trunque o resultado para [ 0 , 1 ](1ε)/2xymxymF[0,1] : o argumento não será alterado.)

Agora, para qualquer estimador mediano putativo , uma estimativa fácil mostra que E [ t ( X 1 , X 2 , , X n ) ] está estritamente dentro de ε da média dos valores de 2 n t ( x 1 , x 2 , ... , x n ) , onde o x i variar ao longo de todas as possíveis combinações de x e y . No entanto, podemos variar mtE[t(X1,X2,,Xn)]ε2nt(x1,x2,,xn)xixymentre e y - ε , uma mudança de pelo menos ε (em virtude das condições 2 e 3). Assim, existe m , e daí uma distribuição correspondente F x , y , m , ε , para a qual essa expectativa não é igual à mediana, QED.x+εyεεmFx,y,m,ε

whuber
fonte
(+1) Boa prova. Você veio com isso, ou é algo que você lembrou da faculdade?
StasK
4
Aqui está outra prova: a maioria das variáveis ​​aleatórias de Bernoulli tem mediana ou 1 . A estimativa de n tentativas depende apenas dos valores médios do estimador nos vértices de [ 0 , 1 ] n com k , e o peso desses valores médios é um polinômio em p de grau n . Se este é um estimador imparcial, deve ter valor médio de 1 para qualquer p > 1 / 2 , e há mais de n + 1 tais valores de p01n[0,1]nkpn1p>1/2n+1p, so this polynomial must be constant... but it must be 0 on lower values of p, so it can't be unbiased there, too.
Douglas Zare
1
@Douglas Essa é uma ótima prova. Eu suspeito que algumas pessoas podem se sentir um pouco inquieto sobre o âmbito da sua aplicabilidade, porém, porque a mediana para uma variável de Bernoulli é um pouco especial, sendo coincidente com um dos seus dois pontos de apoio (exceto quando ). Os leitores podem ficar tentados a declarar isso como "patológico" e tentar barrar esses monstros olhando apenas para distribuições contínuas com densidades positivas em todos os lugares em seus domínios. Por isso, tive o cuidado de mostrar que tais esforços fracassarão. p=1/2
whuber
3

Finding an unbiased estimator without having a parametric model would be difficult! But you could use bootstrapping, and use that to correct the empirical median to get an approximately unbiased estimator.

kjetil b halvorsen
fonte
If this is impossible, is it possible to prove it? For example, if X1,X2,,Xn are independent samples from X then can one prove that f(X1,,Xn) cannot be unbiased for any choice of f?
robinson
2
I think kjetil is saying that in a nonparametric framework there is no method that will give an unbiased estimate for every possible distribution. But in the parametric framework you probably could. Bootstrapping a biased sample estimate can allow you to estimate the bias and adjust it to get a bootstrap estimate that is nearly unbiased. That was his suggestion for handling the problem in the nonparametric framework. Proving that an unbiased estimate is not possible would also be difficult.
Michael R. Chernick
2
Se você realmente quer provar que não existe um estimador imparcial, há um livro, Ferguson: "Estatística Matemática - Uma Abordagem Teórica da Decisão", que tem alguns exemplos desse tipo de coisa!
Kjetil b halvorsen
Imagino que as condições de regularidade do bootstrap sejam violadas com as funções de distribuição que o whuber considera em sua resposta. Michael, você pode comentar?
StasK
2
@Stas As I pointed out, my functions can be made to look very "nice" by mollifying them. They can also be generalized to mollifications of large finite mixtures of atoms. The class of such distributions is dense in all distributions on the unit interval, so I don't think bootstrap regularity would be involved here.
whuber
0

I believe quantile regression will give you a consistent estimator of the median. Given the model Y=α+u. And you want to estimate med(y)=med(α+u)=α+med(u) since α is a constant. All you need is the med(u)=0 which should be true so long as you have independent draws. However, as far as unbiasedness, I don't know. Medians are difficult.

Francis
fonte
See @whuber 's answer
Peter Flom - Reinstate Monica