É possível executar uma regressão em que você possui uma variável de recurso desconhecida / desconhecida?
Diga que eu tenho mas eu não / não posso medir o valor da variável do recurso . Ainda posso realizar uma regressão para verificar os coeficientes?
Que tal se eu tiver algum conhecimento das estatísticas de como é distribuído? Se eu souber disso é extraído de uma distribuição gaussiana , com conhecidos isso me permite executar a regressão para verificar os valores de ?
regression
machine-learning
stochastic-processes
SomeRandomPhysicist
fonte
fonte
Respostas:
A fórmula completa para um modelo linear é (na forma de quase matriz)
Portanto, temos vários coeficientes para as variáveis que estamos controlando e, em seguida, temosϵ , que é tudo o mais que não explicamos com nossas variáveis incluídas.
Nesse termo de erro, pertencem todas as variáveis que não consideramos, porque não temos informações para elas ou porque simplesmente não as conhecemos (desvio aleatório).
Portanto, não há como você saber o que neste termo pertence ao termo desconhecido.
fonte
Se você fizer a regressão dey em x1 e x2 , se você deseja adivinhar como x3 se correlaciona com cada uma delas, é possível calcular o que essas suposições implicariam para como os coeficientes estimados mudariam se você pudesse observar x3 e executou a regressão completa.
Suponha, por exemplo, quex3 não está correlacionado com x1 . Então
Então sex3 é provável que esteja apenas fracamente correlacionado com y ou x1 e x2 pouco mudaria. E, se for, você pode usar essas fórmulas de viés de variável omitida para prever como as coisas mudariam.
fonte
É sempre possível ... mas suas estimativas serão tendenciosas em muitos casos. O caso mais favorável ocorre:x3n não está correlacionado com os outros regressores, neste caso, regride yn em (ι,x1,x2) e você tem estimativas imparciais de a0,a1,a2 (Teorema de Frish-Waugh-Lovell) σ e x3∼N(0,σ2) , você pode até identificar a3 : desenhar N valores de iid para x3n∼N(0,σ2) e regredir yn em (ι,x1,x2,x3) .
(a) quando
(b) Se, além de (a) você sabe
fonte