Qual è la differenza tra modello deterministico e stocastico?


11

Modello lineare semplice:

x=αt+ϵt dove ~ iidϵtN(0,σ2)

con eE(x)=αtVar(x)=σ2

AR (1):

Xt=αXt1+ϵt dove ~ iidϵtN(0,σ2)

con eE(x)=αtVar(x)=tσ2

Quindi un semplice modello lineare è considerato un modello deterministico mentre un modello AR (1) è considerato un modello stocahstic.

Secondo un video Youtube di Ben Lambert - Deterministic vs Stochastic , la ragione di AR (1) da chiamare come modello stocastico è perché la sua varianza aumenta con il tempo. Quindi la caratteristica della varianza non costante deve essere il criterio per determinare lo stocastico o il deterministico?

Inoltre, non penso che il semplice modello lineare sia totalmente deterministico in quanto abbiamo un termine associato al modello. Quindi, abbiamo sempre una casualità in . Quindi, fino a che punto possiamo dire che un modello è deterministico o stocastico?ϵtx


10
Qualsiasi modello che presenta un termine di errore è stocastico. Non ha nulla a che fare con la varianza dovuta al cambiamento nel tempo.
Michael R. Chernick,

@MichaelChernick Non capisco. Allora perché la gente dice che la semplice regressione lineare è un modello deterministico?
Ken T

2
Potresti fornire un link per mostrare dove viene detto e perché lo si dice.
Michael R. Chernick,

Era dalle note del mio corso sull'analisi delle serie storiche qualche anno fa. Forse è sbagliato.
Ken T

Risposte:


12

Il video parla di tendenze deterministiche e stocastiche , non di modelli . Il momento clou è molto importante. Entrambi i tuoi modelli sono stocastici, tuttavia nel modello 1 la tendenza è deterministica.

Il modello 2 non ha una tendenza. Il testo della domanda non è corretto.

Il modello 2 nella tua domanda è AR (1) senza una costante, mentre nel video il modello è una camminata casuale (moto browniano): Questo modello ha effettivamente una tendenza stocastica . È stocastico perché è solo in media. Ogni realizzazione di un moto browniano si discosterà da causa del termine casuale , che è facilmente visibile differenziando:

xt=α+xt1+et
αtαtet
Δxt=xtxt1=α+et
xt=x0+t=1tΔxt=x0+αt+t=1tet

+1. Ma per essere perfettamente chiari e precisi, potresti voler sottolineare che la deviazione da è dovuta al termine casuale , non solo . αte1+e2++etet
whuber

11

Come menzionato da Aksakal nella sua risposta, il video Ken T collegato descrive le proprietà delle tendenze , non dei modelli direttamente, presumibilmente come parte dell'insegnamento sull'argomento correlato della stazionarietà di tendenza e differenza in econometria. Dato che nella tua domanda, hai chiesto dei modelli, eccolo nel contesto dei modelli :

Un modello o processo è stocastico se ha casualità. Ad esempio, se dati gli stessi input (variabili indipendenti, pesi / parametri, iperparametri, ecc.), Il modello potrebbe produrre output diversi. Nei modelli deterministici, l'output è completamente specificato dagli input al modello (variabili indipendenti, pesi / parametri, iperparametri, ecc.), In modo che, dati gli stessi input al modello, gli output siano identici. L'origine del termine "stocastico" deriva da processi stocastici . Come regola generale, se un modello ha una variabile casuale, è stocastico. I modelli stocastici possono anche essere semplici variabili casuali indipendenti.

Disimballiamo un po 'più di terminologia che ti aiuterà a capire la letteratura sui modelli statistici (deterministico, stocastico o altro ...):

AR(1)t1μϵt=0), ecc. Facciamo queste ipotesi al fine di rendere utile il modello lineare per stimare le variabili dipendenti minimizzando alcune norme di tale termine di errore. Queste ipotesi ci consentono di derivare proprietà utili degli stimatori e dimostrare che determinati stimatori sono i migliori in base a tali ipotesi; ad esempio, che lo stimatore OLS è BLU .

Un esempio più semplice di un modello stocastico è il lancio di una moneta giusta (testa o croce), che può essere modellata stocasticamente come una variabile casuale binaria uniformemente distribuita o un processo di Bernoulli . Puoi anche considerare il lancio della moneta come un sistema fisico e trovare un modello deterministico (in un'impostazione idealizzata) se prendi in considerazione la forma della moneta, l'angolo e la forza dell'impatto, la distanza dalla superficie, ecc. Se il quest'ultimo modello (fisico) del lancio della moneta non contiene variabili casuali (ad es. non considera l'errore di misura di nessuno degli input del modello), quindi è deterministico.

XtAR(1)ϵtyt=axt+ϵttVar[Xt]tVar[Xt]

Inoltre, a volte c'è confusione tra processi stocastici stazionari e processi stocastici non stazionari. La stazionarietà implica che statistiche come media o varianza non cambiano nel tempo nel modello. Entrambi sono ancora considerati modelli / processi stocastici fintanto che è coinvolta la casualità. Come collega Maroon, Matthew Gunn, menziona nella sua risposta, la decomposizione di Wold afferma che qualsiasi processo stocastico stazionario può essere scritto come la somma di un processo deterministico e stocastico.


2
Bella risposta! Una domanda: perché scrivi "... se la sua varianza cambia su un parametro ..." non dovrebbe essere un cambiamento su una variabile (o funzione di una variabile)?
Alexis,

1
@Alexis Mi riferivo al tempo come parametro del modello. Hai ragione, quella lingua è imprecisa. Fisso. Grazie. :-)
ido

Come cambia la varianza di AR (1)?
Aksakal,

Var[εt]σ2Var[Xt]=tσ2Xt=α+Xt1+εtεtN(0,σ2)AR(1)si riferisce al modello descritto come tale da Ken T.)
ido

Var[Xt]=Var[Xt1]+Var[εt]=i=1tVar[εi]=tσ2Var[εi]=σ2εtεtCov[Xt,Xt1]=0

3

Alcune definizioni informali

  • {yt}
    • y(t)=2t
    • y(t)=et
  • {Yt}ΩY(t,ω)tωΩ

    • yt=ϵtϵtN(0,1)
    • yt=.7yt1+ϵt

    ωΩωΩYt(ω)

Alcuni commenti ...

... la ragione di AR (1) da chiamare come modello stocastico è perché la sua varianza aumenta con il tempo.

t

ϵt

xtxt=αt+ϵt{ϵt}{xt}

yt=αt{xt}αtϵt

Ciò porta al teorema di Wold che qualsiasi processo stazionario di covarianza può essere scomposto in modo univoco in una componente deterministica e una componente stocastica.

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.