פונקציית הניקוד

בסטטיסטיקה, פונקציית הניקוד (באנגלית: Score function) של פרמטר $\theta$ היא הגרדיאנט של לוג פונקציית הנראות ${ℒ}(\theta ;X)$ בכיוון של הפרמטר. הפונקציה מציינת עד כמה רגישה פונקציית הנראות לשינויים ב-$\theta$.

פונקציית הנראות ממלאת תפקיד חשוב במספר היבטים של הסקה סטטיסטית, כגון:

• מציאת סטטיסטי מבחן בעל עוצמה מקסימלית מקומית
• הערכת גודל השגיאה של אומד נראות מקסימלית
• מציאת רווחי סמך
• הוכחה של חסם קרמר–ראו

פונקציית הניקוד ממלאת גם תפקיד חשוב בסטטיסטיקה חישובית , שכן היא יכולה לקחת חלק בחישוב של אומדי נראות מקסימלית.

הגדרה

הערך של פונקציית הניקוד (או בקיצור: "הניקוד") הוא הגרדיאנט (וקטור של נגזרות חלקיות), בהתייחס לפרמטר מסוים $\theta$, של הלוגריתם (בדרך כלל הלוגריתם הטבעי) של פונקציית הנראות. אם התצפית היא $X$ והנראות שלה היא ${ℒ}(\theta ;X)$, אז הניקוד $V$ ניתן לחישוב לפי כלל השרשרת באופן הבא:

$V\equiv V(\theta ,X)=\frac{\partial }{\partial \theta }\log {ℒ}(\theta ;X)=\frac{1}{{ℒ}(\theta ;X)}\frac{\partial {ℒ}(\theta ;X)}{\partial \theta }$

לכן הניקוד $V$ מציין את הרגישות של ${ℒ}(\theta ;X)$ (הנגזרת כשהיא מנורמלת על ידי ערך הפונקציה). $V$ היא פונקציה גם של התצפית $X$ אך גם של הפרמטר $\theta$, לכן זהו לא סטטיסטי. אף על פי כן ניתן להשתמש בו ביישומים מסוימים, על ידי חישוב ערך הפונקציה עבור ערך $\theta$ ספציפי (כמו ערך ה-$\theta$ של השערת האפס, או אומד הנראות המקסימלית של $\theta$), והתוצאות של חישובים אלו הן סטטיסטים.

תכונות

תוחלת

תחת תנאי רגולריות מסוימים, התוחלת של פונקציית הניקוד $V$ בהתייחס לתצפית $x$, בהינתן הפרמטר האמיתי $\theta$, כלומר $\mathbb{𝔼}(V\mid \theta )$, שווה ל-0. על מנת לראות זאת נכתוב מחדש את פונקציית הנראות ${ℒ}$ כפונקציית צפיפות: ${ℒ}(\theta ;x)=f(x;\theta )$, ואז:

$\begin{array}{rl}\mathbb{𝔼}(V\mid \theta )& =\underset{-\mathrm{\infty }}{\overset{+\mathrm{\infty }}{\int }}\frac{\partial }{\partial \theta }(\log {ℒ}(\theta ;X))f(x;\theta )dx\\ & =\underset{-\mathrm{\infty }}{\overset{+\mathrm{\infty }}{\int }}\frac{\partial }{\partial \theta }(\log f(\theta ;X))f(x;\theta )dx\\ & =\underset{-\mathrm{\infty }}{\overset{+\mathrm{\infty }}{\int }}(\frac{1}{f(x;\theta )}\cdot \frac{\partial f(x;\theta )}{\partial \theta })f(x;\theta )dx\\ & =\underset{-\mathrm{\infty }}{\overset{+\mathrm{\infty }}{\int }}\frac{\partial f(x;\theta )}{\partial \theta }dx\end{array}$

אם תנאי גזירות מסוימים מתקיימים, אינטגרל זה שווה:

$\frac{\partial }{\partial \theta }\underset{-\mathrm{\infty }}{\overset{+\mathrm{\infty }}{\int }}f(x;\theta )dx=\frac{\partial }{\partial \theta }1=0$

מכיוון שהתוחלת של פונקציית הניקוד היא 0 כאמור לעיל, אם נדגום פעם אחר פעם מהתפלגות מסוימת, ובכל פעם נחשב את הניקוד, אז ממוצע ערכי הניקוד ישאף ל-0 כשמספר הדגימות ישאף לאינסוף.

שונות

ערך מורחב – האינפורמציה של פישר

השונות של פונקציית הניקוד ידועה בשם האינפורמציה של פישר, ומסומנת ${ℐ}(\theta )$. מכיוון שהתוחלת של פונקציית הניקוד היא 0, ניתן לנסח את השונות בצורה הבאה:

${ℐ}(\theta )=\mathbb{𝔼}\left\{{[\frac{\partial }{\partial \theta }\log {ℒ}(\theta ;X)]}^2|\theta \right\}=\mathbb{𝔼}\left\{{\left[\frac{\frac{\partial }{\partial \theta }{ℒ}(\theta ;X)}{{ℒ}(\theta ;X)}\right]}^2|\theta \right\}$

האינפורמציה של פישר כפי שהוגדרה לעיל, איננה פונקציה של תצפית מסוימת, אלא רק של הפרמטר $\theta$, שכן המשתנה המקרי $X$ מתקזז בנוסחה. מושג זה של אינפורמציה שימושי כשמבצעים השוואה בין שתי שיטות תצפית מתהליך סטוכסטי כלשהו.

קישורים חיצוניים

• פונקציית הניקוד, באתר MathWorld (באנגלית)

הערך באדיבות ויקיפדיה העברית, קרדיט,
רשימת התורמים
רישיון cc-by-sa 3.0

פונקציית הניקוד42075319Q3952743