پراکندگی: واریانس، انحراف معیار و داده‌ی پرت

پراکندگی داده را با واریانس، انحراف معیار، چارک‌ها و IQR بسنجی و داده‌ی پرت را با قاعده‌ی ۱٫۵ IQR و z پیدا کنی.

15 دقیقه مطالعه · 7 سؤال تمرینی · آمار و احتمال برای علم داده

هم‌میانگین، ولی نه هم‌حال

دو کلاس با میانگین ۱۵ می‌توانند کاملاً متفاوت باشند: در یکی همه ۱۴ تا ۱۶ گرفته‌اند و در دیگری نمرات از ۰ تا ۲۰ پخش‌اند. میانگین «مرکز» را می‌گوید و برای «پراکندگی» معیار دیگری لازم داریم.

  • دامنه: بیشینه − کمینه. ساده ولی فقط به دو مقدار نگاه می‌کند.
  • واریانس نمونه: s2=1n−1∑(xi−xˉ)2s^2 = \dfrac{1}{n-1}\sum (x_i - \bar{x})^2، یعنی میانگین (تقریبی) مربع فاصله‌ها از میانگین.
  • انحراف معیار: s=s2s = \sqrt{s^2}. هم‌واحد با داده است و همین آن را قابل‌تفسیر می‌کند: «معمولاً داده‌ها حدود ss از میانگین فاصله دارند.»

چرا n−1n-1؟ وقتی با یک نمونه کار می‌کنیم، میانگین را هم از همین نمونه برآورد کرده‌ایم و داده‌ها به میانگین خودشان نزدیک‌ترند تا به میانگین واقعی جامعه. تقسیم بر nn واریانس را کم‌برآورد می‌کند و n−1n-1 این را جبران می‌کند (تصحیح بسل). اگر کل جامعه را دارید، بر nn تقسیم می‌شود.

چارک‌ها، IQR و داده‌ی پرت

چارک‌ها داده‌ی مرتب را به چهار بخش هم‌تعداد می‌کنند: Q1Q_1 (۲۵٪ داده‌ها کمتر از آن)، Q2Q_2 = میانه و Q3Q_3 (۷۵٪). دامنه‌ی میان‌چارکی IQR=Q3−Q1\text{IQR} = Q_3 - Q_1 پراکندگیِ «نیمه‌ی میانی داده» است و مثل میانه به پرت‌ها حساس نیست.

برای داده‌ی حقوق (12,15,15,18,20,22,9012,15,15,18,20,22,90): Q1=15Q_1 = 15، Q3=21Q_3 = 21، پس IQR=6\text{IQR} = 6. (روش درون‌یابی خطی؛ نرم‌افزارها در جزئیات چارک کمی فرق دارند.)

قاعده‌ی ۱٫۵ برابر IQR (نمودار جعبه‌ای): هر مقدار بیرون از بازه‌ی

[ Q1−1.5 IQR,  Q3+1.5 IQR ][\,Q_1 - 1.5\,\text{IQR},\; Q_3 + 1.5\,\text{IQR}\,]

«پرت» حساب می‌شود. برای حقوق‌ها: [15−9, 21+9]=[6,30][15 - 9,\ 21 + 9] = [6, 30]. عدد ۹۰ بیرون است و پرت.

روش دیگر: z-score z=x−xˉsz = \dfrac{x - \bar{x}}{s} می‌گوید داده چند انحراف معیار از میانگین فاصله دارد. معمولاً ∣z∣>3|z| > 3 را مشکوک می‌دانند.

تمرین‌های این درس را حل کن (رایگان)