simple linear regression analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د /...

22
اﻟﺒﺴﻴﻂ اﻟﺨﻄﻲ اﻻﻧﺤﺪار ﺗﺤﻠﻴﻞ إﻋﺪاد/ د. اﻟﺪرﻳﻨﻲ ﻣﺤﻤﻮد٢٧ اﻟﺒﺴﻴﻂ اﻟﺨﻄﻲ اﻻﻧﺤﺪار ﺗﺤﻠﻴﻞSimple Linear Regression Analysis ٥ - ١ ﻣﻘﺪﻣﺔ: ﻠﻮكѧѧ أﺛѧ وﺗﺤﻠﻴѧ آﺪراﺳ ﺮ،ѧ ﺁﺧѧ ﻋﻠﺮﻳﻦѧ اﻟﻤﺘﻐﻴѧ أﺣѧ أﺛѧ وﺗﺤﻠﻴ ﺑﺪراﺳﺔ اﻟﺒﺎﺣﺚ ﻳﻬﺘﻢ ﻋﻨﺪﻣﺎ اﻟﻤﺘﻐﻴﺮѧ اﻟﻤﺘﻐﻴ ﻠﻮكѧ ﻋﻠﻰѧ ﺘﺨﺪمѧ اﻟﻤﺴ ﻠﻮبѧ اﻷﺳѧ ﻓﺈﻧ، ﺪارѧ اﻻﻧﺤѧ ﺗﺤﻠﻴ ﻠﻮبѧ أﺳѧ هѧ اﻟﺘﺤﻠﻴ اﻟﺒﺴﻴﻂ اﻟﺨﻄﻲ. Υ Χ آﺎن ﻓﺈذاѧ هﻄﻪѧ ﻣﺘﻮﺳ ﺛﻨﺎﺋﻲ ﻃﺒﻴﻌﻲ ﺗﻮزﻳﻊ وﻟﻬﺎ اﻟﻤﺸﺘﺮك، اﻻﺣﺘﻤﺎل آﺜﺎﻓﺔ داﻟﺔ هﻲ هﻲ ﺗﺒﺎﻳﻦ ﻣﺼﻔﻮﻓﺔ وﻟﻪ، : أن أي، : , ( Χ) Υ f = x y μ μ μ = Σ 2 x xy xy y σ σ σ σ ( ) Σ Χ Υ , ~ μ N 2 (5-1) ѧ اﻟﻤﺘﻐﻴ ﻠﻮآﻴﺎتѧѧ ﺑﺪراﺳ ﻧﻬﺘﻢ آﻨﺎ وإذاѧ اﻟﻤﺘﻐﻴѧ ﺑﻤﻌﻠﻮﻣﻴѧ اﻟﺤﺎﻟ ﺬﻩѧ هѧѧ ﻋﻠﻴﻨѧ ﻳﺠ، اﺳﺘﺨﺪام اﻟﺸﺮﻃﻲ اﻻﺣﺘﻤﺎل آﺜﺎﻓﺔ داﻟﺔѧ دراﺳѧѧ ﻃﺒﻴﻌѧ ﺗﻮزﻳѧ اﻟﺘﻮزﻳ ﺬاѧ وه ﻠﻮك،ѧ اﻟﺴ ﺬاѧ ه اﻟﺘﺎﻟﻲ اﻟﺸﻜﻞ ﻋﻠﻰ وﺗﺒﺎﻳﻦ ﻣﺘﻮﺳﻂ ﻟﻪ أﻳﻀﺎ،: Υ Χ ) f | ( Χ Υ (5-2) Χ + = + = 1 0 | β β σ σ ρ μ σ σ ρ μ μ x y xy x x y xy y x y x y| Χ أنѧѧ ﺣﻴ ﻮاﺋﻲѧѧ اﻟﻌﺸѧѧ اﻟﻤﺘﻐﻴѧѧ ﻣﺘﻮﺳѧѧ ﻗﻴﻤѧѧѧѧ ﻳﻌﺒѧѧ ﻗﻴﻤ ﻮنѧѧ ﺗﻜ ﺪﻣﺎѧѧ ﻋﻨ ﺪدةѧѧ ﻣﺤ وﻣﻌﻠﻮﻣﺔ. Υ μ ) ( x = Χ Υ Χ ѧ ﻟﻠﻤﺘﻐﻴ ﻣﺤﺪدة ﻗﻴﻤﺔ آﻞ وﻋﻨﺪ ﻣﺴﺘﻘﻴﻢ، ﺧﻂ ﺷﻜﻞ ﺗﺄﺧﺬ أﻋﻼﻩ واﻟﻤﻌﺎدﻟﺔѧ ﻟﻤﺘﻮﺳѧ ﻗﻴﻤѧ ﺗﻮﺟ اﻟﻤﺘﻐﻴﺮ و اﻟﺨﻂ، هﺬا ﻋﻠﻰ ﻳﻘﻊﻮاﺋﻲѧ اﻟﻌﺸѧ اﻟﻤﺘﻐﻴѧѧ اﻟﺘﻌﺒﻴѧ ﻳﻤﻜѧѧѧ ﺑﻤﻌﻠﻮﻣﻴѧ اﻟﻤﺘﻐﻴΧ Υ

Upload: dotram

Post on 20-Jun-2018

218 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٢٧

تحليل االنحدار الخطي البسيط

Simple Linear Regression Analysis

: مقدمة١-٥

لوك ر س ل أث ة وتحلي ر، آدراس ى آخ رين عل د المتغي ر أح ل أث عندما يهتم الباحث بدراسة وتحلي

ر المتغير لوك المتغي ي على س تخدم ف لوب المس ه األس دار ، فإن ل االنح لوب تحلي و أس ل ه التحلي

.الخطي البسيط

Υ Χ

و فإذا آان طه ه هي دالة آثافة االحتمال المشترك، ولها توزيع طبيعي ثنائي متوس

:، أي أن: ، وله مصفوفة تباين هي

,( Χ)Υf

⎟⎟⎠

⎞⎜⎜⎝

⎛=

x

y

μ

μμ

⎜⎜⎜⎜

2

xxy

xyy

σσ

σσ

( )Σ⎟⎟⎠

⎝ΧΥ

,~ μN

⎟⎟⎟⎟

2

(5-1) ⎜⎜⎛

ر لوآيات المتغي ة س ر وإذا آنا نهتم بدراس ة المتغي ة بمعلومي ذه الحال ي ه ا ف ، يجب علين

ي دراس دالة آثافة االحتمال الشرطي استخدام ي ف ع طبيع ع توزي ذا التوزي لوك، وه ذا الس ة ه

:أيضا، له متوسط وتباين على الشكل التالي

ΥΧ

)f |( ΧΥ

(5-2)

Χ+=

⎜⎜⎝

⎛+⎟

⎟⎠

⎞⎜⎜⎝

⎛⎟⎟⎠

⎞⎜⎜⎝

⎛−=

10

|

ββ

σσ

ρμσσ

ρμμx

yxyx

x

yxyyxy

xy|

Χ⎟⎟⎠

ث أن وائي حي ر العش ط المتغي ة متوس ن قيم ر ع ة يعب ون قيم دما تك ددة عن مح

.ومعلومة

Υ μ)( x=Χ

ΥΧ

ر ة لمتوسط والمعادلة أعاله تأخذ شكل خط مستقيم، وعند آل قيمة محددة للمتغي د قيم توج

وائي يقع على هذا الخط، و المتغير ر العش ر عن المتغي ن التعبي م يمك ن ث ة م ر بمعلومي المتغي

Χ

Υ

Page 2: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٢٨

(5-3)Υ = εββ ++ Χ10

:حيث أن

دار هو ميل الخط المستقيم : ى مق دل عل ع، وي ي المجتم دار ف ل االنح ، ويسمى بمعام

. بوحدة واحدة إذا تغيرت تابعالتغير في المتغير ال

⎟⎟⎠

⎞⎜⎜⎝

⎛=

x

yxy σσ

ρβ1

ΥΧ

ر ن المتغي وع م زء المقط ة ، وهو الج ن المعادل ه م ر عن 0βΥ بالقاطع يعبر عن : intercept ويعب

: آما يلي (5-2)

xyxx

yxyy μβμμσσ

ρμβ 10 −=⎟⎟⎠

⎞⎜⎜⎝

⎛⎟⎟⎠

⎞⎜⎜⎝

⎛−= (5-4)

ε : وائي ا العش ن الخط ر ع وائي Random Errorيعب ر العش راف المتغي دار انح و مق ن ، وه ع

: ، أي أن متوسطة الشرطي

Υ

yμ x|

(5-5) ( )Χε μ +−Υ=−Υ= 10| β βxy

. والمتوسطات الشرطيةوالشكل التالي يبين قيم المتغير

Page 3: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٢٩

العالقة خطية العالقة غير خطية

)مجتمع .التقدير بنقطة لمعامالت االنحدار في ال )10 , ٢-٥ β β

، يمكن التعويض عن تقدير آل معلمة من المعلمات من المعادلة (5-2)

: آما يليومن ثم نحصل على التقدير بنقطة للمعاملين

xyxyyxμ μ ρ σ σ,,,,

( )10 ,ββ

(5-6) x

yxy S

Sr=1β

(5-7) Χ−Υ= 10ˆˆ ββ

1βxyr ، وبإيجاد التقدير بنقطة تأخذ نفس إشارة معامل االرتباط ويالحظ أن إشارة المعامل

10( : النحدار في المجتمع هي نجد أن تقدير معادلة ا)للمعاملي ,ββ

(5-8) Χ+=Υ 10ˆˆˆ ββ

: وأما تقدير الخطأ العشوائي هو

(5-9) ( )Χ+−Υ= 10ˆˆˆ ββε

:تطبيق

مساحة المنزرعة على آمية اإلنتاج من في المثال السابق، إذا رغب الباحث في دراسة أثر ال

Page 4: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٠

(7-4)، (6-4) . آما يلي

3707.5818

238501

)( 2

=−

=−

−= ∑

nyy

S y • 798.0−=xyr

4729.4118

120401

)( 2

=−

=−

−= ∑

nxx

S x •

• 1231.14729.413707.58)798.0(ˆ

1 −=−==x

yxy S

Srβ

• 94.9538

2108)1231.1(8

5264ˆˆ10 =−−=Χ−Υ= ββ

)yy)(( xx −−2)y(y −yy −2)xx −y (x −xx

-27394356-661722.2541.5592305

-2722.53025-552450.2549.5603313

1341641122.2533.5662297

-1300.52601-51650.2525.5607289

701.5529-23930.25-30.5635233

-2029.51681412450.25-49.5699214

-1433.5372161552.25-23.5719240

-4138.57921892162.25-46.5747217

-1352823850012040052642108

:إذا تقدير معادلة االنحدار هي •

Page 5: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣١

Χ−=Υ 1231.194.953ˆ

1231.1ˆ1 −=β

94.953ˆ0 =β

:عادلة أعاله يتضح اآلتيمن الم •

على أن أثر المساحة المنزرعة على آمية اللحوم أثر عكسي، وأن يدل المعامل

زيادة المساحة المنزرعة بمقدار ألف هكتار يؤدي إلى حدوث انخفاض في آمية اللحوم المنتجة

1.1231 . ألف طنبمقدار

953.94 ألف طن بصرف النظر عن على أن هناك إنتاج ثابت قدرة يدل المعامل

. التغير الذي يمكن أن يحدث في المساحة المنزرعة

منهجية التحليل ٢-٥ :إتباع التاليعند البدء في تحليل االنحدار ، يتم

i -١ افتراض أن نموذج االنحدار يأخذ الشكل الخطي ، بمعنى أن i

xxy 0 1βμ β +=

( 1,0

Ordinary Leastيتم استخدام بعض طرق التقدير اإلحصائي مثل طريقة المربعات الصغرى

Squares (OLS)

٢- Maximum Likelihood (ML) دير األعظم أو طريقة اإلمكان ي تق ف

: ، ومن ثم يتم تقدير النموذج وهو معالم النموذج )ββ

(5-10) ix1βyi 0

ˆˆ β +=

yاستخدام اطرق اإلحصاء االستداللي في اختبار مدى صالحية النموذج (3-6) في تمثيل العالقة -٣

. مستقل ، أو متغير مفسر للمتغيرير آمتغ آمتغير تابع ، والمتغير بين المتغير iix

(4-6) ت طر -٤ ثبت أن النموذج إذا ؤ ، وإذ أثبت ي التنب ه ف اد علي ن االعتم ةق ي جيد ومناسب ، يمك

وذج كل النم ر ش وذج غي ر للنم االستدالل اإلحصائي عدم صالحية النموذج ، يتم اقتراح شكل آخ

. وهكذا حتى يمكن التوصل إلى أفضل النماذج ٤ إلى ٢الخطي ، وتكرر نفس الخطوات من

Page 6: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٢

نموذج االنحدار الخطي البسيط شكل ٣-٥ابع ر ت ى متغي االنحدار الخطي البسيط هو الذي يهتم بدراسة وتحليل أثر متغير مستقل واحد عل

ه )آمي ، وسمي انحدار خطي ألن المعادلة تأخذ الصورة الخطية في المعامالت ، ووصف بأن

تقلة مح رات المس دار بسيط ألن عدد المتغي وذج االنح كل نم ي ش ا يل ط ، وفيم د فق ر واح ة متغي ل الدراس

.الخطي البسيط

)1,0 ββ

(5-11) ixyi

i

i

x

y μ ε+

ββ += + iε

=

10

iyi ,...,2,1

:حيث أن

م : اهدة رق ة المش ن قيم ر ع المتغير ، iيعب ا ب ه أحيان ق علي ابع ، ويطل ر الت للمتغي

. المتنبأ به

n=

م : اهدة رق ة المش ي قيم ر ، ه ا ، المتغي ه أحيان ق علي تقل، ويطل ر المس للمتغي

. المفسر ، أو المتنبأ منه

ixni ,...,2,1 i=

هو ثابت يعبر عن الجزء المقطوع : 0β(intercept) ة ارة عن قيم و عب من المحور الرأسي، وهو ه

ixyμ0=ix=0 ). انعدام قيمة المتغير المفسر ( عندما متوسط المتغير التابع عند

ixهو ميل الخط المستقيم : 1βixy 10μ β β+= ابع ، إذا ر الت ي المتغي ، ويعبر عن مقدار التغير ف

ارته وع إش دار ، ون ل االنح ا معام ه أيض ق علي حدث تغير في المتغير المستقل بوحدة واحدة، ويطل

.تدل على ما إذا آان هناك تأثير طردي أو عكسي للمتغير المستقل على المتغير التابع

iεini ، الخطأ العشوائي للمشاهدة التابعة رقم يعبر عن : ,...,2,1=

n( , yi هي عدد المشاهدات المتاحة من قيم المتغيرين: )ix

Page 7: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٣

االفتراضات التي يستند عليها نموذج االنحدار الخطي البسيط :الخطي البسيط على عدد من االفتراضات هييستند نموذج االنحدار

xGiven .Fixed محدد أن المتغير المستقل -١ وثابت ،

وائية طه صفرا ، ، أن األخطاء العش ي متوس ع طبيع ا توزي ا له ل منه تقلة ، وآ مس

: ، أي أنوتباينه

iεn ٢- i ,...,2,1=

2σε ),0(~ 2σNi

ي ، عند القيمة المحددة ة من المشاهدات التابعة مشاهد آل أن ع طبيع لها توزي

تقيم ط المس و الخ طه ه وائ متوس أ العش اين الخط و تب ه ه ي ، وتباين

.: ، أي أن

iyixn ٣- i ,...,2,1=

ii

xxy 10μ β β= +

22 σσ =ixiy)(~ 2| ,10 ββ iii xNy x + σ

ixiε0 .: ، أي أن ، مستقل عن الخطأ العشوائي أن المتغير المستقل ٤- )(),( ==ε εxExCov

ii i

االستدالل اإلحصائي حول نموذج االنحدار الخطي البسيط ٤-٥راء تدالل إلج وات االس اع خط ن إتب يط يمك ي البس دار الخط وذج االنح ائي لنم ل اإلحص التحلي

:اإلحصائي، وتلخص في الخطوات التالية

(OLS) ة ل طريق دير اإلحصائي مث اب -١ تقدير معالم النموذج باستخدام بعض طرق التق ، وحس

.مؤشرات جودة النموذج

روض ا -٢ ارات الف ذلك اختب وذج ، وآ ودة النم ار ج رات اختب دير فت وذج ، وتق الم النم ة بمع لمتعلق

.ثقة لها

. قيمة المتغير التابع لمتوسط المتغير التابع، وآذلك تقدير فترة تنبؤ ٣-

(OLS) تقدير معالم النموذج بطريقة : أوالن الم دار ال م وذج االنح الم نم ظ أن مع يط خالح ي البس مل ط y تش x εβ β ++= 10

Page 8: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٤

)( نحدار معامالت اال 1,0β β - أ

غرى ات الص دير المربع ـ (OLS)وتق ات ل وع مربع ل مجم ي تجع يم الت ي الق ه

:األخطاء العشوائية أقل ما يمكن ، أي أن

)( 1,0β β

(5-12) ∑∑==

+−= n

i iin

i i xy1

2101

2 )( )( ββε(OLS) Estimates minimize :

:وهذا التقدير هو

(5-13)

n

xx

n

xyx

n

xx

n

yyxx

n

iin

ii

n

i

n

iin

iii

n

ii

n

iii

2

1

1

2

11

1

1

2

1

1

)1(

)(

)1(

))((

ˆ

⎟⎠

⎞⎜⎝

−=

−−

=

∑∑

∑∑∑

=

=

==

=

=

=

β

yi

(5-14) x1y0ˆˆ ββ −=

yi 0ˆˆˆ ββ +=

yiy

i

(5-7) ، (5-6) ادلتين ين بالمع دير المب و نفس التق دير ه م ، وهذا التق ن ث دير وم ون تق يك

: االنحدار هيمعادلة

(5-15) ix1

ة اهدة التابع ة للمش ة الفعلي ين القيم رق ب ف الف ن تعري ا يمك درة آم ة المق ، والقيم

بالبواقي

i

residualsي ، و ت هو ف واقي ه نفس الوق وائية ، أي أن الب اء العش دير لألخط تق

: هي

ε

( 10ˆˆ)ˆ(ˆ iiii yyy ββε +−=−= (5-16) )ix

Page 9: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٥

2σ تباين الخطأ العشوائي - ب

2σ :، ويحسب بالمعادلة التاليةتقدير المربعات الصغرى لتباين الخطأ العشوائي هو

(5-17)

21

ˆ0

ˆ(21 1

)2()2(2

1

1

2

1

2 )ˆ(ˆˆ

)

∑ ∑+∑−

∑∑

= ==

−=

−=

=

−==

n

niy

niyiy

n

i ii

n

n

i iin

n

iyyi

ββ

εσ

ˆˆ( 0 ββ ،

ix

1( : تتصف باآلتي (OLS) Estimators درات المربعات الصغرى يقتو

. Consistency أنها متسقة - ب Unbiased أنها غير منحازة -أ

.لها توزيع طبيعييكون النموذج ، تحت تحقق افتراضات -د. لها أقل تباين -جـ

المقدر الجيد غير المتحيز ب (OLS) Best Linear Unbiased Estimatorمن ثم يتصف مقدر و

(BLUE).

)٢(تطبيق B.P على ضغط الدم Weight بالنسبة للمصابين بمرض ارتفاع الضغط ، لدراسة أثر الوزن

الوزن والضغط لكل مريض ، وحصل على النتائج وسجل 10قام باحث بسحب عينة من المرضي حجمها

:التالية

10 9 8 7 6 5 4 3 2 1 No 88 79 10011511090 85 78 93 105 B.P (y)

65 58 85 90 85 75 63 60 85 90 Weight (x)

د ة ، أوج ورة الخطي ذ الص وزن يأخ ي ال ة ف غط آدال ن الض ر ع ذي يعب دار ال وذج االنح افتراض أن نم ب

:اآلتي

Page 10: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٦

(OLS) تقدير المربعات الصغرى لمعامالت انحدار ضغط الدم علي الوزن، اآتب شكل النموذج -١

المقدر، وفسره

الخطأ العشوائي عنده؟ تقدير آيلوجرام؟ وما هو 63 لشخص وزنه تقدير الضغط ما هو ٢- .قدر تباين الخطأ العشوائي ٣-

:الحل . لمعامالت االنحدار (OLS) حساب تقديرات ١-

:المجاميعيتم تكوين جدول

no y x xy x2 y2

1 105 90 9450 8100 11025 2 93 85 7905 7225 8649 3 78 60 4680 3600 6084 4 85 63 5355 3969 7225 5 90 75 6750 5625 8100 6 110 85 9350 7225 12100 7 115 90 10350 8100 13225 8 100 85 8500 7225 10000 9 79 58 4582 3364 6241

10 88 65 5720 4225 7744 Sum( ) Σ 943 756 72642 58658 90393

8982.04.15042.1351

10)756(58658

10)943)(756(72642

ˆ22

1

1

2

11

11

==

−=

⎟⎠

⎞⎜⎝

−=

∑∑

∑∑∑

=

=

==

=

n

xx

n

yxyx

n

iin

ii

n

ii

n

iin

iii

β

Page 11: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٧

396.26107568982.0

10943ˆˆ

10 =⎟⎠⎞

⎜⎝⎛−⎟

⎠⎞

⎜⎝⎛=−= xy ββ

ixyi 8982.0396.26ˆ +=

8982.0ˆ1 =β

396.26ˆ0 =β

98.82)63(8982.0396.26ˆ =+=y

02.298.8285)ˆ(ˆ =−

: تقديره هونحدار االإذا نموذج

: يستدل من التقدير أعاله ما يليو

يؤثر طرديا على ضغط الدم، وأن زيادة الوزن بمقدار واحد يدل على أن الوزن •

. درجة تقريبا آيلوجرام، يترتب عليه حدوث زيادة في الضغط بمقدار 0.9

هذا ( تقريبا • يدل على أنه في حالة ثبات الوزن يكون متوسط الضغط هو 26.4

)غير منطقي

:م هو آيلوجرا الضغط المقدر لشخص وزنه 63 ٢-

:وأما الخطأ العشوائي عند هذا الوزن فتقديره هو

=−= yyε

:تقدير تباين الخطأ العشوائي ٣- باستخدام الصيغة التعريفية -:أوال

)2()2(2 1

2

1

2 )ˆ(ˆˆ −

=−

=∑∑ −

== n

n

i iin

n

iyyiεσ

Page 12: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٨

no y x xy 8982.0396.26ˆ += )ˆ(ˆ yy −=ε 2ε 1 105 90 107.2340 -2.2340 4.9907562 93 85 102.7430 -9.7430 94.9260503 78 60 80.2880 -2.2880 5.2349444 85 63 82.9826 2.0174 4.0699035 90 75 93.7610 -3.7610 14.1451206 110 85 102.7430 7.2570 52.6640507 115 90 107.2340 7.7660 60.3107608 100 85 102.7430 -2.7430 7.5240499 79 58 78.4916 0.5084 0.258471

10 88 65 84.7790 3.2210 10.374840Sum(Σ ) 943 756 0.000 254.4989

:إذا تقدير تباين الخطأ العشوائي هو

812.31)210(4989.254

)2(2 1

2)ˆ(ˆ =−=

−= −

=∑

n

n

i ii yyσ

: يةباستخدام الصيغة الحساب: ثانيا

( ) 816.3185276.254

8)72642(8982.0)943(396.2690393

2

)1ˆ

0ˆ(2

1 12 1ˆ

==+−

=

∑ ∑+∑−= === n

nixiy

niyiy

n

i iiββ

σ

iii yy

: مؤشرات جودة النموذج-:ثانياy : تتكون من جزأين همامن المعلوم أن القيمة الفعلية للمتغير التابع

εˆ= +

Page 13: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٣٩

y)( :ين هما يمكن إرجاعه إلى جزأأي أن االختالف الكلي في المتغير التابع y−i

iε +)ˆ(y yyi − = )y( i −

∑=

n

ii

االختالف الكلي = االختالف بسبب االنحدار + االختالف بسبب الخطأ

: ومن ثم يعبر عن مكونات مجموع المربعات الكلي بجزأين هما

= +∑=

n

ii yy

1

2)ˆ( ∑=

n

ii yy

1)(

)( 2R

2

مجموع مربعات

األخطاء مجموع مربعات االنحدار مجموع المربعات الكلي

= Regression sum of

squares

+Error sum of

squares

Total sum of

squares

SSE SSR = +SST

(n-2) (n-1) 1 = +

:الص مؤشرين لجودة النموذج هماومن ثم يمكن استخ

SST إلى مجموع المربعات الكلي (SSR) ، ويطلق مؤشر يعبر عن نسبة مجموع مربعات االنحدار -أ

-determinant coefficient R الخطي البسيطمربع معامل االرتباط( ، أو عليه معامل التحديد

Square ( أن ، أي ويرمز له بالرمز:

(5-18)SSTSSRR =2

Page 14: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٠

لقيم الفعلية ، فإذا آان هذا المعامل آبير اوالقيم المقدرة قوة العالقة بين وهذا المعامل يدل على مدى

ن ، دل ذلك على جودة النموذج ، ألن معنى ذلك أن المتغير المفسر يشرح أو يفسر نسبة آبيرة م

.التغيرات الكلية التي تحدث في المتغير التابع

x

اني -ب ر الث و المؤش ديره ه وائي وتق أ العش اين الخط و تب دي وه يس م ، ويق

درة يم المق ن الق ة ع يم الفعلي ات الق ذا ا انحراف ان ه إذا آ ديرل، ف ر دل تق ى آبي ك إل أن ذل

. القيم الفعلية للمتغير التابع عن القيم المقدرة لها آبير، ومن ثم يكون النموذج غير آفؤتانحرافا

)2(2ˆ −= nSSEσ

)ˆ(y yi −

)٣(تطبيق احسب معامل التحديد ، وما هو مدلوله؟ ) ٢(في تطبيق

الحل

لحساب معامل التحديد تطبق المعادلة (5-18)

(5-19)

⎟⎟⎠

⎞⎜⎜⎝

⎛−

⎟⎟⎠

⎞⎜⎜⎝

⎛−

=∑ −

−=

∑ −∑ −

=

∑∑

∑∑∑

=

ny

y

nx

x

yiyxx

yiyyy

ii

ii

i

i

SSTSSRR

22

222

1

2

22

2

2

)(

)(ˆ

)()(ˆ

)()ˆ(2

ββ

8267.01.1468

6946.1213

10)943(90393

10)756(58658)8982.0(

2

22

2 =

⎟⎟⎠

⎞⎜⎜⎝

⎛−

⎟⎟⎠

⎞⎜⎜⎝

⎛−

=R

ة من االختالفات التي تحدث في ضغط الدم ، وأن النسبة الباقي 82.67% أي أن الوزن يفسر

Page 15: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤١

(%17.33) .ترجع ألخطاء عشوائية

االختبارات المتعلقة بالنموذج ومعامالت االنحدار-:ثالثا امالت قترح ر صالحية النموذج الم الباحث في اختبا قد يرغب ة المع ار معنوي ة ، واختب ن ناحي م

.، وفيما يلي بيان ذلكمن ناحية أخرى

النموذج) صالحية( اختبار جودة -أين ة ب ل العالق ي تمثي وذج ف ول صالحية النم رار ح ى ق و التوصل إل ار ه الغرض من هذا االختب

. وفيما يلي خطوات إجراء االختبارالمتغير التابع والمتغير المستقل تمثيال جيدا ،

:صياغة الفروض •

.يأخذ الفرض العدم والفرض البديل الصورة التالية

:oH model is not suitable النموذج غير مناسب الفرض العدم

:aH model is suitable ج مناسبالنموذ الفرض البديل

:إحصائية االختبار هي

(5-20)

( )

MSEMSR

nSSE

SSRF =

⎟⎠⎞⎜

⎝⎛

=

)2(

1*

MSE

FHF

( 1

: حيث أن

MSR : ، دار ات االنح ط مربع دير :متوس ت تق س الوق ي نف و ف اء ، وه ات األخط ط مربع متوس

العشوائي تباين الخطأ

ار ائية االختب دم وإحص رض الع ت صحة الف ع تح ع توزي ط تتب ة بس درجات حري ب

: ومقام هي

*o

df عدد المتغيرات المستقلة = درجات حرية البسط

11(2 −=−−= nndf

)1=

2( = ) عدد المشاهدات -لة عدد المتغيرات المستق-1(

Page 16: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٢

:مستوى المعنوية ، ومناطق الرفض والقبول •

و ث ه دده الباح ذي ح ة ال توى المعنوي رض أن مس و بف تخداما ه ة اس توى المعنوي ر مس ، وأآث

ط ة بس ات الحري د درج ه عن ام ، فإن ة مق ة حري ، ودرج

ات ع مئوي دول توزي ن ج ن م ة ، يمك ة الحرج تخراج القيم ة( اس ي ) الجدولي الت

: ، وتظهر علي التوزيع آما يليتفصل بين منطقي الرفض والقبول ، ويرمز لها بالرمز

α

)01.005.0( == αα or)1( 1 =df

)2(2 −= ndfF

α−−

12,1 nF

α−

−1

2,n1F

F

α2

القرار الذي يوصي به الباحث •

ار ائية االختب ع إحص ى موق اء عل ديل بن دم والب رض الع رار بخصوص الف ذ الق اطق يتخ ن من م

:الرفض والقبول ، آما يلي

*

if >*F α−−

12,1 nF we cannot accept oH

ى ال يمكن قبول الفرض العدم إذا آانت إحصائية االختبار أآبر من القيمة الجدولية ، ويستدل من ذلك عل

. مناسبة النموذج في تمثيل العالقة بين المتغير التابع والمتغير المستقل

if *F ≤ −−

1,1 nF we can accept oH

.يمكن قبول الفرض العدم ، ويكون افتراض الباحث لنموذج االنحدار الخطي غير صحيح

β اختبار معنوية معامل االنحدار -ب

ائية )المستقل(يقصد بذلك اختبار ما إذا آان المتغير المفسر ة إحص وي ذات دالل ر معن ه أث Χل

Page 17: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٣

Υ

:ورة التالية ، يأخذ الص التقدير تباين • 1β

(5-21) ( )∑ −

= 2

22

1ˆ xx

σσβ

0β • تباين الحد الثابت

(5-22) ( ) ⎟

2⎜⎜

⎛+=∑ −

222

1xx

xn

σσβ

يتم التعويض عنه بتقديره غير معلوم، العشوائي تباين الخطأ حيث أن و 2σ(MSE) ومن ثم نحصل ،

1β0β : وهما آالتالي،على تقدير تبايني

(5-23) ( ) ( )∑∑ −−

== 22

22

ˆˆxxxx

MSEσσβ

(5-24) ( ) ( ) ⎟

⎟⎠

⎞2⎜

⎜⎝

⎛+⎟

⎟⎠

⎞⎜⎜⎝

⎛+=

∑ −∑ −=

2

2

222

11ˆˆxx

xxx

xnn MSEσσ

β

2 . ، : القياسي وبأخذ الجذر التربيعي للتباين ، نحصل على الخطأ

1ˆˆβ

σ1ˆˆβ

σ =2

0 0ˆˆ ˆˆββ

σσ =

Page 18: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٤

:وفيما يلي خطوات إجراء االختبار

:صياغة الفروض •

.رة التاليةيأخذ الفرض العدم والفرض البديل الصو

0: =βoH المتغير المفسر ليس له أثر معنوي على المتغير التابع الفرض العدم

0: ≠βaH بعالمتغير المفسر له أثر معنوي على المتغير التا الفرض البديل

:إحصائية االختبار هي

(5-25)

t β

σβ

ˆˆˆ* =

)211(

toH* : بدرجات حرية تساوي t تتبع توزيع تحت صحة الفرض العدم إحصائية االختبار :حيث أن

= =−− nndf −

:ولمستوى المعنوية ، ومناطق الرفض والقب •

و دده الباحث ه ذي ح ة ال توى المعنوي ي بفرض أن مس ة ه ة الحري ، ، وأن درج

ات ع مئوي دول توزي ن ج ن م ة يمك ة الحرج تخراج القيم ة( اس ي ) الجدولي ين منطق ل ب ي تفص الت

: ، وتظهر علي التوزيع آما يلي(الرفض والقبول ، ويرمز لها بالرمز

α)2( −= ndf

t

( (,)21( −− nl )2t α

القرار الذي يوصي به الباحث •

Page 19: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٥

ار ائية االختب ع إحص ى موق اء عل ديل بن دم والب رض الع رار بخصوص الف ذ الق اطق يتخ ن من م

:الرفض والقبول ، آما يلي

*t

If || *t > we cannot accept ( ))2(,)21( −− nlt α oH

ى ال يمكن قبول الفرض العدم إذا آانت إحصائية االختبار أآبر من القيمة الجدولية ، ويستدل من ذلك عل

. أن المتغير المستقل له أثر معنوي على المتغير التابع

If || *t )≤ (t we can accept oH

)2,()21( −− nlα

د يمكن قبول الفرض العدم ، ويكون المتغير المستقل ليس له أثر معنوي ك عن ابع ، وذل ر الت على المتغي

α .مستوى معنوية

٤تطبيق :في التطبيق السابق أجري االختبارات التالية

ين الحية نموذج اختبار ص • ة ب ل العالق رح لتمثي دم االنحدار الخطي المقت ابع، ضغط ال ر ت آمتغي

05.0α .استخدم مستوى معنوية والوزن آمتغير مستقل، =

= 05.0α هل للوزن أثر ذات داللة على الضغط ، •

٤الحل .ن ، استخدم مستوى معنوية اختبار صالحية نموذج انحدار ضغط الدم على الوز 05.0=α أ -

.لفرض العدم والفرض البديل ا •

:oH model is not suitable غير مناسب المقترح لتمثيل العالقة بين الضغط والوزن نحداراالنموذج

:aH model is suitable النموذج مناسب

:إحصائية االختبار هي •

Page 20: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٦

( )

MSEMSR

nSSE

SSRF =

⎟⎠⎞⎜

⎝⎛

=

2(

1*

4054.2546946.12131.1468,6646.1213 =−=−== SSRSSTSSESSR

.إذا إحصائية االختبار قيمتها تساوي

( ) 165.38

800675.316646.1213

)210(4054.254

16646.1213

* ==⎟⎠⎞⎜

⎝⎛

=F

.0(

:مستوى المعنوية ، ومناطق الرفض والقبول •

و ة بسط مستوى المعنوية الذي حدده الباحث ه ات الحري ة ، درج ، ودرج

: الجدولية هي تكون قيمة ،حرية مقام

α) )05=1( 1 =df

2 =df( ) 5)95.0()8,1()2,1(,)1( ==−− FF nα 8F32.

:، وتظهر علي التوزيع آما يلي

القرار الذي يوصي به الباحث •

إذا ال يمكن قبول الفرض العدم ، ويستدل من ذلك <بما أن

. لعالقة بين الضغط آمتغير تابع والوزن آمتغير مستقلعلى مناسبة النموذج المفترض لتمثيل ا

( ,1(,)95.0( ) 32.5)8 =F165.38* =F

Page 21: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٧

اختبار معنوية أثر الوزن على الضغط - ب

• الفرض العدم والفرض البديل

0: 1 =βoH الوزن ليس له أثر معنوي على الضغط الفرض العدم

0: 1 ≠βaH الضغط الوزن له أثر معنوي على الفرض البديل

:إحصائية االختبار هي - ت

1

1

ˆˆˆ

βσβ* =t

1453.00211.0

0211.04.1504

8007.318982.0ˆ

2

22

ˆ)(

ˆˆ,1

=

===

=

=∑ −

β

β

σ

σσβ

xx

183.61453.08982.0* ==t

.0

:مستوى المعنوية ، ومناطق الرفض والقبول •

و ي مستوى المعنوية الذي حدده الباحث ه ة ه ة الحري ، ، وأن درج

t : الجدولية هيومن ثم تكون قيمة

05α =8)2( =−= ndf

( ) .28,975.0)2(,)21( t( ) 306t ==−− nlα

Page 22: Simple Linear Regression Analysis - bsofian-ksu.com · ﻲﻨﻳرﺪﻟا دﻮﻤﺤﻣ . د / داﺪﻋإ

محمود الدريني. د / إعداد تحليل االنحدار الخطي البسيط

٤٨

القرار الذي يوصي به الباحث •

، إذا ال يمكن قبول الفرض العدم ، ويستدل من ذلك أن|بما أن

. الوزن له أثر معنوي على الضغط عند مستوى معنوية

( ) 306.2183.6| 8,975.0* == tt f

= 05.0α

: واجب منزلي

-١ .المطلوب حساب معامل االرتباط، واختبار معنويته

1β .تقدير فترة ثقة لمعامل االنحدار -٢