‫المحاضرة الرابعة‬

‫العملية العشوائية منفصلة الزمن منفصلة الحالة تحقق خاصية ماركوف إذا تحقق‬
‫الشرط التالي‪:‬‬

‫ولكل ‪ .‬يمكن تفسير هذه الخاصية كاآلتي‪:‬‬ ‫لجميع الحاالت‬

‫وال يعتمد على قيم‬ ‫يعتمد فقط على القيمة الحالية لـ‬ ‫التنبؤ بقيمة‬
‫‪.‬‬ ‫الحاالت الماضية‬
‫فإن الحاالت الماضية‬ ‫بمعنى آخر‪ :‬بإعطاء الحالة الحالية‬
‫‪. …،‬‬ ‫‪،‬‬ ‫ال تؤثر على الحاالت في المستقبل‬
‫األمثلة التالية تمكن القارئ من فهم خاصية ماركوف فهما جيدا‪.‬‬
‫مثـال (‪:)10, 1‬‬
‫يرمز إلى‬ ‫بفرض إلقاء قطعة عملة معدنية غير متميزة عشر مرات وأن‬
‫العدد الكلي للصورـ التي تظهر حتى الرمية رقم ‪ .‬يقود هذا الفرض إلى العملية‬
‫وفضاء المعلمة‬ ‫بفضاء الحالة‬ ‫العشوائية‬
‫وأن‪:‬‬

‫من الواضح أن هذا االحتمال الشرطي يعتمد على فقط وال يعتمد على‬
‫‪ ،‬وبالتالي‬ ‫ال يعتمد على أي من‬ ‫فإن‬ ‫‪ ،‬وهذا يعني أنه بمعرفة‬
‫تكون سلسلة‬ ‫فإن هذه العملية تحقق خاصية ماركوف ومن ثم فإن‬
‫ماركوف‪.‬‬
‫مثـال (‪:)11, 1‬‬
‫بالعودة إلى المثال (‪ )10, 1‬ولكن بفرض أن قطعة العملة متميزة وأن احتمال‬
‫ظهور كتابة يساوي ثالث أضعاف احتمال ظهور صورة‪ ،‬أي أن‪:‬‬
‫‪) = 3/4‬كتابة (‪) = 1/4, P‬صورة(‪P‬‬
‫إذن‪:‬‬
‫ظهور صورة في الرمية الثالثة‬ ‫‪,‬‬
 ‫أيضا‪:‬‬
‫ظهور صورة في الرمية الثالثة‬ ‫‪,‬‬
‫ظهور كتابة في الرمية الثالثة‬ ‫‪.‬‬
‫ومستقلة عن قيمة‬ ‫الحظ أن جميع هذه االحتماالت الشرطية تعتمد فقط على قيمة‬
‫‪ .‬بالمثل يمكن حساب أن‪:‬‬

‫ومستقلة عن قيم كل‬ ‫الحظ ثانية أن هذه االحتماالت الشرطية تعتمد فقط على قيمة‬
‫‪ . ،‬عموما يمكن حساب أن‪:‬‬ ‫من‬

‫‪ .‬ومن‬ ‫يعتمد هذا االحتمال الشرطي فقط على قيمة وال يعتمد على قيم‬
‫ال تعتمد على أي من‬ ‫معلومة فإن قيمة‬ ‫ثم فإنه عندما يكون قيمة‬
‫‪ .‬وهذا يبرهن على أن العملية العشوائية في هذا المثال تحقق خاصية‬
‫ماركوف‪.‬‬
‫مثـال (‪:)12, 1‬‬
‫تتكون لعبة بسيطة من إلقاء قطعة عملة غير متميزة العديد من المرات‪ ،‬وأن‬
‫الالعب سيكسب رياالً واحداً كلما ظهرت صورة ويخسر رياالً واحداً كلما ظهرت‬
‫عبارة عن المكسب التراكمي لالعب بعد إلقاء القطعة رقم ‪ ،‬حيث‬ ‫كتابة‪ .‬ليكن‬
‫‪ .‬العملية العشوائية‬ ‫أن القيمة السالبة تشير إلى الخسارة الفعلية وأن‬
‫في هذا المثال تحقق خاصية ماركوف‪ .‬ولتوضيح ذلك سنقدم الحالة‬
‫الخاصة التالية‪ .‬نفترض أن الالعب أصبح يمتلك رصيدا تراكميا مقداره ست رياالت‬
‫وذلك بعد إلقاء قطعة العملة عشرة مرات‪ .‬يالحظ أن معرفة ما جرى من خسارة أو‬
‫مكسب خالل المحاوالت التي تسبق المحاولة العاشرة ليس لها أي تأثير على معرفة‬
‫‪2‬‬
 ‫المكسب التراكمي لالعب بعد إلقاء القطعة الحادية عشر ‪ ،‬فإن المكسب التراكمي بعد‬
‫إجراء المحاولة الحادية عشر سيصبح إما سبع رياالت باحتمال أو خمس رياالت‬
‫بنفس االحتمال‪ .‬وهذا يعني أن المكسب التراكمي بعد المحاولة الحادية عشر يعتمد فقط‬
‫على المكسب التراكمي لالعب بعد المحاولة العاشرة‪ .‬وحيث أنه من الواضح أن هذه‬
‫النتيجة تتحقق لباقي جميع المحاوالت‪ ،‬إذن العملية العشوائية في هذا المثال تحقق‬
‫خاصية ماركوف‪.‬‬
‫(‪ )5, 1‬بعض العمليات العشوائية الشائعة‬
‫‪Some common stochastic processes‬‬
‫فيما يلي نقدم بإيجاز قائمة لبعض العمليات العشوائية الخاصــة والــتي يكــون لكــل منهــا‬
‫تعريفها الخاص وخواصها وتطبيقاتها‪.‬‬
‫‪ .1‬عملية برنوللي ‪ . Bernoulli process‬تسمى العملية العشوائية‬
‫) إذا تحقق‬ ‫بعملية برنوللي باحتمال النجاح (‬
‫الشرطان‪:‬‬
‫‪ … ، ،‬مستقلة‪.‬‬ ‫(أ) تكون المتغيراتـ العشوائية‬
‫لكل‬ ‫‪،‬‬ ‫(ب)‬
‫عبارة عن فضاء منفصل ويعطى‬ ‫فضاء المعلمة لعملية برنوللي‬
‫‪ ،‬وفضاء الحالة أيضا يكون فضاء متقطع ويعطى بـ‬ ‫على الصورة‬
‫‪.‬‬

‫‪3‬‬