CS2 B: Chapters 4 and 5 Markov jump process Questions  Page 1 

Questions 
4.1 A time‐homogeneous Markov jump process is to be used to monitor the number of athletes 
opting to be omnivore, vegetarian or vegan, over a 10‐year period.  At any time, an athlete may 
be classed as: 

 an Omnivore (1) 
 Vegetarian (2) 
 Vegan (3) 
The annual transition rates collected from past data are given here: 

12  0.12 13  0.02 21  0.18

    
23  0.05 31  0.013 32  0.05

All of the athletes were omnivores as children. 

(i)  Draw the transition diagram.  [4] 

(ii)  Code the generator matrix  A .  [4] 

(iii)  Give a formula for the transition probability matrix  P  h , over a very small time period  h , 

in terms of the generator matrix  A , and use your formula to approximate  P 1 12 , the 
matrix of transition probabilities over one month.  [6] 

(iv)  Explain how the transition probability matrix,  P 10  , can be calculated using  P 1 12 .  [2] 

(v)  Calculate the probability that: 

  (a)  An omnivore athlete is a vegetarian in 10 years’ time.   

  (b)  An omnivore athlete is a vegan in 10 years’ time. 

  (c)  A vegan athlete is an omnivore in 10 years’ time.  [6] 

(vi)  After an extended analysis of trends in the diet of athletes, expert nutritionists have 
proposed some new rates, which take into account predicted future trends as well as the 
past data: 

12  0.15 13  0.08 21  0.09

     
23  0.07 31  0.004 32  0.07

  Recalculate the probabilities from part (v) under these new rates and comment on your 
answers.    [8] 

(vii)  Suggest two improvements to the current model.  [4] 

        [Total 34] 

The Actuarial Education Company  © IFE: 2019 Examinations 
 Page 2  CS2 B: Chapters 4 and 5 Markov jump process Questions 

5.1 In a particular European country, where anyone over the age of 18 may vote, there are 3 main 
political parties: 

 the “Reds” (R) 
 the “Blues” (B) 
 the “Xenophobes” (X) 
A company that produces and sells opinion polls has suggested that the voting population’s 
political affiliation be monitored over time using a 3‐state Markov process. 
(i)  Explain the most suitable choice for the time set if a Markov chain is used.  [4] 

The company has decided to use a time‐inhomogeneous Markov jump process with the following 
age‐dependent transition rates between the political parties: 

RB t   0.05  0.01t RX  t   0.001  0.0002t

  BR  t   0.6  0.005t BX t   0.004  0.001t  

 XR  t   0.05  0.0003t  XB  t   0.9  0.006t

where  t  is the voter’s age and it is assumed, for simplicity, that all voters are no older than 110. 

(ii)  Code a function to create a generator matrix  A  t   and use your function to calculate 

numerical values for:  

  (a)  the rate at which a 25‐year old member of the Blues moves to the Reds 

  (b)  the rate at which a 60‐year old member of the Reds moves to the Blues 

  (c)  the rate at which a 50‐year old member of the Blues moves to the Xenophobes.   
        [8] 

   

© IFE: 2019 Examinations  The Actuarial Education Company 
CS2 B: Chapters 4 and 5 Markov jump process Questions  Page 3 

Over a very small time period  h , the transition probability matrix  P  t , t  h   is to be 

approximated as: 

  P  t , t  h   I  hA  t   

where  I   is the identity matrix.  Probabilities over longer time periods will be calculated by 
successively multiplying the probabilities over shorter time periods as follows: 

t  s  h1
  P  s,t    P  s  hj , s  hj  h    
j 0

(iii)  Code a function to give the values of  P  s, t   for a given subdivision value of  h  and use 

your function to calculate the following probabilities in the case that  h  1 12 : 

(a)  the probability that a 25‐year old member of the Blues moves to the Reds over 
the next 10 years. 

  (b)  the probability that a 60‐year old member of the Reds moves to the Blues over 
the next 5 years.   

  (c)  the probability that a 50‐year old member of the Xenophobes moves to the Reds 
over the next 7 years.  [12] 

(iv)  Discuss whether this time‐inhomogeneous Markov jump process is a good model for 
tracking political party affiliation.  [8] 
        [Total 32] 

The Actuarial Education Company  © IFE: 2019 Examinations