You are on page 1of 17

MÉTODO DE LOS MÍNIMOS CUADRADOS

OBJETIVO:
Aplicar el método de los mínimos cuadrados para obtener una
recta de regresión para un conjunto de puntos dados.
En esta lección vamos a estudiar una importante aplicación de hallar
el mínimo de una función de dos variables, se trata del llamado
método de mínimos cuadrados, el cual se aplica para obtener una
recta de regresión que representa la recta de mejor ajuste para un
conjunto de puntos (datos) obtenidos experimentalmente.
{(x
1
, y
1
), (x
2
, y
2
), (x
3
, y
3
), . . ., (x
n
, y
n
)}
Primero se indica que tan bien se ajusta una recta particular a un
conjunto de puntos al medir las distancias verticales desde los punto a
la recta. Por ejemplo,
La figura 1 muestra n puntos y la recta y = mx + b.
El punto (x
i
, y
i
) es el i-ésimo punto y le corresponde el punto
(x
i
, mx
i
+ b) de la recta. La desviación (o error) entre el i-ésimo
punto y la recta es: d
i
=y
i
– (mx
i
+b)
MÉTODO DE MÍNIMOS CUADRADOS
(x
i
, y
i
)
y =mx +b
x
i

y
i

(x
i
,mx
i
+b)
(x
2
,y
2
)
(x
1
,y
1
)
(x
n
, y
n
)
d
i

x
y
0
Figura 1
-
-
-
-
-
-
-
-
Desviación → d
i
= y
i
– (mx
i
+ b)
MÉTODO DE MÍNIMOS CUADRADOS
La suma del cuadrado de las desviaciones es:
| |
¿ ¿
= =
+ ÷ =
n
i
i i
n
i
i
b mx y d
1
2
1
2
) (
Esta suma nunca es negativa y es nula sólo si cada d
i
es cero, en este
caso todos los puntos están sobre la recta.
Se considera como recta de mejor ajuste aquella para la cual
es un mínimo relativo.
Esta recta se denomina recta de regresión de y sobre x, y el proceso
para determinarla se llama método de mínimos cuadrados.
2
1
) (
¿
=
n
i
i
d
Determinación de la recta de regresión y =mx +b de un conjunto
de n puntos.
Como x
i
y y
i
son valores conocidos (cttes), m y b son variables.
MÉTODO DE MÍNIMOS CUADRADOS
2
1
2
1
) ( ) , (
) (
b mx y b m f
d
n
i
i i
n
i
i
÷ ÷ = ¬
¬
¿
¿
=
=
Es una función de m y b
Para calcular los valores de m y b que hacen f(m.b) un mínimo
relativo calculamos las derivadas parciales y las
igualamos a cero.
m
b m f
c
c ) , (
y
b
b m f
c
c ) , (
( ) | | ( )( )
( )
(
¸
(

¸

+ + ÷ = ÷ + ÷ =
÷ ÷ ÷ = ÷ ÷
c
c
=
c
c
¿ ¿ ¿ ¿
¿ ¿
= = = =
= =
n
i
n
i
i i
n
i
i i
n
i
i i i i
n
i
i i i
n
i
i i
x b x m y x bx mx y x
x b mx y b mx y
m m
f
1 1
2
1 1
2
1 1
2
2 2
2
(1)
MÉTODO DE MÍNIMOS CUADRADOS
( ) | | ( )( )
( ) |
.
|

\
|
+ + ÷ = + + ÷ =
÷ ÷ ÷ = ÷ ÷
c
c
=
c
c
¿ ¿ ¿
¿ ¿
= = =
= =
n
i
i
n
i
i
n
i
i i
n
i
i i
n
i
i i
nb x m y b mx y
b mx y b mx y
b b
f
1 1 1
1 1
2
2 2
1 2
(2)
Al considerar se obtienen las ecuaciones:
0 =
c
c
m
f
0 =
c
c
b
f
¿ ¿
¿ ¿ ¿
= =
= = =
= +
= +
n
i
i
n
i
i
n
i
i i
n
i
i
n
i
i
y nb x m
y x x b x m
1 1
1 1 1
2
Si despejamos b de (4) |
.
|

\
|
÷ =
¿ ¿
= =
n
i
i
n
i
i
x m y
n
b
1 1
1
(3)
(4)
(5)
Al sustituir el valor de b en (3) despejamos m:
Primero utilizamos la formula (6) para obtener m y luego la
sustituimos en (5) para obtener el valor de b y así determinar la recta.
MÉTODO DE MÍNIMOS CUADRADOS
2
1 1
2
1 1 1
|
.
|

\
|
÷
÷
=
¿ ¿
¿ ¿ ¿
= =
= = =
n
i
i
n
i
i
n
i
i
n
i
i
n
i
i i
x x n
y x y x n
m
(6)
b mx y + =
Ejemplo 1:
La cantidad máxima y de cierta sustancia que se disolverá en 1 Lt. de
agua depende de la temperatura T. Se obtienen los siguientes
resultados experimentales :
MÉTODO DE MÍNIMOS CUADRADOS
x (Temp. En °C) 10 20 30 40 50 60
y (gramos) 120 132 142 155 169 179
Encuentre la mejor recta que se ajuste a estos datos
Solución:
Al utilizar el método de los mínimos cuadrados es conveniente usar
una tabla como la siguiente.
x
i
y
i
x
i
2

x
i
y
i
10
20
30
40
50
60
120
132
142
155
169
179
100
400
900
1600
2500
3600
1200
2640
4260
6200
8450
10740
210 897 9100 33580
MÉTODO DE MÍNIMOS CUADRADOS
¿
=
=
6
1
210
i
i
x
¿
=
=
6
1
2
9100
i
i
x
¿
=
=
6
1
987
i
i
y
¿
=
=
6
1
33580
i
i i
y x
25 , 1
) 210 ( ) 9100 )( 6 (
) 897 )( 210 ( ) 33580 )( 6 (
2
2
1 1
2
1 1 1
=
÷
÷
=
|
|
.
|

\
|
÷
÷
=
¿ ¿
¿ ¿ ¿
= =
= = =
m
x x n
y x y x n
m
n
i
i
n
i
i
n
i
i
n
i
i
n
i
i i
( ) 8 , 105 ) 210 )( 25 , 1 ( 897
6
1
1
1 1
= ÷ =
|
.
|

\
|
÷ =
¿ ¿
= =
b
x m y
n
b
n
i
i
n
i
i
La recta que más se ajusta a estos datos es: y = 1,125x + 105,8
MÉTODO DE MÍNIMOS CUADRADOS
-10 10 20 30 40 50 60 70 80
-40
40
80
120
160
x
y
(Gramos)
(Temp. en °C)
y=1,25x+105,8
Recta de regresión del ejemplo 1
Ejemplo 2:
En la tabla siguiente, x días han transcurridos desde el brote de una
enfermedad particular, y y es el número de casos nuevos de la
enfermedad en el día número x. (a) Determine la recta de regresión
para los puntos (x
i
, y
i
). (b) Utilice la recta de regresión para estimar
el número de nuevos casos de la enfermedad el sexto día.
Brote de una enfermedad
MÉTODO DE MÍNIMOS CUADRADOS
x (Dias) 1 2 3 4 5
y (# de casos nuevos) 20 24 30 35 42
a) La recta pedida tiene la ecuación y=mx+b para determinar m y b,
primero se obtienen las sumas de las ecuaciones (5) y (6) a partir de
los datos de la tabla anterior.
MÉTODO DE MÍNIMOS CUADRADOS
¿
=
=
6
1
15
i
i
x
¿
=
=
6
1
151
i
i
y
¿
=
=
6
1
2
55
i
i
x
¿
=
=
6
1
508
i
i i
y x
Aplicando las fórmulas (5) y (6)
5 . 5
) 15 ( ) 55 ( 5
) 151 )( 15 ( ) 508 ( 5
2
=
÷
÷
=
m
m
| |
7 . 13
) 15 ( 5 . 5 151
5
1
=
÷ =
b
b
Por tanto, la recta de regresión es
y =5.5x +13.7
Para estimar el número casos de la enfermedad en el sexto día
sustituimos con x=6 en la recta de regresión.
y = 5.5(6) + 13.7 = 46.7
En el sexto día de la epidemia se estima que habrá 47 casos nuevos de
la enfermedad.
MÉTODO DE MÍNIMOS CUADRADOS
-3 -2 -1 1 2 3 4 5 6 7 8 9
-5
5
10
15
20
25
30
35
40
45
x
y
y=5,5x+13,7
(Dias)
(N° de casos)
Recta de regresión del ejemplo 2
MÉTODO DE MÍNIMOS CUADRADOS
|
.
|

\
|
÷ =
¿ ¿
= =
n
i
i
n
i
i
x m y
n
b
1 1
1
(5)
Si sustituimos (5) en (3)
¿ ¿ ¿ ¿ ¿ ¿
¿ ¿ ¿ ¿ ¿
= = = = = =
= = = = =
÷ =
(
¸
(

¸

÷
= |
.
|

\
|
÷ |
.
|

\
|
+ |
.
|

\
|
n
i
i
n
i
i
n
i
i i
n
i
n
i
i i
n
i
i
n
i
i i
n
i
n
i
i i
n
i
i
n
i
i
y x
n
y x x x
n
x m
y x x m y
n
x m x
1 1 1 1 1 1
2
1 1 1 1 1
2
1 1
1
2
1 1
2
1 1 1
2
1 1
2
1 1 1
1 1 1
2
1 1
2
1
1
1 1
|
.
|

\
|
÷
÷
=
|
.
|

\
|
÷
÷
=
÷ =
(
(
¸
(

¸

|
.
|

\
|
÷
¿ ¿
¿ ¿ ¿
¿ ¿
¿ ¿ ¿
¿ ¿ ¿ ¿ ¿
= =
= = =
= =
= = =
= = = = =
n
i
i
n
i
i
n
i
i
n
i
i
n
i
i i
n
i
i
n
i
i
n
i
i
n
i
i
n
i
i i
n
i
i
n
i
i
n
i
i i
n
i
i
n
i
i
x x n
y x y x n
x
n
x
y x
n
y x
m
y x
n
y x x
n
x m
MÉTODO DE MÍNIMOS CUADRADOS
Podemos utilizar el criterio de la segunda derivada para demostrar
que f(m,b) tiene un valor mínimo relativo para los valores de m y b
determinados por (5) y (6).
Demostremos que:
0
) , (
2
2
>
c
c
m
b m f
0
) , (
2
2
>
c
c
b
b m f
y
¿
=
+ + ÷ =
c
c
>
|
|
.
|

\
|
c c
c
÷
|
|
.
|

\
|
c
c
|
|
.
|

\
|
c
c
= A
n
i
i i i i
bx mx y x
m
b m f
b m
b m f
b
b m f
m
b m f
1
2
2
2
2
2
2
) ( 2
) , (
0
) , ( ) , ( ) , (
MÉTODO DE MÍNIMOS CUADRADOS
(6). y (5) ecuaciones las de y por os determinad valores
los para relativo mínimo un alcanza ) , ( entonces ,
) , (
y como
) , ( ) , ( ) , (
) , (
) , (
) (
) , (
) , (
2
b m
b m f
b
b m f
x x n x x n
b m
b m f
b
b m f
m
b m f
x
b m
b m f
n
b
b m f
b mx y
b
b m f
x
m
b m f
n
i
i
n
i
i
n
i
i
n
i
i
n
i
i
n
i
n
i
i i
n
i
i
0 0
0 2 4 2 4
2
0 2 1 2
2
0 2
2
2
1 1
2
2
1 1
2
2
2
2
2
2
2
1
2
1
2
2
1
1
2
2
2
>
c
c
> A
> A ¬
|
|
.
|

\
|
> ¬
|
|
.
|

\
|
÷
=
|
|
.
|

\
|
c c
c
÷
|
|
.
|

\
|
c
c
|
|
.
|

\
|
c
c
= A
=
c c
c
> = =
c
c
+ + ÷ =
c
c
> =
c
c
¿ ¿ ¿ ¿
¿
¿
¿
¿
= = = =
=
=
=
=
MÉTODO DE MÍNIMOS CUADRADOS
PROBLEMAS PROPUESTOS:
1.- Determine la recta de ajuste optimo a los puntos (0,1), (1,3), (2,2),
(3,4), (4,5) de acuerdo con el método de mínimos cuadrados.
Resp.: y = 0,9x + 1,2

2.- Si y = mx + b es la recta de ajuste optimo, en el sentido de los mínimos
cuadrados demuestre que la suma de las desviaciones es
nula.

3.- Pruebe que el punto se encuentra sobre la
recta y = mx + b determinada por el método de mínimos cuadrados .
(Es decir, la recta que da el punto optimo pasa por el centro de gravedad de n
puntos)
MÉTODO DE MÍNIMOS CUADRADOS