Idea de la

Regresión Lineal Simple

Machine Learning A-Z © SuperDataScience

 Tipos de Variables

Machine Learning A-Z © SuperDataScience

 Tipos de Variables
Variables

Categóricas Numéricas

Nominales Ordinales Discretas Continuas

Hombre, Mujer Pequeño, Mediano, Grande 1, 2, 3 empleados Edad

Rojo, Verde, Azul A, B, C (notas) 568 personas Altura

Machine Learning A-Z © SuperDataScience

 Regresiones

Machine Learning A-Z © SuperDataScience

 Regresiones

En estadística, se llama análisis de la regresión al proceso estadístico de

estimar las relaciones que existen entre variables.
…
Se centra en estudiar las relaciones entre una variable dependiente de una o
más variables independientes.

-Wikipedia

Machine Learning A-Z © SuperDataScience

 Regresiones

Lineal Logística

Regresión Regresión
Regresión Regresión
Logística Logística
Lineal Simple Lineal Múltiple
Simple Múltiple

Machine Learning A-Z © SuperDataScience

 Regresiones
Constante Coeficiente

Regresión y = b0 + b1*x1
Lineal Simple

Variable Dependiente (VD) Variable Independiente (VI)

Variable Dependiente (VD) Variables Independientes (VIs)

Regresión y = b0 + b1*x1 + b2*x2 + … + bn*xn

Lineal Múltiple

Constante Coeficientes

Machine Learning A-Z © SuperDataScience

 Regresiones
Regresión Lineal Simple

Sueldo ($) y = b0 + b1*x

+10k Sueldo = b0 + b1 *Experiencia

30k

+1yr Experiencia

Machine Learning A-Z © SuperDataScience

 Método de los Mínimos
Cuadrados

Machine Learning A-Z © SuperDataScience

 Método de los Mínimos Cuadrados
Regresión Lineal Simple yi

Sueldo ($)
yî

Experiencia

Machine Learning A-Z © SuperDataScience

 R Cuadrado

Machine Learning A-Z © SuperDataScience

 R Cuadrado
Regresión Lineal Simple: yi

Sueldo ($)
yî

Experiencia

Machine Learning A-Z © SuperDataScience

 R Cuadrado
Regresión Lineal Simple: yi

Sueldo ($)
yî

Experiencia

Machine Learning A-Z © SuperDataScience

 R Cuadrado
Regresión Lineal Simple: SSres=
Sueldo ($)
SStot=

SSres
R2 = 1 - SStot

Experiencia

Machine Learning A-Z © SuperDataScience

 R2 Adjustado

Machine Learning A-Z © SuperDataScience

 R2 Adjustado
Regresión Lineal Simple: SSres=
Sueldo ($)
SStot=

SSres
R2 = 1 - SStot

Experiencia

Machine Learning A-Z © SuperDataScience

 R2 Adjustado
Regresión Lineal Simple:

Sueldo ($)

yavg
SSres
R2 = 1 - SStot

Experiencia

Machine Learning A-Z © SuperDataScience

 R2 Adjustado
SSres
R2 = 1 - R2 – Bondad de Ajuste
SStot (cuanto más grande mejor)

y = b0 + b1*x1 Problema:

y = b0 + b1*x1 + b2*x2 + b3*x3

SSres-> Min R2 nunca va a decrecer!

Machine Learning A-Z © SuperDataScience

 R2 Adjustado
SSres
R2 = 1 - SStot

n–1
Adj R2 = 1 – (1 – R2) n–p–1

p - número de variables regresoras

n – tamaño de la muestra

Machine Learning A-Z © SuperDataScience