Unidad 2 - Taller 5: el proyecto que nadie preguntó

Taller práctico evaluable · Semana 5 · 06278-ECO

Autor/a

PhD. Eduard F. Martínez-González

1 Instrucciones generales

El caso: Andina Cowork, una red de 12 sedes de coworking en el suroccidente colombiano, te contrata como su primer analista. La gerente general te recibe con esta frase:

“Quiero entender por qué la gente cancela la membresía. Tenemos toneladas de datos, mire a ver qué encuentra.”

Te dan acceso a la base de socios: check_ins (ingresos a la sede por mes), historial_pagos, plan (Básico/Plus/Premium), edad, sede, antiguedad_meses, reclamos, y cancelo (sí/no) para los socios de los últimos tres años.

Y te dan dos cifras del negocio:

$80.000cuesta conseguir un socio nuevo que reemplace al que se fue
$25.000cuesta la llamada + mes gratis de retención (funciona el 50% de las veces)

Tu trabajo hoy no es modelar nada. Es hacer lo que el 87% de los proyectos no hizo: convertir esa frase en un proyecto que sirva.

Cómo funciona este taller

  • Es individual y evaluable, y se desarrolla en el tiempo restante de la clase (⏱️ diseñado para ≈ 45 minutos).
  • Se resuelve sin la guía del profesor: todo lo necesario está en este documento, en la práctica y en la teoría. El profesor solo atiende dudas logísticas.
  • Hoy no se abre RStudio. El entregable es un documento.

El entregable es un archivo: 📄 apellido_nombre_taller5.pdf (o .docx), con los seis puntos numerados y titulados. Se entrega en el espacio habilitado en Intu antes de terminar la clase.

Advertencia

Reglas de juego (la rúbrica las aplica)

  1. Respuestas cortas y concretas. Ningún punto necesita más de 5 líneas. Se evalúa el criterio, no la extensión: un párrafo largo que no decide nada vale menos que dos líneas que sí.
  2. Todo número que uses, úsalo. Si mencionas los $80.000, di qué se sigue de ellos. Citar una cifra sin sacarle una conclusión no suma.
  3. Nada de “depende”. Este taller se trata de tomar posiciones y defenderlas. Una respuesta ambigua se califica como respuesta en blanco.
  4. Uso de IA: ⚠️ restringido esta semana. Puedes usarla para aclarar un concepto de la teoría (qué es recall, qué hace un Data Engineer). No para formular la pregunta, elegir la tarea, decidir la métrica ni redactar el mensaje de negocio: eso es exactamente la postura de negocio que el taller evalúa, y construirla es tuyo. Declaración obligatoria al final.

Distribuye tu tiempo: P1 ≈ 8 min · P2 ≈ 7 min · P3 ≈ 8 min · P4 ≈ 10 min · P5 ≈ 6 min · P6 ≈ 6 min.

2 Punto 1 — La pregunta (1.0 punto)

  1. La frase de la gerente falla los tres criterios de una buena pregunta de negocio. Explica en una línea por cada uno por qué falla (específica / accionable / medible).
  2. Reformúlala en una pregunta de negocio que sí sirva. Debe caber en un renglón.
  3. Aplícale el test de la pregunta a tu reformulación: si te dieran la respuesta ahora mismo, ¿qué haría la gerente distinto mañana? Sé literal — nombra la acción.

⚠️ El error más frecuente en este punto: reformular hacia otra pregunta igual de vaga (“¿qué factores influyen en la cancelación?”). Si tu pregunta admite un ensayo como respuesta en vez de una lista de socios, un número o unos grupos, vuelve a intentarlo.

3 Punto 2 — La tarea analítica (1.0 punto)

  1. ¿Qué tarea analítica es tu pregunta reformulada? (clasificación / predicción / segmentación / anomalías / optimización)
  2. Justifícala con la pregunta del target: ¿existe en esta base una columna con la respuesta correcta? ¿Cuál es? ¿Eso la vuelve supervisada o no supervisada?
  3. ¿Cuál es el output concreto que produciría el análisis? (una etiqueta, un número, unos grupos, una lista…) Y en una línea: quién usa ese output y para qué.

4 Punto 3 — El proceso (1.0 punto)

Para tres etapas del proceso analítico, di qué harías en este caso concreto (no la definición general de la etapa — lo que harías tú con los datos de Andina Cowork):

  1. Etapa 2 (Datos): ¿qué te falta? Nombra un dato interno que no está en la lista y que pedirías, y un dato externo que ayudaría. Justifica en media línea cada uno.
  2. Etapa 3 (Limpieza): nombra dos problemas de calidad que esperarías encontrar en esta base específica y qué harías con cada uno. Pista: mira los tipos de variable de la lista y piensa qué suele salir mal en cada uno.
  3. Etapa 4 (EDA): propón dos hallazgos que te gustaría verificar antes de modelar, y di cuál gráfico de los que ya sabes hacer usarías para cada uno (semana 4).

5 Punto 4 — La métrica y el costo del error (1.0 punto)

Este es el punto que separa a un analista de un ejecutor. Trabaja con las dos cifras del caso.

  1. Define en este caso qué es un falso negativo y qué es un falso positivo. Sé concreto: describe al socio de carne y hueso en cada caso.
  2. ¿Cuánto cuesta cada uno de los dos errores? Usa las cifras del negocio y explica tu cuenta en una línea.
  3. Dada esa asimetría, ¿priorizarías recall o precision? Justifícalo con tus números, no con la definición del libro.
  4. La vuelta de tuerca: la gerente te avisa que el incentivo ya no será un mes gratis sino un plan Premium de tres meses, que le cuesta a la empresa $210.000 por socio. ¿Cambia tu respuesta en (c)? Muestra la cuenta que lo justifica.

Pista de calidad: el literal (d) no es un truco. Es la lección central de la semana puesta a prueba — la métrica (y a veces la campaña entera) sale de la cuenta del negocio, y cuando el negocio cambia hay que rehacer la cuenta hasta el final, no solo cambiar una palabra. Si tu respuesta en (d) es la misma que en (c) sin una cuenta nueva que la respalde, no leíste la cifra.

6 Punto 5 — El mensaje de negocio (0.5 puntos)

Tu equipo terminó el modelo. El resultado técnico es este:

“El modelo alcanzó un recall de 0.72 y una precision de 0.55 en el conjunto de test, contra un baseline de 0.50. Identifica 400 socios en riesgo de cancelar el próximo mes.”

La gerente tiene 90 segundos y no sabe qué es un recall.

  1. Reescribe ese resultado como un mensaje de negocio de máximo 3 líneas. Debe tener los tres elementos: un número que ella entienda, el costo-beneficio, y una acción recomendada.
  2. En una línea: ¿por qué la frase técnica original, siendo verdadera, es inútil para ella?

Pista para la cuenta: tienes los 400 socios, el 50% de efectividad del incentivo, los $25.000 que cuesta y los $80.000 que cuesta reemplazar a un socio. Con eso se arma un número en pesos. No necesitas más.

7 Punto 6 — Tu proyecto (0.5 puntos)

Cierra con la ficha de la pregunta de tu grupo — la que trabajaron en el Bloque 3 de la práctica. Este punto es el insumo directo de la Entrega 1 del proyecto final, así que escríbelo en serio:

Nuestra pregunta: ¿____________________?

La decisión que cambia: ______________ (quién) va a decidir ______________.

El costo de equivocarse: ____________________.

La tarea analítica: ______________, porque ______________.

Los datos que necesitaríamos: ____________________.

Se evalúa que los cinco espacios estén respondidos con contenido real (no muletillas). La calidad de la pregunta como tal se evalúa en la Entrega 1, no aquí: hoy se evalúa que hayas hecho el ejercicio.

8 Rúbrica de evaluación

Se evalúa criterio, no extensión. Una respuesta que no toma posición (“depende del contexto”) se califica como no respondida. La coherencia interna cuenta: si en el P2 dijiste “segmentación”, el P4 tiene que ser consistente con esa decisión.
Punto Qué se evalúa Puntos
1. La pregunta Diagnóstico de los tres criterios (0.3); reformulación específica, accionable y medible (0.4); test aplicado con una acción concreta nombrada (0.3) 1.0
2. La tarea Tarea correcta y coherente con la pregunta propia (0.4); justificación vía target + supervisado/no supervisado (0.4); output y su usuario (0.2) 1.0
3. El proceso Datos faltantes interno + externo, justificados (0.3); dos problemas de calidad de esta base con su tratamiento (0.4); dos hallazgos con el gráfico adecuado (0.3) 1.0
4. Métrica y costo FN y FP bien definidos en el caso (0.2); costo de cada error con la cuenta (0.3); recall vs. precision justificado con números propios (0.3); la vuelta de tuerca resuelta con cuenta (0.2) 1.0
5. Mensaje Mensaje con número, costo-beneficio y acción (0.35); por qué la frase técnica es inútil (0.15) 0.5
6. Tu proyecto Ficha completa con contenido real en los cinco espacios 0.5
Total 5.0

9 Declaración de uso de IA

Cierra tu documento con este bloque diligenciado (obligatorio, aunque sea para decir que no la usaste):

============================================
DECLARACIÓN DE USO DE IA
Herramienta y modelo usados: _______________ (o "No usé IA")
La usé para: ____________________
Verifiqué por mi cuenta: ____________________
============================================

La política de esta semana es más estricta que de costumbre, y por una razón: en el taller de la semana 4 la IA podía escribirte una línea de dplyr y el aprendizaje seguía siendo tuyo. Hoy el taller es el juicio de negocio — la pregunta, la métrica, el mensaje. Si eso lo escribe la IA, no queda nada que aprender. En la semana 8 le daremos la vuelta al asunto: la IA hará el análisis completo y tu trabajo será auditarlo. Para auditar, primero hay que saber decidir.