Benchmarks y electricidad

En mayor o menor detalle, los seres humanos dependemos mucho de la electricidad. Ayer viernes me tocó que se me fue la luz en el momento en que estaba restaurando un respaldo. Sí, tengo un No Break que le da poder a la PC y al router de internet, pero si del otro lado de la pared no hay electricidad, la conexión se cae.

Esto sucedió en el momento más complicado posible. Me encontraba restaurando un respaldo del sitio principal de un servidor cPanel. Es lo que suena: el sitio principal. Sin él, lo demás de ese servidor no funciona. Afortunadamente, el respaldo sigue trabajando en restaurarse porque está corriendo en un terminal en un datacenter.

Esto da una idea del uso de la electricidad, que va desde marcapasos, refrigeradores y los procesos de encendido de los automóviles, lo que hace años relacionábamos con baterías, bujías y “pastillas”.

A clientes míos les han cortado la luz dos veces por incidentes fuera de mi control. Una empresa no depositó pagos en otra, el cobro automático no funcionó, y la CFE fue a arrancar el medidor, literalmente tres semanas sin luz. El otro, por un cortocircuito bestial en Polanco causado por un elevador para coches, y el edificio estuvo sin luz una semana.

Los tokens, unidad de procesamiento de la IA, es algo parecido a la electricidad. Hay proveedores, hay un costo si te enchufas a ellos, pero no si te paras debajo de un foco en la calle. O mejor dicho, si te paras debajo del foco de la calle, lo paga el gobierno, no tú. Es algo parecido con los chats web.

La IA tiene un costo que no sabemos cuál es. Incluso proveedores como Anthropic u OpenAI no nos dicen el costo que pagamos, y tampoco sabemos el costo real. Es un secreto profesional. Recientemente han salido artículos sobre un problema de Anthropic y recibos de IA muy raros, literalmente algo parecido a pasarte horas tratando de entender qué pasó con el recibo de AWS.

El escribir este blog tiene varios beneficios, uno de ellos es asentar las limitaciones para no caer en los cantos de sirenas del marketing…. y de los benchmarks.

Quien paga los benchmarks ?

Por tu propio bien, considera los benchmarks de IA como marketing. “Elogio en boca propia es oprobio”.

Si Grok me da mal prepared statements de SQL, si Gemini ignora sus prompts (el caso del salario diario integrado), es igual o peor que Deepseek creando código funcional pero que debe ser fortalecido validando los posts de entrada. Por lo menos hace algo.

Siguiendo con el ejemplo de la electricidad: hace unos años me tocó un incidente de cobro monumental. Resulta que tenía dos departamentos juntos. En el de enfrente era zona de “jugar” de mis hijos de 9 y 12 años (niña y niño), y había un Xbox, una lavadora, una computadora y evidentemente una televisión para el Xbox.

Me llegó un recibo de luz un mes muy alto, aproximadamente de 7 veces lo que pagaba en el otro viviendo cuatro personas, incluyendo los dos menores de edad. ¿Qué pasó? Pues si pasas de un consumo te cobran diferente, algo similar a las tarjetas de crédito. Incidentalmente un día encendieron todo a la vez, y uno de los contactos de la luz se quemó. Así como el departamento tiene una cantidad disponible de luz, depende del suministro. Mientras tienes altos ingresos no tienes problema en pagar altas tarjetas de crédito, pero si te despiden, se retrasa el pago o lo que sea, la tarjeta de crédito te hace mucho daño.

No podemos entender fácilmente cuáles son las prioridades de la IA, ni de las personas. Por ejemplo, uno de mis clientes me pide revisar varias cosas, incluyendo su correo semi personal, y borrar spam. En uno de ellos hay un montón de correos marcados como spam por el cPanel, que vienen de un servidor .dev, de una persona que vende cursos en España… de IA. Pero llegan como spam. Y estoy seguro de que otro de mis clientes conoce a ese “streamer” o youtuber, y probablemente también va a dar a spam.

Los modelos de IA basados en agentes y tokens, o cobro por tokens, no es más eficiente. Es un subsidio. Sí, la frase no tiene mucho sentido , a menosque te des cuenta que alguien paga la electricidad. El datacenter se construye con un costo, y es posible que técnicas de marketing sea todo lo que tenemos enfrente. Sacan nuevos modelos, más mediocres, por marketing. Si no lo hicieran estarían en problemas. Pero cuando el nuevo modelo es más mediocre la gente deja de usarlos. Pasó con la New Coke, por reducción de costos cambiaron a algo que ya no sabía como la original.

Una de las casas que tengo es un departamento en la Ciudad de México, en una zona bien comunicada, no bonita pero segura. Hace unos años tenía dos coches y por lo que me enteré era el único que pagaba mantenimiento del equivalente de dos coches, y habían familias con cuatro coches y solo pagaban uno. Pero lo interesante es que hay zonas seguras que se puede comprar en CDMX y áreas cercanas, una pequeña casa o incluso un departamento feo (y no me refiero al mío, eh) por menos de lo que cuesta una camioneta del año.

Lo interesante es que varios de mis vecinos de esos de cuatro camionetas tienen a veces tres camionetas grandes que valen casi lo mismo que el departamento, si las juntamos. Y no lo pagan al contado. ¿Qué pasa cuando alguien se casa? Pues que no tiene bien inmueble porque lo gastó en un coche nuevo.

La relación con las LLM es que el marketing que lleva a veces a tener coches caros y no tener casa propia, te habla de usar modelos de punta y similares.

Pero…

Netflix en México creo que anda por 250 MXN en este momento. Mi teléfono por casa, con internet, me sale en 450 MXN en cada una. Yo no uso Netflix pero sí un streaming de 150 pesos llamado Viki.com, pero no tiene el menor sentido consumir tokens a través de Cursor pagando más de lo que pago de teléfono y streaming juntos. El costo Inicial es para usar un repositorio. Literalmente No puedes usar un repositorio si no pagas unasuscripción de Cursor. El segundo costo es por los tokens del LLM que elijas.

Muy parecido a pagar renta por el cable de la electricidad o de la lavadora.

El panorama de momento es que vivimos en casas que se nos puede ir la luz si se va al edificio, que el proveedor puede tener problemas y con conectarnos, pero los LLM y compañías relacionadas con ello tienen un problema muy fuerte porque no están fidelizando la marca. Están tratando de vender cosas inútiles o peligrosas, o mejor dicho rentártelas. Un ejemplo serían los centros de entretenimiento digitales en coches, que son peligrosos y distraen, o los botones que al no ser mecánicos dependen de algo digital. Usando el ejemplo de la película de Pacific Rim, de mechas gigantes, lo analógico tiene valor de supervivencia. Gipsy Danger puede hacer lo que Striker Eureka no puede.

Ayer viernes me comentó un conocido que los sueldos de México bajaron todavía más esta semana que pasó. Y que hay personas que quieren contratar un técnico de CCTV y soporte a computadoras por salario mínimo. Literalmente una baja de 30 a 50% en una semana. Literalmente trabajar en un Oxxo o call center paga más y con menos responsabilidades. Esto no puede seguir así.

A mí me tocó una temporada de 1995 a 2002 que me encontré con muchas personas de sistemas, tituladas, que no tenían idea de cosas básicas o sentido común. Y de 2022 a 2025 traté con unos 30 de servicio social de sistemas, y aunque tenían 90 a 100 de promedio, estaban menos preparados que yo a los 19 en 1991.

Un servicio de streaming te da más valor, o un teléfono con internet fijo, que lo que te da una suscripción a Cursor. Porque Cursor es una herramienta que se renta, al igual que Claude Code. Imagínate qué pasaría si los martillos tuvieran renta. Con los coches ya han tratado de poner cosas en servicios de suscripción. Yo puedo pero no lo hago. Pero mucha gente en Latam de plano no pueden. Cory Doctorow se refiere a este fenómeno en 2025 como “enshittification”.

Desde que era joven me sentía a veces el único adulto de la sala. Mi padre era un hombre inteligente pero a veces emocional, no lo cambiaría. Pero como en la serie Jane la Virgen, teníamos una relación rara, en el sentido de que era más frecuente que, a partir de mis 14 años, él me pidiera consejo a mí sobre algún problema. Sí, me preguntaba “¿cómo resolverías esto?” y si bien mi solución no era óptima y pudo ser un método de enseñanza, me volví independiente. Él tuvo problemas de salud medianamente fuertes a los 58 y murió, por otra cosa, a los 67, a pesar de tener una gran fuerza física, mayor que la mía. Y era inteligente, culto y demás. Pero le faltaba de repente el sentido común. Otro caso es que llevo casado unos 17 años, casi 18, y las relaciones de pareja de mi padre y de mi madre no fueron jamás de esa duración.

Así que me encuentro en un caso como cuando tenía 14 a 16 años. Leyendo La decadencia de Occidente de Spengler, o El hombre más rico de Babilonia de George Clason, parecía que sabía cosas que otros no, pero que eran en base a sentido común y ser el adulto de la sala. Desde siempre en México, en contexto de sueldos, no te conviene llevar coche del año, traje de 1000 USD o Fahrenheit / Hugo Boss. No te lo van a compensar y se sienten atacados. Ser el adulto de la sala no significa gastar poco, o ser austero. Esta es una idea interesante: en vez de maxxtoking (maximizar el uso de tokens), deberíamos ir a una austeridad de tokens. No digo dejar de usar la IA, sería en sistemas como trabajar sin luz.

De momento solo sé que no tiene el más mínimo sentido económico el manejo de agentes, lo que están haciendo las empresas, y se ve una campaña de marketing como dije. Y así como mi cliente recibe los correos del español como spam en su cPanel, hay otras cosas a considerar, pero hay que seguir de momento con los LLM y servicios gratuitos. Para muchas cosas no necesitas Uber Black si tienes metro, o como puse de ejemplo a unos desarrolladores en diciembre, de un curso que di: no usas un coche del año ni un tráiler de cuatro ejes para ir a comprar refrescos al Oxxo.

Comenté en otro lugar sobre problemas más allá del marketing. Hay que distinguir el bien del mal. Si el código no corre, no corre. Algunas veces mis programas antes de la IA no se usaban por una cosa u otra, aproximadamente el 50% de las veces. Pero me ha tocado ver mucho, y la experiencia de malos profesionales es que si premias a los inútiles, obtienes un montón. Yo sigo trabajando en lo mismo desde hace 35 años, y aunque repito la cantidad, es porque mi contexto es diferente.

Trato de usar lo que funciona, optimizar la memoria y saber que los tokens se pueden acabar. Conozco personas de 30 a 40 que se la pasan yendo de vacaciones a la playa cada tres o cuatro meses, y a veces más frecuente. Pero yo tenía casa propia a los 19 y otra más a los 25, por no irme a la playa.

Si revisas los Reddits sobre Grok y Gemini, la cosa está mal. Las personas ven que no funciona. Un bumerán que no regresa es palo. Office 1997, antes de la cinta (ribbon), funcionaba; mucho de lo actual no. Windows 7 funcionaba, Windows XP funcionaba, Windows 11 no. Un profesional se ciñe a lo que funciona, no a lo más moderno, y si el cliente te pide algo que no es buena idea o más caro, pues… tratas de protegerlo de sí mismo. Pero así como mis vecinos gastan en coches y no tienen casa, pagar bajos sueldos no te hace mejor. Pagas cacahuates y obtendrás monos.

Hacer que las cosas funcionen es lo que importa. Es un criterio interesante.

¿Funciona hoy?

No se trata de costo-beneficio, sino de ver la realidad. Es importante, y con los precios del servicio y dependencia de la IA, es un poco peligroso y frustrante ver eso. Solo puedes salvarte si eres un adulto en la sala.

Y con el panorama actual, eso implica ser el único adulto de la sala.

Related Posts

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *