Búsqueda · 29 momentos en 17 episodios
Sara RobiscoJosé EdelsteinFrancis VillatoroHéctor SocasGastón Giribetdestilación modelos lenguaje openaitécnicas destilación chatgpt restriccionespruebas gpt interfaz char gptintegración modelo python programasexperimentos sistematizados comparan modelosgpt api acceso pagoautomatización tareas con gptapi deepseek compatible con gptadaptación trivial programas gptpágina web deepseek caída mantenimientoregistro requerido para acceder deepseekDeepSeekGPTHéctor SocasChat GPTNintendoYouTubeAPIPythonOpenIAChatGPTLlamaCoffee Break: Señal y RuidoChinaOpenAITPUGPUSara RobiscoDeepSync
API de GPT sin explotar
Con
0:000:301:001:302:002:303:11
Héctor Socas explica cómo está experimentando con DeepSeek y destaca una característica importante: su API es compatible con la de GPT.
…y respuestas al otro modelo y usas eso para entrenar el tuyo. Sí, de hecho en el propio artículo lo dicen; ellos mismos dicen que han destilado, pero han destilado a Llama y hay otra que han destilado también; han destilado dos modelos de código abierto. Para esos códigos es legítimo, pero por ejemplo OpenIA no te permite hacer eso con ChatGPT, no está permitido por los términos de uso, entonces habrá que verlo, pero lo que está claro es que a mí me parece que es buenísimo, funciona maravillosamente bien, yo lo he estado probando y tengo algunos comentarios que no sé si tenemos tiempo, quizás sí podemos entrar un poquito en eso. A ver, de entrada se parece muchísimo a echar GPT hasta la interfaz, e incluso la forma en la que te responde Cierto A mí, yo la verdad que lo he estado probando bastante y me gusta. No he podido hacer pruebas sistemáticas porque tiene también una API, igual que con GPT hay una API que tú puedes usar para, yo uso; yo tengo la API de GPT, o sea pago por tener el acceso y poder desde programas hacer llamadas y lo que quiere decir la API es que tú puedes en tu programa, tú puedes hacer un programa en Python por ejemplo que le haga automáticamente, que automatice tareas, le haga una llamada al modelo de GPT y recoja su respuesta y eso tú lo integres en tu programa, entonces de esa forma está bien porque puedes sistematizar los experimentos. O sea, una cosa es poner ahí una preguntita en un prompt, pero realmente para comparar modelos y tal, tienes que hacer experimentos. Claro, tiene que ser sistemático, tienes que repetirlo muchas veces, hacer estadística de los resultados y tal. Entonces eso lo hago con una API. Resulta que vi y me pareció chulísimo que DeepSeek, una de las cosas guays que ha hecho es que ha hecho su API compatible con la de GPT, o sea que si tú tienes un programa que use GPT en principio es trivial de adaptarlo para que use la de. DeepSeek. Entonces lo estuve intentando pero lleva desde ayer caída; bueno, caída está cerrada por mantenimiento la página, o sea ellos dicen que sí que tienen su app y que puedes acceder y tal y de hecho he estado mirando la documentación ya me he hecho el programa y todo pero tienes que digamos que apuntarte, tienes que registrarte que Te den la clave y tal, y esa página lleva desde ayer por la mañana en mantenimiento. Entonces, claro, yo me imagino que les debe haber venido una avalancha de peticiones de repente de todo el mundo. Esto se ha hecho tan viral que está todo el mundo queriendo…
Significado #1 · Palabras #2
Sara Robisco explica que los modelos ChatGPT utilizan TPUs en lugar de GPUs, lo que implica un menor consumo eléctrico y una menor generación de calor.
Habla: Sara RobiscoSignificado #8chatgpt usa tpus no gpustpus chatgpt menor consumo eléctricomodelos chatgpt generan menos calorsarah robisco modelos chatgpt…pero si tenemos en cuenta que estas horas de entrenamiento han sido con GPUs más baratas y de menor consumo que el último modelo que están usando otra gente, pues bueno, sí que parece tener un ahorro, pero también os digo: estamos comparando GPU contra GPU. que pasa que muchos de estos modelos ChatGPT usa TPUs, no usa GPUs, entonces que consumen menos, consumen menos electricidad, se calientan menos entonces también esas cosas tenemos que tenerlas en cuenta, está muy bien pero también tiene cositas que tenemos que tener muy en cuenta para darnos cuenta un poco de la realidad y la situación. Esto, sí, os digo que aunque diga estas cosas que sí es muy interesante y a mí me parece que es un avance y que tener más modelos de código abierto que podamos probar y jugar está interesante. Bueno, ahora vamos a hablar un poco de los resultados: le han…
Héctor Socas explica cómo OpenAI inicialmente fue de código abierto, pero posteriormente cerró su acceso, y comenta sobre la evolución del modelo ChatGPT, donde las versiones hasta la 3 eran completamente abiertas.
Habla: Héctor SocasSignificado #18openai inicialmente código abiertochatgpt versiones hasta 3 abiertaschatgpt 3 5 parcialmente abierto…y por eso pues quizás han tenido que optimizar esos algoritmos. Es lo que ellos dicen, porque claro, eso habrá que verlo; porque uno no sabe, si bien es público los pesos y el software, uno no sabe cómo lo han entrenado, que al final es la clave en todo esto. OpenAI al principio era todo código abierto y luego lo fueron cerrando, pero los modelos de ChatGPT hasta 3 era todo abierto, creo que 3.5 empezaba a ser parcialmente; el 3.5 algunas cosas eran abiertas y otras no, que es un poco la situación en la que está DeepSeek. entonces claro, hay que verlo, hay gente que dice, hay un rumor por ahí en una leyenda urbana de que OpenAI le ha puesto una demanda porque dice que les han copiado, eso no es cierto lo que si es cierto que se ha dicho es que Microsoft en particular, que es…
Héctor Socas explica cómo está experimentando con DeepSeek y destaca una característica importante: su API es compatible con la de GPT.
Habla: Héctor SocasSignificado #1 · Palabras #2destilación modelos lenguaje openaitécnicas destilación chatgpt restriccionespruebas gpt interfaz char gptintegración modelo python programasexperimentos sistematizados comparan modelosgpt api acceso pagoautomatización tareas con gptapi deepseek compatible con gptadaptación trivial programas gptpágina web deepseek caída mantenimientoregistro requerido para acceder deepseek…y respuestas al otro modelo y usas eso para entrenar el tuyo. Sí, de hecho en el propio artículo lo dicen; ellos mismos dicen que han destilado, pero han destilado a Llama y hay otra que han destilado también; han destilado dos modelos de código abierto. Para esos códigos es legítimo, pero por ejemplo OpenIA no te permite hacer eso con ChatGPT, no está permitido por los términos de uso, entonces habrá que verlo, pero lo que está claro es que a mí me parece que es buenísimo, funciona maravillosamente bien, yo lo he estado probando y tengo algunos comentarios que no sé si tenemos tiempo, quizás sí podemos entrar un poquito en eso. A ver, de entrada se parece muchísimo a echar GPT hasta la interfaz, e incluso la forma en la que te responde Cierto A mí, yo la verdad que lo he estado probando bastante y me gusta. No he podido hacer pruebas sistemáticas porque tiene también una API, igual que con GPT hay una API que tú puedes usar para, yo uso; yo tengo la API de GPT, o sea pago por tener el acceso y poder desde programas hacer llamadas y lo que quiere decir la API es que tú puedes en tu programa, tú puedes hacer un programa en Python por ejemplo que le haga automáticamente, que automatice tareas, le haga una llamada al modelo de GPT y recoja su respuesta y eso tú lo integres en tu programa, entonces de esa forma está bien porque puedes sistematizar los experimentos. O sea, una cosa es poner ahí una preguntita en un prompt, pero realmente para comparar modelos y tal, tienes que hacer experimentos. Claro, tiene que ser sistemático, tienes que repetirlo muchas veces, hacer estadística de los resultados y tal. Entonces eso lo hago con una API. Resulta que vi y me pareció chulísimo que DeepSeek, una de las cosas guays que ha hecho es que ha hecho su API compatible con la de GPT, o sea que si tú tienes un programa que use GPT en principio es trivial de adaptarlo para que use la de. DeepSeek. Entonces lo estuve intentando pero lleva desde ayer caída; bueno, caída está cerrada por mantenimiento la página, o sea ellos dicen que sí que tienen su app y que puedes acceder y tal y de hecho he estado mirando la documentación ya me he hecho el programa y todo pero tienes que digamos que apuntarte, tienes que registrarte que Te den la clave y tal, y esa página lleva desde ayer por la mañana en mantenimiento. Entonces, claro, yo me imagino que les debe haber venido una avalancha de peticiones de repente de todo el mundo. Esto se ha hecho tan viral que está todo el mundo queriendo…
Héctor Socas describe su uso habitual de GPT para comprender papers técnicos complejos, formulando preguntas sobre temas desconocidos.
Habla: Héctor SocasSignificado #11gpt para comprender papers técnicospreguntas a gpt sobre temas desconocidoshector socas usa gpt en papers…cuando algo nuevo nos encandila más la novelería que decimos en Canarias, pero es que me resulta, me gustan más las respuestas, no sé si será percepción porque es subjetivo, hasta que no pueda experimentar pero me da la impresión de que las explicaciones que Te da, o sea con GPT tengo el problema de que si por ejemplo le doy un paper y le pregunto cosas, que es uno de los usos que le suelo dar, sobre todo en papers que son de un tema que no es el mío y no me entero de nada. Voy leyendo el paper y le voy haciendo preguntas de cosas que un experto sabe y tú no sabes, y te las va explicando. EPT tiende a ser muy condescendiente; te trata como un tontito, como un niño pequeño. Está muy bien, es muy amable y entonces te da respuestas muy genéricas y cuesta un poco arrancarle algo un poco más técnico o sea, tienes que sacarle con cuchara. Debe estar…
Héctor Socas agradece a los oyentes su compañía e introduce la segunda parte del episodio número 497 de Coffee Break, donde se analizará el modelo de lenguaje DeepSeek, originario de China pero financiado por un fondo de inversión.
Habla: Héctor SocasSignificado #9 · Palabras #7modelo lenguaje deepseek chinaapi deepseek coste openaifondo inversión deepseek empresa chinarecursos modelo deepseek…allí para seguir. Vamos a seguir la conversación sobre este y otros temas muy interesantes que tenemos a continuación, y si no nos despedimos hasta la semana que viene. Pero venga, vuelvan con nosotros; búsquenos en el podcast. Hasta ahora, chau, chau, chau. Gracias por seguirnos acompañando o por seguir acompañándonos, como prefieran. Empezamos aquí la cara B de este episodio número 497 de Coffee Break, que empieza a acercarse a un número bastante redondo y vamos a seguir destripando un poco este gran modelo de lenguaje DeepSeek, que nos viene de China, aunque insisto, no del gobierno chino, de una empresa, una empresa china, de un fondo de inversión. Estas cosas son caras, aunque se ha dicho y es importante resaltarlo, que es más barato; efectivamente, la API de hecho es como menos de la décima parte de lo que cuesta la de OpenAI, la de GPT es mucho más barato y también parece, en principio, por lo que sabemos, que cuesta también menos recursos correr este modelo. Vamos a seguir hablando de esto; vamos a ser bien pensados y vamos a asumir que está todo correcto, o sea, que estas sospechas que hay de haber estado destilando cosas que no deberían son infundadas. Sam Altman, por cierto, el CEO de OpenAI en su línea…
Héctor Socas explica su preferencia continua por el modelo GPT, destacando las ventajas de OpenAI más allá del campo de la inteligencia artificial, incluyendo su infraestructura tradicional.
Habla: Héctor SocasSignificado #10gpt modelo preferencia héctor socasventaja openai infraestructura tradicionaldeep sync vs openai informática…y bueno, íbamos a hablar de las reacciones de la bolsa, de otra gente y tal, pero antes quería comentar una cosa: a mí me parece que efectivamente, como dice Francis, la producción de OpenAI pues tiene cosas preparadas que va a ir sacando próximamente. Yo, con lo que hay ahora mismo, la razón por la que sigo usando el modelo GPT es por todo lo que le rodea; donde sí que hay una ventaja en OpenAI con respecto a DeepSync es la informática tradicional, quitando aparte lo de la inteligencia artificial y toda una serie de cosas que OpenAI ha ido construyendo alrededor por. ejemplo, el tema de que puedes crear estos asistentes que están especializados para ciertas tareas, yo esto lo uso mucho el tema de que ahora hace un par de semanas sacaron esta integración con tareas programadas, que me parece genial, que puedes programar…
Héctor Socas lamenta la falta de aplicaciones externas a la web Chat GPT, destacando el potencial sin explotar de la API de GPT.
Habla: Héctor SocasSignificado #2 · Palabras #1api de gpt sin explotarjuego nintendo usa gptgpt en juego de rol…es la misma, pero digamos que son añadidos de informática tradicional que se le han puesto alrededor y que son muy útiles; y eso va. Y es lo que yo todavía, por cierto, hago un inciso para decir que es lo que sigo echando de menos en todos estos desarrollos. Me falta que, por ejemplo, que GPT salga de la web, que salga de Chat GPT. O sea, que tengan la API. O sea, ¿por qué no está todo lleno de aplicaciones? Hace poco alguien comentaba en el chat de YouTube, que efectivamente, además yo lo he visto, hay un juego de Nintendo que usa GPT para hacer las conversaciones con los personajes. O sea, cuando interactúas con un personaje del juego, te responde siguiendo, o sea, usa GPT para generar las respuestas, ese tipo de cosas, ¿no? Hace poco vi que hay un juego de rol; digo, bueno, pues ya estábamos tardando, o sea, hay un montón de posibilidades ahí para explorar y que todavía no se están explorando, ¿no? Yo creo que la primera gran revolución que van a tener estos modelos va a ser como nuestro asistente virtual. La posibilidad de tener un secretario que te ayuda a hacer toda la gestión y todas las cosas, o sea, faltará integrar esto con el mail y yo a esto,…