Búsqueda · 29 momentos en 13 episodios
Sara RobiscoJosé EdelsteinFrancis VillatoroHéctor SocasGastón Giribetopenai inicialmente código abiertochatgpt versiones hasta 3 abiertaschatgpt 3 5 parcialmente abiertoopenai demanda a deepseekmicrosoft patrocinador de openairumor copia por openaidestilación modelo deepseek microsoftentrenamiento con llama y char gptinvestigación microsoft sobre destilacióndestilación modelos lenguaje openaitécnicas destilación chatgpt restriccionespruebas gpt interfaz char gptOpenAIChatGPTDeepSeekSara RobiscoTPUsGPUsChinaFrancis VillatoroOpenIAGPTHéctor SocasLlamaDeepSyncMicrosoft
OpenAI inicialmente código abierto
Con
0:000:301:001:302:002:303:11
Héctor Socas explica cómo OpenAI inicialmente fue de código abierto, pero posteriormente cerró su acceso, y comenta sobre la evolución del modelo ChatGPT, donde las versiones hasta la 3 eran completamente abiertas.
…y por eso pues quizás han tenido que optimizar esos algoritmos. Es lo que ellos dicen, porque claro, eso habrá que verlo; porque uno no sabe, si bien es público los pesos y el software, uno no sabe cómo lo han entrenado, que al final es la clave en todo esto. OpenAI al principio era todo código abierto y luego lo fueron cerrando, pero los modelos de ChatGPT hasta 3 era todo abierto, creo que 3.5 empezaba a ser parcialmente; el 3.5 algunas cosas eran abiertas y otras no, que es un poco la situación en la que está DeepSeek. entonces claro, hay que verlo, hay gente que dice, hay un rumor por ahí en una leyenda urbana de que OpenAI le ha puesto una demanda porque dice que les han copiado, eso no es cierto lo que si es cierto que se ha dicho es que Microsoft en particular, que es uno de los grandes patrocinadores de OpenAI Microsoft está investigando; no es que hayan puesto una demanda, todavía no han llegado a ese punto, pero están investigando si se ha hecho una cosa que se llama destilar, que consiste en, digamos que tú haces preguntas y respuestas al otro modelo y usas eso para entrenar el tuyo. Sí, de hecho en el propio artículo lo dicen; ellos mismos dicen que han destilado, pero han destilado a Llama y hay otra que han destilado también; han destilado dos modelos de código abierto. Para esos códigos es legítimo, pero por ejemplo OpenIA no te permite hacer eso con ChatGPT, no está permitido por los términos de uso, entonces habrá que verlo, pero lo que está claro es que a mí me parece que es buenísimo, funciona maravillosamente bien, yo lo he estado probando y tengo algunos comentarios que no sé si tenemos tiempo, quizás sí podemos entrar un poquito en eso. A ver, de entrada se parece muchísimo a echar GPT hasta la interfaz, e incluso la forma en la que te responde Cierto A mí, yo la verdad que lo he estado probando bastante y me gusta. No he podido hacer pruebas sistemáticas porque tiene también una API, igual que con GPT hay una API que tú puedes usar para, yo uso; yo tengo la API de GPT, o sea pago por tener el acceso y…
Significado #1 · Palabras #1
Sara Robisco explica cómo DeepSeek, un modelo de lenguaje originario de China, no se desarrolló desde cero, sino basándose en modelos open source y papers publicados.
Habla: Sara RobiscoPalabras #11deepseek basado en open sourcemodelos lenguaje papers publicadosoptimización deepseek carrera…simple como un modelete, como una red de citar neuronal, una arquitectura y tira, no, es un poquito más complejo Entonces, ¿qué han hecho? ¿Por qué ahora ha salido? Pues esto es un poco la fuerza y tenemos que insistir en esto, la fuerza y la ventaja de tener Modelos open source porque esta gente no ha partido de cero. En DeepSync no sale de cero, lo que han hecho es que se han basado en más modelos que han ido saliendo en papers que se han publicado, en otros modelos de código abierto y ellos han estado mirando, comparando y en base a esto han generado su propio modelo al cual han aplicado optimización, lo que en la carrera. De informática, Francis, seguro que coincide, que se da en los primeros años: que es eficiencia de algoritmos, métodos de optimización, todo esto que es tan importante y que en las últimas décadas se nos ha olvidado. En las últimas décadas, por desgracia, en…
Sara Robisco reconoce el valor de DeepSeek como avance tecnológico y destaca la importancia de tener más modelos de código abierto para experimentar.
Habla: Sara RobiscoPalabras #2modelos código abierto experimentar sara robiscobenchmarks bancos de pruebas resultados…consumen menos, consumen menos electricidad, se calientan menos entonces también esas cosas tenemos que tenerlas en cuenta, está muy bien pero también tiene cositas que tenemos que tener muy en cuenta para darnos cuenta un poco de la realidad y la situación. Esto, sí, os digo que aunque diga estas cosas que sí es muy interesante y a mí me parece que es un avance y que tener más modelos de código abierto que podamos probar y jugar está interesante. Bueno, ahora vamos a hablar un poco de los resultados: le han puesto a trabajar en distintos benchmarks, que son bancos de pruebas ¿Y qué nos da? Deepseek solo habla inglés y chino, ¿vale? Y en inglés y chino se defiende muy bien; está al nivel de un chat GPT. ¿Por qué es recomendable, ellos os recomiendan, que hables con él en inglés o chino? Porque en otros tú le puedes hablar en español, sí, en…
Sara Robisco explica la importancia de tener modelos de código abierto como alternativa a sistemas cerrados como ChatGPT, destacando que esto refleja positivamente sobre el desarrollo tecnológico en China.
Habla: Sara RobiscoSignificado #6 · Palabras #3chatgpt modelo cerradoalternativa código abierto chinadesarrollo tecnológico en china…me parece interesante en este sentido se defiende francamente a niveles casi de prácticamente como ChatGPT como el último y tiene en las gráficas la verdad es que se le ve bien lo que pasa es que el tema es ya os digo coger un poquito con pinzas porque porque Eso, porque esto hasta que no lo reproduzcan, pero como todo o sea ChatGPT es un modelo cerrado. No tenemos tampoco nada con que comparar, pero sí que me parece importante eso: el que tenemos un modelo de código abierto ahora mismo disponible, que eso también dice mucho a favor de los chinos. Yo quiero hacer un par de comentarios porque he visto en medios de comunicación y por ahí que como además todo lo que nos llega está tan politizado que hay mucha controversia sobre que China ha hecho o ha dejado de hacer y tal. Y hay que tener en cuenta que…
Héctor Socas explica cómo OpenAI inicialmente fue de código abierto, pero posteriormente cerró su acceso, y comenta sobre la evolución del modelo ChatGPT, donde las versiones hasta la 3 eran completamente abiertas.
Habla: Héctor SocasSignificado #1 · Palabras #1openai inicialmente código abiertochatgpt versiones hasta 3 abiertaschatgpt 3 5 parcialmente abiertoopenai demanda a deepseekmicrosoft patrocinador de openairumor copia por openaidestilación modelo deepseek microsoftentrenamiento con llama y char gptinvestigación microsoft sobre destilacióndestilación modelos lenguaje openaitécnicas destilación chatgpt restriccionespruebas gpt interfaz char gpt…y por eso pues quizás han tenido que optimizar esos algoritmos. Es lo que ellos dicen, porque claro, eso habrá que verlo; porque uno no sabe, si bien es público los pesos y el software, uno no sabe cómo lo han entrenado, que al final es la clave en todo esto. OpenAI al principio era todo código abierto y luego lo fueron cerrando, pero los modelos de ChatGPT hasta 3 era todo abierto, creo que 3.5 empezaba a ser parcialmente; el 3.5 algunas cosas eran abiertas y otras no, que es un poco la situación en la que está DeepSeek. entonces claro, hay que verlo, hay gente que dice, hay un rumor por ahí en una leyenda urbana de que OpenAI le ha puesto una demanda porque dice que les han copiado, eso no es cierto lo que si es cierto que se ha dicho es que Microsoft en particular, que es uno de los grandes patrocinadores de OpenAI Microsoft está investigando; no es que hayan puesto una demanda, todavía no han llegado a ese punto, pero están investigando si se ha hecho una cosa que se llama destilar, que consiste en, digamos que tú haces preguntas y respuestas al otro modelo y usas eso para entrenar el tuyo. Sí, de hecho en el propio artículo lo dicen; ellos mismos dicen que han destilado, pero han destilado a Llama y hay otra que han destilado también; han destilado dos modelos de código abierto. Para esos códigos es legítimo, pero por ejemplo OpenIA no te permite hacer eso con ChatGPT, no está permitido por los términos de uso, entonces habrá que verlo, pero lo que está claro es que a mí me parece que es buenísimo, funciona maravillosamente bien, yo lo he estado probando y tengo algunos comentarios que no sé si tenemos tiempo, quizás sí podemos entrar un poquito en eso. A ver, de entrada se parece muchísimo a echar GPT hasta la interfaz, e incluso la forma en la que te responde Cierto A mí, yo la verdad que lo he estado probando bastante y me gusta. No he podido hacer pruebas sistemáticas porque tiene también una API, igual que con GPT hay una API que tú puedes usar para, yo uso; yo tengo la API de GPT, o sea pago por tener el acceso y…
Francis Villatoro explica el uso del aprendizaje con refuerzo en versiones recientes como la R1 y cómo OpenAI inicialmente evitó esta técnica debido a sus fracasos anteriores.
Habla: Francis VillatoroPalabras #7aprendizaje refuerzo versiones recientes r1fracaso aprendizaje refuerzo modelos lenguajeopenai evita aprendizaje refuerzo 2022…en otro contexto. Tienen gente muy fresca, con una enorme capacidad y con muy poco conocimiento de lo que ya se conoce para que sean muy creativos y generen cosas realmente muy nuevas que al final puedan tener éxito o no. Aquí lo que más se ha comentado es la versión esta R1 que utiliza aprendizaje con refuerzo El aprendizaje con refuerzo se ha estado usando en los últimos 15 años por cantidad de personas para entrenar este tipo de modelos de lenguaje y siempre ha sido un fracaso porque no eran lo suficientemente grandes y sorprendentemente, pues OpenAI, por ejemplo, no lo usaba porque decía, es que esto va a fallar, porque fallaba en 2022 con los modelos de lenguaje de 2022. Sin embargo, en 2023 ha pegado un salto de gigante y en 2024 lo tenemos en Dixit funcionando de escándalo. Y ha sido fundamentalmente el superar la barrera esa de los 500.000 millones de parámetros. Y luego otro tema muy interesante es que igual, que no son…
Francis Villatoro comenta sobre la serie de anuncios realizados por OpenAI en diciembre, destacando su frecuencia e irrelevancia inicial, pero mencionando la presentación del modelo O3.
Habla: Francis VillatoroPalabras #16anuncios irrelevantes openai diciembremodelo o3 de openaicomparación dixie con o1…cosas, ¿no? Francis quería comentar algo, pero espera, Francis, porque veo que tenemos a Gastón por aquí; vamos a irle dando paso. Venga, y lo presentas. A lo mejor quiere decir algo también, bueno, en lo que va entrando y ajustándose el audio y tal, vete. diciendo eso que quería Bueno, quería comentar que en diciembre hubo una serie de anuncios de OpenAI, era como un anuncio cada semana o así, o cada día Eran como un anuncio cada día, los primeros 20 días, muchos anuncios eran bastante chichinados, no decían nada pero eran cosas muy irrelevantes pero uno de los anuncios fue que ya tienen el modelo O3 no se puede llamar O2 por el tema de que hay una compañía que se llama O2 entonces saltan de lo 1 a lo 3 esta comparación de Dixie ha sido con O1 estoy escuchándome con eco probablemente alguien tiene el YouTube encendido y entonces claro O3 está ahí entonces si esto es un poquito mejor que O1 y en algunas cosas es un poquito peor, pero en la mayoría de las cosas es un poquito mejor y O3 era bastante por encima de lo que enseñaron, era publicidad, era un anuncio de estos de un vídeo de YouTube en el que ven las posibilidades de O3 y la gente se…
Héctor Socas explica su preferencia continua por el modelo GPT, destacando las ventajas de OpenAI más allá del campo de la inteligencia artificial, incluyendo su infraestructura tradicional.
Habla: Héctor SocasSignificado #11gpt modelo preferencia héctor socasventaja openai infraestructura tradicionaldeep sync vs openai informática…y bueno, íbamos a hablar de las reacciones de la bolsa, de otra gente y tal, pero antes quería comentar una cosa: a mí me parece que efectivamente, como dice Francis, la producción de OpenAI pues tiene cosas preparadas que va a ir sacando próximamente. Yo, con lo que hay ahora mismo, la razón por la que sigo usando el modelo GPT es por todo lo que le rodea; donde sí que hay una ventaja en OpenAI con respecto a DeepSync es la informática tradicional, quitando aparte lo de la inteligencia artificial y toda una serie de cosas que OpenAI ha ido construyendo alrededor por. ejemplo, el tema de que puedes crear estos asistentes que están especializados para ciertas tareas, yo esto lo uso mucho el tema de que ahora hace un par de semanas sacaron esta integración con tareas programadas, que me parece genial, que puedes programar…