Leña al mono que es de goma

LM1055 - IA en local (I)


Listen Later

### Palabras clave
DevonThink, inteligencia artificial local, LM Studio, modelos de lenguaje, rendimiento, Windows, macOS, GPU, NPU, M4, Ryzen, Mistral, Gema, DipSix, tokens por segundo, memoria RAM, conexión por red, JSON, automatización, resumen de documentos.
### Resumen del contenido
El texto detalla una serie de pruebas realizadas con inteligencia artificial local para integrarlas con DevonThink. Se describen diferentes modelos de lenguaje (como Gema 27B, Mistral 24B y DipSix 14B y 32B) ejecutados en equipos con distintas configuraciones: un Mac M4 y un PC con procesador Ryzen y 64 GB de RAM. Se destaca que el rendimiento del M4 es superior al del Ryzen debido a la optimización del uso de la GPU en macOS. Sin embargo, la NPU de macOS está reservada para funciones exclusivas de Apple.
En cuanto al rendimiento de los modelos:
- DipSix 14B se considera el más óptimo por su equilibrio entre uso de memoria (9 GB) y generación rápida de tokens.
- Los resultados varían según el sistema operativo y la configuración del hardware; los modelos más grandes generan respuestas más completas pero requieren más recursos.
Se menciona que DevonThink puede conectarse a estos modelos mediante servidores locales usando protocolos como JSON para automatizar tareas como resumir documentos PDF o páginas web. Aunque los resúmenes generados son generalmente buenos, algunos modelos más pequeños tienden a inventar datos.
Finalmente, se exploran opciones de integración con servicios en la nube como Claude y Perplexity AI para ampliar las capacidades de DevonThink. La intención es optimizar el uso de inteligencia artificial local y decidir entre seguir pagando servicios externos o depender completamente de soluciones locales.
---
Respuesta de Perplexity: pplx.ai/share (dejado a propósito)
...more
View all episodesView all episodes
Download on the App Store

Leña al mono que es de gomaBy rfog


More shows like Leña al mono que es de goma

View all
Mahjong en 10 minutos by Javier Fernandez

Mahjong en 10 minutos

0 Listeners

Emilcar Daily by Emilcar

Emilcar Daily

24 Listeners

iSenaCode Live by Sergio Navas

iSenaCode Live

84 Listeners

Podcast WINTABLET.INFO by Javier Fernandez

Podcast WINTABLET.INFO

0 Listeners

Applelianos by Applelianos

Applelianos

53 Listeners

Monos del Espacio by Monos del Espacio

Monos del Espacio

1 Listeners

Reflex Podcast by Carlos Castillo Fotografo

Reflex Podcast

2 Listeners

Las Charlas de Applesfera by Applesfera

Las Charlas de Applesfera

37 Listeners

Papá Friki by Papá Friki

Papá Friki

1 Listeners

Apple Coding Daily by Julio César Fernández Muñoz

Apple Coding Daily

24 Listeners

Relfon daily podcast by Relfon

Relfon daily podcast

0 Listeners

Loop Infinito (by Applesfera) by Applesfera

Loop Infinito (by Applesfera)

56 Listeners

El Mancuentro by Mancuentro Patal

El Mancuentro

0 Listeners

Frente al Cliente by José FrenteAlCliente

Frente al Cliente

0 Listeners

monos estocásticos by Antonio Ortiz, Matías S. Zavia

monos estocásticos

1 Listeners