Toutes les news taguées avec ce sujet.
Ollaya propose une approche inspirée d'Ollama pour exécuter localement des modèles de décision de type Jev, intégralement open source.
Un protocole de validation sépare la génération de candidats de l'autorité de release. Un LLM local de 4B est encadré par une porte logique externe scellée pour garantir la fiabilité des plans en commissionnement mécatronique.
Un outil pour simplifier l'installation de ROCm sous AMD et un benchmark comparant les backends Vulkan et HIP pour l'inférence LLM en local.
Installation en un clic pour exécuter un modèle de 27 milliards de paramètres sur du matériel grand public.