home.social

#local_llm — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #local_llm, aggregated by home.social.

  1. 6 моделей, 3 инфраструктурных задачи, 1 локальный AI-агент

    В прошлой статье было показано, что обычный MacBook Pro M2 16GB может с оговорками решать инфраструктурные проблемы используя локальную LLM. В этой статье будут показаны результаты решения более сложных инфраструктурных задач на более тяжеловесных моделях. Мой личный выбор - Qwen3.6-35-A3B для проблем, которые сформулированы общими словами, Gemma4-26B-A4B - для чётко описанных проблем . Далее обо всём этом подробнее.

    habr.com/ru/articles/1037082/

    #mlx #llmагент #local_llm #local_ai #agent #local_agent

  2. 6 моделей, 3 инфраструктурных задачи, 1 локальный AI-агент

    В прошлой статье было показано, что обычный MacBook Pro M2 16GB может с оговорками решать инфраструктурные проблемы используя локальную LLM. В этой статье будут показаны результаты решения более сложных инфраструктурных задач на более тяжеловесных моделях. Мой личный выбор - Qwen3.6-35-A3B для проблем, которые сформулированы общими словами, Gemma4-26B-A4B - для чётко описанных проблем . Далее обо всём этом подробнее.

    habr.com/ru/articles/1037082/

    #mlx #llmагент #local_llm #local_ai #agent #local_agent

  3. 6 моделей, 3 инфраструктурных задачи, 1 локальный AI-агент

    В прошлой статье было показано, что обычный MacBook Pro M2 16GB может с оговорками решать инфраструктурные проблемы используя локальную LLM. В этой статье будут показаны результаты решения более сложных инфраструктурных задач на более тяжеловесных моделях. Мой личный выбор - Qwen3.6-35-A3B для проблем, которые сформулированы общими словами, Gemma4-26B-A4B - для чётко описанных проблем . Далее обо всём этом подробнее.

    habr.com/ru/articles/1037082/

    #mlx #llmагент #local_llm #local_ai #agent #local_agent

  4. 6 моделей, 3 инфраструктурных задачи, 1 локальный AI-агент

    В прошлой статье было показано, что обычный MacBook Pro M2 16GB может с оговорками решать инфраструктурные проблемы используя локальную LLM. В этой статье будут показаны результаты решения более сложных инфраструктурных задач на более тяжеловесных моделях. Мой личный выбор - Qwen3.6-35-A3B для проблем, которые сформулированы общими словами, Gemma4-26B-A4B - для чётко описанных проблем . Далее обо всём этом подробнее.

    habr.com/ru/articles/1037082/

    #mlx #llmагент #local_llm #local_ai #agent #local_agent

  5. Локальный агент для диагностики инфраструктуры

    В статье описаны результаты, которые получил в поисках ответа на вопрос "можно ли решать реальные задачи диагностики и исправления проблем инфраструктуры на слабом MacBook в агентском режиме (да, но)".

    habr.com/ru/articles/1033614/

    #mlx #llmагент #local_llm #local_ai #agent

  6. Локальный агент для диагностики инфраструктуры

    В статье описаны результаты, которые получил в поисках ответа на вопрос "можно ли решать реальные задачи диагностики и исправления проблем инфраструктуры на слабом MacBook в агентском режиме (да, но)".

    habr.com/ru/articles/1033614/

    #mlx #llmагент #local_llm #local_ai #agent

  7. Локальный агент для диагностики инфраструктуры

    В статье описаны результаты, которые получил в поисках ответа на вопрос "можно ли решать реальные задачи диагностики и исправления проблем инфраструктуры на слабом MacBook в агентском режиме (да, но)".

    habr.com/ru/articles/1033614/

    #mlx #llmагент #local_llm #local_ai #agent

  8. Локальный агент для диагностики инфраструктуры

    В статье описаны результаты, которые получил в поисках ответа на вопрос "можно ли решать реальные задачи диагностики и исправления проблем инфраструктуры на слабом MacBook в агентском режиме (да, но)".

    habr.com/ru/articles/1033614/

    #mlx #llmагент #local_llm #local_ai #agent

  9. Как запускать LLM локально с LM Studio: Полное руководство 2026

    Как запускать LLM локально с LM Studio: Полное руководство 2026 Запускайте большие языковые модели оффлайн на своём компьютере — без API-ключей, без облачных зависимостей, полная приватность

    habr.com/ru/articles/1005054/

    #local_ai #local_llm #llm #lmstudio #ai #artificial_intelligence

  10. Как научить нейросеть работать руками: создание полноценного ИИ-агента с MCP и LangGraph за час

    Надоели чат-боты, которые только болтают? Создаём настоящего ИИ-помощника: читает файлы, ищет в сети, запоминает всё. LangGraph + MCP — пошаговый гайд для Python-разработчиков. Меньше теории, больше работающего кода. - Два готовых агента: классификатор вакансий + файловый помощник - Поддержка Ollama, OpenAI, DeepSeek — выбирайте любую модель - Асинхронная архитектура с обработкой ошибок - Полная интеграция в Python-проекты без no-code конструкторов - Код готов к продакшену: логирование, retry-механизмы, конфигурация От настройки окружения до рабочего агента за час.

    habr.com/ru/companies/amvera/a

    #python #langchain #langgraph #mcp #mcpserver #ollama #local_llm #ииассистент #ииагенты #ии

  11. I've been having a lot of fun considering how speech-to-text and LLMs can help us have better IRL conversations.

    For example: You know when you're talking with a friend and you're trying to remember a book or movie or the name of an acquaintance? What if a listening app could unobtrusively show what it thinks might be the answer on its screen? Or help paint a mental picture that you're trying to explain?

    We're at the point now where STT can be on-device (no surveillance) and local LLMs are close to "good enough" for this.

    What else would you want an allied device to do for you to complement in-person conversations?

    #Local_llm

  12. Re: GPT-4o Sycophancy

    One of my takeaways is that I don't like having a model change under my feet. The fact that I thought I was talking to "GPT-4o" but it was a different "GPT-4o" is kind of the unsettling part.

    Barring a mental health crisis or brain injury, we don't expect peoples' personalities to change much, especially not abruptly. I suppose we extend this expectation to LLMs. This incident was a breach of personality trust, which felt worse than "uncanny valley" to me.

    openai.com/index/sycophancy-in

    #ai #local_llm

  13. Как запустить локальную LLM (AI) в Android Studio

    Привет! Если вы мобильный разработчик и следите за AI-трендами, наверняка задумывались о том, как интегрировать языковые модели (LLM) в свои приложения прямо из Android Studio. В этой статье я расскажу, как это можно сделать быстро и просто, не полагаясь на внешние API и облачные решения.

    habr.com/ru/articles/904648/

    #kotlin #android_studio #continuedev #lmstudio #local_llm

  14. Как запустить локальную LLM (AI) в Android Studio

    Привет! Если вы мобильный разработчик и следите за AI-трендами, наверняка задумывались о том, как интегрировать языковые модели (LLM) в свои приложения прямо из Android Studio. В этой статье я расскажу, как это можно сделать быстро и просто, не полагаясь на внешние API и облачные решения.

    habr.com/ru/articles/904648/

    #kotlin #android_studio #continuedev #lmstudio #local_llm

  15. Как запустить локальную LLM (AI) в Android Studio

    Привет! Если вы мобильный разработчик и следите за AI-трендами, наверняка задумывались о том, как интегрировать языковые модели (LLM) в свои приложения прямо из Android Studio. В этой статье я расскажу, как это можно сделать быстро и просто, не полагаясь на внешние API и облачные решения.

    habr.com/ru/articles/904648/

    #kotlin #android_studio #continuedev #lmstudio #local_llm

  16. Как запустить локальную LLM (AI) в Android Studio

    Привет! Если вы мобильный разработчик и следите за AI-трендами, наверняка задумывались о том, как интегрировать языковые модели (LLM) в свои приложения прямо из Android Studio. В этой статье я расскажу, как это можно сделать быстро и просто, не полагаясь на внешние API и облачные решения.

    habr.com/ru/articles/904648/

    #kotlin #android_studio #continuedev #lmstudio #local_llm

  17. Quelqu'un a t il réussi à faire tourner l'application #local_llm de #nextcloud sur un serveur #ubuntu / #debian ? Je cherche une doc d'installation.
    ------
    Has anyone managed to run the #local_llm application from #nextcloud on a #ubuntu / #debian server? I'm looking for an installation doc.