home.social

#nvidia_rtx — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #nvidia_rtx, aggregated by home.social.

fetched live
  1. Как развернуть Mistral 7B на GPU-сервере через vLLM

    Если бюджет и ресурсы ограничены, а развернуть self-hosted LLM нужно, присмотритесь к такой связке: Mistral-7B-Instruct-v0.3 + виртуальная машина

    habr.com/ru/companies/selectel

    #ai #mistral_7b #vllm #инференс_llm #gpu #облачный_сервер #api #nvidia_rtx #selectel

  2. Как развернуть Mistral 7B на GPU-сервере через vLLM

    Если бюджет и ресурсы ограничены, а развернуть self-hosted LLM нужно, присмотритесь к такой связке: Mistral-7B-Instruct-v0.3 + виртуальная машина

    habr.com/ru/companies/selectel

    #ai #mistral_7b #vllm #инференс_llm #gpu #облачный_сервер #api #nvidia_rtx #selectel

  3. Как развернуть Mistral 7B на GPU-сервере через vLLM

    Если бюджет и ресурсы ограничены, а развернуть self-hosted LLM нужно, присмотритесь к такой связке: Mistral-7B-Instruct-v0.3 + виртуальная машина

    habr.com/ru/companies/selectel

    #ai #mistral_7b #vllm #инференс_llm #gpu #облачный_сервер #api #nvidia_rtx #selectel

  4. ̶К̶у̶п̶а̶н̶и̶е̶ тестирование «красного» ̶к̶о̶н̶я̶ представителя GPU от АМД с приставкой ИИ — RADEON AI PRO R9700

    Тестировать друг за другом видеокарты от NVIDIA надоедает, благо разница в последнем поколении только в мощностях процессоров семейства Blackwell, объеме памяти и ширине шины. А вот посмотреть, что предлагают конкуренты, а тем более громко называя это «ИИ», уже интересней. Мы проверили Radeon AI PRO R9700 с 32 Гб памяти на реальных задачах: LLM, генерация графики и видео, 3D-рендеринг, и сравнили с NVIDIA.

    habr.com/ru/companies/hostkey/

    #hostkey #Radeon_AI_PRO_R9700 #ROCm #инференс_LLM #генеративный_ИИ #видеокарта #NVIDIA_RTX #Ollama #RDNA_4 #GDDR6

  5. ̶К̶у̶п̶а̶н̶и̶е̶ тестирование «красного» ̶к̶о̶н̶я̶ представителя GPU от АМД с приставкой ИИ — RADEON AI PRO R9700

    Тестировать друг за другом видеокарты от NVIDIA надоедает, благо разница в последнем поколении только в мощностях процессоров семейства Blackwell, объеме памяти и ширине шины. А вот посмотреть, что предлагают конкуренты, а тем более громко называя это «ИИ», уже интересней. Мы проверили Radeon AI PRO R9700 с 32 Гб памяти на реальных задачах: LLM, генерация графики и видео, 3D-рендеринг, и сравнили с NVIDIA.

    habr.com/ru/companies/hostkey/

    #hostkey #Radeon_AI_PRO_R9700 #ROCm #инференс_LLM #генеративный_ИИ #видеокарта #NVIDIA_RTX #Ollama #RDNA_4 #GDDR6

  6. ̶К̶у̶п̶а̶н̶и̶е̶ тестирование «красного» ̶к̶о̶н̶я̶ представителя GPU от АМД с приставкой ИИ — RADEON AI PRO R9700

    Тестировать друг за другом видеокарты от NVIDIA надоедает, благо разница в последнем поколении только в мощностях процессоров семейства Blackwell, объеме памяти и ширине шины. А вот посмотреть, что предлагают конкуренты, а тем более громко называя это «ИИ», уже интересней. Мы проверили Radeon AI PRO R9700 с 32 Гб памяти на реальных задачах: LLM, генерация графики и видео, 3D-рендеринг, и сравнили с NVIDIA.

    habr.com/ru/companies/hostkey/

    #hostkey #Radeon_AI_PRO_R9700 #ROCm #инференс_LLM #генеративный_ИИ #видеокарта #NVIDIA_RTX #Ollama #RDNA_4 #GDDR6

  7. Ít ai dùng kernel module vá lỗi PCIe P2P của Nvidia cho hệ thống đa GPU RTX? Tính năng này giảm độ trễ giữa các card RTX 30/40/50 đáng kể, tăng thông lượng cho AI inference. Rất khuyến khích thử nghiệm để tăng hiệu suất vượt trội!

    #PCIe #P2P #NVIDIA #RTX #GPU #AI #Inference #KernelModule
    #PCIeP2P #NVIDIA_RTX #GPU_AI #TốiƯuHiệuNăng #CardĐồHoạ #MáyHọc

    reddit.com/r/LocalLLaMA/commen

  8. Проблемы видеокарт RTX 4090: путь от кризиса к стабильности

    GeForce RTX 4090, представленная NVIDIA в октябре 2022 года, стала не только самой мощной потребительской видеокартой своего времени, но и одной из самых противоречивых. За почти три года существования этот флагманский продукт прошел сложный путь от серьезных технических проблем до относительной стабильности, демонстрируя как инженерные просчеты, так и способность индустрии адаптироваться к вызовам.

    habr.com/ru/articles/930678/

    #4090 #видеокарты #видеокарты_для_нейросетей #nvidia_rtx #nvidia

  9. Проблемы видеокарт RTX 4090: путь от кризиса к стабильности

    GeForce RTX 4090, представленная NVIDIA в октябре 2022 года, стала не только самой мощной потребительской видеокартой своего времени, но и одной из самых противоречивых. За почти три года существования этот флагманский продукт прошел сложный путь от серьезных технических проблем до относительной стабильности, демонстрируя как инженерные просчеты, так и способность индустрии адаптироваться к вызовам.

    habr.com/ru/articles/930678/

    #4090 #видеокарты #видеокарты_для_нейросетей #nvidia_rtx #nvidia

  10. Проблемы видеокарт RTX 4090: путь от кризиса к стабильности

    GeForce RTX 4090, представленная NVIDIA в октябре 2022 года, стала не только самой мощной потребительской видеокартой своего времени, но и одной из самых противоречивых. За почти три года существования этот флагманский продукт прошел сложный путь от серьезных технических проблем до относительной стабильности, демонстрируя как инженерные просчеты, так и способность индустрии адаптироваться к вызовам.

    habr.com/ru/articles/930678/

    #4090 #видеокарты #видеокарты_для_нейросетей #nvidia_rtx #nvidia