#resnet — Public Fediverse posts

PVAD: как научить ИИ слышать нужного человека в шумной комнате

Представьте переговорную, где одновременно говорят несколько человек, а системе нужно понять, когда говорит целевой спикер, и выделить именно его голос. Задача нетривиальная, но именно её нам и нужно было решить. Над этим мы с коллегами работали в проекте PVAD (Personal Voice Activity Detection) — технологии для определения того, когда в общем аудиопотоке говорит конкретный человек. Короткий простой обзор на один из кейсов нашей команды.

https://habr.com/ru/articles/1069410/

#машинное_обучение #выделение_голоса #шумоподавление #Demucs #xvector #ResNet #PyTorch #TensorFlow #LibriSpeech #VoxCeleb2

От 0 до 10 миллионов ИИ-проверок в месяц: как мы продуктивизировали CV в Пятёрочке за 8 месяцев

Статья про то, как CV-сервис вырос с MVP до 10 миллионов проверок фото в месяц и не развалился в проде. 🔧 Это не про «у нас классные модели» и не про «просто прикрутили YOLO», а про честную инженерную продуктивизацию. Про то как универсальный классификатор путал фарш с грязью, почему часть анкет всё равно лучше отдавать человеку, зачем отдельно мониторить качество моделей и что приходится чинить, когда реальный мир меняется быстрее обучающей выборки. Внутри: компьютерное зрение, 26 моделей, 62 проверки, CNN, VLM, Triton, vLLM, Kafka, Human-in-the-loop, мониторинг качества, сезонность, баги под нагрузкой и немного «веган-версии ИИ». Заходите, читайте и делитесь своим опытом продакшена ML-сервисов ❤️

https://habr.com/ru/companies/X5Tech/articles/1054688/

#computer_vision #multimodal #yolo #resnet #vlm #cnn #tritoninferenceserver #humanintheloop #kafka #ритейл

4.6-битные сети: от теории к практике. Причём здесь HardTanh?

Уже прошло два года с тех пор, как мы предложили схему 4.6-битного квантования и рассказали про нее, в том числе и на Хабре: раз и два . Вспомним, что при 4.6-битном квантовании веса и входы слоя принимают такие целые значения, что их попарные произведения помещаются в знаковый 8-битный тип данных. Такая схема позволила нам вычислять нейронные сети на процессорах мобильных устройств быстрее, чем в 8-битном формате, и точнее, чем в 4-битном, потому что уровней квантования больше. За прошедшее время у нас появился опыт практического применения таких сетей, и оказалось, что для реального использования важны не только схема квантования и алгоритм умножения. Не меньше вопросов возникает по поводу того, как устроены активации, как хранить карты признаков между слоями, как обрабатывать ветвления и как именно обучается квантованная сеть. Сегодня в статье как раз поговорим про это.

https://habr.com/ru/companies/smartengines/articles/1052222/

#нейронные_сети #квантование #инференс #низкоразрядные_вычисления #resnet #edge_ai #мобильный_ии #HardTanh #46битное_квантование

От 0 до 10 миллионов ИИ-проверок в месяц: как мы продуктивизировали CV в Пятёрочке за 8 месяцев

Статья про то, как CV-сервис вырос с MVP до 10 миллионов проверок фото в месяц и не развалился в проде. 🔧 Это не про «у нас классные модели» и не про «просто прикрутили YOLO», а про честную инженерную продуктивизацию. Про то как универсальный классификатор путал фарш с грязью, почему часть анкет всё равно лучше отдавать человеку, зачем отдельно мониторить качество моделей и что приходится чинить, когда реальный мир меняется быстрее обучающей выборки. Внутри: компьютерное зрение, 26 моделей, 62 проверки, CNN, VLM, Triton, vLLM, Kafka, Human-in-the-loop, мониторинг качества, сезонность, баги под нагрузкой и немного «веган-версии ИИ». Заходите, читайте и делитесь своим опытом продакшена ML-сервисов ❤️

https://habr.com/ru/companies/X5Tech/articles/1047946/

#computer_vision #multimodal #yolo #resnet #vlm #cnn #tritoninferenceserver #humanintheloop #kafka #ритейл

Повышаем точность диагностики ДЦП у новорожденных с помощью нейросетей

МРТ головного мозга помогает диагностировать серьёзные патологии, от опухолей до нейродегенеративных заболеваний. Своевременная диагностика в младенческом возрасте позволяет заметить в развитии мозга негативную динамику, приводящую к заболеваниям наподобие ДЦП , и вовремя начать терапию. Но когда дело касается обследования таких пациентов, есть дополнительные риски: эту процедуру проводят под анестезией. Поэтому врачам важны решения, которые позволят сократить время диагностики, снизить риски и принять более информированные решения. Специалисты Санкт‑Петербургского государственного педиатрического медицинского университета (СПбГПМУ) совместно со Школой анализа данных (ШАД) и Центром технологий для общества Yandex Cloud разработали решение на базе нейросети, которое помогает оценить развитие мозга новорожденных по МРТ‑снимкам. При подозрении на ДЦП и другие болезни ЦНС решение работает как вспомогательный инструмент, который сокращает время расшифровки результатов МРТ до нескольких минут вместо нескольких дней. Меня зовут Юлия Бусыгина, я руковожу проектом со стороны Yandex Cloud, и в этой статье мы вместе с профессором Александром Поздняковым расскажем подробнее, как проектировали решение, обучали модель, как тестируем и оцениваем его эффективность.

https://habr.com/ru/companies/yandex/articles/940552/

#мрт #мрт_цнс #мрт_центральной_нервной_системы #unet #unet++ #сегментация_изображений #resnet #resnet50

Когда несколько пикселей решают всё: One Pixel атака и способы защиты от неё

Удивительно, но факт: несколько изменений в изображении могут полностью поменять вывод нейросети, что ломает заложенную разработчиком логику. В данной статье мы не просто подсветим факт существования One Pixel атаки, но и комплексно разберём архитектурные факторы, которые влияют на устойчивость CV-систем к данному семейству атак.

https://habr.com/ru/articles/932934/

#one_pixel_attack #computer_vision #alexnet #resnet #efficientnet #inceptionv3 #visual_transformer

Часть 1: ResNet-18 — Архитектура, покорившая глубину

Разбор "на пальцах": Как из изображения получается предсказание? Разберем как устроена классическая сеть ResNet.

https://habr.com/ru/articles/921608/

#resnet #машинное_обучение #компьютерное_зрение #новичкам #сверточные_нейронные_сети

Исследуем эволюцию архитектур в Computer Vision: Mind Map всех ключевых моделей

Компьютерное зрение (Computer Vision) пережило невероятную эволюцию за последние десятилетия. От простых свёрточных сетей до сложных архитектур, которые сегодня задают стандарты в распознавании изображений, обработке видео и других задачах. Но как разобраться во всём этом многообразии? Чтобы помочь себе (и вам!) лучше понять основные направления развития, я создал Mind Map , которая объединяет ключевые архитектуры Computer Vision — от классических моделей до современных прорывов.

https://habr.com/ru/articles/890724/

#computer_vision #mind_maps #deep_learning #machine_learning #машинное_обучение #нейронные_сети #neural_networks #transformers #resnet

ResNet-18: ищем динозавров или упражнения с векторами

Уверен, читатели хабра знают правильный ответ на вопрос - какова вероятность встретить динозавра на улице? И уж точно не растеряются когда эта встреча произойдет. Но что делать, если нужно найти конкретного динозавра на конкретном изображении?

https://habr.com/ru/articles/830836/

#ml #torch #computer_vision #resnet #matching

Studying classical #CNN architectures such as #VGG and #ResNet, we observed that they could be sensitive to simple rotations... and that incorporating a biologically inspired retinotopic mapping could alleviate this and also bring other nice features observed in the human visual system.

Hear Jean-Nicolas Jérémie aka @jnjer present these results today at the 32nd International Conference on Artificial Neural Networks (#ICANN 2023) in Heraklion, Greece.

The figure below shows the accuracy of different CNNs to the task "is there an animal in the image" - with a classical (Linear) or retinotopic (polar) mapping. Note that VGG may answer confidently the wrong answer for images rotated around 160°...

More in https://laurentperrinet.github.io/publication/jeremie-23-icann/

So..with the wave of new #fedi people I realized I never did #introductions myself.

I'm Phoenix (ok not really) and I'm in the southeast US. I'm a #buildingscientist, #RESNET trainer and also do #qualityassurance and #energyefficiency consulting in new residential #construction. I like talking about #EnergyCode, #heatpumps and why houses need to breath is a MYTH. In my spare time I love to go to the #beach, watch #collegefootball and enjoy a nice #bourbon and/or #whisky.

RE: https://calckey.social/notes/9ekhw4eehi

So..with the wave of new #fedi people I realized I never did #introductions myself.

I'm Phoenix (ok not really) and I'm in the southeast US. I'm a #buildingscientist, #RESNET trainer and also do #qualityassurance and #energyefficiency consulting in new residential #construction. I like talking about #EnergyCode, #heatpumps and why houses need to breath is a MYTH. In my spare time I love to go to the #beach, watch #collegefootball and enjoy a nice #bourbon and/or #whisky.

RE: https://firefish.social/notes/9ekhw4eehi

Following up on #GeoTorchAI :

With a few minor changes, I managed to run the #STResNet #bicycle flow prediction example of @geotorchai 🥳

The OD matrix size is rather modest (covering a grid with 21x12 cells), but hey, it's a start

https://github.com/anitagraser/GeoTorchAI/blob/f64cea879fdb846a2761b86ddefb5a946357b727/binders/prediction_spatiotemporal.ipynb

#geoai #resnet #torch #gischat #SpatialDataScience

A performance comparison of the new #PyTorch2 with the well established #PyTorch 1.

The benchmarks cover different areas of #deeplearning, such as image classification (#resnet) and language models (#BERT).

https://www.aime.info/blog/en/pytorch-2-gpu-performance/

#мем #resnet #нейросеть #torch #cv #frustration

Linking Neural Collapse and L2 Normalization with Improved Out-of-Distribution Detection in Deep ...

Jarrod Haas, William Yolland, Bernhard T Rabus

https://openreview.net/forum?id=fjkN5Ur2d6

#normalization #deep #resnet

What a honour to be on the all-female opening panel of #ACES2022 presenting our #ResNet work on #ecosystemservices in working landscapes in Canada. So much good things happening putting ES into action in the US, Australia and Canada.

#Resnet (pronounced re-snet) verb: to reset ones internet, or to switch ones modem on and off again.

This can also be done in #Australia as a form of #protest against #dataRetention laws whereby #IPAddresses assigned to users must be stored by #ISPs for two years.

By using automated #resnetting methods, #protestors were able to overload the #dataRetention system.

(may not be a true story… yet)

#Resnet (pronounced re-snet) verb: to reset ones internet, or to switch ones modem on and off again. This can also be done in #Australia as a form of #protest against #dataRetention laws whereby IPs assigned to users must be stored from two years.

By using automated #resnetting methods #protestor were able to overload the #dataRetention system.