#вектор — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #вектор, aggregated by home.social.
-
Контекстное окно: почему нейросеть забывает части разговора
Представьте, что вы разговариваете с невероятно умным и эрудированным собеседником. Только очень странным. Несмотря на весь свой интеллект и тысячи фактов, которые он легко и непринужденно рассказывает, он не может ничего запомнить. Ваш диалог с ним каждый раз как бы начинается заново. Вы даете ему вводные, задаете вопросы, что-то уточняете, а он, на основе всего этого, выдает ответ. Однако, стоит вам задать следующий вопрос, как собеседник напрочь забывает все, о чем вы говорили. И чтобы отвечать более-менее связно, ему приходится сначала перечитать весь ваш диалог. Звучит странно? Возможно. Однако именно так работает большинство современных LLM. А разработчики, пытаясь нивелировать эту особенность, добавляют нейронкам различные обвязки и ухищрения, заметно усложняя логику для рядового пользователя. Чтобы лучше понимать, что происходит, давайте погрузимся в тему. И подробнее познакомимся с такой штукой, как «контекстное окно».
https://habr.com/ru/companies/bothub/articles/1047194/
#контекст #контекстное_окно #LLM #SelfAttention #токен #Lost_in_the_Middle #RAG #KVcache #нейросеть #вектор
-
🖼 Clker.com предоставляет сотни тысяч бесплатных клип-артов и векторных изображений по лицензии Public Domain
-
🖼️ Publicdomainvectors.org - 70000+ векторных изображений по лицензии Public Domain в форматах: eps, svg, ai и cdr
-
🖼️ FreeSVG.org - предлагает бесплатные векторные изображения в формате SVG с лицензией Creative Commons CC0
-
Линейная алгебра для нейросетей: векторы на практике
Данная статья посвящена основе основ нейронауки — линейной алгебре. Если вы когда-либо планируйте изучать искусственные нейронные сети (и не только), то вам необходимо начать именно с этого. Причем не важно, собираетесь ли вы заниматься фундаментальными исследованиями (Data Science) или просто лепить модели в продакшн на конвейере (ML Engineering), вы обязаны знать их математику хотя бы поверхностно. Любые настройки, дообучение и применение даже готовой модели, требуют понимания основ. А по сему данное знание, как минимум, не будет избыточным. Материал рассчитан на новичка. Если вы знаете школьную математику, то сможете освоить и мой курс. В будущем я напишу статью о линейном представлении нейросетей, где мы адаптируем полученное знание под прикладные задачи, напишем некоторые слои на Python и построим настоящую модель! В этой статье: * Понятие вектора; * Векторизация данных; * Умножение на скаляр; * Сложение векторов; * Норма вектора; * Скалярное умножение; * Векторное умножение; * Практика с кодом; * Домашняя работа. Все будет объяснено на красочных примерах в игровой форме. Ничего сложного. А в конце вас ждет самостоятельная практика с кодом. Приятного чтения!
https://habr.com/ru/articles/1001896/
#линейная_алгебра #вектор #нейросети #математика_для_data_science #скалярное_произведение #векторизация #данные #машинное+обучение #тензор #матрицы
-
Embedding — как машины понимают смысл текста
Я уверен, вы видели модели машинного обучения, которые принимают текст и предсказывают, является ли он спамом. Аналогично модель может проанализировать отзыв о фильме и определить его тональность — положительную или отрицательную, понимать что «груша» связана с «яблоком» куда больше, чем с «теплоходом». Первое правило обучения любой модели машинного обучения — это преобразование входных данных в числа. Цифровой объект можно представить числом: картинку, текст, аудио или видеофайл — практически всё что угодно. Для того чтобы ввести этот объект в нашу ML модель как некое понятие, мы должны преобразовать его в определённый набор чисел. По этому набор чисел мы сможем определить, что, например, этот объект «яблоко», а не «груша». С картинками все просто. В чёрно-белом изображении (в градациях серого) самый яркий пиксель имеет значение 1, самый тёмный — 0, а оттенки серого имеют значения от 0 до 1. Такое числовое представление упрощает обработку изображений. Преобразовав изображение в цифровую форму на основе значений пикселей, мы можем использовать его в качестве входных данных для обучения нашей модели, позволяя нейронной сети обучаться на значениях пикселей. Однако что делать с текстом? Как спроецировать буквы в числа?
https://habr.com/ru/companies/ruvds/articles/983958/
#embeddings #эмбеддинги #вектор #векторное_представление #машинное_обучение #ml #machine_learning #nlp #нлп #ruvds_статьи
-
RepE — как активационная инъекция влияет на энтропию, деградацию и качество ответов LLM?
Современные большие языковые модели достигли впечатляющих результатов в генерации текста, однако они до сих пор остаются жуткой стохастикой. На мой взгляд проблема текущего ИИ заключается не в синтетических обучающих данных или архитектурных ограничениях, а в отсутствии внутренней верификации . Для LLM галлюцинация и факт онтологически равноценны: и то, и другое — лишь вероятностная последовательность токенов, максимизирующая правдоподобие. Стандартные методы донастройки, такие как RLHF, часто еще сильнее ухудшают ситуацию: они учат модель казаться правильной и вежливой, создавая маску дружелюбного ассистента, но не меняют глубинные механизмы принятия решений. В результате мы получаем модели, которые полноценно врут даже там, где их знаний возможно хватило бы для правильного ответа на вопрос. Данная работа посвящена изучению методов Representation Engineering (RepE) — подхода, который позволяет проникать в активационные слои нейросетей и слегка усиливать отдельные вектора. В отличии от классического промпт инженеринга мы не задаем роль, а правим внутреннюю генерацию ответа, можно сказать точечно правим "веса" хоть это в действительности и не так. Цель - проверка того, может ли выделение и активация специфических семантических векторов служить функциональным регулятором генерации - и как в целом это выделение влияет на модель. Возможно ли таким методом снизить энтропию или получить сравнительно лучшие ответы от модели.
https://habr.com/ru/articles/981520/
#ai #ml #repe #активации #gemma #gptoss #Owen #вектор #скрытый_слой #искусственный_интеллект
-
Матрицы и векторы: решение систем линейных алгебраических уравнений
В статье представлена реализация методов решения системы линейных алгебраических уравнений (СЛАУ) четырьмя методами: методом Гаусса, LU декомпозиции, компактной схемой исключения, QR декомпозиции. Для реализации был использован шаблон классов матрицы и вектора. Приводятся результаты решения СЛАУ, погрешность решения и время решения СЛАУ. Для сравнения результаты представлены в таблице.
-
🖼️ Openclipart - библиотека бесплатных векторных изображений под лицензией Public Domain
-
Как мы внедрили векторный поиск в Postgres Pro
В статье разберемся, что такое векторный поиск, какие проблемы он решает, и как расширение pgpro_vector для Postgres Pro позволяет реализовать эти мощные возможности прямо в реляционной базе данных, без необходимости развертывать отдельные специализированные системы.
https://habr.com/ru/companies/postgrespro/articles/919552/
#векторизация #вектор #векторные_базы_данных #векторный_поиск #postgres #postgres_pro #разработка_баз_данных #администрирование_баз_данных
-
std::vector в C?
Во время разработки одного из своих проектов я обнаружил, что мне нужен контейнер, способный менять свой размер по мере необходимости. Так как я большую часть времени разрабатываю на С++, а не на С, я очень хотел получить что-то похожее на std::vector<T> из С++. Я начал искать в интернете реализации, но они мне не подходили по разным причинам. Тогда я решил разработать свой вариант.
-
Time Limit Exceeded это не только про сложность алгоритма
Решал алгоритмическую задачу. Написал код со сложностью O(n), работает правильно, но Leetcode посчитал, что это слишком долго. Посмотрел в решения, там тоже O(n), но код принимается, почему так? Давай разбираться
-
От винта! Рычаги и винты в Unity
Всем привет! Меня зовут Григорий Дядиченко , и я разрабатываю разные проекты на заказ. Сегодня хотелось бы поговорить про рычаги и винты, и их реализацию в Unity. Сейчас как раз на хайпе Apple Vision Pro, а подобные штуки бывают весьма полезны в проектах с виртуальной и дополненной реальностью. Если вы интересуетесь Unity разработкой и темой MR — добро пожаловать под кат! Может данная реализация пригодится в вашем проекте.
https://habr.com/ru/articles/792918/
#unity #unity3d #рычаг #винт #screw #lever #кватернион #вектор #mr #vr
-
@[email protected]
#плакат #советы #Маренков #УССР #вектор #poster #adviсe #UkrainianSSR #vector
«Да здравствует власть Советов!».
Худ.: Маренков Алексей Васильевич.
1921 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/13bca672-53e1-401c-8126-69ca45788d1d?share=post_link
https://t.me/okna_rosta/485 -
@[email protected]
#плакат #свобода #Кукрыниксы #СССР #вектор #poster #liberty #USSR #vector
«Народы Африки обуздают колонизаторов!».
Худ.: Кукрыниксы.
1960 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/8feb7609-87e2-46c5-bba8-91d4c7353aea?share=post_link
https://t.me/okna_rosta/482 -
@[email protected]
#плакат #сплоченность #Палестина #вектор #poster #cohesion #فلسطين #Palestine #vector
«Да здравствует боевая сплоченность между палестинским народом и народами Советского Союза, совершившими Октябрьскую революцию».
Худ.: Хелми Аль Тофа.?
1977 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/4df3562f-bf53-47e9-8206-81208c0f592d?share=post_link
https://t.me/okna_rosta/479 -
@[email protected]
#схема #газета #Искра #вектор #scheme #newspaper #spark #vector
«Схема перевозки газеты Искра в 1901-1903 гг.».
AI+SVG+PDF
https://boosty.to/oknarosta/posts/8352715d-a7a0-464d-9c0d-59b846f83075?share=post_link
https://t.me/okna_rosta/476
*-"Борьба классов", 1931, №1, с. 35 -
@[email protected]
#плакат #антивоенный #Ковенчук #СССР #вектор #poster #antiwar #USSR #vector
«Сплотятся люди всей земли - капитулируют ракеты».
Худ.: Ковенчук Георгий Васильевич.
1983 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/8f45ad14-a2ec-457f-a909-986c20ee62a8?share=post_link
https://t.me/okna_rosta/472 -
@[email protected]
#плакат #работа #Лебедев #РСФСР #вектор #poster #job #RSFSR #vector
«Работать надо - винтовка рядом».
Худ.: Лебедев Владимир Васильевич.
1920 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/0a3d2f3e-c825-4c36-9ae7-44cc866ebaa1?share=post_link
https://t.me/okna_rosta/470 -
@[email protected]
#плакат #коммуна #советы #Козлинский #РСФСР #вектор #poster #commune #adviсe #RSFSR #vector
«Мертвецы парижской коммуны воскресли под красным знаменем советов!».
Худ.: Козлинский Владимир Иванович.
1920 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/71f9fe34-cc48-4ee8-b56b-ffc2731328b9?share=post_link
https://t.me/okna_rosta/467 -
@[email protected]
#плакат #революция #Бельтюков #СССР #вектор #poster #revolution #USSR #vector
«1917».
Худ.: Бельтюков Владимир Иванович.
1971 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/cb1d722f-3d15-4589-9892-2e04f0df004c?share=post_link
https://t.me/okna_rosta/464 -
@[email protected]
#плакат #Ленин #Бабин #СССР #вектор #poster #Lenin #USSR #vector
«Необходимо еще и еще расширять участие самих трудящихся в управлении хозяйством...».
Худ.: Бабин Николай Семенович.
1989 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/a9880d5a-10b9-4874-8ed7-350de504c79c?share=post_link
https://t.me/okna_rosta/459 -
@[email protected]
#плакат #антивоенный #Каждан #СССР #вектор #poster #antiwar #USSR #vector
«Голос планеты: Нет - ядерному безумию!».
Худ.: Каждан Евгений Абрамович.
1983 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/b20af276-5d41-4c89-ad36-0d9d87b1c97c?share=post_link
https://t.me/okna_rosta/453 -
@[email protected]
#арт #RATM #Сапата #вектор #art #RATM #Zapata #vector
«RATM. Emiliano Zapata Salazar».
Худ.: Неизвестен.
Год неизвестен.
* - векторизация для RedProlet (https://t.me/redprolet).
AI+SVG+PDF
https://boosty.to/oknarosta/posts/95afa57c-82d0-468f-8f3a-46c46be79af8?share=post_link
https://t.me/okna_rosta/438 -
@[email protected]
#плакат #Ленин #Саренко #СССР #вектор #poster #Lenin #USSR #vector
«Имя его бессмертно».
Худ.: Саренко Евгений Владимирович.
1975 г.
AI+SVG+PDF
https://boosty.to/oknarosta/posts/9bd70f2e-b57a-4e0d-be68-12ce4373f77f?share=post_link
https://t.me/okna_rosta/415