#abmcts — Public Fediverse posts

Новый метод поиска от Sakana: расширение inference-time scaling и коллективный разум

Аналитический центр red_mad_robot продолжает разбирать исследования японской лаборатории Sakana AI — в прошлый раз это была архитектура CTM, вдохновлённая внутренней динамикой человеческого мышления. Теперь — метод, который помогает языковым моделям мыслить точнее уже на этапе выполнения запроса. В работе представлены два подхода: AB‑MCTS и его расширение Multi‑LLM AB‑MCTS. Первый объединяет два принципа — уточнение уже готовых ответов и генерацию альтернативных, второй добавляет работу нескольких языковых моделей. Всё это чтобы научить модели «думать» одновременно глубже и шире.

https://habr.com/ru/companies/redmadrobot/articles/933222/

#ai #llm #monte_carlo_tree_search #abmcts #inference #reasoning #thompson_sampling #reinforcement_learning

#SakanaAI has introduced #MultiLLM #ABMCTS, a technique that enables multiple #LLMs to #collaborate on #complextasks. By combining the strengths of #differentmodels, the system outperforms individual LLMs by 30% on the ARC-AGI-2 benchmark. The open-source #TreeQuest #framework allows developers to implement this approach for their own tasks. https://venturebeat.com/ai/sakana-ais-treequest-deploy-multi-model-teams-that-outperform-individual-llms-by-30/?eicker.news #tech #media #news