«Яндекс» открыл доступ к библиотеке для обучения больших языковых моделей

«Яндекс» открыл доступ к библиотеке для обучения больших языковых моделей
03:30, июня 12, 2024 «Яндекс» открыл доступ для всех желающих к собственно разработанной библиотеке YaFSDP для обучения больших языковых моделей, сообщает пресс-служба компании.В релизе отмечается, что библиотека дает ускорение до 25%, а результат зависит от архитектуры и параметров нейросети.

YaFSDP рассчитана в первую очередь на большие языковые модели, хотя она подходит и для других нейросетей, например, таких, которые генерируют изображения. «С помощью YaFSDP также можно расходовать до 20% меньше ресурсов графических процессоров (GPU), которые требуются для обучения.

Теперь YaFSDP могут использовать компании, разработчики и исследователи по всему миру», - уточняют в «Яндексе».Добавляется, что библиотека способна оптимизировать использование ресурсов GPU на всех этапах обучения: pre-training (предварительное), supervised fine-tuning (с учителем) и alignment (выравнивание модели).

«Благодаря этому YaFSDP задействует ровно столько графической памяти, сколько нужно для обучения, при этом коммуникацию между GPU ничто не замедляет», - заключили в компании.

Источник: www.finam.ru
 
 

Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Яндекс открывает библиотеку YaFSDP для обучения больших языковых моделей

«Яндекс» открывает библиотеку YaFSDP для обучения больших языковых моделей Компания «Яндекс» выложила в опенсорс библиотеку YaFSDP, которая ускоряет обучение больших языковых моделей — как собственной разработки, так и сторо …

Технологии, Наука 09:35, июня 12, 2024 | xakep.ru
Google TPU Trillium: для больших языковых моделей ИИ

Google TPU Trillium: для больших языковых моделей ИИ На вчерашней конференции Google I/O основное внимание было уделено моделям искусственного интеллекта Gemini , которые должны работать на устройствах …

Технологии, Наука 18:10, мая 15, 2024 | hardwareluxx.ru
МГУ о применении мультимодальных больших языковых моделей в видеоаналитике

МГУ о применении мультимодальных больших языковых моделей в видеоаналитике Ученые МГУ провели исследование по проблеме перевода видео в текст, что позволит значительно сократить время... …

Интернет, Игры 08:45, июня 13, 2024 | cnews.ru
Разработан метод предотвращения галлюцинаций больших языковых моделей

Разработан метод предотвращения галлюцинаций больших языковых моделей Большие языковые модели (LLM), такие как ChatGPT, научились генерировать тексты, почти не отличимые от написанных человеком, и давать убедительные от …

Технологии, Наука 10:15, мая 23, 2024 | pravda.ru
GPT на языке бизнеса: особенности применения больших языковых моделей

GPT на языке бизнеса: особенности применения больших языковых моделей Использование больших языковых моделей для генерации контента популярно не только среди частных пользователей, но и в бизнес-среде. Эксперты ИТ-компа …

Технологии, Наука 05:12, октября 20, 2024 | ict-online.ru
Новая техника улучшает возможности рассуждения больших языковых моделей

Новая техника улучшает возможности рассуждения больших языковых моделей Большие языковые модели, подобные тем, которые используются в ChatGPT, показали впечатляющую производительность при выполнении таких задач, как соста …

Технологии, Наука 05:12, июня 18, 2024 | android-robot.com
Т-Банк открыл доступ к библиотеке инструментов для разработки приложений на базе искусственного интеллекта

«Т-Банк» открыл доступ к библиотеке инструментов для разработки приложений на базе искусственного интеллекта Центр искусственного интеллекта «Т-Банка» открыл доступ к бесплатной библиотеке инструментов Turbo Alignment для обучения... …

Интернет 20:12, октября 17, 2024 | internet.cnews.ru
Яндекс открыл бесплатный доступ к своей лучшей нейросети YandexGPT 5 Pro через Чат с Алисой

«Яндекс» открыл бесплатный доступ к своей лучшей нейросети YandexGPT 5 Pro через «Чат с Алисой» «Яндекс» сделал бесплатной свою нейросеть «Чат с Алисой» на базе большой языковой модели (LLM) YandexGPT 5 Pro, ежемесячная п …

Software 00:12, июля 2, 2025 | 3dnews.ru
Grok 3 против ChatGPT: больше языковых моделей хороших и разных

Grok 3 против ChatGPT: больше языковых моделей хороших и разных Илон Маск на днях сообщил, что его стартап xAI выпустил новую версию чат-бота Grok 3, и назвал его «самым умным ИИ на Земле». …

Технологии, Наука 00:12, февраля 25, 2025 | ict-online.ru
Пользователи VK Видео получили доступ к библиотеке VK Клипов

Пользователи «VK Видео» получили доступ к библиотеке «VK Клипов» Миллионы коротких видеороликов, созданных пользователями «VK Клипов», стали доступны в приложении «VK Видео» на... …

Интернет 13:35, мая 27, 2024 | internet.cnews.ru
В Москве создана новая платформа для обучения ИИ-моделей

В Москве создана новая платформа для обучения ИИ-моделей Московские IT-специалисты представили новую платформу для полного цикла разработки и обучения моделей искусственного интеллекта, рассказала заместите …

Основные новости 21:40, мая 21, 2024 | ruposters.ru
Исследователи DeepMind предложили распределённое обучение больших ИИ-моделей, которое может изменить всю индустрию

Исследователи DeepMind предложили распределённое обучение больших ИИ-моделей, которое может изменить всю индустрию После того, как ИИ-индустрия немного отошла от шока, вызванного неожиданным триумфом китайской DeepSeek, эксперты пришли к выводу, что отрасли, возмо …

Hardware 05:12, февраля 18, 2025 | 3dnews.ru
В БД для обучения AI-моделей Common Crawl выявлено около 12 тысяч API-ключей и паролей

В БД для обучения AI-моделей Common Crawl выявлено около 12 тысяч API-ключей и паролей Исследователи из компании Truffle Security опубликовали результаты анализа публичного набора данных Common Crawl, используемого при обучении больших …

Интернет, Игры 05:12, марта 7, 2025 | opennet.ru
Reddit откроет OpenAI доступ к контенту для обучения ИИ

Reddit откроет OpenAI доступ к контенту для обучения ИИ OpenAI подписала соглашение о доступе к контенту Reddit в реальном времени через API — это значит, что компания сможет отображать обсуждения с …

Software 22:05, мая 17, 2024 | 3dnews.ru
Яндекс делает открытой свою библиотеку для обучения нейросетей

«Яндекс» делает открытой свою библиотеку для обучения нейросетей «Яндекс» открыл доступ для всех желающих к собственно разработанной библиотеке YaFSDP для обучения больших языковых моделей. Библиотека дает ускорени …

Интернет 14:35, июня 13, 2024 | internet.cnews.ru
Яндекс выложил в опенсорс свой ускоритель обучения нейросетей  YaFSDP

«Яндекс» выложил в опенсорс свой ускоритель обучения нейросетей — YaFSDP «Яндекс» открыл для всех библиотеку YaFSDP. Она значительно ускоряет обучение больших языковых моделей — как собственной... …

Интернет, Игры 22:00, июня 11, 2024 | cnews.ru
T-Mobile открыл бесплатный доступ к Starlink до июля

T-Mobile открыл бесплатный доступ к Starlink до июля Мобильный оператор T-Mobile на Super Bowl 2025 объявил о доступности услуги StarLink. Бета-версия StarLink будет доступна бесплатно до июля текущего …

Гаджеты 05:12, февраля 13, 2025 | mobidevices.com
Брокер ФИНАМ открыл доступ к пре-листингу криптобиржи Kraken

Брокер ФИНАМ открыл доступ к пре-листингу криптобиржи Kraken Российский крупный брокер «Финам», в составе одноименной финансовой группы, сообщил накануне о том, что предоставил квалифицированным инвесторам возм …

Forex 10:12, декабря 28, 2024 | ru.financemagnates.com
Яндекс открыл Perforator, инструментарий для профилирования приложений

Яндекс открыл Perforator, инструментарий для профилирования приложений Компания Яндекс объявила об открытии исходного кода инструментария Perforator, предназначенного для непрерывного сбора детальных метрик с информацией …

Технологии, Наука 05:12, февраля 5, 2025 | opennet.ru
OpenAI за $250 млн купила доступ к материалам The Wall Street Journal, New York Post и The Daily Telegraph для обучения ИИ

OpenAI за $250 млн купила доступ к материалам The Wall Street Journal, New York Post и The Daily Telegraph для обучения ИИ OpenAI заключила лицензионное соглашение с News Corp — медиакомпанией, в которую входят такие издания как The Wall Street Journal, New York Pos …

Hardware 17:50, мая 23, 2024 | 3dnews.ru
Gmail сканирует вашу почту для обучения ИИ. Как запретить это делать, чтобы письма не утекли в общий доступ

Gmail сканирует вашу почту для обучения ИИ. Как запретить это делать, чтобы письма не утекли в общий доступ? Компания Google внедрила новую политику использования данных, которая позволяет анализировать содержимое электронных писем и вложений в Gmail для обу …

Технологии, Наука 00:12, ноября 23, 2025 | iguides.ru
Билайн открыл бесплатный доступ к нейросетям для пользователей всех операторов

Билайн открыл бесплатный доступ к нейросетям для пользователей всех операторов Билайн предоставил бесплатный доступ к ведущим генеративным нейросетям не только своим клиентам, но и пользователям всех операторов сотовой связи. Эт …

Технологии, Наука 20:12, декабря 28, 2025 | iguides.ru
Главархив открыл онлайн-доступ к документам деятелей науки и искусства

Главархив открыл онлайн-доступ к документам деятелей науки и искусства В Москве был открыт онлайн-доступ к документам знаменитых деятелей науки и культуры. Об этом в своем Telegram-канале сообщил мэр Москвы Сергей Собяни …

Основные новости 13:50, мая 16, 2024 | mockva.ru
МИД Германии открыл доступ россиянам к онлайн-заявкам на некоторые визы

МИД Германии открыл доступ россиянам к онлайн-заявкам на некоторые визы Доступ для граждан России к онлайн-заявкам открыт на получение некоторых немецких виз. По состоянию на 5 апреля подать документы из РФ можно на учебу …

Основные новости 05:12, апреля 6, 2025 | 47news.ru
YouTube открыл доступ к игровому сервису Playables всем желающим

YouTube открыл доступ к игровому сервису Playables всем желающим Расширение охвата игрового раздела YouTube Playables и доступность игр для всех пользователей, независимо от наличия платной подписки YouTube Premium …

Технологии, Наука 21:10, мая 30, 2024 | astera.ru
Яндекс Маркет открыл предзаказ флагманской линейки Samsung S25

«Яндекс Маркет» открыл предзаказ флагманской линейки Samsung S25 «Яндекс Маркет» в день официальной презентации Samsung открыл предзаказ на флагманскую линейку S25. Покупатели могут... …

Интернет 10:12, января 27, 2025 | internet.cnews.ru
MTS AI открыл публичный доступ к демо-версии нейросети для генерации кода Kodify

MTS AI открыл публичный доступ к демо-версии нейросети для генерации кода Kodify Компания MTS AI запустила бесплатную демоверсию сервиса для автоматической генерации кода с помощью нейросетей... …

Интернет 20:12, октября 23, 2024 | internet.cnews.ru
Disney инвестировал $1 млрд в OpenAI и открыл доступ к 200 персонажам для ИИ-видео в Sora

Disney инвестировал $1 млрд в OpenAI и открыл доступ к 200 персонажам для ИИ-видео в Sora Пользователи смогут создавать и распространять собственные ролики с участием культовых героев Disney с помощью нейросети Sora. …

Это интересно, Курьезы 10:12, декабря 15, 2025 | incrussia.ru
Яндекс Маркет открыл предзаказы на iPhone 16. Ничего платить не нужно

«Яндекс Маркет» открыл предзаказы на iPhone 16. Ничего платить не нужно Пользователи «Яндекс Маркете» теперь могут оформить предзаказ на iPhone 16. Чтобы узнать о появлении смартфонов на маркетплейсе первым, нужно оставит …

Технологии, Наука 10:12, сентября 3, 2024 | iguides.ru
Яндекс оштрафовали за отказ предоставить ФСБ доступ к Умному дому с Алисой

«Яндекс» оштрафовали за отказ предоставить ФСБ доступ к «Умному дому с Алисой» Мировой судья судебного участка №425 в московских Хамовниках признал компанию «Яндекс» виновной в административном правонарушении и выпис …

Software 15:12, сентября 1, 2025 | 3dnews.ru
Яндекс откроет доступ к монетизации контента более чем миллиону российских блогеров

«Яндекс» откроет доступ к монетизации контента более чем миллиону российских блогеров Инфлюенсерам, у которых есть собственные каналы на VK, Rutube, Telegram и YouTubе с аудиторией более 1 тыс. подписчиков, откроют... …

Интернет 15:12, марта 5, 2025 | internet.cnews.ru
Продавцы Яндекс Маркета получили доступ к обновленному личному кабинету с ИИ-ассистентом

Продавцы «Яндекс Маркета» получили доступ к обновленному личному кабинету с ИИ-ассистентом «Яндекс Маркет» обновил личный кабинет продавцов и добавил в него «Маркет AI» – чат с ассистентом на основе искусственного... …

Интернет 00:12, октября 23, 2025 | internet.cnews.ru