Разрабатывают новую модель генеративно-состязательных сетей, которая стабилизирует обучение и производительность

Разрабатывают новую модель генеративно-состязательных сетей, которая стабилизирует обучение и производительность
15:12, октября 19, 2024 В последние годы искусственный интеллект (ИИ) и модели глубокого обучения быстро развивались, становясь легкодоступными. Это позволило людям, даже не имеющим специальных знаний, выполнять различные задачи с ИИ. Среди этих моделей генеративно-состязательные сети (GAN) выделяются своей выдающейся производительностью в создании новых экземпляров данных с теми же характеристиками, что и обучающие данные, что делает их особенно эффективными для создания изображений, музыки и текста.

GAN состоят из двух нейронных сетей , а именно генератора, который создает новые распределения данных, начиная со случайного шума, и дискриминатора, который проверяет, является ли сгенерированное распределение данных «реальным» (соответствующим обучающим данным) или «поддельным».

По мере обучения генератор совершенствуется в генерации реалистичных распределений, а дискриминатор — в идентификации сгенерированных данных как поддельных.

GAN используют функцию потерь для измерения различий между поддельными и реальными распределениями.

Однако этот подход может вызывать такие проблемы, как исчезновение градиента и нестабильное обучение, напрямую влияющие на стабильность и эффективность.

Несмотря на значительный прогресс в улучшении GAN, включая структурные модификации и корректировки функции потерь, такие проблемы, как исчезновение градиента и коллапс мод, когда генератор выдает ограниченное разнообразие, продолжают ограничивать их применимость.

Для решения этих проблем группа исследователей под руководством доцента Минхёка Ли из Школы электротехники и электроники в Университете Чунг-Анг, Республика Корея, разработала новую стратегию.

«Представьте, что вы обучаете художника рисовать пейзажи. Последовательное руководство может привести к тому, что он будет создавать похожие сцены, явление, называемое коллапсом мод в машинном обучении.

Чтобы предотвратить это, наша модель PMF-GAN совершенствует возможности дискриминатора, наказывая генератор за создание слишком похожих выходных данных, тем самым способствуя разнообразию», — объясняет доктор Ли.

Их результаты были опубликованы в журнале Applied Soft Computing в октябре 2024 года. Фреймворк PMF-GAN вводит два ключевых усовершенствования.

Во-первых, он использует оптимизацию ядра для улучшения возможностей дискриминатора, предлагая значительное преимущество в решении проблем коллапса модели и исчезновения градиента. Ядра — это математические функции, которые преобразуют данные в более многомерное пространство, что упрощает обнаружение закономерностей даже в сложных данных.

Выходные данные дискриминатора обрабатываются с помощью функций ядра, производя оценку плотности ядра (KDE).

Во-вторых, PMF-GAN применяет математический метод, называемый преобразованием гистограммы, к выходным данным KDE, что позволяет проводить более интуитивный анализ результатов.

Во время обучения модель минимизирует разницу между преобразованными ядром-гистограммой поддельными и реальными распределениями, меру, называемую расстоянием PMF. В частности, этот по.
Источник: android-robot.com
 
 

Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

NASA тестирует двухступенчатую систему охлаждения, которая стабилизирует температуру топлива в космосе

NASA тестирует двухступенчатую систему охлаждения, которая стабилизирует температуру топлива в космосе Несмотря на экстремальный холод космического вакуума — до -270°C — сохранить жидкий водород и кислород на орбите или на поверхности д …

Технологии, Наука 00:12, июля 21, 2025 | ixbt.com
В Башкирии участники нацпроекта Производительность труда смогут пройти обучение по программе Рационализатор

В Башкирии участники нацпроекта «Производительность труда» смогут пройти обучение по программе «Рационализатор» В Башкортостане работники предприятий, участвующих в национальном проекте «Производительность труда», смогут пройти обучение по программе «Рационализ …

Основные новости 22:40, мая 29, 2024 | mgazeta.com
На ООО Гуд Флейк продолжают обучение бережливым инструментам в рамках Федерального проекта Производительность труда

На ООО «Гуд Флейк» продолжают обучение бережливым инструментам в рамках Федерального проекта «Производительность труда» Внедрение принципов бережливого производства – это не просто обучение, а комплексная трансформация, направленная на оптимизацию всех бизнес-процессов …

Основные новости 00:12, июля 5, 2025 | klitnsy-trud.ru
Разрабатывают 3D-модель для лучшего лечения неврологических расстройств

Разрабатывают 3D-модель для лучшего лечения неврологических расстройств 3D-модель, разработанная нейробиологами Университета Западной Вирджинии, показывает, как имплантируемые стимуляторы — те, которые используются для ле …

Технологии, Наука 13:25, мая 29, 2024 | android-robot.com
В РЖД разрабатывают новую систему оборота билетов

В РЖД разрабатывают новую систему оборота билетов В РЖД внедряют новшества в системе покупки и обмена билетов. РЖД работают над созданием листа ожидания для покупки новых или возвращённых билетов онл …

Общество, регионы 03:00, мая 23, 2024 | pravda.ru
Новую систему защиты от телефонных мошенников разрабатывают в России

Новую систему защиты от телефонных мошенников разрабатывают в России Разработка позволит с вероятностью 99% выявить, что клиент общался со злоумышленниками и предупредить его о рисках …

Основные новости 16:00, июня 6, 2024 | atvmedia.ru
Разрабатывают новую стратегию 3D-печати с пористыми структурами с контролируемыми градиентами

Разрабатывают новую стратегию 3D-печати с пористыми структурами с контролируемыми градиентами Технология экструзии материалов 3D-печати широко используется в биопроизводстве/биопечати, тканевой инженерии, гибкой электронике и мягкой робототехн …

Hardware 20:12, июля 8, 2024 | android-robot.com
Каждому  по однушке: в Алтайском крае разрабатывают новую строительную стратегию

Каждому – по "однушке": в Алтайском крае разрабатывают новую строительную стратегию Через шесть лет на одного жителя Алтайского края должно приходиться 33 кв. метра жилья. Через девять лет – 38 кв. метров. Путь к этим показателям опи …

Основные новости 10:55, мая 21, 2024 | tolknews.ru
Ученые СКФУ разрабатывают новую концепцию для оценки потенциальной радоноопасности территорий

Ученые СКФУ разрабатывают новую концепцию для оценки потенциальной радоноопасности территорий Исследования проводятся совместно с коллегами из МГУ И РАН на территории Кавказских Минеральных Вод, в Алтайском крае и Московском регионе …

Основные новости 17:35, июня 1, 2024 | atvmedia.ru
Брянский священник освятил новую партию маскировочных сетей для воинов СВО

Брянский священник освятил новую партию маскировочных сетей для воинов СВО Благочинный Навлинского церковного округа, настоятель храма в честь Казанской иконы Божией Матери поселка Навля и руководитель Координационного центр …

Основные новости 00:12, сентября 30, 2025 | брянский-рабочий.рф
Бакалавры смогут завершить обучение без перехода на новую систему образования

Бакалавры смогут завершить обучение без перехода на новую систему образования Студенты, которые начали обучение по программе бакалавриата, смогут завершить учебу, не переходя на новую систему высшего образования. Об этом 18 мая …

Основные новости 15:20, мая 18, 2024 | iz.ru
Alibaba представила думающую ИИ-модель QwQ-32B, которая лучше DeepSeek R1

Alibaba представила «думающую» ИИ-модель QwQ-32B, которая лучше DeepSeek R1 Китайская компания Alibaba Group Holding представила модель QwQ-32B на основе искусственного интеллекта (ИИ) с открытым исходным кодом со способность …

Hardware 15:12, марта 6, 2025 | 3dnews.ru
Создана модель ИИ, которая намеренно портит учебные изображения

Создана модель ИИ, которая намеренно портит учебные изображения Ранее искусственный интеллект, преобразующий текст в изображение, боролся со сложной юридической проблемой: нарушением авторских прав. Обученные на о …

Технологии, Наука 23:55, мая 22, 2024 | ferra.ru
Alibaba представила открытую ИИ-модель, которая лучше OpenAI

Alibaba представила открытую ИИ-модель, которая лучше OpenAI Китайская компания Alibaba представила модель искусственного интеллекта с открытым исходным кодом под названием QwQ-32B-Preview. Модель способна реша …

Hardware 15:12, ноября 28, 2024 | 3dnews.ru
Amazon разработала ИИ-модель, которая умеет работать с видео

Amazon разработала ИИ-модель, которая умеет работать с видео Amazon разработала собственную систему генеративного искусственного интеллекта, которая способна работать с текстом, изображениями и видео. Она помож …

Hardware 15:12, ноября 28, 2024 | 3dnews.ru
Alibaba представила большую языковую модель, которая отчасти превзошла GPT-4

Alibaba представила большую языковую модель, которая отчасти превзошла GPT-4 Компания Alibaba Cloud анонсировала выпуск улучшенной версии своей большой языковой модели Qwen2.5. Новая нейросеть продемонстрировала превосходство …

Hardware 02:00, мая 10, 2024 | 3dnews.ru
OpenAI представила новую ИИ-модель GPT-4o

OpenAI представила новую ИИ-модель GPT-4o Американская компания OpenAI представила мультимодальную модель генеративного искусственного интеллекта GPT-4o, которая может анализировать звук, изо …

Технологии, Наука 14:05, мая 14, 2024 | kommersant.ru
Vodafone разрабатывает собственную модель ИИ, которая будет работать как помощник оператора

Vodafone разрабатывает собственную модель ИИ, которая будет работать как помощник оператора Компания разработала собственную ИИ-модель, которая будет работать как супервизор в контакт-центрах, фактически выполняя роль помощника оператора. Vo …

Гаджеты 18:00, мая 29, 2024 | gagadget.com
Смартфон Oppo Reno11F 5G: добротная среднеуровневая модель, которая хорошо фотографирует

Смартфон Oppo Reno11F 5G: добротная среднеуровневая модель, которая хорошо фотографирует Смартфон показал себя истинным «середнячком» по всем параметрам. Он не хватает звезд с небес, не выделяется ничем особенным, но и откровенных провало …

Технологии, Наука 20:12, июля 25, 2024 | ixbt.com
МТС выпустила новую модель для создания ИИ-агентов

МТС выпустила новую модель для создания ИИ-агентов Отличительной особенностью разработки являются улучшенные способности многошаговой работы в агентном режиме …

Экономика 15:12, октября 30, 2025 | tass.ru
OpenAI представили новую модель  o1. Она в 5 раз умнее GPT-4o

OpenAI представили новую модель — o1. Она в 5 раз умнее GPT-4o OpenAI выпустили свою долгожданную модель o1, первую модель компании, способную к рассуждению, которая значительно превосходит своих предшественников …

Технологии, Наука 05:12, сентября 17, 2024 | itzine.ru
Т-Банк представил ИИ-модель T-Pro 2.0 с гибридными рассуждениями, которая вдвое экономнее DeepSeek R1-Distil

«Т-Банк» представил ИИ-модель T-Pro 2.0 с гибридными рассуждениями, которая вдвое экономнее DeepSeek R1-Distil Группа «Т-Технологии» представила свою первую большую языковую модель (LLM) с гибридным режимом рассуждений — T-Pro 2.0, входящую в …

Hardware 05:12, июля 19, 2025 | 3dnews.ru
Google представила модель Gemini, которая заполняет в браузере формы и играет в 2048

Google представила модель Gemini, которая заполняет в браузере формы и играет в 2048 Компания Google представила предварительную версию новой ИИ-модели Gemini 2.5 с функцией Computer Use, которая способна взаимодействовать с веб-сайта …

Software 10:12, октября 8, 2025 | 3dnews.ru
Новую модель маскировочного нашлемника создали ставропольцы

Новую модель маскировочного нашлемника создали ставропольцы В Ставрополе создали новую модель маскировочного нашлемника. По задумке конструкторов эта деталь экипировка помогает спрятать бойца и днём, и ночью …

Основные новости 12:40, мая 13, 2024 | stavropolye.tv
Новую модель Lada представили на ПМЭФ-2024

Новую модель Lada представили на ПМЭФ-2024 На Петербургском международном экономическом форуме (ПМЭФ-2024) была представлена новая модель автомобиля Lada Iskra. …

Основные новости 03:00, июня 6, 2024 | 24smi.org
В России введут новую модель высшего образования

В России введут новую модель высшего образования Заместитель председателя правительства России Дмитрий Чернышенко заявил, что в стране введут новую модель высшего образования. …

Общество, регионы 15:45, мая 12, 2024 | news.rambler.ru
Автоваз представил новую модель Lada Iskra

«Автоваз» представил новую модель Lada Iskra «Автоваз» представил свою новую модель Lada Iskra на ПМЭФ. Машина малинового цвета представлена в кузове седан, в будущем компания планирует выпускат …

Бизнес, Промышленность, Энергетика 17:00, июня 5, 2024 | forbes.ru
TCL представила новую модель QLED-телевизора C655 PRO

TCL представила новую модель QLED-телевизора C655 PRO Серия C655 PRO от TCL использует матрицу с классическим разрешением 4К и более 100 зонами локального затемнения, которые позволяют добиться более глу …

Технологии, Наука 16:55, июня 11, 2024 | ichip.ru
OpenAI представила новую модель чат-бота ChatGPT

OpenAI представила новую модель чат-бота ChatGPT Американская научно-исследовательская компания OpenAI представила новую версию чат-бота ChatGPT — GPT-4o. Об этом сообщает CNN. Как рассказали в комп …

Технологии, Наука 03:20, мая 14, 2024 | news.rambler.ru
OpenAI представила новую модель искусственного интеллекта GPT-4o

OpenAI представила новую модель искусственного интеллекта GPT-4o Компания OpenAI, разработчик чат-бота ChatGPT, представила новую модель искусственного интеллекта – GPT-4o. Она быстрее предыдущей версии и обладает …

Основные новости 04:10, мая 14, 2024 | vz.ru
Ученые разработали новую модель рождения Вселенной

Ученые разработали новую модель рождения Вселенной Современная космология предполагает, что во Вселенной начальный этап был хаотичным состоянием квантовой пены, наполненным случайными энергетическими …

Технологии, Наука 05:12, января 23, 2025 | api.follow.it
Депутат назвал новую выплату, которая будет назначаться автоматически

Депутат назвал новую выплату, которая будет назначаться автоматически Со следующего года пенсионеры старше 80 лет и инвалиды I группы будут автоматически получать выплату в размере 1,2 тысячи рублей. С соответствующим з …

Основные новости 05:12, августа 20, 2024 | life.ru