ChatGPT на основе зрения демонстрирует дефицит интерпретации радиологических изображений

ChatGPT на основе зрения демонстрирует дефицит интерпретации радиологических изображений
10:12, сентября 4, 2024 Исследователи, оценивающие производительность ChatGPT-4 Vision, обнаружили, что модель хорошо справилась с текстовыми вопросами радиологического экзамена, но испытывала трудности с точными ответами на вопросы, связанные с изображениями.

Результаты исследования были опубликованы в журнале Radiology. Chat GPT-4 Vision — первая версия большой языковой модели, которая может интерпретировать как текст, так и изображения. «ChatGPT-4 показал себя многообещающим инструментом для помощи рентгенологам в таких задачах, как упрощение отчетов по рентгенологии для пациентов и определение соответствующего протокола для визуализационных исследований», — сказал Чад Клочко, доктор медицины, рентгенолог опорно-двигательного аппарата и исследователь искусственного интеллекта (ИИ) в Henry Ford Health в Детройте, штат Мичиган.

«Благодаря возможностям обработки изображений GPT-4 Vision открывает новые потенциальные возможности для применения в радиологии».

Для исследования исследовательская группа доктора Клочко использовала устаревшие вопросы из Американского колледжа радиологии Diagnostic Radiology In-Training Examinations, серии тестов, используемых для оценки прогресса резидентов-радиологов.

После исключения дубликатов исследователи использовали 377 вопросов в 13 доменах, включая 195 вопросов, которые были только текстовыми, и 182 вопроса, которые содержали изображение.

GPT-4 Vision ответила правильно на 246 из 377 вопросов, получив общий балл 65,3%.

Модель правильно ответила на 81,5% (159) из 195 текстовых запросов и на 47,8% (87) из 182 вопросов с изображениями. «Точность 81,5% для текстовых вопросов отражает производительность предшественника модели», — сказал он.

«Эта согласованность в текстовых вопросах может указывать на то, что модель имеет определенную степень текстового понимания в радиологии». Радиология мочеполовой системы была единственной подспециализацией, в которой GPT-4 Vision показала лучшие результаты по вопросам с изображениями (67%, или 10 из 15), чем по вопросам, содержащим только текст (57%, или четыре из семи).

Модель показала лучшие результаты по вопросам, содержащим только текст, во всех других подспециализациях.

Модель показала наилучшие результаты на вопросах, основанных на изображениях, в областях грудной клетки и мочеполовой системы, правильно ответив на 69% и 67% вопросов, содержащих изображения, соответственно.

Наихудшие результаты модель показала на вопросах, содержащих изображения, в области ядерной медицины, правильно ответив только на два из 10 вопросов. В исследовании также оценивалось влияние различных подсказок на эффективность GPT-4 Vision.

Оригинал: Вы сдаете экзамен по рентгенологии. Изображения вопросов будут загружены. Выберите правильный ответ на каждый вопрос. Базовый: Выберите единственный лучший ответ на следующий вопрос экзамена по рентгенологии для пенсионеров.

Краткая инструкция: Это вопрос экзамена на должность рентгенолога для пенсионеров, чтобы оценить ваши медицинские знания. Выберите одну лучшую букву от.

Источник: android-robot.com
 
 

Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Ученые улучшили качество изображений камеры на основе металинзы

Ученые улучшили качество изображений камеры на основе металинзы Исследователи из Китая научили искусственный интеллект улучшать качество фотографий с камер на металинзах. Металинзы — это очень тонкие пластины, кот …

Технологии, Наука 03:15, мая 17, 2024 | ferra.ru
Отчет Bitget о прозрачности за второй квартал 2025 года демонстрирует высокие результаты с точки зрения влияния, инноваций и роста

Отчет Bitget о прозрачности за второй квартал 2025 года демонстрирует высокие результаты с точки зрения влияния, инноваций и роста Bitget, ведущая мировая криптовалютная биржа и компания Web3, опубликовала свой... Сообщение Отчет Bitget о прозрачности за второй квартал 2025 года …

Технологии, Наука 05:12, июля 23, 2025 | gadgets.su
OpenAI представила обновлённые возможности генерации изображений в ChatGPT

OpenAI представила обновлённые возможности генерации изображений в ChatGPT Во время прямой трансляции во вторник генеральный директор OpenAI Сэм Альтман анонсировал крупное обновление генерации изображений в ChatGPT — первое …

Технологии, Наука 20:12, марта 26, 2025 | itzine.ru
В ChatGPT появилась бесплатная генерация изображений с помощью нейросети DALL-E 3

В ChatGPT появилась бесплатная генерация изображений с помощью нейросети DALL-E 3 Стартап OpenAI объявил о добавлении функции генерации изображений в чат-боте ChatGPT с помощью DALL-E 3. Работает это бесплатно, но с ограничением в …

Технологии, Наука 10:12, августа 13, 2024 | ichip.ru
OpenAI упростила создание изображений: в ChatGPT появились готовые крутые стили

OpenAI упростила создание изображений: в ChatGPT появились готовые «крутые» стили Компания OpenAI внедрила новую функцию в свой генератор изображений, доступный через ChatGPT. Как стало известно изданию BleepingComputer, теперь пол …

Software 05:12, июля 17, 2025 | 3dnews.ru
Siri на основе ChatGPT придется ждать до 2025 года. Apple откладывает запуск основной новой ИИ-функции iOS 18

Siri на основе ChatGPT придется ждать до 2025 года. Apple откладывает запуск основной новой ИИ-функции iOS 18 Недавно мы узнали, что в iOS 18 появится чат-бот на основе языковой модели GPT от OpenAI. Вероятно, это будет та же Siri, только намного более соврем …

Технологии, Наука 20:00, июня 1, 2024 | ixbt.com
Существует проблема интерпретации // Педагоги  о нагрузке на школьников из-за контрольных работ

«Существует проблема интерпретации» // Педагоги — о нагрузке на школьников из-за контрольных работ Контрольные работы в школах не должны занимать больше 10% учебного времени. Об этом в ходе Петербургского международного экономического форума заявил …

Общество, регионы 18:40, июня 9, 2024 | kommersant.ru
Дефицит, перепроизводство и снова дефицит. Производители SSD кошмарят пользователей, продавая накопители ИИ-компаниям и завышая цены

Дефицит, перепроизводство и снова дефицит. Производители SSD кошмарят пользователей, продавая накопители ИИ-компаниям и завышая цены Цены на SSD стремительно растут, но если раньше виноваты в этом были только производители накопителей и памяти, создавшие искусственный дефицит, то т …

Технологии, Наука 02:55, июня 1, 2024 | zoom.cnews.ru
Производственный сектор России демонстрирует ...

Производственный сектор России демонстрирует ... В марте производственный сектор России пережил самое резкое сокращение за последние три года, поскольку объемы производства и новые заказы упали на ф …

Финансы, Экономика, Forex 20:12, апреля 2, 2025 | profinance.ru
Релиз инструментария для обработки изображений GMIC 3.6

Релиз инструментария для обработки изображений G'MIC 3.6 Состоялся релиз фреймворка G'MIC 3.6, предоставляющего универсальный язык сценариев для обработки изображений и графические интерфейсы для преобразов …

Технологии, Наука 15:12, августа 24, 2025 | opennet.ru
Венесуэла демонстрирует силу с российскими истребителями

Венесуэла демонстрирует силу с российскими истребителями В ответ на значительное наращивание военно-морского и воздушного присутствия США в Карибском регионе Венесуэла проводит демонстрацию силы, задействов …

Технологии, Наука 20:12, ноября 9, 2025 | android-robot.com
Стоимость фьючерсов на драгметаллы демонстрирует падение на 3-5%

Стоимость фьючерсов на драгметаллы демонстрирует падение на 3-5% По данным на 17:25 мск, цена фьючерса на палладий с поставкой в декабре 2025 года на NYMEX находилась на уровне $1 403,5 за тройскую унцию …

Экономика 05:12, ноября 15, 2025 | tass.ru
Нефть демонстрирует первое месячное падение с ...

Нефть демонстрирует первое месячное падение с ... График нефти марки Brent интервалами в 1 неделю В пятницу цены на нефть снизились, что стало первым ежемесячным падением с ноября. Это произошло из-з …

Финансы, Экономика, Forex 10:12, марта 3, 2025 | profinance.ru
Доллар демонстрирует первое месячное снижение за ...

Доллар демонстрирует первое месячное снижение за ... График индекса доллара интервалами в 1 неделю Доллар снизился во вторник, но оставался в узких диапазонах по отношению к другим валютам в преддверии …

Forex 15:35, мая 28, 2024 | profinance.ru
Экономика Москвы демонстрирует уверенный рост

Экономика Москвы демонстрирует уверенный рост Экономика столицы показывает высокие темпы роста, несмотря на глобальные вызовы. Об этом сообщил мэр Москвы Сергей Собянин, слова которого приводит п …

Экономика 20:12, августа 11, 2025 | mockva.ru
Sollers демонстрирует рост продаж в 2,5 раза

Sollers демонстрирует рост продаж в 2,5 раза Sollers демонстрирует рост продаж в 2,5 раза. 4451 автомобиль Sollers нашел своих покупателей за первые пять месяцев 2024 года. По сравнению с аналог …

Бизнес, Промышленность, Энергетика 04:00, июня 5, 2024 | finam.ru
Удмуртия демонстрирует большие успехи в агросекторе

Удмуртия демонстрирует большие успехи в агросекторе В Удмуртии валовое производство молока с начала года превысило отметку в 1 миллион тонн, хотя эта информация пока не отражена в официальной статистик …

Экономика 10:12, декабря 25, 2024 | pravda.ru
Intel анонсировала бесплатный ИИ-генератор изображений

Intel анонсировала бесплатный ИИ-генератор изображений В рамках технологической выставки Computex 2024 компания Intel продемонстрировала новое фирменное приложение AI Playground. Это генератор изображений …

Технологии, Наука 16:50, июня 6, 2024 | 4pda.to
OpenAI разработала инструмент для обнаружения ИИ-изображений

OpenAI разработала инструмент для обнаружения ИИ-изображений Американская компания OpenAI, разработчик чат-бота ChatGPT, разработала инструмент для обнаружения изображений, созданных системой искусственного инт …

Финансы, Экономика, Forex 21:10, мая 7, 2024 | finam.ru
Выставка-перфоманс или трансформация изображений и пространства

Выставка-перфоманс или трансформация изображений и пространства Проект создан на основе техники двойного изображения. Благодаря инсталляциям, интерактивным, кинетическим, световым объектам и артистам балета изобра …

Культура и искусство 20:12, октября 12, 2024 | versia.ru
Путин считает, что КНДР демонстрирует желание договариваться с США

Путин считает, что КНДР демонстрирует желание договариваться с США КНДР неоднократно демонстрировала желание договариваться, а действия Пхеньяна являются ответом на внешние угрозы, заявил президент РФ Владимир Путин …

Основные новости 01:25, июня 6, 2024 | interfax.ru
NASA: разработана виртуальная модель космоса из 4 млн изображений

NASA: разработана виртуальная модель космоса из 4 млн изображений Ученые из NASA создали "синтетическую Вселенную" — виртуальную модель космоса под названием OpenUniverse. Эта модель предназначена для исследования т …

Технологии, Наука 20:12, июля 15, 2024 | pravda.ru
В спецификацию PDF добавлена поддержка формата изображений JPEG XL

В спецификацию PDF добавлена поддержка формата изображений JPEG XL Организация PDF Association, занимающееся стандартизацией технологий PDF, добавила поддержку формата изображений JPEG XL в спецификацию PDF. По слова …

Интернет, Игры 15:12, ноября 11, 2025 | opennet.ru
DeepSeek выпустила мощный ИИ-генератор изображений Janus Pro

DeepSeek выпустила мощный ИИ-генератор изображений Janus Pro Китайская компания DeepSeek представила семейство мультимодальных моделей искусственного интеллекта Janus Pro. Как заявляют в компании, ее алгоритмы …

Технологии, Наука 05:12, января 29, 2025 | kommersant.ru
Canon анонсировала двойной VR-объектив для съёмки 3D-изображений

Canon анонсировала двойной VR-объектив для съёмки 3D-изображений Компания Canon презентовала необычный аксессуар для цифровой камеры EOS R7. Им стал двойной объектив RF-S3.9mm F3.5 STM, ориентированный на съёмку ко …

Технологии, Наука 11:50, июня 12, 2024 | 4pda.to
В Ubuntu 25.10 заменят эмулятор терминала и просмотрщик изображений

В Ubuntu 25.10 заменят эмулятор терминала и просмотрщик изображений Разработчики Ubuntu Linux объявили об изменении состава выпуска Ubuntu Desktop 25.10, запланированного на 9 октября этого года. В предстоящем выпуске …

Интернет, Игры 05:12, мая 25, 2025 | opennet.ru
OpenAI представляет инструмент для обнаружения изображений DALL-E

OpenAI представляет инструмент для обнаружения изображений DALL-E OpenAI, поддерживаемая Microsoft компания по искусственному интеллекту, стоящая за популярным генератором изображений DALL-E, во вторник объявила о з …

Software 18:20, мая 8, 2024 | android-robot.com
Утечка изображений Galaxy Tab S11 Ultra в высоком разрешении

Утечка изображений Galaxy Tab S11 Ultra в высоком разрешении Samsung готовится представить четыре новых планшета до конца года, среди которых флагманский Galaxy Tab S11 Ultra. Недавно в сеть попали его изображе …

Гаджеты 15:12, августа 21, 2025 | gagadget.com
OpenAI создает инструмент для обнаружения изображений, созданных ИИ

OpenAI создает инструмент для обнаружения изображений, созданных ИИ Возможности инструментов для создания изображений на основе ИИ достигли такого уровня, что люди могут принимать их за изображения, созданные не ИИ, и …

Технологии, Наука 13:50, мая 9, 2024 | itzine.ru
В США впервые арестовали за создание ИИ-изображений с насилием над детьми

В США впервые арестовали за создание ИИ-изображений с насилием над детьми Министерство юстиции США арестовало мужчину из штата Висконсин за создание и распространение материалов с сексуальным насилием над детьми (о чем в то …

Технологии, Наука 23:55, мая 22, 2024 | ferra.ru
Как повысить качество апскейла изображений в Topaz Photo AI

Как повысить качество апскейла изображений в Topaz Photo AI Topaz Photo AI считается одним из самых мощных инструментов апскейла изображений на основе ИИ. Он неплохо справляется с увеличением разрешения, особе …

Технологии, Наука 05:12, июля 3, 2025 | droidnews.ru
Ученые создали ИИ-платформу для анализ изображений микроскопа

Ученые создали ИИ-платформу для анализ изображений микроскопа Ученые из Португалии и Финляндии создали платформу DL4MicEverywhere, которая позволит ученым-биологам легко использовать искусственный интеллект (ИИ) …

Технологии, Наука 04:50, мая 18, 2024 | ferra.ru