Слух: ИИ от Apple сможет понимать происходящее на экране

Слух: ИИ от Apple сможет понимать происходящее на экране

Уже в начале лета Apple проведёт конференцию WWDC 2024, где представит обновление своих операционных систем и, как ожидается, расскажет о наработках в области искусственного интеллекта. А пока появилась информация о потенциальных возможностях «яблочного» ИИ.

Apple AI

Как сообщается, специалисты Apple разработали новую систему искусственного интеллекта ReALM, способную понимать, что отображается на экране устройства и соответствующим образом реагировать на пользовательские запросы. Указывается, что достичь этого удалось благодаря приобретению стартапа DarwinAI в прошлом месяце.

ReALM преобразовывает информацию на экране в текст, что позволяет системе работать локально на устройстве без необходимости ресурсоёмкого распознавания изображений. ИИ может понимать, что происходит на экране, в том числе и задачи, происходящие в фоновом режиме. Более того, нейросеть от Apple даже превосходит GPT-4 от OpenAI, несмотря на меньшее количество параметров.

В качестве примера работы этой технологии приводится возможность попросить Siri позвонить по телефону, отображаемому на экране в данный момент.

Источник: mspoweruser.com


  • vdo2000
    А можно попросить сири закинуть денег на счет, который отображается на экране?
    • Star Spangled Banner
      vdo2000,

      Сири съест твои деньги и потратит на свои сервера..

      Амейзинг фича

      (отредактирован)

      • EA0001
        Star Spangled Banner,
        + комиссия за перевод
    • cdiamond2
      "способную понимать, что отображается на экране устройства и соответствующим образом реагировать" - вас предупредили, не показывайте ему взрослое видео
      • Manas08
        cdiamond2,
        Это было бы лечение начального уровня для людей подсевшие на прон. 😺
        • deeforums
          cdiamond2,
          почти, что официально разрешили себе постоянно скринить все действия, любой текст, (который легко анализируется), любые изображения (с определением предметов на изображении), в любых приложениях
        • Lotoss25
          Учитывая недавнюю новость что аппле договорились с гугл использовать их нейросеть.... Они просто переименовали Gemini и хотят снова выпускать емейзинг за счет хомяков....
          • Евразиец
            Lotoss25,
            Вроде бы в статье все написано, но вы как всегда придумываете свою версию. И ведь тут найдутся те, кто в нее поверит и будет пересказывать другим.
            • Lotoss25
              Евразиец,
              Одно другому не мешает. Они просто могут использовать наработки гугл, дарвин и даже чатгпт, а потом просто скажут емейзинг, мы сделали свою нейросеть...
              И самое смешное, что они же и признали что не смогли в свою нейросеть. Но хомяки схавают, я на 100% уверен. И будут доказывать что у них это своя нейронка, на 100% сделана лично яблоком и больше никем...
              • Niberion
                Lotoss25,
                Ого у тебя пичот как. Если ты глянешь сдешние комментарии, то увидишь, что доказывают только андроидофилы. Такие как ты.
                • Lotoss25
                  Niberion,
                  Фьорст хомяк детектед! Сразу на "ты" и "андроидофил"...Ахах)
                  • Niberion
                    Lotoss25,
                    Значит я не ошибся.
                    • Lotoss25
                      Niberion,
                      А я уж точно )))
                • Евразиец
                  Lotoss25,
                  Все корпорации покупают компании, стартапы, наработки. И даже воруют иногда. И потом выпускают под своим брендом. И Гугля с другими не исключение.
                  Но у вас подрывает только от Эппл почему-то. Причем, вы еще и привираете вкупе с фантазией. Странно.
                  • Lotoss25
                    Евразиец,
                    Да, вы правы. Все компании покупают и продают! Это их суть. Только вот большие компании создают много своего. Тот же самсунг, который я тоже не очень люблю, разрабатывает просто огромное количество вещей, вплоть до танков. С нуля, у них свои лаборатории и предприятия для этого. А аппле в большинстве только покупает и потом выдает за свою разработку. И я не говорю про apple часов Джобса, там как раз своих наработок у них было много. Я говорю про современный "емейзинг". И раз уж они обломались со своей нейросетью - я указываю на это. А также на то, что они уже договорились с гугл, про это была тема тут же на 4пда. А раз договорились, значит, будут использовать наработки чужой компании и выдавать за свое, как всегда. И то, что они купили еще какую то компанию - просто добавит "емейзинга". А про гугл будут умалчивать.
                    ПС Почему то майрософт не умалчивает про то, что они добавили наработки chatgpt4 к своему copilot. А вот про современный аппле я уверен - про гугл и остальные компании, участвовавшие в разработке, не будет сказано ни слова...
                    • borlar
                      Lotoss25,
                      видимо поэтому 90% всех андроид смартфонов выглядят как прошлогодний айфон...
                      а ещё интересно как Apple Vison Pro вписывается в вашу теорию о том, что Apple ничего сама не изобретает?
                      • Lotoss25
                        borlar,
                        Для начала вам действительно нужно было поинтересоваться как выглядят современные андроид смартфоны... Челки(и ее "емейзинга" в виде острова) нет практически нигде, пару смартфонов не в счет... Задник камеры сейчас либо круглая блямба(xiaomi 14 ultra, vivo x100 pro, oppo x7 pro и другие топы), либо квадратная блямба(poco x6 pro, iqoo z8, xiaomi 13t и другие середняки и ниже). Где там айфоностиль? Где этот "емейзинг"? На личности не перехожу, но большинство пользователей айфона как раз таки свято уверены что все андроид смартфоны копируют все у айфона, но это далеко не так, особенно сейчас, когда у айфона уже который год даже в внешнем виде стагнация...Я уж молчу про систему, которая устарела на года, по сравнению с андроид...
                        • basil3r
                          Lotoss25,
                          Какой-то ты токсик , явно пересидел в тврп на своем сяоми)
                          • Lotoss25
                            basil3r,
                            Сказал обычный троль))
            • Kagekiyo
              О. Это значит, что он временами сможет приговаривать:"Что ты такое, Олег?".
              • Евразиец
                Kagekiyo,
                Он скоро придет. Ни одну тему про Apple не пропускает. ))
              • NO_NAME87
                ИННОВАЦИИ!
                • k404k
                  Расшифровка слова "понимать" будет или как ? А то на заборе тоже можно написать что "Кузьмич все понял". В современном виде в нейросетях нет никакого "понимания". Зато есть полное непонимание авторов таких статей о чем они пишут.
                  • Svarga Velesovich
                    Как вижу в заголовке apple сразу захожу почитать комментарии) Представители больших корпораций встречаются к примеру где-нибудь в кафе обсуждают, придумывают новые идеи из своих общих разработок и только пара клоудов на пда до жидкого похода в туалет будут спорить какой бренд больше всего принес в их маленький мир)

                    Калифорнийский стартап Infinity Power заявил об успешном создании ядерной батареи, использующей электрохимическое преобразование энергии. Разработка выполнена в форм-факторе «таблетки», гарантирующем безопасное использование.

                     

                    Сотрудники университета Киото продолжают работать над первым в мире лекарством для выращивания зубов. Средство уже успешно протестировали на животных, а теперь исследователи активно готовятся к началу его клинических испытаний, которые стартуют в сентябре текущего года.

                     
                    <div></div><a href='/2024/06/25/3741751/' target='_blank'><img src='https://i.4pda.ws/s/as6ywue3S4wsjFGg0z2I2iyY7kHEE0EmiXkPLY783uK3Miqm98HafRECC.jpg' title='' /></a><div ><img src='https://4pda.to/s/as6yu42hlyXjD7kQLqbvVMOGid.gif' /></div><div></div>

                    Инсайдер kopite7kimi, специализирующийся на «сливах» данных о ПК-железе, поделился информацией о будущих графических процессорах видеокарт GeForce RTX 50. По его словам, «народный» флагман следующего поколения окажется далеко не таким мощным, как можно было предположить.

                     

                    Готовящийся к выпуску смартфон POCO F6 Pro прошёл сертификацию у регулятора NBTC. «Покопавшись» в базе данных, инсайдеры раскрыли все его технические характеристики. Сделать это было несложно — гаджет оказался копией уже представленного ранее устройства бренда Redmi.

                     

                    Без каких-либо презентаций Samsung выпустила в Китае новый смартфон Galaxy C55. В рамках C-серии зачастую выходят бюджетные устройства, но на этот раз мы видим весьма интересный аппарат, способный затмить модели из старшей A-серии.

                     

                    Инсайдер Digital Chat Station опубликовал любопытный аналитический отчёт о текущем положении дел на рынке смартфонов. Он отметил, что ещё недавно ставший рекордом объём оперативной памяти Android-смартфонов не спешит обновляться. Более того, производители гаджетов всё чаще «занижают» этот показатель — и, по мнению инсайдера, делают это осознанно.

                     

                    В Windows 11 уже есть несколько ограничений для пользователей, которые ещё не активировали ОС: водяной знак, урезанная персонализация и частые уведомления с напоминаниями. Вскоре к этому «санкционному» списку может добавиться ещё один пункт — его обнаружили инсайдеры в свежей сборке браузера Edge.

                     

                    Как и предполагалось, Евразийская экономическая комиссия всё же не стала продлевать решение по увеличению порога беспошлинного ввоза посылок с 1 апреля 2024 года. Об этом официально сообщили в Федеральной таможенной службе РФ.

                     

                    Компания Google представила свой аналог сервиса Apple Find My для поиска потерянных смартфонов. Он работает без подключения к интернету, а некоторые гаджеты серии Pixel будут подавать «сигнал SOS» даже при выключенном питании. Представители компании рассказали главные подробности о новой технологии.

                     

                    В сеть попала сервисная инструкция к Tesla Cybertruck, в которой производитель показывает, как устранить неисправность с педалью газа. Именно из-за неё компания ранее отозвала все проданные пикапы. Судя по брошюре, решение похоже на «гаражное».

                     

                    Портал «Код Дурова» обнаружил в свежей бета-версии Telegram для Android новые функции, о которых пока ещё не было объявлено официально. Среди них — глобальный поиск по хэштегам, анимации сообщений и некоторые визуальные изменения.

                     

                    Долгожданный исторический эпос «Смута» вышел чуть больше месяца назад, и сейчас о нём уже практически не вспоминают — тайтл оказался во многом разочаровывающим. Cyberia Nova, впрочем, не намерена бросать своё творение: недавно команда поделилась чёткими планами по исправлению игры.

                     

                    Вакуумный поезд — это концепция высокоскоростного наземного транспорта, которая появилась ещё в 1909 году. В Китае всерьёз намерены её воплотить и уже достигли заметного результата: прототип поезда передвигается быстрее «Сапсана» почти в 2,5 раза.

                     

                    Бренд POCO опубликовал планы по дальнейшему развёртыванию прошивки HyperOS. Во втором квартале, который длится с апреля по июнь, обновление должно выйти для пяти моделей смартфонов. В их числе как флагманские, так и бюджетные аппараты. 

                     

                    Как сообщает издание «Коммерсантъ», крупные ритейлеры обратились к Минпромторгу и Генпрокуратуре с просьбой обратить внимание на новую мошенническую схему, в рамках которой покупатели преднамеренно портят технику, а затем получают компенсации через обращение в суд. Утверждается, что речь идёт о сотнях подобных дел, в рамках которых от крупных ритейлеров только за 2023 год было потребовано свыше 1 миллиарда долларов.

                     

                    Новинку среднего класса от Sony протестировали зарубежные СМИ. В этой модели компания сохранила вытянутый дисплей, миниатюрный корпус и другие фирменные особенности. Стоит ли гаджет внимания массового потребителя? Приводим результаты тестирования и отзывы прессы.

                     
                    Разработчики Banana: «Наша игра не скам, а чит-код на деньги в реальной жизни» Популярное

                    Двадцать лет назад будущее игровой индустрии представлялось не таким, но в 2024 году одним из самых популярных релизов Steam за всю историю стала игра про банан. Разработчики уверяют: их проект не скам, а буквально чит-код на деньги.

                     
                    Ольга Бузова, Камила Валиева и Артемий Лебедев начали хвалить «Смуту». Одновременно Популярное

                    С момента выхода «Смуты» прошло два месяца. Релиз для разработчиков выдался непростым, и с тех пор они выпустили для игры несколько патчей. И вот в сети обратили внимание на любопытное событие: именитые российские инфлюенсеры начали одновременно нахваливать игру.

                     
                    Новый баг Windows 11 «съедает» 10% мощности CPU. Как это исправить? Популярное

                    Некоторые пользователи Windows 11 пожаловались на странную работу одной из системных служб, которая отбирает у процессора до 10% мощности без видимых причин. Официального решения у проблемы пока нет — но энтузиасты уже вычислили «виновника» и нашли способ исправления досадного бага.

                     

                    Вскоре после анонса прошивки Xiaomi HyperOS в сети появилась серия инсайдерских скриншотов, демонстрирующих интерфейс новой прошивки. Изображения позволяют ознакомиться с домашним экраном, дизайном иконок и другими ключевыми элементами наследницы MIUI.

                     

                    Компания MSI представила бюджетную материнскую плату PRO A620M-C EX с процессорным разъёмом AM5. Её главная особенность — сочетание старых и новых технологий. Например, она поддерживает память DDR5-7800 и одновременно оснащена портами D-Sub и RS-232.

                     

                    В конце марта Google удалила приложение Mir Pay из каталога Google Play. Причина — американские санкции в отношении АО «Национальная система платёжных карт» (НСПК), которая обслуживает карты «Мир». В Mir Pay нет автоматического обновления, так что устанавливать апдейты придётся самостоятельно.

                     

                    На российском рынке стартовали продажи новой линейки умных телевизоров TCL V6B. Среди ключевых особенностей стоит выделить разрешение 4K, поддержку HDR, объёмное звучание и операционную систему Google TV. 

                     

                    Пока FromSoftware дразнит геймеров трейлерами дополнения для Elden Ring, истинные фанаты и стримеры вовсю тренируются, чтобы быть готовыми к новым испытаниям. Одна стримерша, например, как раз завершила ультимативный челлендж.

                     

                    Надёжный инсайдер Роланд Квандт рассказал о ещё одном кнопочном телефоне, который выйдет под брендом Nokia. Он опубликовал подробные характеристики и серию качественных рендеров Nokia 3210 (2024) незадолго до премьеры новой «звонилки».

                     

                    Авторы мобильного бенчмарка AnTuTu подвели итоги марта, определив топ-10 смартфонов под управлением операционной системы Android с наибольшим уровнем удовлетворённости пользователей. К удивлению, в рейтинг попала относительно новая модель. 

                     
                    Популярнейший POCO X6 Pro на Dimensity 8300 Ultra снова доступен со скидкой Популярное

                    Бренд POCO снизил стоимость на популярный среди пользователей POCO X6 Pro. Напомним, что смартфон оснащён высокопроизводительным игровым чипом Dimensity 8300 Ultra, ёмкой АКБ, камерой с высоким разрешением и расширенными игровыми возможностями.

                     

                    Компания Anker пополнила ассортимент аудиотехники, выпустив новую портативную Bluetooth-колонку Soundcore Boom 2 Plus. Она создана для использования на открытом воздухе, поэтому обладает водозащитой по стандарту IPX7, мощным звуком и удобным корпусом с ручкой для переноски.

                     
                    Привет из 90-х: энтузиаст создал MP3-плеер в стиле Winamp [ВИДЕО] Популярное

                    Легендарный проигрыватель Winamp смог обрести физическую форму благодаря инженеру Родриго Мендесу (DIY Rodmg). Он создал аппаратную версию медиаплеера на базе Raspberry Pi, назвав её Linamp. Возможности необычного устройства он продемонстрировал на своём YouTube-канале.

                     

                    Google не стала дожидаться конференции I/O 2024, объявив о выпуске нового смартфона Pixel 8a сразу после презентации новых iPad. Аппарат многое унаследовал от старших моделей серии и получил целый ряд значительных улучшений в сравнении с предшественником.

                     

                    Компания Samsung Electronics расширила поддержку языков в Galaxy AI, добавив к общему списку три новых, включая и русский язык. Речь идёт об интеллектуальной функции перевода телефонных разговоров в режиме реального времени.

                     

                    IT-эксперты из компаний Security Discovery и Cybernews обнаружили в сети базу данных на 12 ТБ, содержащую информацию об учётных записях пользователей со всего мира. «Под раздачу» попали Telegram, VK, X, Adobe и другие платформы. Специалисты рассказали, чем это грозит, и как проверить свои аккаунты на предмет «слива».