[TC] Чат GPT работает с браузером, заказывает, покупает и так далее. Operator от Open AI.
Здравствуйте все!!!
Компания Open AI представила новый сервис "Operator".
Суть в том, что чат GPT по вашей просьбе может, используя браузер,
заходить на сайты, находить информацию, искать и покупать билеты,
искать и заказывать товары в Интернет-магазинах и так далее.
Это ваш личный секретарь, вы можете давать ему поручения, которые
можно выполнить в Интернете с помощью браузера.
Это официальный сервис от Open AI, необходимые доработки для
качественной реализации такого функционала делаются на уровне
нейросетевых моделей.
Как это работает.
Разрешить нейросети действовать на устройстве пользователя
разработчики не решились. На это пока не решается ни один крупный
разработчик нейросетевых моделей.
Поэтому, весь сервис работает на серверах Open AI и браузер, который
использует ChatGPT находится "в песочнице" под вашей учётной записью
Open AI.
Заходим на страницу сервиса и логинимся с учёткой Open AI.
Пишем чату задание в стиле:
Закажи мне на сайте Ozon.ru микроволновую печь с грилем и конвекцией.
Чат GPT откроет облачный браузер, а в нём сайт Ozon.ru.
Всё происходящее будет отображаться на экране. На странице реального
браузера будет виден облачный браузер Open AI и все выполняемые в нём
действия.
Чат откроет страницу Озона и предложит вам залогиниться. Либо, сперва
найдёт товары, а залогиниться попросит, когда без этого уже никак.
Найдёт варианты товаров и предложит вам ознакомиться и выбрать.
Вы можете ответить текстом, что хочу то-то и то-то, либо можете
посоветоваться по поводу товара с ним же, либо, можете перехватить
контроль одним нажатием кнопки и действовать в облачном браузере
самостоятельно.
Все важные действия, связанные с окончательным заказом или оплатой чат
не выполняет автоматически, а спрашивает подтверждение у пользователя.
Файлы Cookies сохраняются в облачном браузере под вашей учётной
записью и в следующий раз авторизовываться в браузере на том же сайте
Озона уже не потребуется.
Помимо Cookies, в сервисе можно указать информацию, которую "Оператор"
будет знать постоянно. Например, где вы живёте, адрес, на который
нужно оформлять доставку заказов и так далее.
Чат GPT будет использовать это в будущем на других сайтах, если в этом
возникнет необходимость.
Разработчики заявляют, что сервис не работает с кодом страницы,
ChatGPT действует так же, как обычный пользователь, эмулирует мышь и
клавиатуру и делает скриншоты, чтобы после каждого действия оценить
полученные результаты.
Благодаря этому, даже если, например, у сервиса по доставке еды нет
API, Operator всё-равно сможет с ним работать, потому как, ему нужно
только то, что и любому другому обычному пользователю, веб-интерфейс.
А вот у самого сервиса "Operator" API есть, это значит, что
разработчики могут интегрировать этот сервис в свои проекты.
Так что ждём новых решений в программах экранного доступа и
инструментов доступности нового уровня!
Есть защита от опасных действий, сервис не будет выполнять
незаконные или не этичные просьбы пользователя, а так же подстрахует
самого пользователя, перед тем, как подтвердить заказ или заплатить он
остановится и запросит у пользователя подтверждение.
По крайней мере так должно быть по задумке разработчиков.
Если я правильно понял, чат GPT не должен нарушать эти правила, но,
даже если что-то пойдёт не так, здесь же присутствует вторая
реинкарнация чата GPT, (улыбка) задача которой наблюдать за происходящим,
выполнять роль контролёра и, при попытке нарушить правила прервать
работу оператора.
Так же, пользователь всегда может забрать себе управление одним
нажатием кнопки.
После возврата управления Оператору пользователь должен рассказать,
что он сделал и, при необходимости, уточнить задачу, поскольку при
перехвате управления ChatGPT не получает информации о действиях
пользователя и не знает, что было сделано.
Сервис Operator сейчас доступен для жителей США с подпиской Chatgpt Pro от
Open AI.
Сервис работает в тестовом режиме. В будущем, список стран, в которых
доступен Operator будет расширяться.
Компания Open AI официально не предоставляет свои услуги в России.
Сервис "Operator" использует инфраструктуру компании Cloudflare,
доступ серверам этой компании блокируется Роскомнадзором.
Помните, согласно действующему законодательству,
С 1 марта 2024 года в России действует запрет на распространение информации о способах обхода интернет-блокировок. Роскомнадзор наделён полномочиями по блокировке доступа к сайтам, на которых размещается подобная информация.
Под запрет попадает информация, которая описывает процедуры для
доступа к заблокированным сайтам, методы обхода блокировок, а также
любые материалы, способные стимулировать, оправдывать или убеждать в
целесообразности использования инструментов для обхода блокировок.
Запрещается также распространение программного обеспечения,
предназначенного для получения доступа к заблокированным ресурсам.
Суммы штрафов за распространение информации о способах обхода блокировок предусмотрены статьёй 13.41 Кодекса об административных правонарушениях Российской Федерации:
Для физических лиц штраф составляет от 50 000 до 100 000 рублей, а
в случае повторного нарушения -- от 100 000 до 200 000 рублей. 5
Для должностных лиц сумма штрафа варьируется от 200 000 до 400 000
рублей, при следующем нарушении -- от 500 000 до 800 000 рублей. 5
Для организаций штраф составляет от 800 000 рублей до 4 миллионов
рублей. При следующем нарушении сумма рассчитывается в процентном
соотношении от дохода компании, но не может быть менее 4 миллионов рублей.
Я призываю помнить об этом и соблюдать закон.
Почитать о сервисе "Operator" можно на сайте Open AI по ссылке:
https://openai.com/index/introducing-operator/
Посмотреть и послушать презентацию сервиса "Operator" на русском языке
можно на Youtube по ссылке:
https://youtu.be/VsZd_9raAkA?si=4yxp7ruEwNvs8dQ9
Или мой перезалив этого видео в ВК по ссылке, да, так теперь можно
было (-:
https://vk.com/wall-207391732_442
Приветствую! При работе с Copilot в Microsoft Adge часто, хоть и не
всегда возникает временное зависание NVDA. Через минуту-другую озвучка
восстанавливается. При этом бывает, что до момента открытия редактора
всё работает нормально, но при вводе текста NVDA виснет, при этом сбои в
озвучке происходят не всегда. Порой всё работает нормально и
Coopilot-таки нормально выдает ответы. Подскажите, плз, с чем может быть
связана проблема и как с ней разобраться? Установлен Win 10 22 h 2 Nvda
2024.42. С уважением.