Google показва Astra, съперник на GPT-4, който вижда реалния свят през камерата на мобилния телефон

По време на традиционното събитие за разработчици Google I / O ние знаем Проект Астра, един нов изкуствен интелект който се разработва от компанията. Дефиниран като a Мултимодален AI с поддръжка за създаване на различни видове съдържание, разберете как работи на практика и как новият продукт може да взаимодейства с реалния свят, като носи отговори на ежедневни въпроси.

Как работи Astra

Лесно се дефинира като AI агент, който трябва да бъде интегриран в приложението Близнаци за смартфони Androidили Проект Астра „вижда“ с помощта на задната камера на смартфона и изпраща отговори в реално време на своя потребител. Сякаш вашият смартфон оживя, за да можете да виждате всичко около вас.

По време на днешното събитие на Google видяхме Демис Хасабис тестване на AI на практика — и ръководителят на Google DeepMind и лидерът на усилията за AI обещава, че не е бил манипулиран. Бяхме транспортирани до офис в Обединеното кралство и веднага щом видя високоговорител, потребителят помоли AI ​​да идентифицира един от неговите компоненти, високоговорител.

Друга интересна демонстрация беше четенето на програмни кодове на компютърен екран. О Проект Астра не само беше в състояние да идентифицира, че мониторът показва кодове, но също така посочи какво биха направили, когато работят.

Накрая, когато смартфонът беше донесен до прозореца на офиса и потребителят попита в кой квартал се намира офисът, отговорът беше изпратен за по-малко от пет секунди.

O Google определиха Проект Астра като „полезен AI агент за всеки ден“и че разработката е извършена през последните пет години, за да предостави инструмент, който наистина променя ежедневния живот на потребителите.

Въпреки че постигнахме невероятен напредък в разработването на AI системи, които могат да разберат мултимодална информация, намаляването на времето за реакция за нещо разговорно е трудно инженерно предизвикателство. През последните няколко години работихме, за да подобрим начина, по който нашите модели възприемат, разсъждават и говорят, за да направим темпото и качеството на взаимодействие по-естествено.

Google за проекта Astra

Ресурс на паметта

Какво привлече най-голямо внимание в Проект Астра това беше възможността той да запомни всичко видяно от камерата. Когато потребителят попита къде са очилата й, агентът на AI бързо отговори точното местоположение, което беше до червена ябълка.

Когато се работи върху неразкрити интелигентни очила, Проект Астра Той също така впечатли с извършването на оптимизации, които улесняват ежедневието на много хора. Стилът на разговор на AI агента на Google също е много лек, което показва, че компанията се е ангажирала с разработването на AI, които не оставят настрана естествеността, въпреки че не съществуват в реалния живот.

Като използваме нашите основни говорни модели, ние също подобряваме начина, по който звучат, давайки на агентите по-широк набор от интонации. Тези агенти могат по-добре да разберат контекста, в който се използват, и да реагират бързо в разговора. С технологии като тази е лесно да си представим бъдеще, в което хората могат да имат специализиран AI асистент до себе си, чрез телефон или очила.

Google за проекта Astra

Вижте примера, показан днес на новинарското събитие на Google:

Диспонибилидада

По собствени данни Googleили Проект Астра ще бъдат интегрирани в Google Gemini, заменяйки известния Google Assistant, по-късно тази година. Първите осиновители вероятно ще видят това в средата на септември, времето от годината, когато Google пуска новите си смартфони Pixel и също така ще пусне Android 15 за производителите на смартфони по целия свят.

Идеята на компанията е да разработи малки функции, които заедно формират цялостна опция за своите потребители. О Проект Астра е само част от няколко нови функции, представени в Google I/O 2024 г., но със сигурност беше ясно, че компанията, която спомена термина „AI“ 121 пъти в двучасовото събитие, ще инвестира все повече и повече в този пазар.

Google Assistant получава нова употреба

Към днешна дата други лични асистенти като Амазон Алекса e Siri са много фокусирани върху изпращането на по-прости отговори и файлове, качени от потребителите. От момента, в който Project Astra е интегриран с Google Assistant, присъстващ на няколко устройства с Android и дори достъпен за тези с устройства на Apple, това със сигурност ще постави началото на нова ера.

Големият въпрос е кога трябва да стане това и най-вече как ще стане на практика. Тъй като все още е в процес на разработка, AI агентът трябва да претърпи някои модификации, преди да бъде пуснат за всички, но идеята е интересна и сега привлича нашето внимание.

Какво си намислил Проект Астра? Кажете ни хора Коментар!

Вижте също

Gemini Advanced или ChatGPT Plus? Вижте кой AI е най-добрият

Google обявява Gemini 1.5 с 87% по-добра производителност

Прегледан от Glaucon Vital на 14г.