Google toont Astra, een GPT-4-rivaal die de echte wereld door de camera van zijn mobiele telefoon ziet

Tijdens het traditionele ontwikkelaarsevenement Google I / O wij kennen de Project Astra, een nieuwe inteligência kunstmatig die door het bedrijf wordt ontwikkeld. Gedefinieerd als een Multimodale AI met ondersteuning voor het creëren van verschillende soorten inhoud, begrijp hoe het in de praktijk werkt en hoe het nieuwe product kan interageren met de echte wereld, en antwoorden geeft op alledaagse vragen.

Hoe Astra werkt

Gemakkelijk te definiëren als een AI-agent die in de applicatie moet worden geïntegreerd Gemini voor smartphones Androideen Project Astra ‘ziet’ met behulp van de achteruitrijcamera van de smartphone en stuurt realtime reacties naar de gebruiker. Het is alsof je smartphone tot leven komt, zodat je alles om je heen kunt zien.

Tijdens het Google-evenement van vandaag hebben we het gezien Halve Hassabi's het testen van AI in de praktijk – en het hoofd van Google DeepMind en leider van de AI-inspanningen belooft dat het niet is gemanipuleerd. We werden naar een kantoor in Groot-Brittannië vervoerd en zodra ze een luidspreker zag, vroeg de gebruiker de AI om een ​​van de componenten ervan, een tweeter, te identificeren.

Een andere interessante demonstratie was het lezen van programmeercodes op een computerscherm. O Project Astra Het kon niet alleen vaststellen dat de monitor codes weergaf, maar ook aangeven wat ze zouden doen als ze actief waren.

Toen de smartphone ten slotte naar het raam van het kantoor werd gebracht en de gebruiker vroeg in welke buurt het kantoor zich bevond, werd er binnen vijf seconden een antwoord verzonden.

O Google definieerde de Project Astra als “een nuttige AI-agent voor elke dag”, en dat de ontwikkeling de afgelopen vijf jaar is uitgevoerd om een ​​tool te leveren die echt een verschil maakt in het dagelijks leven van gebruikers.

Hoewel we ongelooflijke vooruitgang hebben geboekt bij de ontwikkeling van AI-systemen die multimodale informatie kunnen begrijpen, is het verkorten van de responstijd voor iets spraakmakends een moeilijke technische uitdaging. De afgelopen jaren hebben we gewerkt aan het verbeteren van de manier waarop onze modellen waarnemen, redeneren en praten, om het tempo en de kwaliteit van de interactie natuurlijker te maken.

Google over Project Astra

Geheugenbron

Wat trok de meeste aandacht in de Project Astra het was voor hem de mogelijkheid om alles wat de camera zag te onthouden. Toen de gebruiker vroeg waar haar bril was, antwoordde de AI-agent snel de exacte locatie, namelijk naast een rode appel.

Wanneer je aan het werk gaat met een niet bekendgemaakte slimme bril, wordt de Project Astra Het maakte ook indruk door optimalisaties door te voeren die het dagelijks leven voor veel mensen gemakkelijker maken. De gespreksstijl van de AI-agent van Google is ook erg luchtig, wat aantoont dat het bedrijf zich inzet voor het ontwikkelen van AI’s die de natuurlijke elementen niet buiten beschouwing laten, ook al bestaan ​​ze in het echte leven niet.

Door gebruik te maken van onze kernspraakmodellen verbeteren we ook de manier waarop ze klinken, waardoor agenten een breder scala aan intonaties krijgen. Deze agenten kunnen de context waarin ze worden gebruikt beter begrijpen en reageren snel in het gesprek. Met dit soort technologieën is het gemakkelijk om je een toekomst voor te stellen waarin mensen een gespecialiseerde AI-assistent aan hun zijde kunnen hebben, via een telefoon of bril.

Google over Project Astra

Bekijk het voorbeeld dat vandaag wordt getoond tijdens het Google-nieuwsevenement:

Beschikbaarheid

Volgens eigen gegevens Googleeen Project Astra erin zal worden geïntegreerd Google Tweeling, ter vervanging van de beroemde Google Assistant, later dit jaar. Early adopters zullen dit waarschijnlijk medio september zien, de tijd van het jaar waarin de Google lanceert zijn nieuwe smartphones pixel en zal ook de Android 15 voor smartphonefabrikanten over de hele wereld.

Het idee van het bedrijf is om kleine functies te ontwikkelen die samen een complete optie voor zijn gebruikers vormen. O Project Astra is slechts een deel van een aantal nieuwe functies die worden gepresenteerd in de Google I/O 2024, maar het was zeker duidelijk dat het bedrijf, dat tijdens het twee uur durende evenement 121 keer de term ‘AI’ noemde, steeds meer in deze markt zal investeren.

Google Assistant krijgt nieuw gebruik

Tot op heden vinden andere persoonlijke assistenten het leuk Amazon's Alexa e Siri zijn erg gericht op het verzenden van eenvoudigere antwoorden en door gebruikers geüploade bestanden. Vanaf het moment dat Project Astra is geïntegreerd met de Google Assistant, aanwezig is op verschillende Android-toestellen en zelfs beschikbaar is voor mensen met Apple-toestellen, zal dit zeker een nieuw tijdperk inluiden.

De grote vraag is wanneer dit moet gebeuren en vooral hoe het in de praktijk zal werken. Omdat het nog in ontwikkeling is, moet de AI-agent enkele aanpassingen ondergaan voordat hij voor iedereen wordt vrijgegeven, maar het idee is interessant en heeft nu onze aandacht.

Waar dacht je aan Project Astra? Vertel ons mensen Commentaar!

Zie ook

Gemini Advanced of ChatGPT Plus? Ontdek welke AI de beste is

Google kondigt Gemini 1.5 aan met 87% betere prestaties

Beoordeeld door Glaucon Vital op 14-5-24.