Laitteella toimiva ääniavustaja iPhonelle: miten se toimii ja mitä odottaa
Laitteella toimiva ääniavustaja on kolme ohjelmaa, jotka toimivat vuorotellen: yksi kuulee sinut, toinen päättää, mitä sanoa ja tehdä, ja kolmas puhuu. Useimmat avustajat ajavat keskimmäistä, ja usein kahta muutakin, palvelimella. Orvena ajaa oletuksena kaikkia kolmea iPhonessa. Tässä kerrotaan, mitä se vaatii, miten otat sen käyttöön ja missä rajat kulkevat.
Mitä laitteella toimiva ääniavustaja ajaa puhelimessa
Kuuleminen. Orvena käyttää Applen laitteella toimivaa puheentunnistinta iOS 26:n Speech-kehyksestä. Kun puhut jotain kieltä ensimmäistä kertaa, iOS lataa kyseisen kielen tunnistusmallin, joten lyhyt "Valmistellaan…"-tauko ennen kuin pääset puhumaan kestää sillä kertaa tavallista kauemmin.
Päättäminen. Sama malli, joka vastaa, kun kirjoitat: Orvena 4B, Orvenan oma malli, 3,1 GB:n lataus, joka toimii puhelimen grafiikkasuorittimella, tai iOS 27:ssä Apple Intelligence, joka on rakennettu iOS:ään. Se voi käyttää puhelimen työkaluja puhuessasi: siirtää kokouksen, asettaa herätyksen, tarkistaa sään, löytää kuvan.
Puhuminen. Kaksi neuroverkkopohjaista puhemoottoria tuottaa äänen puhelimessa. Toinen kattaa englannin, espanjan, ranskan, italian ja portugalin, ja sen lataus on noin 345 MB; toinen kattaa 26 muuta kieltä ja on 400 MB. Kummastakin on myös iPhonen Neural Enginelle tehty versio, ensimmäisestä 634 MB ja toisesta 129 MB, joten puhe ei kilpaile kielimallin kanssa grafiikkasuorittimesta. Kaikki haetaan, kun avaat äänen käyttöösi, lataus valmistuu taustalla, ja ensimmäinen äänikeskustelu valmistelee ne kerran.
Keskustelun seuraaminen. Orvenan oma pieni malli, Cue, päättelee, mitä tarkoitat, kun puhut Orvenan puhuessa, ja vastaa lyhyisiin repliikkeihin, kuten "kuuletko minua?", ilman kielimallia. Se on 385 MB:n lataus ja tekee jokaisen päätöksen Neural Enginessä noin 10 millisekunnissa.
Kummalla tahansa laitteella toimivalla mallilla mikään tämän kierron osa ei kulje verkon yli. Lentokonetila on rehellinen testi: laita se päälle, aloita äänikeskustelu, kysy, mitä kalenterissasi on huomenna, ja kuuntele vastaus.
Keskustelun aloittaminen
- Sovelluksessa. Napauta kysymyspalkin ääniaaltopainiketta. Koko näytön ääninäkymä avautuu, ja näppäimistöpainikkeella voit palata kirjoittamaan milloin tahansa keskustelua menettämättä.
- Toimintopainikkeesta. Avaa Asetukset, valitse Toimintopainike, pyyhkäise kohtaan Pikakomento ja valitse "Puhu Orvenalle". Paina ja puhu. Sama "Puhu Orvenalle" -toiminto toimii myös Pikakomennot-apista ja Sirin kautta (sano Sirille "Puhu Orvena-sovellukselle").
- Dynamic Islandista. Istunnon aikana Live-toiminto näyttää tilan "Listening" (kuuntelee), "Working" (työskentelee) tai "Approval" (hyväksyntä), ja "Stop"-painike lopettaa kuuntelun, vaikka olisit poistunut sovelluksesta.
Miten vuoro etenee
Orvena kuuntelee ja näyttää litteroinnin puhuessasi. Se katsoo vuorosi päättyneeksi 1,5 sekunnin hiljaisuuden jälkeen, tai 0,6 sekunnin jälkeen, jos tunnistin on jo merkinnyt lauseesi valmiiksi. Siksi vuorottelu tuntuu nopealta katkaisematta sinua kesken ajatuksen. Sitten Orvena miettii, käyttää työkalua, jos pyyntö sitä vaatii, näyttää tuloksen korttina ja puhuu vastauksen. Kun vastaus päättyy, se kuuntelee taas, joten keskustelu jatkuu käsiä käyttämättä. Istunto päättyy, kun napautat Lopeta, tai kun 90 sekuntiin ei ole sanottu mitään.
Orvena kuuntelee myös silloin, kun se miettii ja puhuu, ja iPhonen kaiunpoisto pitää sen oman äänen poissa mikrofonista. Kun alat puhua, sen ääni hiljenee sillä aikaa, kun Cue päättelee, mitä tarkoitit: "mm" antaa sen jatkaa, "odota" tai "seis" lopettaa vastauksen, ja uusi kysymys pysäyttää sen ja muuttuu seuraavaksi vuoroksesi. Artikkeli Orvenan keskeyttäminen kertoo, mikä lasketaan miksikin ja mitä Orvena vastaa ilman kielimallia.
Mikä toimii ilman verkkoa
Kaikki edellä mainittu ja jokainen puhelimessa toimiva työkalu: kalenteri, muistutukset, herätykset ja ajastimet, kuvat, Terveys-apin yhteenvedot, yhteystiedot, tiedostot, musiikki. Yhteyttä tarvitsee se, mikä tarvitsee ulkomaailmaa: verkkohaku, verkkosivun lukeminen, sää, paikkahaku ja matka-ajat, yhdistetyt palvelut kuten Notion tai GitHub, Private Cloud Compute ja jokainen pilvimalli, jonka lisäät omalla avaimellasi. Jokainen näistä on listattu etusivun kirjanpidossa yhdessä sen ehdon kanssa, jolla se käyttää verkkoa.
Rajoitukset
Orvenalla ei ole omaa herätesanaa. iOS varaa jatkuvan kuuntelun Sirille, joten kolmannen osapuolen avustaja on avattava tai käynnistettävä: toimintopainike aloittaa äänikeskustelun, ja kun sanot Sirille "Kysy Orvena-sovellukselta", Siri välittää sille yhden kysymyksen. Malli on pienempi kuin pilviavustajien taustalla toimivat mallit, ja pitkässä tiedonhaussa tai erikoisalalla sen huomaa; siihen, mitä puhelimelta kysytään ääneen, eli aikatauluun, säähän, muistutukseen, kuvaan tai herätykseen, joka ottaa matka-ajan huomioon, se on oikean kokoinen. Ääni vaatii iPhone 15 Pron tai uudemman, jossa on 8 GB muistia, koska kielimalli vaatii sen. Ja se, mitä kieliä Orvena pystyy kuuntelemaan, riippuu Applen laitteella toimivasta tunnistimesta, joka ei vielä kata bulgariaa, viroa, latviaa, liettuaa eikä sloveenia: Orvena lukee ja kirjoittaa niitä, kun kirjoitat, mutta ei pysty kuuntelemaan niitä. Kielivalitsin tarjoaa vain kieliä, joita Orvena pystyy sekä kuulemaan että puhumaan.
Valinnainen pilviääni
Jos sinulla on OpenAI-avain, voit käyttää live-ääni-istunnossa sen sijaan OpenAI:n reaaliaikaista mallia. Se on nopeampi edestakaisessa keskustelussa, mutta vastineeksi äänesi virtaa OpenAI:lle. Orvena pyytää suostumuksen ennen istunnon alkua, kysyy uudelleen, jos keskustelussa on jo terveys- tai taloustietoja, ja merkitsee ääninäkymään keltaisella "pilvi" eikä vihreällä "tällä iPhonella", joten tiedät aina, kumpi tila on käytössä.
Usein kysyttyä
Tarvitseeko Orvenan ääni internetyhteyden?
Ei, kun äänipaketit ovat puhelimessa, samoin Orvenan oma malli, jos käytät sitä Apple Intelligencen sijaan, ja iOS on hakenut kielesi tunnistimen, kun puhuit sitä ensimmäisen kerran. Tunnistus, vastaus ja puhe toimivat kaikki puhelimessa, ellet ole valinnut Private Cloud Computea tai pilvimallia. Vain ulkomaailmaa tarvitsevat pyynnöt, kuten verkkohaku tai sää, käyttävät verkkoa, ja vain silloin, kun pyydät.
Millä kielillä voin puhua sille?
Voit puhua sille 26:lla sen 31 kielestä sekä norjaksi. Applen laitteella toimiva puheentunnistus ei vielä kata bulgariaa, viroa, latviaa, liettuaa eikä sloveenia, joten Orvena ymmärtää ja kirjoittaa niitä, kun kirjoitat, mutta ei pysty kuuntelemaan niitä. Kielikohtaiset ääniavustajaoppaat käyvät läpi jokaisen kielen.
Voinko keskeyttää Orvenan, kun se puhuu?
Kyllä. Ala puhua, niin sen ääni hiljenee, kun se päättelee, mitä tarkoitit. Se jatkaa, jos sanot "mm", lopettaa, jos sanot "odota" tai "seis", ja vastaa uuteen kysymykseen heti. Jos tämän taustalla olevia malleja ei ole vielä voitu ladata, ääni toimii silti ja näyttää ilmoituksen "Keskeyttäminen on toistaiseksi pois päältä. Orvena viimeistelee sen, kun käynnistät äänen seuraavan kerran."
Voinko käyttää AirPodeja tai Bluetooth-kuulokkeita?
Kyllä. Ääni-istunnot sallivat sekä Bluetoothin handsfree- että stereoprofiilin, ja muuten käytetään sisäistä kaiutinta.
Onko ääni ilmainen?
Kirjoittaminen on ilmaista ilman rajoituksia. Äänikeskustelut kuuluvat Premium Unlockiin, joka on 14,99 dollarin kertaostos ilman tilausta.
Miksi herätesanaa ei ole?
iOS sallii vain Sirin kuunnella taustalla. Voit sanoa Sirille "Kysy Orvena-sovellukselta", jolloin Siri kysyy, mitä haluat kysyä, tai aloittaa äänikeskustelun toimintopainikkeesta, Pikakomennot-apista tai sovelluksen ääniaaltopainikkeesta.
Orvena on ilmainen App Storessa iPhone 15 Prolle ja uudemmille. Äänikeskustelut kuuluvat Premium Unlockiin, joka on kertaostos.
Lataa App Storesta