Key takeaways
- Live Text känner igen ord i foton och bilder och förvandlar dem till vanlig text.
- iOS 15 och macOS Monterey bakar in Live Text på den djupaste nivån.
- Det är nu ingen skillnad mellan text och bilder av text.
Livetext förvandlar text i foton, skärmdumpar eller till och med från din livekamera till sökbar, kopierbar och redigerbar text.
I iOS 15, iPadOS 15 och macOS Monterey finns Live Text överallt: i skärmdumpar, i ditt fotobibliotek och till och med i textinmatningsområden. Vad den gör är att känna igen ord i vilken bild som helst och sedan omvandla dem till vanlig text. Därifrån kan du välja det, kopiera det, dela det, slå upp det och till och med översätta det. Live Text tar också med Apples "datadetektorer" till festen, så att du till exempel kan trycka på ett telefonnummer i ett foto av en butiksskylt och sedan ringa det med telefonappen.
Om du någonsin har märkt att du trycker på ett ord i en pocketbok för att slå upp dess betydelse, trycker du länge på en länk som är tryckt i en tidning för att se en webbförhandsvisning eller trycker på en plats namn för att se det på en karta, då kommer du att älska Live Text. Det gör den verkliga världen sökbar, redigerbar och mer användbar.
Det fungerar bara
I de nya operativsystemen för Mac, iPad och iPhone är Live Text bara där. Det finns inget speciellt läge. Apple har lagt till livetext överallt där det är vettigt. Det finns en ny knapp varje gång du tar en skärmdump, som låter dig markera all text i bilden, och det är det mest komplexa det någonsin blir.
Det gör den verkliga världen sökbar, redigerbar och mer användbar.
I de flesta fall är texten i ett foto helt enkelt text. Säg att du tog ett foto av en produktetikett i en butik för att komma ihåg att kolla på den senare. Om du tittar på den bilden i appen Foton sveper du bara med fingret över valfri text för att välja den. Det är bara det att nu är alla bilder av text också text, automatiskt. Därifrån kan du dela det, kopiera det, använda den nya inbyggda översättningsfunktionen, ringa numret, öppna en länk, se en adress på en karta och mer.
Search Anything
Första gången du installerar iOS 15 kommer den att skanna och bearbeta ditt fotobibliotek och känna igen all text den hittar. Detta har en mycket kraftfull implikation: om du söker efter något i Spotlight (det systemomfattande sökverktyget), kommer det att inkludera resultat från text i dina foton.
Du kan till exempel hitta kvitton som du fotograferade för flera år sedan, bara genom att söka efter vilken text som helst på kvittot. Försöker du komma ihåg var du åt den där läckra risrätten på semestern på Costa Brava? Om du fotograferade menyn kommer du att kunna hitta den lätt.
Eller vad sägs om att bygga en receptbok utan att ens försöka? Varje gång du ser ett recept i en tidning eller i en receptbok, ta bara en bild så kan du hitta den när som helst.
Livetext förändrar i grunden hur du interagerar med världen. Plötsligt blir varje ord på vilket papper som helst, i alla skyltfönster, skärmdumpar eller vägskyltar lika användbart som text i en anteckningsapp.
Det finns redan bitar av detta i datoranvändning. Googles Translate-app har länge kunnat översätta text genom kameran, och iOS har kunnat skanna och OCR-dokument i Notes-appen ett tag. Men nu när Apple har bakat in Live Text i sina enheter finns det inte längre någon skillnad mellan olika typer av text. Allt är samma. Även dessa skärmdumpar av text som folk lägger upp på Twitter är nu lika användbara som om de hade gjort det ordentligt.
AR Lite
Live Text är ett annat exempel på Apples dykning in i förstärkt verklighet. Vi har sett hur Apple är helt med på AR, från de för långa demos i dess olika keynotes genom åren till de snygga AR-modellerna av nya produkter som låter dig se hur den nya iMac skulle se ut på ditt skrivbord. Apple har också lagt till massor av ljud-AR-funktioner, läser upp meddelanden och varningar eller ger dig vägbeskrivningar via AirPods.
Livetext förändrar i grunden hur du interagerar med världen.
Det är en öppen hemlighet att allt detta är praxis för Apples eventuella AR-glasögonprodukt, och Live Text kommer sannolikt att vara en stor del av det. Dina glasögon kommer inte bara att kunna läsa tecken runt omkring dig för att få bättre medvetenhet, utan de kommer att kunna slå upp information när du läser den.
Men för tillfället drar vi alla nytta av Apples AR-experiment. Live Text är bara fantastiskt. Jag har bara använt det i ett par dagar, och det verkar redan naturligt. Jag kan inte vänta med att se vad apputvecklare gör med den.
