Windows-bètafunctie kan tekst kopiëren vanaf foto's op Android-telefoons

Een nieuwe functie in Microsoft Phone Link maakt het binnenkort mogelijk om tekst te halen uit foto’s op Android-telefoons. De functie is beschikbaar voor leden van het Windows Insider-programma.

De functie maakt gebruik van optical character recognition om tekst te detecteren in een foto. Ocr is een techniek om geschreven of gedrukte tekst in afbeeldingen, gescande documenten of foto's te herkennen en te converteren naar bewerkbare en doorzoekbare tekst. De functie werkt op Android-telefoons met de Phone Link-app. Als gebruikers foto’s openen in Phone Link, krijgen ze een icoontje met het label ‘tekst’ te zien. Door daarop te tikken, detecteert de app automatisch tekst in een foto. Gebruikers krijgen daarna verschillende opties om de tekst te selecteren of kopiëren.

De functie wordt momenteel getest via het Windows Insider-programma. Om er gebruik van te maken, moeten gebruikers versie 1.24051.91.0 van Phone Link hebben. Ook moet de Windows 11 Insider Dev Channel build 26120.670 gebruikt worden. Die is sinds 17 mei beschikbaar. Volgens The Verge is de functie ook beschikbaar op de Insider Preview build 22635.3646 van Windows 11 in het bètakanaal. Het is niet bekend wanneer de functie naar alle gebruikers komt.

Reacties (18)

[Simon Weel]

'Vroeger' - toen hadden we de Oberon Omni-Reader. State-of-the-art scanner met OCR. En deed het lang niet slecht.
Het lijkt erop dat de huidige generatie Windows ontwikkelaars van na die tijd zijn want ik zie af en toe dingen voorbij komen waarvan ik denk: huh? dat hadden we tig jaar geleden toch al?
OCR is sinds 19-flintstone toch wel zo'n beetje uitontwikkeld. Is het in de vergetelheid geraakt en door een nieuwe generatie ontdekt?

[djexplo]

Momenteel is de focus op "Reading Text in the Wild".

De oude OCR was goed in het lezen van tekst uit een brief of een boek:
- standaard font
- regels recht, en vast regel afstand
- 1 taal b.v. NL

"Reading Text in the Wild"
- Geen vaste Font meer, ook Logo's waarbij letters afwijken, of letters versierd zijn.
- Meer talig
- Tekst niet op regels, maar kan alle oriëntaties en vormen hebben.

Zie b.v. : https://paperswithcode.com/dataset/rctw-17

[batjes]

Verschil is ook dat OCR in het verleden een stuk meer tijd koste om te verwerken en het pas sinds enkele jaren gelukt is om met software dit soort complexe algoritmes zonder al te veel resources te kunnen laten draaien.

Want het is ergens best verbazingwekkend hoe een low-end smartphone dit vandaag de dag fluitend kan uitvoeren.

[lenwar]

19-flintstone

Klopt helemaal OCR bestaat al sinds jaar en dag. De postdiensten zijn er al decennia van afhankelijk. We denken toch niet dat er mensen zijn die met de hand iedere enveloppe gaan sorteren op postcode . Nou scheelt het natuurlijk dat de postsystemen weten wat voor data ze zoeken (Naam, Adres, Postcode, Woonplaats), maar het mechanisme is identiek.

Anyway.
Ik snap de toegevoegde waarde hier niet zo van.

De camera-app op m'n Apple telefoon doet op dit moment ook al hetzelfde. Als ik m'n telefoon richting dit artikel houd, zie ik een icoontje, waarmee ik de tekst in één keer naar m'n klembord zet en het pakken in een tekstdocument. Als ik een foto maak van dit artikel, kan ik in m'n foto's-app de tekst selecteren (direct vanaf de foto alsof het een website in Safari is) en het copy-pasten naar een tekstdocument.

Ik ga er een beetje vanuit dat dit ook al lang kan op Android toestellen, maar dan met de standaard Google-tooling. Wat is dan de toegevoegde waarde van dit mechanisme door Microsoft? (indien dit niet op Android kan, is het wel handig natuurlijk.)

Edit: @TheVivaldi wees me erop dat je hiermee dus tekst direct vanaf Android-toestel naar een Windows systeem kunt copy-pasten. Dan voegt het dus zeker wat toe!

[Reactie gewijzigd door lenwar op 23 juli 2024 16:15]

[locke960]

OCR heb je niets aan als je het resultaat niet (makkelijk) in je andere applicaties kan verwerken.

OCR is niet de innovatie. De innovatie is dat het in Microsoft Phone Link zit, waarmee je je Android telefoon met Windows kunt koppelen. De MS Blurb over Microsoft Phone Link:
"Deze koppeling tussen uw Android-apparaat en pc geeft u direct toegang tot alles waar u van houdt. Lees en beantwoord tekstberichten met gemak, bekijk recente foto's op uw Android-apparaat, gebruik uw favoriete mobiele apps, plaats en ontvang oproepen en beheer de meldingen van uw Android-apparaat op uw pc."

Persoonlijk had ik liever gezien dat OCR als een module was ontwikkelt, welke dan ook in andere Windows applicaties geïntegreerd kan worden, maar dat zal wel niet in de MS strategie passen.

[Simon Weel]

De MS Blurb over Microsoft Phone Link
O. Ik heb me nooit erg verdiept in mobiele telefoons - ze kunnen me niet boeien. En 'dus' dacht ik dat zoiets als de voorgestelde koppeling standaard altijd al aanwezig was? Ik moet me toch meer in de materie verdiepen geloof ik

[Rmaxx]

19-flintstone +1
Ontopic, dit is erg handig, zou het liever zoals hieronder beschreven standaard op mn android (samnsung) hebben, heb het nog niet kunnen vinden, behalve in een ms vertaal app (niet geweldig)...

[ronaldvr]

Ik zou zeggen lees deze discussie maar eens: https://github.com/paperl...less-ngx/discussions/5128 de verschillende engines verschillen blijkbaar drastisch in kwaliteit (en als gemeld in die discussie die op Azure is extreem goed)
En naar aanleiding daarvan heb ik dat eens getest en het verschil was enorm. Een compleet verbleekte kassabon leek me de perfecte test, en gaf bij de vrij standaard engines hier en daar wat onsamenhangende letters, die van Azure haalde er tot mijn stomme verbazing de complete bon uit.

[Arias45]

Kan Samsung zelf al jaren op hun toestellen.
Is toch niet vernieuwend?

[TheVivaldi]

Dus Samsung levert die functie al jaren mee op Windows, om vanaf hun telefoons tekst te kunnen extraheren naar Windows?

[lenwar]

Kan deze functie de tekst vanuit een foto op Android direct naar m'n Windows desktop brengen dan? Dat haal ik niet uit het artikel. In dat geval kan het wel handig zijn. (een nice-to-have zegmaar.)

[TheVivaldi]

Ja.

[Arias45]

Niet in 1 stap nee.

maakt dat dit dan echt een noemenswaardige functie?

[Rmaxx]

Oooowjeee... dan moet ik dus beter zoeken help eens ff ik vind het echt niet bij mijn camera of gallerij, of zit het alleen op de S ?

[Reactie gewijzigd door Rmaxx op 23 juli 2024 16:15]

[Strebor]

Een van de vele redenen waarom ik blij ben met mijn collectie Apple devices (Macbook, iPad, iPhone en Watch). Heen een weer kopiëren en plakken, ook tekst uit foto's tussen die apparaten, werkt fijn en intuïtief.

Mooi dat iets soortgelijks nu naar Windows komt.

[Hell-Slave]

Amazing, heb ik altijd willen doen en nu eindelijk kan het.

[Nimja]

Op MacOS kan dit al een hele tijd in Preview, waar je text kan selecteren in plaatjes.

[mutley69]

Qua privacy en security-inbreuk kan dit nieuwe feature tellen. Hoe lang eer Microsoft een regen aan veroordelingen over zich heen gaat krijgen? (wat ik ook al denk dat hun lot gaat zijn m.b.t. de screenshotfunctie om de 5').