Microsoft heeft het afgelopen jaar veel kritiek gekregen op de introductie van functies die de gebruikersveiligheid in gevaar kunnen brengen en we zijn het er tot op zekere hoogte mee eens dat het bedrijf bij sommige gelegenheden de grens overschreed - vooral met de kritiek op het EEF. Maar het antwoord van Microsoft op beschuldigingen van het verzamelen van onnodige gebruikersgegevens heeft niemand overtuigd van enig ander gedrag. Uiteindelijk lijkt het erop dat Microsoft nog meer kritiek krijgt van klanten als de nieuwste functie voor patentaanvragen wordt geactiveerd.

Het bedrijf verwijst naar hun softwareproduct voor patentaanvragen als een 'Query Formulation Via Task Continuum' en beweert dat het delen in realtime gemakkelijker en handiger tussen apps gaat maken, waardoor gebruikers beter geïnformeerde beslissingen kunnen nemen tijdens het zoeken. Het zoeken kan bijvoorbeeld worden verbeterd als er voldoende informatie beschikbaar is over het doel van een gebruiker.

Microsoft werkte een voorbeeld uit: als iemand aan een dans-gerelateerd project werkt, om gerelateerde gegevens van de browser te verzamelen, moeten ze in de zoekbalk typen wat hun vereisten zijn, zonder dat de browser zelf geen instinct of onvrijwillige suggestie heeft.

Microsoft ondersteunt zijn idee door te zeggen dat applicaties in hun huidige softwaremodel zich beperken tot hun eigen silo's, iets dat uiteindelijk de productiviteit en de groei schaadt.

De eerste applicatie geeft de browser geen impliciete hints over wat de gebruiker mogelijk zoekt wanneer er wordt overgeschakeld van de eerste naar de tweede applicatie.

De gebruiker neemt taken in de totaliteit waar. Aangezien toepassingen echter meestal worden losgekoppeld en op geen enkele manier worden gemedieerd door het besturingssysteem, heeft het computersysteem geen idee van het algemene doel van de gebruiker.

Volgens Microsoft is een mogelijke oplossing voor dit probleem het hebben van een neutrale derde partij om gebruikersgedrag en intentie te volgen en te leren door middel van een tekstverwerkingsmechanisme, een PDF-lezer, de vergelijking en analyse van recent geïnterviewde afbeeldingen, de identificatie van geluiden en muziek, het loggen van vaak gemarkeerde locaties en andere gerelateerde contextuele gegevens. En na het verzamelen van deze realtime gegevens kan de bemiddelaar alles opslaan, identificerende informatie verwijderen en relevante informatie aan Bing verstrekken, waardoor geautomatiseerde, nauwkeurige en gerichte resultaten worden geproduceerd.

Het patent merkt op:

De geopenbaarde architectuur omvat een bemiddelingscomponent (bijvoorbeeld een API (applicatieprogramma-interface) als onderdeel van het besturingssysteem (OS)) die betrokken applicaties identificeert - applicaties waarmee de gebruiker samenwerkt voor taakuitvoering (in tegenstelling tot slapende applicaties - applicaties de gebruiker heeft geen interactie met de taak om te voltooien), en verzamelt en bewaakt actief informatie van de betrokken applicaties (bijv. tekst die direct aan de gebruiker wordt weergegeven, tekst ingebed in foto's, vingerafdruk van liedjes, etc.) om de werkcontext van een gebruiker af te leiden. De afgeleide context kan vervolgens worden overgedragen aan een van de applicaties, zoals een browser (de afgeleide context in een vorm die de privacybarrière niet overschrijdt) om een ​​betere rangorde te bieden voor de voorgestelde zoekopdrachten via de voorkeurszoekprovider. Aangezien de context in concepten wordt afgeleid, wordt geen PII (persoonlijk identificeerbare informatie) gecommuniceerd zonder toestemming van de gebruiker - alleen contextuele concepten op zeer hoog niveau worden aan de zoekmachines verstrekt.

De architectuur maakt het mogelijk signalen te vangen (bijv. Tekst zonder opmaak die aan de gebruiker wordt weergegeven, tekst die wordt herkend door afbeeldingen, audio van een nummer dat momenteel wordt afgespeeld, enzovoort) en bundelt deze signalen in contextuele concepten. Deze signalen zijn gegevens op hoog niveau (bijvoorbeeld woorden) die helpen identificeren wat de gebruiker doet. Deze handeling van het vastleggen van signalen is tijdelijk, in die zin dat het constant kan veranderen (bijvoorbeeld vergelijkbaar met het lopende gemiddelde van contextuele concepten). De signalen kunnen continu veranderen op basis van wat de gebruiker op tijdstip T doet (en wat de gebruiker van T-10 tot tijdstip T deed).

Wanneer u de browsertoepassing gebruikt als de toepassing die de vastgelegde signalen gebruikt, verzendt en ontvangt de browser (bijvoorbeeld continu, periodiek, op aanvraag, enz.) Met de bemiddelingscomponent via een bemiddelings-API van de bemiddelingscomponent om de nieuwste contextuele informatie op te halen concepten.

Wanneer de gebruiker uiteindelijk een interactie aangaat met, of verwacht wordt te interageren met, de browser (zoals kan worden berekend als frequent voorkomend en / of gebaseerd op een geschiedenis van opeenvolgende gebruikersacties die resulteert in de interactie van de gebruiker met de browser vervolgens), de contextuele concepten worden samen met het zoekvoorvoegsel naar de zoekmachine verzonden. De zoekmachine (bijv. Bing ™ en Cortana ™ (een intelligente persoonlijke assistent voor digitale spraakherkenning) van Microsoft Corporation) gebruikt contextuele ranglijsten om de standaardrangschikking van de standaard voorgestelde zoekopdrachten aan te passen om relevantere voorgestelde zoekopdrachten voor het tijdstip te produceren. Het besturingssysteem, dat de functie van bemiddelingscomponent omvat, houdt alle tekstgegevens bij die door een toepassing aan de gebruiker worden weergegeven en voert vervolgens clustering uit om de gebruikersintentie (contextueel) te bepalen.

De afgeleide gebruikersintentie die als een signaal naar zoekproviders wordt verzonden om de rangschikking van zoeksuggesties te verbeteren, maakt een overeenkomstige verbetering van de gebruikerservaring mogelijk, aangezien de zoeksuggesties relevanter zijn voor wat de gebruiker daadwerkelijk probeert te bereiken. De architectuur is niet beperkt tot tekst, maar kan gebruik maken van herkende tekst in weergegeven foto's, evenals de geolocatie-informatie (bijv. GPS-systeem) die wordt geleverd als onderdeel van de metagegevens van de foto. Evenzo kan een ander signaal de audiovingerafdruk zijn van een nummer dat momenteel wordt afgespeeld.

Zoals aangegeven, wordt het oplossen van zoekopdrachten opgelost vanwege de contextuele en gedeelde cache die door verschillende applicaties kan worden gebruikt om de relevantie van de zoekopdracht te verbeteren. Privacy wordt gehandhaafd omdat slechts een minimaal voldoende hoeveelheid informatie van de ene naar de andere applicatie wordt verzonden en de afgeleide gebruikerscontext kan worden gedeeld tussen applicaties, componenten en apparaten.

De bemiddelingscomponent kan bijvoorbeeld deel uitmaken van het besturingssysteem en / of een afzonderlijke module of component in communicatie met het besturingssysteem. Als onderdeel van het besturingssysteem identificeert de bemiddelingscomponent betrokken niet-OS-toepassingen op het apparaat en verzamelt en bewaakt actief informatie van de betrokken toepassingen om de werkcontext van de gebruiker af te leiden. De afgeleide context kan vervolgens op een veilige manier worden doorgegeven aan een van de applicaties, zoals de browser, om de voorgestelde zoekopdrachten beter te kunnen rangschikken via de gewenste zoekmachine.

De grootste zorg voor gebruikers is natuurlijk de dreiging van gecompromitteerde informatie, iets dat geen enkele mate van zekerheid van Microsoft kan verlichten. Het idee van het patent lijkt enigszins op Google's Now on Tap of Screen Search, een tool die het werkscherm schraapt voor contextuele informatie en in reactie daarop een Google-zoekopdracht start - hoewel het nieuwste idee veel autonomer is.

Het bedrijf zegt dat het deze Mediator zou kunnen introduceren als een ingebouwde functie of als een optionele module die op Windows 10 kan worden geïnstalleerd. Als dit het laatste geval is, kan dit platform een ​​automatische revolutie teweegbrengen en mogelijk een krachtig hulpmiddel zijn voor contextueel bewustzijn computing. Maar nogmaals, als een ingebouwde functie wordt geïntroduceerd, wordt het besturingssysteem op persoonlijk niveau verouderd en zoeken de meeste gebruikers naar een uitweg uit de functionaliteit.