Microsofts patent avslöjar nya planer för att spionera användare för bättre Bing-sökresultat

Microsoft har fått riklig kritik under det senaste året för att införa funktioner som kan äventyra användarsäkerheten och i viss utsträckning är vi överens om att företaget vid vissa tillfällen gick över gränsen - särskilt med EEF-kritik. Men Microsofts svar på anklagelser om att samla in onödig användardata har inte övertygat någon om något annat beteende. I slutändan ser det ut som att Microsoft kommer att få ännu mer kundkritik om dess senaste patentansökningsfunktion avfyras.

Företaget hänvisar till sin patentansökan mjukvaruprodukt som en "Query Formulation Via Task Continuum" och hävdar att den kommer att göra delning i realtid mellan appar enklare och bekvämare, vilket gör det möjligt för användare att fatta mer informerade beslut medan de gör sökningar. . Till exempel kan sökning förbättras om tillräcklig information om användarens mål finns tillgänglig.

Microsoft utarbetade med ett exempel: om någon arbetar med ett dansrelaterat projekt, för att samla in relaterad data från webbläsaren skulle de behöva skriva in vad deras krav är i sökfältet utan att webbläsaren själv har något instinkt eller ofrivilligt förslag alls.

Microsoft stöder sin idé genom att säga att applikationerna i sin nuvarande programvarumodell är begränsade i sina egna silor, något som i slutändan skadar produktivitet och tillväxt.

Den första applikationen ger inte webbläsarens implicita tips om vad användaren kan söka när det går över från den första applikationen till den andra applikationen.

Användaren uppfattar uppgifter i helheten. Eftersom applikationer vanligtvis är frånkopplade och inte förmedlas på något sätt av operativsystemet har datorsystemet ingen aning om användarens övergripande mål..

Enligt Microsoft är en möjlig lösning på detta problem att ha en neutral skiljeman från tredje part för att övervaka och lära sig användarnas beteende och avsikt genom en ordbehandlingsmekanism, en PDF-läsare, jämförelse och analys av nyligen interagerade bilder, identifiering av ljud och musik, loggning av ofta markerade platser och andra relaterade kontextuppgifter. Och efter att ha samlat in denna realtidsdata kan medlaren lagra allt, ta bort all identifierande information och ge relevant information till Bing, vilket ger automatiserade, korrekta och fokuserade resultat.

Patentanteckningarna:

Den avslöjade arkitekturen innefattar en förmedlingskomponent (t.ex. ett API (applikationsprogramgränssnitt) som en del av operativsystemet (OS)) som identifierar engagerade applikationsapplikationer som användaren interagerar med för att slutföra uppgiften (i motsats till vilande applikationsapplikationer användaren inte interagerar med för att slutföra uppgiften), och samlar in och övervakar aktivt information från de engagerade applikationerna (t.ex. text som visas direkt för användaren, text inbäddad i foton, fingeravtryck av sånger etc.) för att härleda en användares arbetskontext . Den härledda kontexten kan sedan överlämnas till en av applikationerna, till exempel en webbläsare (det härledda sammanhanget i en form som inte passerar sekretessbarriären) för att ge förbättrad rangordning för de föreslagna frågorna genom den föredragna sökleverantören. Eftersom sammanhanget härleds till begrepp kommuniceras ingen PII (personligt identifierbar information) utan användarens samtycke. Endast mycket höga kontextuella begrepp tillhandahålls till sökmotorerna.
Arkitekturen gör det möjligt att fånga signaler (t.ex. vanlig text som visas för användaren, text som känns igen från bilder, ljud från en låt som spelas och så vidare) och kluster dessa signaler i kontextuella begrepp. Dessa signaler är data på hög nivå (t.ex. ord) som hjälper till att identifiera vad användaren gör. Denna handling att fånga signaler är tidsmässig genom att den kan förändras ständigt (t.ex. liknar löpande medelvärde för kontextuella begrepp). Signalerna kan förändras kontinuerligt baserat på vad användaren gör vid tidpunkten T (och vad användaren gjorde från T-10 till tidpunkten T).
När du använder webbläsarprogrammet som det program som använder de fångade signalerna, sänder webbläsaren och tar emot (t.ex. kontinuerligt, periodiskt, på begäran, etc.) med medlingskomponenten genom ett medling-API för medlingskomponenten för att hämta den senaste kontextuella begrepp.
När användaren så småningom interagerar med eller förväntas interagera med, webbläsaren (som kan beräknas som ofta och / eller baserat på en historia av sekventiella användaråtgärder som resulterar i att användaren interagerar med webbläsaren nästa), de kontextuella begreppen skickas till sökleverantören tillsammans med frågeprefixet. Sökmotorn (t.ex. Bing ™ och Cortana ™ (en intelligent personlig taligenkänningsassistent) av Microsoft Corporation) använder kontextuella rankare för att justera standardrankningen för standardföreslagna frågor för att producera mer relevanta föreslagna frågor för tidpunkten. Operativsystemet, som består av funktionen för medlingskomponent, spårar alla textdata som visas för användaren av vilken applikation som helst och utför sedan kluster för att bestämma användarens avsikt (sammanhang).
Den härledda användarens avsikt som skickas som en signal till sökleverantörer för att förbättra rangordningen av förslag på frågor möjliggör en motsvarande förbättring av användarupplevelsen eftersom frågeförslagen är mer relevanta för vad användaren verkligen försöker uppnå. Arkitekturen är inte begränsad till text, men kan använda igenkänd text i visade foton såväl som den geografiska platsinformationen (t.ex. GPS) som tillhandahålls som en del av fotometadata. På samma sätt kan en annan signal vara ljudfingeravtrycket för en för närvarande spelad låt.
Som indikerat löses frågestämningen på grund av den kontextuella och delade cachen som kan användas av olika applikationer för att förbättra sökrelevansen, sekretess bibehålls eftersom endast en minimalt tillräcklig mängd information skickas från en applikation till en annan applikation och den härledda användarkontext kan delas mellan applikationer, komponenter och enheter.
Medlingskomponenten kan till exempel vara en del av operativsystemet och / eller en separat modul eller komponent i kommunikation med operativsystemet. Som en del av operativsystemet identifierar medlingskomponenten engagerade icke-OS-applikationer på enheten och samlar in och övervakar aktivt information från de engagerade applikationerna för att sluta användarens arbetssammanhang. Den härledda kontexten kan sedan skickas till en av applikationerna, till exempel webbläsaren på ett säkert sätt för att ge förbättrad ranking för de föreslagna frågorna genom den föredragna sökleverantören.

Naturligtvis är det största problemet för användarna hotet om komprometterad information, något som ingen säkerhet från Microsofts kan lindra. Idén om patentet liknar något av Googles Now on Tap eller Screen Search, ett verktyg som skrapar arbetsskärmen för kontextuell information och startar en Google-sökning som svar - även om den senaste idén är mycket mer autonom.

Företaget säger att det skulle kunna introducera denna medlare som antingen en inbyggd funktion eller som en valfri modul som kan installeras i Windows 10. Om det är det senare fallet kan plattformen revolutionera automatiserade sökningar och potentiellt vara ett kraftfullt verktyg för kontextuell medvetenhet datoranvändning. Men igen, om en inbyggd funktion introduceras, skulle operativsystemet fungera föråldrat från en personlig nivå och de flesta användare skulle leta efter en väg ut ur funktionaliteten.