Un any després, la funció "En aquest dia" exemplifica com A.I. Canvia Facebook

Fa un any, Facebook va publicar la seva funció "Aquest dia". Invers va parlar amb el responsable de la investigació en visió per computador de Facebook de Manohar Paluri sobre com la intel·ligència artificial, l'aprenentatge automàtic i la visió per computador fan que aquesta característica sigui més significativa i com aquestes àrees de recerca i desenvolupament continuaran millorant l'experiència de Facebook en els propers anys.

Fins i tot si no heu utilitzat la funció En aquest dia, heu vist aquests missatges al voltant del vostre feed de notícies; has vist un amic tornar a compartir un esdeveniment del seu passat de Facebook. No puc creure que hagin passat tres anys des que el mag va treure un conill d'un barret! aparellat amb una foto d’aquest mag que va treure el conill del barret. Una cosa semblant a això. I avui, Facebook comparteix la seva pròpia memòria. Aquest dia, fa un any, Facebook va llançar aquest dia. (Ara, aquest dia compta amb més de 60 milions de visitants diaris i 155 milions subscriuen les seves notificacions.)

Però per a Facebook, aquesta memòria és menys sentimental que una fita. Facebook desplega constantment noves funcions, i aquestes funcions són examinades i modificades constantment. De vegades són éssers humans, com Paluri i el seu equip, qui fan els retocs; altres vegades és A.I.s. La majoria de vegades, però, és simbiòtica. Facebook és com un cyborg, i aquest cyborg té un raó de ser: per fer que la vostra experiència de Facebook sigui més agradable possible.

La visió per computador, la comprensió del contingut i A.I. s’ha pogut veure l’equip de Facebook, si voleu, com a placa base del cyborg. I Paluri, per continuar la metàfora, és la unitat central de processament d'aquesta placa base. Paluri treballa en visió per computador des de fa més d'una dècada, i no té cap fregit: va començar a SRI, va passar als laboratoris IBM Watson i des d'allí va saltar a Google. I ara està a Menlo Park a Facebook. Quan es va unir, el seu projecte de pràctiques de reconeixement visual es va acabar com a "columna vertebral", diu, de la tecnologia de comprensió de vídeo i imatge de Facebook. I aquest motor de reconeixement visual és cada vegada més central en Facebook.

"Si es té en compte l'ús de Facebook amb el pas del temps, i aquest és un exemple, Mark Zuckerberg també cita sovint: veus que els mitjans de comunicació són més rics i més rics, i la gent utilitza això per connectar-se", diu Paluri. “Comenceu des del text, aneu a les fotos; de les fotos que aneu als vídeos i dels vídeos que ara anem a VR. Com que el mitjà de comunicació es fa més ric i més ric, també és important que les eines es posin al dia, que les eines entenguin el que és aquest contingut. A menys que tinguem això, no podrem fer millors resultats en la classificació de News Feed, no serem capaços de fer millor la recuperació de la cerca, no serem capaços de fer millor en descriure fotografies per a persones cecs, no serem capaç de construir millors mapes de densitat de població."

Publicar per zuck.

La centralitat relativament nova de la intel·ligència artificial, l’aprenentatge automàtic i la visió per ordinador, diu Paluri, és una mica d’una “aposta estratègica”, però una aposta que l’excita. En cap altre part que hagi treballat té un feedback tan ajustat i un bucle de resposta entre la investigació i l’enginyeria. "Centralitzant-lo, processem amb l'estat de la tècnica, impulsem l'estat de la tècnica, i després els equips de productes i la resta de l'empresa es poden enganxar", diu.

Ara, Paluri gestiona l’equip de visió per ordinador. "L'objectiu d'alt nivell per a l'equip és fer que les màquines vegin com fan els humans", explica Paluri. "I anar més enllà, en realitat, anar més enllà del que els éssers humans són capaços, per exemple, de reconeixement de gra fi. Publiquem els nostres resultats a les millors conferències, escrivim blogs tècnics i estem molt oberts sobre el que estem treballant. En general, el nostre objectiu principal és portar la tecnologia de visió per computador a la resta de grups de productes a Facebook."

I el principal producte que està recollint la collita de l’equip de Paluri és que aquest dia és el que passa.

Darrere del vel simplista i innocent que es troba en aquest dia es troba un complex A.I. i sistema de visió per ordinador que ajusta la vostra experiència mnemotècnica. Paluri, que - de nou - només està lligat tangencialment a On This Day, explica per què reviure els records de les xarxes socials pot ser una bona cosa:

“La nostàlgia és un fenomen molt positiu. Per tant, veure la foto de la vostra boda, per exemple, d'una manera improvisada: quan no la navegueu específicament, però només apareix al vostre butlletí de notícies, és una experiència molt agradable. Especialment quan esteu navegant en el present i surt un record positiu del passat ".

"La nostàlgia és un fenomen molt positiu".

No obstant això, hi ha, sens dubte, nostàlgia que cau més en el costat amarg de l’espectre agredolç. "El primer que em ve a la ment", diu Paluri, és: "¿Hauria de superar tots els records? La resposta intuïtiva és no, perquè depèn del vostre estat actual, depèn d'aquesta memòria específica; hi ha moltes, moltes coses intrínseques. Aquí és on A.I. la tecnologia arriba a la imatge."

I hi ha dues maneres en què l’A. entra aquí, un: personalització; dos, comprensió del contingut.

Pel que fa a aquest últim, entendre el contingut: “Aquests records són memòries de text, esdeveniments de la vida, fotos que heu pujat o vídeos que heu penjat. Així doncs, ara teniu aquesta gran quantitat de contingut que té diferents modalitats i que entendre què hi ha és extremadament important per poder aprendre i proporcionar el conjunt de memòries adequades."

A més, i no només per On This Day (comprensió del contingut) i A.I. els sistemes ajuden a desfermar la immensa quantitat d'informació que hi ha a Facebook cada dia. (Penseu en això: si el feed de notícies de Facebook s’assemblés al de Instagram, ho veuríeu pot ser dos per cent de totes les publicacions. En comptes d’això, heu conegut el contingut que probablement us agradarà, o el contingut que passareu molt de temps absorbint.) I ajuda a filtrar el contingut desagradable, com ara la pornografia, més que qualsevol altre lloc en línia.

"Tot i que és una pèrdua, els porta un record positiu".

I pel que fa a la primera, Paluri explica: "Potser, per a tu, mirar bé els records positius, i no t'agrada res negatiu. Però per a algú més, potser volen recordar-se que van perdre el seu gat aquest dia. Tot i que és una pèrdua, els posa una memòria positiva. ”I, en cert sentit, cada usuari de Facebook té un perfil altament personalitzat, darrere de les escenes, que sap el que vol o no vol recordar. "A mesura que interactueu amb els records, a mesura que compartiu, com voleu, o quan descartem, hi ha un model d'aprenentatge automàtic que utilitza el mòdul de comprensió del contingut, juntament amb les vostres preferències, i personalitza els records futurs que us serviran."

Però no us preocupeu: Facebook vol assegurar-vos que no us recordeu de manera rudesa una ruptura o un pas d'un familiar. "No importa el bo que sigui l'AI. o la tecnologia d’aprenentatge automàtic és, encara voldríem donar control a l’usuari, ja que al final el nostre objectiu és ressorgir dels records que els agrada. ”Els usuaris obtenen un interruptor de substitució:“ Si saben que, entre aquests dates, una cosa negativa que va succeir: es van separar o alguna cosa així: volem donar-los el control total per no aparèixer aquests records."

Dins de les preferències d’Aquest dia, podeu dir No em mostreu records amb tal i tal perquè és un humà menyspreable o bé … dels últims tres anys que eren miserables i de cap manera notables.

Mirant endavant, Paluri explica per què està encantat de continuar treballant en el desenvolupament d'aquests sistemes i de millorar la qualitat de la placa base de Facebook.

Ja heu esmentat altres aplicacions per a sistemes de comprensió de continguts i de visió a Facebook. Hi ha alguna cosa que encara es trobi a les obres, que utilitza aquests sistemes, que us emociona?

Totes aquestes capacitats en els vídeos són quelcom que em fascina, segur. Definitivament, això ja existeix; és una cosa contínua, perquè el vídeo és bastant gran a Facebook. Però crec que, a un cert nivell, volem fer-nos més rics i més rics en entendre-ho. La tecnologia actual de la visió per computador encara no existeix quant a la descripció d’imatges de la manera com fan els humans. Pot ser que us digui que aquesta foto té aquestes coses, que aquest és el píxel que pertany al gat, i així successivament, però és limitat. Encara no entén la relació entre les coses, i encara no la descriu de manera humana.

Hi ha alguns treballs que descriuen imatges: es diu subtítols de la imatge. Hi ha un munt de treballs que van sorgir en els darrers dos anys. Però, si mireu les llegendes que generen aquests sistemes, són molt generals. No són descriptius. Una de les coses que ens agradaria, i que vindrà en el nostre futur, és descriure-les d'una manera molt més rica. Tant per a imatges com per a vídeo. Si teniu un vídeo de dos minuts, no voleu fer cap descripció de la frase; el que voleu és un paràgraf amb un sentit temporal per a la descripció, oi? "Això va succeir, llavors això va passar, llavors va passar això", no? Això és una bona comprensió.

Així doncs, busqueu sortir de la meva feina, ja ho esteu dient. En resum.

Riures No, definitivament no. Estic fent la vostra feina més interessant.

Tens ganes que Facebook sigui un lloc estrany perquè aquesta investigació succeeixi o sigui un lloc perfecte?

Crec que és un lloc perfecte, perquè la comprensió del contingut és a l’ADN de Facebook. Si mireu l’explosió de l’ús de Facebook, News Feed és un dels pilars que van permetre a Facebook ser una increïble xarxa social en comparació amb molts altres competidors. News Feed, encara, és el principal canal de distribució.

Però quan arribeu a News Feed, no teniu cap intenció específica. Vens allà per obtenir informació. Per tant, és important per a nosaltres mostrar-vos les coses correctes, per mostrar-vos coses significatives. Si aneu a altres serveis, potser aneu amb intenció, en aquest cas tot el servei que necessiteu és donar la resposta. Aquí, és com si us donés la pregunta i Us dono la resposta. Per tant, ha de ser realment bo per a algú que segueixi tornant.

Per això, A.I. i la comprensió del contingut és el nucli de Facebook i per què és el millor lloc per a això. Tenint en compte la quantitat de mitjans de comunicació, tenint en compte la quantitat de contingut de Facebook sobre imatges i vídeos, i el canvi cap a més i més vídeo i RV, és el millor lloc per fer A.I. investigació, visió per computador i aprenentatge automàtic.

No és un lloc estrany: sí el lloc.