Microsoft Cortana kylskåp kommer att berätta när du är ute av mjölk

Tänk om ditt kylskåp skulle kunna skjuta ett textmeddelande som berättar att du har slutat med mjölk, eller att du måste lagra på Tabasco sås. Ses långt ifrån? Microsoft har gått ihop med apparatdelningen av Liebherr för att bygga en Cortana-kylenhet som bara gör det.

Båda företagen arbetar med den senaste versionen av SmartDeviceBox. Du kan integrera den i något Liebherr-kylskåp eller frys, ansluta dem till Internet. Det kommer att innehålla en kamera som intelligent identifierar innehållet och informerar användaren när en viss mat är låg.

Microsoft håller mamma om hur mycket det här kommer att kosta. De säger att enheten bara är en prototyp, om än en som visar mycket löftet. Men Microsoft säger att det kommer att vara modulärt, underhållbart och uppgraderbart.

Redan Microsoft har bekräftat förekomsten av en röstmodul, som tillåter användare att lägga till matvaror på en smartphonebaserad inköpslista genom att bara prata.

Drivs av Deep Learning och Artificial Neural Networks

Microsoft är inte det första företaget som går in i det smarta kylrummet. Det är verkligen ett nischfält, men ett som har funnits i nästan 16 år. Det började när LG lanserade det första Internet-kylskåpet - Internet Digital DIOS. Ett antal företag kämpar för dominans för närvarande 3 bästa smarta kylskåp du kan köpa just nu 3 bästa smarta kylskåp du kan köpa just nu Det finns för tillfället en uppsättning nya smarta kylmodeller, eftersom tillverkarna försöker ge sin nästa generation av produkter en ny överklagande. Det finns några bra produkter på marknaden. Läs mer, inklusive Electrolux, LG, Whirlpool och Samsung.

Några av de mest intressanta enheterna har kommit från Samsung. I början av året tillkännagav det Tizen-baserade Samsung Family Hub-kylskåp. Dess $ 5 000 pricetag är inte det enda som är massivt om det; den packar en 21,5 tums 1080p pekskärm, Amazon Alexa integration och tre integrerade kameror som tillåter användaren att se innehållet från en följeslagare ansökan.

Men det finns något märkbart spännande om denna Cortana-kylansträngning från Redmond.

Hur SmartDeviceBox fungerar

Medan Samsung Family Hub Refrigerator kräver att du manuellt kontrollerar hur mycket du har i ditt kylskåp, gör Microsofts SmartDeviceBox det här för dig. Det gör det genom sin djuplärande-drivna objektigenkänningsteknik, som gör det möjligt att identifiera varje enskilt objekt.

Microsofts djupa inlärningsteknik beror på konstgjorda neurala nätverk. Det här är dataprogram som inspireras av mänskliga hjärnans biologiska processer, och viktigast av allt kan de lära sig och förbättra med erfarenhet.

Dessa låter som science fiction men YouTube använder det redan för att identifiera videoinnehåll. YouTube kommer att använda neurala nätverk för att verkligen förstå videoklipp. YouTube kommer att använda neurala nätverk för att verkligen förstå videor. Sökning YouTube kan vara frustrerande eftersom YouTube inte ser videon som en person gör. Nyligen lägger Google ett patent som kan ändra det. Läs mer, och till och med skapa konstverk Skapa dina egna "Neural Paintings" med DeepStyle & Ubuntu Skapa dina egna "Neural Paintings" med DeepStyle & Ubuntu Visste du att neurala nätverk kan också måla? Forskare har utbildat ett stort neuralt nätverk för att göra fotografier till "neurala målningar" som ser ut som om de målades av kända artister. Läs mer .

Utvecklare bygger konstgjorda neurala nätverk i en serie lager. Teorin är att fler lager skulle leda till bättre resultat; i det här fallet skulle det leda till mer exakt erkännande av föremål. Men det finns ett problem med detta. När du lägger till fler lager finns det en slags “signalnedbrytning” och data går vilse.

Det är typiskt om du bygger ett komplicerat datornätverk med riktigt billiga routrar och switchar. När ett paket färdas genom varje hopp, finns det en chans att det kan bli tappat.

Microsoft forskningschef Jian Sun sade att:

“... forskare var glada när de framgångsrikt kunde träna ett system med "djupt neuralt nätverk" med åtta lager för tre år sedan och uppskattade när ett "mycket djupt neuralt nätverk" med 20 till 30 lager gav resultat förra året.”

Men med lite försök och misstag snubblat Microsoft på något som det kallar “djupa återstående nätverk”. Dessa är artificiella neurala nätverk som har ett oöverträffat antal lager. Den som Microsoft byggde för ImageNet-tävlingen, som var en tävling om det bästa programmet som kan identifiera fysiska objekt, hade en kolossal 152 lager.

Konstgjorda nätverk behöver arbete

Men för artificiella neurala nätverk är det viktigt att användarna tränar dem. Under utvecklingen av SmartDeviceBox Cortana-kylenheten visade Microsoft programmet bokstavligen miljoner av generiska bilder av livsmedel - mjölk kartonger, ketchup flaskor, pickle burkar, och så vidare. När något placeras i kylskåpet utrustat med Cortana-kylenheten, försöker programmet identifiera det från det som tidigare sett.

Noggrannheten hos det konstgjorda neurala nätverket blir bättre eftersom allt fler använder det. Enligt Microsofts Allison Linn:

“En viktig fördel med neurala nätverk är att de blir bättre vid en uppgift när de ges en annan. Skype Translator erbjuder till exempel levande tolkning i upp till 50 språk - gratis förhandsgranskning nu öppen för alla Skype-översättare erbjuder levande tolkning på upp till 50 språk - gratis förhandsvisning nu öppen för alla alla vill prata ett främmande språk, men få är upp till att lära sig en. Skype Translator kan hjälpa dig att tolka upp till 50 skrivna språk, inklusive Klingon och talat spanska. Så här använder du den. Läs mer, ett neuralt nätverk som är utformat för att översätta från engelska till tyska blir bättre på att översätta tyska när det har blivit utbildat för den extra uppgiften att översätta kinesiska.”

Vi ska se dessa djuplärande konstgjorda neurala nätverk som används i mer sammanhang och applikationer. Denna teknik finns redan i ett antal produkter, inklusive Microsoft Cognitive Services Computer Vision, som kan titta på bilder och kommentera dem. Så om du visar dem ett foto på dig på stranden, borde det kunna ge den en kategori, avgöra om det är en vuxen bild och till och med träna ditt kön och ålder.

Kanske mest spännande, har Microsoft öppnat sina djuplärande algoritmer som en del av CNTK: s Computational Network Toolkit (CNTK), vilket innebär att tredjepartsutvecklare kommer att kunna integrera det i sina program.

Smart kylskåpet klarar Prime-Time

Det är inte ovanligt att höra att folk hänvisar till smarta kylskåp på ett avskyvärt sätt. Kanske med rätta. Många ser dem som ett exempel på den överdrivna och onödiga datoriseringen Tweeting Fridges och Web Controlled Rice Cookers: 9 av de dumaste Smart Vitvaror Tweeting kylskåp och Web Controlled Rice Cookers: 9 av de dummaste Smart Vitvaror Det finns många smarta hem enheter som är värda din tid och pengar. men det finns också slag som aldrig får se dagens ljus. Här är 9 av de värsta. Läs mer av vanliga hushållsapparater. Vem ärligt vill kontrollera sin kalender, eller titta på en film från sitt kylskåp? Vem skulle vilja göra den veckovisa livsmedelsbutiken medan han stod bredvid 200 pund av virvlande krom?

Men jag kan faktiskt se punkten på denna Cortana-kylenhet. Snarare än att fokusera på gör saker, Microsofts SmartDeviceBox känner igen betydelsen av data och hur den kan ge användarna möjlighet. Det vill berätta saker.

Det är fortfarande tidiga dagar, och det är fortfarande väldigt mycket en prototyp, men med tanke på att konsumentteknikens natur blir föråldrad efter några år, är jag glad att SmartDeviceBox är uppgraderbar och modulär. Jag är glad att det bara är en låda som passar in i ett vanligt kylskåp, snarare än en integrerad del av en.

Vad tror du? Kommer du att få en när SmartDeviceBox så småningom slår på mainstream, eller är du fortfarande en bestämd smart kylcynic? Låt mig veta i kommentarerna nedan.

Bildkrediter: Ljupco Smokovski / Shutterstock

Utforska mer om: Smart Appliance, Smart Sensor.