La Microsoft Kinect \u00e9s una c\u00e0mera de profunditat que va apar\u00e8ixer el 2010 per a la Xbox de Microsoft. La versi\u00f3 2 aparegu\u00e9 el 2013, i incorpora un seguit de millores que comentarem m\u00e9s avall.<\/p>\n
Nota hist\u00f2rica i previsi\u00f3 de futur<\/strong><\/h2>\nQuan va apar\u00e8ixer, Kinect aspirava a causar una revoluci\u00f3 al m\u00f3n dels videojocs tan gran com la que uns anys abans havia produ\u00eft l\u2019aparici\u00f3 de la Nintendo Wii. Val a dir que no es va produir tal revoluci\u00f3, sin\u00f3 que va passar sense excessiva pena ni gl\u00f2ria pel m\u00f3n de les consoles de videojoc. Actualment, tot fa pensar que no apareixer\u00e0 la versi\u00f3 3 de Kinect, ja que la ind\u00fastria est\u00e0 clarament i totalment bolcada en els sistemes de realitat virtual. Per tant, podem esperar que a la llarga Kinect s\u2019anir\u00e0 convertint en l\u2019en\u00e8ssim giny des actualitzat i cada vegada menys f\u00e0cil de fer funcionar. …per\u00f2 per a aix\u00f2 encara falta una mica.<\/p>\n
On s\u00ed que Kinect va fer un forat considerable fou, precisament, a l\u2019\u00e0mbit de les arts visuals digitals i la programaci\u00f3 creativa. Per tots aquells que jugaven amb l\u2019\u00fas de les c\u00e0meres de v\u00eddeo com a sensors, per detectar la pres\u00e8ncia d\u2019usuaris, llegir-ne els moviments, estudiar-ne la silueta, etc., la Kinect va ser una benedicci\u00f3 caiguda del cel. D\u2019una tacada, una c\u00e0mera que rondava els 140 euros podia donar aquesta informaci\u00f3 i m\u00e9s. Ja no calia fer substracci\u00f3 de fons, ni patir per qu\u00e8 ten\u00edem darrere la c\u00e0mera, ni per la il\u00b7luminaci\u00f3… i a sobre ens permetia jugar amb par\u00e0metres de profunditat! Una meravella, tot i els seus inevitables problemes, com la inicial falta de compatibilitat, la baixa resoluci\u00f3, o el soroll de la senyal.<\/p>\n
Sigui com sigui, es va fer servir i es fa servir molt, i en aquest cas la previsi\u00f3 de futur \u00e9s del que podr\u00edem dir de resist\u00e8ncia: Mentre hi hagi Kinects per fer funcionar i ordinadors capa\u00e7os de llegir-ne les dades (\u00e9s a dir: fins que nous sistemes operatius les converteixin en obsoletes de tot), hi haur\u00e0 artistes que les tindran a la caixa d\u2019eines per crear experi\u00e8ncies interactives.<\/p>\n
<\/h2>\nQu\u00e8 fa la Kinect?<\/strong><\/h2>\nTant la Kinect original com la versi\u00f3 2 fan essencialment el mateix, tot i que com \u00e9s d\u2019esperar amb millores notables.<\/p>\n
La primera Kinect t\u00e9 tres \u2018ulls\u2019. D\u2019esquerra a dreta, corresponen a l\u2019emissor d\u2019infrarrojos, el receptor i la c\u00e0mera RGB. La Kinect v2 t\u00e9 essencialment el mateix, per\u00f2 nom\u00e9s es veu com a \u2018ull\u2019 la c\u00e0mera RGB de l\u2019esquerra.<\/p>\n
<\/p>\n
![\"\"](\"http:\/\/multimedia.uoc.edu\/blogs\/labpc\/files\/2017\/06\/ks800.jpg\")
<\/a><\/span><\/p>\nL\u2019emissor i receptor d\u2019infrarrojos s\u00f3n els que aporten un element innovador a aquest giny, mentre que la c\u00e0mera RGB no \u00e9s m\u00e9s (ni menys) que una c\u00e0mera de v\u00eddeo normal i corrent.<\/span>Pel que fa als infrarojos, tot i que el resultat final per a l\u2019usuari-programador \u00e9s equivalent, hi ha una difer\u00e8ncia important entre la tecnologia emprada per ambdues versions. Aix\u00ed, Kinect 1 emet una matriu de punts infrarojos amb l\u2019emissor i en llegeix la distorsi\u00f3 i mida amb el receptor, i aix\u00f2 li permet tenir una representaci\u00f3 del que hi ha davant la c\u00e0mera com a mapa de profunditat. La Kinect v2 aconsegueix el mateix resultat per\u00f2 mesurant el temps que triga cada punt a rebotar, el que permet una major precisi\u00f3.<\/p>\nEn resum, el que ens importa des del punt de vista de creadors, \u00e9s quina informaci\u00f3 ens d\u00f3na Kinect (quan la connectem, en el nostre cas, a Processing), i \u00e9s la seg\u00fcent:<\/p>\n
\n- La imatge RGB (imatge de v\u00eddeo normal)<\/li>\n
- La imatge de profunditat, on els p\u00edxels s\u00f3n d\u2019un gris m\u00e9s o menys intens segons la dist\u00e0ncia respecte a la c\u00e0mera.<\/li>\n
- El mapa de profunditat. Una informaci\u00f3 relativament equivalent, que ens d\u00f3na la dist\u00e0ncia de cada un dels punts que la c\u00e0mera pot llegir.<\/li>\n<\/ul>\n
<\/h2>\nProgramoteques Kinect per a Processing<\/strong><\/h2>\n[nota: TermCat suggereix programoteques o biblioteques inform\u00e0tiques enlloc de llibrer\u00edes, per traduir ‘library’]<\/p>\n
Per poc que sigueu usuaris de Processing, ja haureu suposat que per connectar-vos a la c\u00e0mera Kinect us far\u00e0 falta alguna biblioteca inform\u00e0tica, o programoteca<\/a>.<\/p>\nFins no fa gaire, n\u2019hi havia una de molt utilitzada, anomenada SimpleOpenNI<\/a>, que a m\u00e9s de ser compatible tant amb PC com amb Mac, permetia no nom\u00e9s llegir les dades en brut que Kinect sin\u00f3 tamb\u00e9 accedir a funcionalitats extremadament \u00fatils com la de \u2018llegir\u2019 l\u2019esquelet de l\u2019usuari que hi havia davant la c\u00e0mera i accedir als punts clau d\u2019aquest.<\/p>\n![\"\"](\"http:\/\/multimedia.uoc.edu\/blogs\/labpc\/files\/2017\/06\/6039451394_47673fe149_z.jpg\")
<\/a><\/p>\nLamentablement, SimpleOpenNI fa temps que es va deixar d\u2019actualitzar, i no serveix per a Processing 3. Sembla que Apple va comprar el projecte i l\u2019ha desat al calaix… En tot cas, si us interessa podeu baixar-vos-la i tamb\u00e9 instal\u00b7lar-vos una versi\u00f3 de Processing 2, i amb aquesta combinaci\u00f3 hauria de funcionar. Making Things See, de Greg Borenstein, \u00e9s un llibre molt interessant sobre qu\u00e8 pot (o podia) fer Kinect amb SimpleOpenNI, per\u00f2 els exemples que hi han estan tamb\u00e9 desactualitzats.<\/p>\n
Dit aix\u00f2, ens centrarem aqu\u00ed en les tres biblioteques inform\u00e0tiques que s\u00ed que funcionen actualment per a Processing 3. Dues s\u00f3n per a Windows, i van en combinaci\u00f3 amb la SDK de Kinect (i a partir de Windows 7), i l\u2019altra \u00e9s per a Mac (i, com passa amb Mac i els perif\u00e8rics, no cal instal\u00b7lar res m\u00e9s).<\/p>\n
<\/h3>\nWindows (opci\u00f3 1): Kinect v2 for Processing<\/strong><\/h3>\nhttp:\/\/codigogenerativo.com\/kinectpv2\/<\/a>
\nhttps:\/\/github.com\/ThomasLengeling\/KinectPV2<\/a><\/p>\nSi teniu un PC i una Kinect v2, aquesta \u00e9s la millor opci\u00f3 per treure el m\u00e0xim profit de la vostra Kinect. Kinect v2 for Processing est\u00e0 desenvolupada per Thomas Sanchez Lengeling<\/a>, i us donar\u00e0 acc\u00e9s a tot el que podeu fer amb Kinect, tal com podeu veure si us passegeu pel tutorial que l\u2019autor ha penjat a la seva web<\/a>.<\/p>\nPer exemple, i a m\u00e9s d\u2019accedir a les dades en brut, aquesta llibreria us permetr\u00e0 accedir no nom\u00e9s a l\u2019esquelet sin\u00f3 a un sistema de detecci\u00f3 facial. Nom\u00e9s cal activar comandaments com \u201cvoid enableSkeleton(boolean toggle);\u201d o \u201cvoid enableFaceDetection(boolean toggle);\u201d i a partir d\u2019aqu\u00ed seguir els passos per obtenir aquesta informaci\u00f3.<\/p>\n
![\"\"](\"http:\/\/multimedia.uoc.edu\/blogs\/labpc\/files\/2017\/06\/sancez.jpg\")
<\/a><\/p>\nSi teniu PC+Kinect v2, el millor \u00e9s que us instal\u00b7leu aquesta programoteca i obriu els exemples de Sanchez Lengeling i comenceu a jugar-hi. El hacking ben ent\u00e8s \u00e9s aix\u00f2: Jugar amb el codi a partir del que trobes per aconseguir el que vols.<\/p>\n
<\/h3>\nWindows (opci\u00f3 2): Kinect4Win SDK<\/strong><\/h3>\nhttp:\/\/www.magicandlove.com\/blog\/research\/kinect-for-processing-library\/<\/a><\/p>\nQui es pot resistir a una web que es diu Magic & Love? L\u2019artista japon\u00e8s Bryan Wai-ching Chung \u00e9s el responsable d\u2019aquesta biblioteca inform\u00e0tica que se\u2019ns presenta com a alternativa pels usuaris de PC amb una Kinect original.<\/p>\n
![\"\"](\"http:\/\/multimedia.uoc.edu\/blogs\/labpc\/files\/2017\/06\/MagicKinectTest.jpg\")
<\/a><\/p>\nCom es pot apreciar a la darrera data d\u2019actualitzaci\u00f3 (05\/07\/2014), fa dies que Chung no actualitza el projecte, per\u00f2 s\u00ed que est\u00e0 disponible per a Processing 3 i, tot i que ja a simple vista es veu que no \u00e9s tant potent com l\u2019anterior, \u00e9s una alternativa a tenir en compte.<\/p>\n
<\/h3>\nMac: Open Kinect for Processing 1.0<\/strong><\/h3>\n
Qu\u00e8 fa la Kinect?<\/strong><\/h2>\nTant la Kinect original com la versi\u00f3 2 fan essencialment el mateix, tot i que com \u00e9s d\u2019esperar amb millores notables.<\/p>\n
La primera Kinect t\u00e9 tres \u2018ulls\u2019. D\u2019esquerra a dreta, corresponen a l\u2019emissor d\u2019infrarrojos, el receptor i la c\u00e0mera RGB. La Kinect v2 t\u00e9 essencialment el mateix, per\u00f2 nom\u00e9s es veu com a \u2018ull\u2019 la c\u00e0mera RGB de l\u2019esquerra.<\/p>\n
<\/p>\n
<\/a><\/span><\/p>\nL\u2019emissor i receptor d\u2019infrarrojos s\u00f3n els que aporten un element innovador a aquest giny, mentre que la c\u00e0mera RGB no \u00e9s m\u00e9s (ni menys) que una c\u00e0mera de v\u00eddeo normal i corrent.<\/span>Pel que fa als infrarojos, tot i que el resultat final per a l\u2019usuari-programador \u00e9s equivalent, hi ha una difer\u00e8ncia important entre la tecnologia emprada per ambdues versions. Aix\u00ed, Kinect 1 emet una matriu de punts infrarojos amb l\u2019emissor i en llegeix la distorsi\u00f3 i mida amb el receptor, i aix\u00f2 li permet tenir una representaci\u00f3 del que hi ha davant la c\u00e0mera com a mapa de profunditat. La Kinect v2 aconsegueix el mateix resultat per\u00f2 mesurant el temps que triga cada punt a rebotar, el que permet una major precisi\u00f3.<\/p>\nEn resum, el que ens importa des del punt de vista de creadors, \u00e9s quina informaci\u00f3 ens d\u00f3na Kinect (quan la connectem, en el nostre cas, a Processing), i \u00e9s la seg\u00fcent:<\/p>\n
\n- La imatge RGB (imatge de v\u00eddeo normal)<\/li>\n
- La imatge de profunditat, on els p\u00edxels s\u00f3n d\u2019un gris m\u00e9s o menys intens segons la dist\u00e0ncia respecte a la c\u00e0mera.<\/li>\n
- El mapa de profunditat. Una informaci\u00f3 relativament equivalent, que ens d\u00f3na la dist\u00e0ncia de cada un dels punts que la c\u00e0mera pot llegir.<\/li>\n<\/ul>\n
<\/h2>\nProgramoteques Kinect per a Processing<\/strong><\/h2>\n[nota: TermCat suggereix programoteques o biblioteques inform\u00e0tiques enlloc de llibrer\u00edes, per traduir ‘library’]<\/p>\n
Per poc que sigueu usuaris de Processing, ja haureu suposat que per connectar-vos a la c\u00e0mera Kinect us far\u00e0 falta alguna biblioteca inform\u00e0tica, o programoteca<\/a>.<\/p>\nFins no fa gaire, n\u2019hi havia una de molt utilitzada, anomenada SimpleOpenNI<\/a>, que a m\u00e9s de ser compatible tant amb PC com amb Mac, permetia no nom\u00e9s llegir les dades en brut que Kinect sin\u00f3 tamb\u00e9 accedir a funcionalitats extremadament \u00fatils com la de \u2018llegir\u2019 l\u2019esquelet de l\u2019usuari que hi havia davant la c\u00e0mera i accedir als punts clau d\u2019aquest.<\/p>\n<\/a><\/p>\nLamentablement, SimpleOpenNI fa temps que es va deixar d\u2019actualitzar, i no serveix per a Processing 3. Sembla que Apple va comprar el projecte i l\u2019ha desat al calaix… En tot cas, si us interessa podeu baixar-vos-la i tamb\u00e9 instal\u00b7lar-vos una versi\u00f3 de Processing 2, i amb aquesta combinaci\u00f3 hauria de funcionar. Making Things See, de Greg Borenstein, \u00e9s un llibre molt interessant sobre qu\u00e8 pot (o podia) fer Kinect amb SimpleOpenNI, per\u00f2 els exemples que hi han estan tamb\u00e9 desactualitzats.<\/p>\n
Dit aix\u00f2, ens centrarem aqu\u00ed en les tres biblioteques inform\u00e0tiques que s\u00ed que funcionen actualment per a Processing 3. Dues s\u00f3n per a Windows, i van en combinaci\u00f3 amb la SDK de Kinect (i a partir de Windows 7), i l\u2019altra \u00e9s per a Mac (i, com passa amb Mac i els perif\u00e8rics, no cal instal\u00b7lar res m\u00e9s).<\/p>\n
<\/h3>\nWindows (opci\u00f3 1): Kinect v2 for Processing<\/strong><\/h3>\nhttp:\/\/codigogenerativo.com\/kinectpv2\/<\/a>
\nhttps:\/\/github.com\/ThomasLengeling\/KinectPV2<\/a><\/p>\nSi teniu un PC i una Kinect v2, aquesta \u00e9s la millor opci\u00f3 per treure el m\u00e0xim profit de la vostra Kinect. Kinect v2 for Processing est\u00e0 desenvolupada per Thomas Sanchez Lengeling<\/a>, i us donar\u00e0 acc\u00e9s a tot el que podeu fer amb Kinect, tal com podeu veure si us passegeu pel tutorial que l\u2019autor ha penjat a la seva web<\/a>.<\/p>\nPer exemple, i a m\u00e9s d\u2019accedir a les dades en brut, aquesta llibreria us permetr\u00e0 accedir no nom\u00e9s a l\u2019esquelet sin\u00f3 a un sistema de detecci\u00f3 facial. Nom\u00e9s cal activar comandaments com \u201cvoid enableSkeleton(boolean toggle);\u201d o \u201cvoid enableFaceDetection(boolean toggle);\u201d i a partir d\u2019aqu\u00ed seguir els passos per obtenir aquesta informaci\u00f3.<\/p>\n
<\/a><\/p>\nSi teniu PC+Kinect v2, el millor \u00e9s que us instal\u00b7leu aquesta programoteca i obriu els exemples de Sanchez Lengeling i comenceu a jugar-hi. El hacking ben ent\u00e8s \u00e9s aix\u00f2: Jugar amb el codi a partir del que trobes per aconseguir el que vols.<\/p>\n
<\/h3>\nWindows (opci\u00f3 2): Kinect4Win SDK<\/strong><\/h3>\nhttp:\/\/www.magicandlove.com\/blog\/research\/kinect-for-processing-library\/<\/a><\/p>\nQui es pot resistir a una web que es diu Magic & Love? L\u2019artista japon\u00e8s Bryan Wai-ching Chung \u00e9s el responsable d\u2019aquesta biblioteca inform\u00e0tica que se\u2019ns presenta com a alternativa pels usuaris de PC amb una Kinect original.<\/p>\n
<\/a><\/p>\nCom es pot apreciar a la darrera data d\u2019actualitzaci\u00f3 (05\/07\/2014), fa dies que Chung no actualitza el projecte, per\u00f2 s\u00ed que est\u00e0 disponible per a Processing 3 i, tot i que ja a simple vista es veu que no \u00e9s tant potent com l\u2019anterior, \u00e9s una alternativa a tenir en compte.<\/p>\n
<\/h3>\nMac: Open Kinect for Processing 1.0<\/strong><\/h3>\n
<\/a><\/span><\/p>\nL\u2019emissor i receptor d\u2019infrarrojos s\u00f3n els que aporten un element innovador a aquest giny, mentre que la c\u00e0mera RGB no \u00e9s m\u00e9s (ni menys) que una c\u00e0mera de v\u00eddeo normal i corrent.<\/span>Pel que fa als infrarojos, tot i que el resultat final per a l\u2019usuari-programador \u00e9s equivalent, hi ha una difer\u00e8ncia important entre la tecnologia emprada per ambdues versions. Aix\u00ed, Kinect 1 emet una matriu de punts infrarojos amb l\u2019emissor i en llegeix la distorsi\u00f3 i mida amb el receptor, i aix\u00f2 li permet tenir una representaci\u00f3 del que hi ha davant la c\u00e0mera com a mapa de profunditat. La Kinect v2 aconsegueix el mateix resultat per\u00f2 mesurant el temps que triga cada punt a rebotar, el que permet una major precisi\u00f3.<\/p>\n En resum, el que ens importa des del punt de vista de creadors, \u00e9s quina informaci\u00f3 ens d\u00f3na Kinect (quan la connectem, en el nostre cas, a Processing), i \u00e9s la seg\u00fcent:<\/p>\n [nota: TermCat suggereix programoteques o biblioteques inform\u00e0tiques enlloc de llibrer\u00edes, per traduir ‘library’]<\/p>\n Per poc que sigueu usuaris de Processing, ja haureu suposat que per connectar-vos a la c\u00e0mera Kinect us far\u00e0 falta alguna biblioteca inform\u00e0tica, o programoteca<\/a>.<\/p>\n Fins no fa gaire, n\u2019hi havia una de molt utilitzada, anomenada SimpleOpenNI<\/a>, que a m\u00e9s de ser compatible tant amb PC com amb Mac, permetia no nom\u00e9s llegir les dades en brut que Kinect sin\u00f3 tamb\u00e9 accedir a funcionalitats extremadament \u00fatils com la de \u2018llegir\u2019 l\u2019esquelet de l\u2019usuari que hi havia davant la c\u00e0mera i accedir als punts clau d\u2019aquest.<\/p>\n Lamentablement, SimpleOpenNI fa temps que es va deixar d\u2019actualitzar, i no serveix per a Processing 3. Sembla que Apple va comprar el projecte i l\u2019ha desat al calaix… En tot cas, si us interessa podeu baixar-vos-la i tamb\u00e9 instal\u00b7lar-vos una versi\u00f3 de Processing 2, i amb aquesta combinaci\u00f3 hauria de funcionar. Making Things See, de Greg Borenstein, \u00e9s un llibre molt interessant sobre qu\u00e8 pot (o podia) fer Kinect amb SimpleOpenNI, per\u00f2 els exemples que hi han estan tamb\u00e9 desactualitzats.<\/p>\n Dit aix\u00f2, ens centrarem aqu\u00ed en les tres biblioteques inform\u00e0tiques que s\u00ed que funcionen actualment per a Processing 3. Dues s\u00f3n per a Windows, i van en combinaci\u00f3 amb la SDK de Kinect (i a partir de Windows 7), i l\u2019altra \u00e9s per a Mac (i, com passa amb Mac i els perif\u00e8rics, no cal instal\u00b7lar res m\u00e9s).<\/p>\n http:\/\/codigogenerativo.com\/kinectpv2\/<\/a> Si teniu un PC i una Kinect v2, aquesta \u00e9s la millor opci\u00f3 per treure el m\u00e0xim profit de la vostra Kinect. Kinect v2 for Processing est\u00e0 desenvolupada per Thomas Sanchez Lengeling<\/a>, i us donar\u00e0 acc\u00e9s a tot el que podeu fer amb Kinect, tal com podeu veure si us passegeu pel tutorial que l\u2019autor ha penjat a la seva web<\/a>.<\/p>\n Per exemple, i a m\u00e9s d\u2019accedir a les dades en brut, aquesta llibreria us permetr\u00e0 accedir no nom\u00e9s a l\u2019esquelet sin\u00f3 a un sistema de detecci\u00f3 facial. Nom\u00e9s cal activar comandaments com \u201cvoid enableSkeleton(boolean toggle);\u201d o \u201cvoid enableFaceDetection(boolean toggle);\u201d i a partir d\u2019aqu\u00ed seguir els passos per obtenir aquesta informaci\u00f3.<\/p>\n Si teniu PC+Kinect v2, el millor \u00e9s que us instal\u00b7leu aquesta programoteca i obriu els exemples de Sanchez Lengeling i comenceu a jugar-hi. El hacking ben ent\u00e8s \u00e9s aix\u00f2: Jugar amb el codi a partir del que trobes per aconseguir el que vols.<\/p>\n http:\/\/www.magicandlove.com\/blog\/research\/kinect-for-processing-library\/<\/a><\/p>\n Qui es pot resistir a una web que es diu Magic & Love? L\u2019artista japon\u00e8s Bryan Wai-ching Chung \u00e9s el responsable d\u2019aquesta biblioteca inform\u00e0tica que se\u2019ns presenta com a alternativa pels usuaris de PC amb una Kinect original.<\/p>\n Com es pot apreciar a la darrera data d\u2019actualitzaci\u00f3 (05\/07\/2014), fa dies que Chung no actualitza el projecte, per\u00f2 s\u00ed que est\u00e0 disponible per a Processing 3 i, tot i que ja a simple vista es veu que no \u00e9s tant potent com l\u2019anterior, \u00e9s una alternativa a tenir en compte.<\/p>\n\n
<\/h2>\n
Programoteques Kinect per a Processing<\/strong><\/h2>\n
<\/a><\/p>\n<\/h3>\n
Windows (opci\u00f3 1): Kinect v2 for Processing<\/strong><\/h3>\n
\nhttps:\/\/github.com\/ThomasLengeling\/KinectPV2<\/a><\/p>\n<\/a><\/p>\n<\/h3>\n
Windows (opci\u00f3 2): Kinect4Win SDK<\/strong><\/h3>\n
<\/a><\/p>\n<\/h3>\n
Mac: Open Kinect for Processing 1.0<\/strong><\/h3>\n