DOI:
https://doi.org/10.14483/2322939X.11008Publicado:
2015-12-08Número:
Vol. 12 Núm. 2 (2015)Sección:
Investigación y DesarrolloTécnicas de HCI en Interacción con un Entorno 3D para la Representación de los Resultados de la Búsqueda Web
HCI Techniques interacting with a 3D environment for representing web search results
Palabras clave:
resultados, búsqueda web, HCI, reconocimiento de gestos, reconocimiento de voz, entorno 3D (es).Palabras clave:
results, web search results, HCI, gesture recognition, speech recognition, 3D environment (en).Descargas
Resumen (es)
La búsqueda de información a través de la World Wide Web es una tarea común hoy en día. Sin embargo, es sobre todo una experiencia textual. Este trabajo propone e implementa un entorno 3D para la representación de los resultados de búsqueda Web en un entorno en tres dimensiones (3D) que es controlada por gestos y reconocimiento de voz. Con el fin de hacer eso, se requieren dos escenarios: una solución de servidor basado en Servicios Web XML que permite ser consumidos por los clientes que están buscando información en la Web; y una aplicación en cliente que permite ser ejecutado como una interfaz gráfica de usuario en el escritorio mediante el uso de comandos de voz y gestos. Esta última aplicación se encarga de modelar gráficamente el entorno 3D de acuerdo con los resultados de búsqueda Web.
Un prototipo del sistema propuesto fue implementado, lo que representa un conjunto de resultados de búsqueda Web en un entorno 3D. El escenario 3D es manejada por gestos y comandos de voz; el entorno 3D se basa en la administración de algunas transformaciones 3D tales como la rotación y el escalado de las caras interiores de un toroide.
Una evaluación del prototipo en contextos de búsqueda sugiere que hay un alto nivel de aceptación del usuario del modelo multimedia propuesto. Las personas que probaron el prototipo han dicho que tiene una interfaz gráfica de usuario intuitiva, y que tanto el habla como el reconocimiento de gestos han sido una alternativa altamente funcional para las tareas relacionadas con la búsqueda Web. Sin embargo, hay algunos aspectos a mejorar, sobre todo en el apoyo de reconocimiento de voz de diferentes acentos. En general, el prototipo multimedia cumplió con las expectativas de una muestra de los usuarios finales, lo que demuestra que este tipo de interfaces tienen un gran potencial.
Resumen (en)
Searching for information through the World Wide Web is a common task nowadays. However, it is mostly a textual experience. This work proposes and implements a 3D environment for representing Web search results in a three-dimensional (3D) environment that is controlled by gestures and speech recognition. In order to do that, two scenarios are required: a server-side solution based on XML Web Services that allows being consumed by clients that are searching information on the Web; and one client-side application that allows being executed as a graphic user interface in desktop by using speech and gesture commands. This latter application is in charge of graphically modeling the 3D environment according to the Web search results.
A prototype of the proposed system, which represents a set of Web search results in a 3D environment, was implemented. The 3D scenario is handled by gestures and voice commands; the 3D environment is based on the management of some 3D transformations such as rotation and scaling of the inner faces of a torus.
An evaluation of the prototype in search contexts suggests that there is a high level of user acceptance of the proposed multimedia model. Testers have said that the prototype has an intuitive graphical user interface, and that both speech and gesture recognition have been a highly functional alternative for tasks related with Web searching. Still, there are some aspects to improve, especially in the speech recognition support of different accents. Overall, the multimedia prototype met the expectations from a sample of end users, showing that such interfaces have great potential.
Referencias
C. Dawson, “Projects in Computing and Information Systems: A student’s guide”, 2nd edition, Addison-Wesley, UK. 2009.
S. Bennet, S. McRobb, & R. Farmer, “Object-Oriented Systems Analysis and Design Using UML”. 4th Edition, McGraw-Hill Higher Education, UK. 2010.
K. Hartman, & E. Ackermann, “Searching & researching on the Internet & the World Wide Web”, 4th Edition, Franklin, Beedle And Associates: Wilsonville, (OR),. USA, 2005.
D. Wigdor & D. Wixon, “Brave NUI world: designing natural user interfaces for touch and gesture”, Morgan Kaufmann / Elsevier: Burlington, (MA), USA. 2010.
A. Jana, “Kinect for Windows SDK Programming Guide: Build motion-sensing applications with Microsoft’s Kinect for Windows SDK quickly and easily”, Packt Publishing: Birmingham, UK. 2012.
M. Boulos, B. Blanchard, C. Walker, J. Montero, A. Tripathy & R. Gutierrez-Osuna, “Web GIS in practice X: a Microsoft Kinect natural user interface for Google Earth navigation”, International Journal of Health Geographics, issue 10, p. 45. 2011.
S. Warade, J. Aghav, P. Claude & S. Udayagiri, “Automated Training and Maintenance through Kinec”', International Journal of Computer Science, Engineering and Applications (IJCSEA), vol 2, no 3, p. 14. 2012.
A. Dave, Y. Bhumkar, A. Abraham & R. Sugandhi “Project Mudra: Personalization of Computers using Natural Interface”, International Journal of Computer Applications, issue 54, p. 42. 2012.
J. Mangalindan, “Replacing the Mouse”, Fortune, vol 166, no 1, p. 25, 2012.
G. Newby, “Empirical study of a 3D visualization for information retrieval tasks”, Journal of Intelligent Information Systems, vol 18, no 1, pp. 31-53, 2002
A. Fusiello, V. Murino & R. Cucchiara, “Computer Vision - ECCV 2012. Workshops and Demonstrations”, October 7-13, 2012, Proceedings. Part III, Springer: Berlin, Germany, 2012
T. Kakimoto & Y. Kambayashi, “Browsing functions in three-dimensional space for digital libraries”, International Journal on Digital Libraries, vol 2 no 2/3, p. 68, 1999
S. Kean, J. Hall & P. Perry, “Meet The Kinect: An Introduction To Programming Natural User Interfaces” , Apress: Emeryville, (CA), USA, 2011.
Leap Motion Inc. “The Leap Motion Controller', Leap Motion Product” Home Page, February 9th, 2015, [Online] Available at: https://www.leapmotion.com/product
E. Walshe & B. McMullin, “Browsing web based documents through an alternative tree interface: The WebTree browser”, Computers Helping People With Special Needs, issue 4061, pp. 106-113, 2006.
SpaceTime 3D Inc. (n.d.) “SpaceTime 3D’s Home Page”, February 16th, 2015 [Online] Available at: http://www.spacetime3d.com/
TLG View “iFree3D’s Home Page”, February 16th, 2015 [Online] Available at: http://www.ifree3d.com/
A. Zinman, D. Fritz, G. Elliott & R. Shilkrot, “DepthJS”, MIT Media Lab’s Home page, February 9th, 2015 [Online] Available at: http://depthjs.media.mit.edu/
D. Reisinger, (2012) “Kinect-Enhanced Internet Explorer coming to Xbox, CNET Reviews” Home Page, February 9th, 2015 [Online] Available at: http://reviews.cnet.com/
Thalmic Labs Inc. (2013) “MYO - Gesture control armband”, Thalmic’s Official Website, August 8, 2014 [Online] Available at: https://www.thalmic.com/myo/
BCInet Inc., (2012) “NIA game controller”, BCInet’s home page, August 8, 2014 [Online] Available at: http://www.bcinet.com/products/
L. Handmer, “Weird & Wonderful Gaming Gadgets” Apc, vol 32, no 7, pp. 40-42. 2012
I. Sommerville, “Software Engineering” 9th Edition, Pearson/Addison-Wesley, Boston (MA), USA, 2011