Multimodal Biometric
Identification of users in online or web services
Nowadays, the identification of users in online or web services is linked to a previous user assignment and password. Using Internet services, people can communicate and relate without the obligation to prove their identity, using pseudonyms, false identities or impersonating another person. With or without the user’s consent, any information can trigger identity theft since the keys can be shared, stolen or lost.
Virtual campuses and e-learning platforms have exponentially increased their number of students/users in recent years. One of the biggest problems of the entity offering courses is the uncertainty of not knowing who is taking the path on the other side of the computer screen. Thus certifying the title that the student will receive. At Smiley Owl Tech S.L (hereinafter Smowltech), we detected that this problem is critical in online teaching.
Smowltech nació en 2012 para dar respuesta a esta carencia y comercializamos un servicio de autenticación continuada de usuarios online mediante un sistema biométrico monomodal basado únicamente en reconocimiento facial. El sistema se comercializó bajo el nombre de SMOWL y hoy en día somos un referente en el mercado de la autenticación de estudiantes online en el mundo de eLearning, un mercado internacional, en crecimiento continuo y virgen en este propósito.
Sin embargo, el estado del arte actual en reconocimiento facial no permite un reconocimiento fiable donde la captura de fotos sea transparente al usuario (sistema de actuación pasiva del usuario, para no interrumpirle en sus quehaceres dentro de la sesión) y en entornos no controlados, donde la iluminación, pose del usuario, su apariencia (barba, corte de pelo…), complementos (gafas, gorro…), oclusiones parciales y gestos y expresiones son variables. No es lo mismo posar delante de un reconocedor facial para acceso a terminal (teléfono móvil) o espacio físico (como una habitación) -donde el usuario se postra firme, mirando al frente ante la cámara, sin complementos (gafas, gorro), siempre con el mismo gesto, con buena iluminación y sin oclusiones- que mantener esa misma cara durante una sesión online (enseñanza online) de muchas horas. Por otra parte, el mercado hace hincapié en la necesidad de poder capturar evidencias, no sólo de lo que ocurre frente a la pantalla de la terminal sino también de lo que está pasando en la misma. Por ello el sistema MULTIBIO ha de ser completado con algún sistema de captura de screenshots para guardar evidencias de lo acontecido en dicha sesión.
El objetivo principal del proyecto es por tanto crear el primer prototipo comercial MULTIBIO, un producto/servicio totalmente nuevo, independiente de SMOWL y más completo que pueda ser comercializado de forma más competitiva y así posicionar a la entidad en una posición de liderazgo a nivel internacional.
Este nuevo servicio MULTIBIO, será un servicio de autenticación automático, pasivo (el usuario no participa activamente, como por ejemplo posando ante la cámara) y continuado de usuarios de servicios online que requieren un mayor grado de seguridad en la identificación de sus usuarios. Dicha autenticación se realizará mediante una identificación facial y de voz automática, masiva, eficaz y en entornos no controlados (pose, iluminación, apariencia, complementos, oclusiones parciales, gestos/expresiones, ruido de ambiente, mezcla de voces…) sobre imágenes capturadas mediante la Webcam y a través del micrófono de las terminales (imágenes de baja resolución en elevadas ocasiones y audio de poca calidad), por los cuales los usuarios a verificar acceden a internet.
Automatically authenticate by facial and voice biometrics.
Capture
Capture from the terminal devices:
- Random images through the Webcam
- The audio that captures the microphone
- Screenshots or screenshots. All this during the entire session duration (continued) and passive attitude of the user (no need to pose or read predefined paragraphs).
Authenticate

Funded by:
ERDF/Ministry of Science, Innovation and Universities – State Research Agency/ Project (RTC-2016-5711-7).
Project duration: 03/15/2016 – 03/31/2019

The company Smiley Owl Tech SL has been a beneficiary of the European Regional Development Fund, whose objective is to improve the competitiveness of SMEs. Thanks to that, it has launched an International Digital Marketing Plan to improve its online positioning in foreign markets in 2021. For this, it has had the support of the XPANDE DIGITAL Program of the Gipuzkoa Chamber of Commerce.