O MIT.nano anunciou sua próxima rodada de doações iniciais para apoiar pesquisas de hardware e software relacionadas a sensores, interação e análise 3D/4D, realidade aumentada e virtual (AR/VR) e jogos. As bolsas são concedidas por meio do MIT.nano Immersion Lab Gaming Program , uma colaboração de quatro anos entre o MIT.nano e a NCSOFT, uma empresa de entretenimento digital e membro fundador do MIT.nano Consortium.

“Estamos satisfeitos por poder continuar apoiando a pesquisa na encruzilhada do fa­sico e do digital, graças a essa colaboração com a NCSOFT”, diz o diretor associado do MIT.nano Brian W. Anthony, que também éo principal pesquisador em engenharia meca¢nica e o Instituto de Engenharia e Ciências Manãdicas. “Esses projetos são apenas alguns exemplos de como os pesquisadores do MIT estãoexplorando como as novas tecnologias podem mudar a forma como os humanos interagem com o mundo e uns com os outros.”

O MIT.nano Immersion Lab éum espaço imersivo de dois andares dedicado a  visualização, compreensão e interação com grandes dados e ambientes sintanãticos. Equipado com equipamentos e ferramentas de software para captura de movimento, fotogrametria e experiências 4D, e apoiado por uma equipe técnica especializada, esse recurso de acesso aberto estãodispona­vel para uso de qualquer estudante, corpo docente ou pesquisador do MIT, bem como usuários externos.

Este ano, três projetos foram selecionados para receber bolsas de sementes:

O professor de Cultura Japonesa e Estudos de Ma­dia Ian Condry estãoexplorando a pesquisa de som espacial e tecnologia para videogames. Especificamente, Condry e o co-investigador Philip Tan, cientista pesquisador e diretor criativo do MIT Game Lab , esperam desenvolver um software para adicionar “o rugido da multida£o” a  jogabilidade online e aos e-sports, para que jogadores e espectadores possam ouvir e participar. no som.

Condry e Tan usara£o a tecnologia de mixagem baseada em objetos do MIT Spatial Sound Lab, combinada com os recursos de rastreamento e reprodução do Immersion Lab, para coletar dados e comparar várias abordagens de a¡udio imersivo. Os dois veem o projeto possivelmente levando a experiências de jogo totalmente imersivas “na vida real” com va­deo em 360 graus ou jogos combinados nos quais jogadores online e presenciais podem estar presentes no mesmo evento e interagir com os artistas.

Buscando melhorar o treinamento, a prática e a experiência de treinamento de atletas para maximizar o aprendizado e minimizar o risco de lesões, o treinador assistente do MIT, Robert Hupp, visa avana§ar a pedagogia da esgrima por meio da tecnologia de realidade estendida (XR) e dados biomeca¢nicos.

Hupp, que tem trabalhado com a equipe do MIT.nano Immersion Lab, diz que os dados preliminares sugerem que a prática individualizada assistida por tecnologia pode tornar os movimentos de um esgrimista mais compactos, e que praticar em um ambiente imersivo pode melhorar as técnicas de resposta. Ele falou sobre suporte de treinamento orientado por dados e treinamento de atletas em um semina¡rio MIT.nano IMMERED em setembro de 2021.

Com essa doação inicial, Hupp planeja desenvolver um sistema de treinamento imersivo para o aprendizado individual do atleta, criar um sistema de biofeedback para apoiar os treinadores, realizar estudos cienta­ficos para acompanhar o progresso de um atleta e avana§ar na compreensão atual da interação com o oponente. Ele prevaª que o trabalho tenha impacto no atletismo, biomeca¢nica e fisioterapia, e que o uso da tecnologia XR para treinamento possa se expandir para outros esportes.

Os manãtodos de interação do usua¡rio mais usados ​​para jogos AR/VR são o rastreamento de olhar e movimento. No entanto, de acordo com o professor associado de engenharia meca¢nica Jeehwan Kim, os atuais dispositivos de última geração não fornecem experiências de AR/VR verdadeiramente imersivas devido a s suas limitações de tamanho, consumo de energia, perceptibilidade e confiabilidade.

Kim, que também éprofessor associado em ciência e engenharia de materiais, propaµe um rastreador de olhar baseado em microLED / dilatação pupilar (PD) e um rastreador de movimento eletra´nico, baseado em pele e sem controlador para interface de computador humano AR / VR de próxima geração. O rastreador de olhar de Kim émais compacto e consome menos energia do que os rastreadores convencionais. Ele pode ser integrado a telas transparentes e pode ser usado para desenvolver a³culos AR compactos. O rastreador de movimento e-skin pode aderir imperceptivelmente a  pele humana e detectar com precisão os movimentos humanos, o que, segundo Kim, facilitara¡ a interação humana mais natural com AR/VR.

Este éo terceiro ano de prêmios de seed grant do MIT.nano Immersion Lab Gaming Program. Nas duas primeiras chamadas de propostas do programa em 2019 e 2020 , 12 projetos de cinco departamentos receberam US$ 1,5 milha£o em financiamento combinado de pesquisa. O processo de seleção de propostas colaborativas do MIT.nano e do NCSOFT garante que os projetos premiados estejam desenvolvendo avanços com impacto industrial e que os pesquisadores do MIT sejam expostos a parceiros técnicos do NCSOFT durante a duração das concessaµes iniciais.