Meta’s Quest VR headset recently got the ability to accept and display video over USB-C, and it’s started some gears turning in folks’ heads. [Ian Hamilton] put together a quick concept machine consisting of a Raspberry Pi 400 that uses a VR headset as its monitor, which sure seems like the bones of a new breed of cyberdeck.

The computer-in-a-keyboard nature of the Pi 400 means that little more than a mouse and the VR headset are needed to get a functional computing environment. Well, that and some cables and adapters.

What’s compelling about this is that the VR headset is much more than just a glorified monitor. In the VR environment, the external video source (in this case, the Raspberry Pi) is displayed in a window just like any other application. Pass-through can also be turned on, so that the headset’s external cameras display one’s surroundings as background. This means there’s no loss of environmental awareness while using the rig.

Video over USB-C is technically DisplayPort altmode, and both the video source and the USB-C cable have to support it. In [Ian]’s case, the Raspberry Pi 400 outputs HDMI and he uses a Shadowcast 2 capture card to accept HDMI on one end and outputs video over USB-C on the other.

As a concept it’s an interesting one for sure. Perhaps we’ll see decks of this nature in our next cyberdeck contest?

The cameras at the front of Meta’s Quest VR headsets are off-limits to developers, but developer [Michael Gschwandtner] created a workaround (Linkedin post) and shared implementation details with a VR news site.

The demo shows object detection via MobileNet V2, which we’ve seen used for machine vision on embedded systems like the Raspberry Pi. In this case it is running locally on the VR headset, automatically identifying objects even though the app cannot directly access the front-facing cameras to see what’s in front of it.

The workaround is conceptually simple, and leverages the headset’s ability to cast its video feed over Wi-Fi to other devices. This feature is normally used for people to share and spectate VR gameplay.

First, [Gschwandtner]’s app sets up passthrough video, which means that the camera feed from the front of the headset is used as background in VR, creating a mixed-reality environment. Then the app essentially spawns itself a Chromium browser, and casts its video feed to itself. It is this video that is used to — in a roundabout way — access what the cameras see.

The resulting view isn’t really direct from the cameras, it’s akin to snapshotting a through-the-headset view which means it contains virtual elements like the UI. Still, with passthrough turned on it is a pretty clever workaround that is contained entirely on-device.

Meta is hesitant to give developers direct access to camera views on their VR headset, and while John Carmack (former Meta consulting CTO) thinks it’s worth opening up and can be done safely, it’s not there yet.

[saurabhchalke] recently released whisper.unity, a Unity package that implements whisper locally on the Meta Quest 3 VR headset, bringing nearly real-time transcription of natural speech to the device in an easy-to-use way.

Whisper is a robust and free open source neural network capable of quickly recognizing and transcribing multilingual natural speech with nearly-human level accuracy, and this package implements it entirely on-device, meaning it runs locally and doesn’t interact with any remote service.

It used to be that voice input for projects was a tricky business with iffy results and a strong reliance on speaker training and wake-words, but that’s no longer the case. Reliable and nearly real-time speech recognition is something that’s easily within the average hacker’s reach nowadays.

We covered Whisper getting a plain C/C++ implementation which opened the door to running on a variety of platforms and devices. [Macoron] turned whisper.cpp into a Unity binding which served as inspiration for this project, in which [saurabhchalke] turned it into a Quest 3 package. So if you are doing any VR projects in Unity and want reliable speech input with a side order of easy translation, it’s never been simpler.

Sony Interactive Entertainment anunció hoy que PlayStation VR2 App para PC se lanzará a través de Steam el próximo 6 de agosto y ya se conocen cuáles son los requisitos mínimos y recomendados para utilizar el dispositivo de realidad virtual.

«¡Disfruta de juegos y aplicaciones VR en Steam con PlayStation VR2! Instala PS VR2 App para poder usar PS VR2 en tu PC, configurar tus dispositivos PS VR y mantener actualizado el firmware de tu casco PS VR2 y de tus controles PS VR2 Sense.»

Acerca de PlayStation VR2 App

Disfruta de juegos y aplicaciones de realidad virtual en Steam con PlayStation VR2

• Juega a juegos y aplicaciones VR en Steam con tu casco PlayStation VR2 y tus controles PlayStation VR2 Sense.
• Configura tu PlayStation VR2 en tu PC.
• Actualiza el firmware de tu casco PlayStation VR2 y de tus controles PlayStation VR2 Sense.
• Ajusta la configuración de tu PlayStation VR2 desde el panel principal de SteamVR, incluida la configuración del área de juego y el brillo de la pantalla.

Necesitarás lo siguiente para empezar a usar PlayStation VR2 App:

• Casco VR PlayStation VR2
• Controles PlayStation VR2 Sense (conexión por Bluetooth)
• Adaptador para PC de PlayStation VR2 de US$ 59.99

Para jugar a juegos y aplicaciones VR en Steam con PlayStation VR2, es necesario tener instalada PlayStation VR2 App en tu PC. No desinstales la aplicación incluso después de finalizar la configuración inicial.

La configuración es sencilla: simplemente conecta PlayStation VR2 a tu PC usando el adaptador para PS VR2 – PC y el cable DisplayPort 1.4. Luego, descarga la aplicación PlayStation VR2 y la aplicación SteamVR de Steam. Esto te permitirá configurar PS VR2 en tu PC, personalizar tu configuración y área de juego, y comenzar a comprar y jugar juegos en SteamVR.

Al igual que con todo tipo de tecnología de juegos para PC, el rendimiento podría variar según tu configuración de PC, lo que incluye la compatibilidad del sistema y la calidad del cable DisplayPort 1.4. Asegúrate de que tu configuración cumple con los requisitos mínimos. Los títulos de SteamVR también tienen requisitos de sistema individuales, por lo que debes consultar la información del juego en Steam.

Diferencias funcionales de PS VR2 en PS5

PS VR2 se diseñó desde cero específicamente para PS5, por lo que notarás que algunas funciones clave, como HDR, seguimiento de ojos, gatillos adaptativos y respuesta háptica (además de la vibración), no están disponibles cuando se juega en PC. La experiencia de audio 3D utiliza tecnología de audio de SteamVR en lugar de Tempest 3D AudioTech, que solo es compatible en PS5.

Sin embargo, se admiten otras funciones de alta fidelidad e inmersión sensorial de PS VR2, incluidos el campo de visión de 110 grados, las imágenes 4K (2000 x 2040 por ojo), la detección táctil y la visión exterior, además de la renderización fóvea (sin seguimiento de ojos) y el audio 3D en juegos compatibles.

Requisitos Mínimos:

• Requiere un procesador y un sistema operativo de 64 bits
• SO: Windows 10/11
• Procesador: Intel Core i5 7600 / AMD Ryzen 3 3100 *¹
• Memoria: 8 GB de RAM
• Gráficos: NVIDIA GeForce GTX 1650 o posterior *² / NVIDIA serie RTX / AMD Radeon RX 5500XT o posterior / Radeon RX 6500XT o posterior
• Almacenamiento: 700 MB de espacio disponible
• Notas adicionales: *¹ Se requiere arquitectura de Zen 2 o posterior
  *² Se requiere arquitectura de Turing o posterior

Requisitos Recomendados:

• Requiere un procesador y un sistema operativo de 64 bits
• SO: Windows 10/11
• Procesador: Intel Core i5 7600 / AMD Ryzen 3 3100 *¹
• Memoria: 8 GB de RAM
• Gráficos: NVIDIA GeForce RTX 3060 o posterior / AMD Radeon RX 6600XT o posterior
• Almacenamiento: 700 MB de espacio disponible
• Notas adicionales: *¹ Se requiere arquitectura de Zen 2 o posterior
  *² Se requiere arquitectura de Turing o posterior

La entrada PlayStation VR2 App para PC se lanzará en Steam el 6 de Agosto – Requisitos Mínimos y Recomendados apareció primero en PC Master Race Latinoamérica.

Durante el evento State of Play, Survios publicó hoy un teaser de gameplay y los primeros screenshots de Alien: Rogue Incursion, su recientemente anunciado juego de acción y terror de realidad virtual para SteamVR, Meta Quest 3 y PlayStation VR2, que se lanzará a fines de este año.

Acerca de Alien: Rogue Incursion

«Alien: Rogue Incursion es un juego de acción y terror para un solo jugador que presenta una historia completamente nueva de una misión definitiva que pone a prueba el coraje, el ingenio y la habilidad de los jugadores para sobrevivir a los terrores del Organismo Perfecto.

Un juego de disparos de alta tensión desarrollado con Unreal Engine 5, los jugadores deberán mantenerse helados mientras exploran una instalación invadida en el inhóspito planeta Purdan.»

La entrada Alien: Rogue Incursion llegará a PCVR y PSVR2 a fines del 2024 – Primeros Screenshots y Teaser de Gameplay apareció primero en PC Master Race Latinoamérica.