Compartir a través de


HoloLens (1.ª generación) y Azure 306: Streaming de vídeo


Nota:

Los tutoriales de Mixed Reality Academy se han diseñado teniendo en cuenta HoloLens (1.ª generación) y los cascos envolventes de realidad mixta. Por lo tanto, creemos que es importante conservar estos tutoriales para los desarrolladores que sigan buscando instrucciones sobre el desarrollo para esos dispositivos. Estos tutoriales no se actualizarán con los conjuntos de herramientas o las interacciones más recientes que se usan para HoloLens 2. Se mantendrán para que sigan funcionando en los dispositivos compatibles. Habrá una nueva serie de tutoriales que se publicarán en el futuro que demostrarán cómo desarrollar para HoloLens 2. Este aviso se actualizará con un vínculo a esos tutoriales cuando se publiquen.


Captura de pantalla de un ejemplo de Windows Mixed Reality V R.Captura de pantalla de una experiencia de Windows Mixed Reality V R.

En este curso aprenderá a conectar Azure Media Services a una experiencia de Realidad virtual de Windows Mixed Reality para permitir la reproducción de vídeo de 360 grados en cascos envolventes.

Azure Media Services es una colección de servicios que proporciona servicios de streaming de vídeo de calidad de difusión para llegar a audiencias más grandes en los dispositivos móviles más populares de hoy en día. Para más información, visite la página de Azure Media Services.

Después de completar este curso, tendrá una aplicación de cascos envolventes de realidad mixta, que podrá hacer lo siguiente:

  1. Recupere un vídeo de 360 grados de Azure Storage a través de Azure Media Service.

  2. Muestra el vídeo recuperado de 360 grados dentro de una escena de Unity.

  3. Navegue entre dos escenas, con dos vídeos diferentes.

En la aplicación, es el momento de integrar los resultados con el diseño. Este curso está diseñado para enseñar a integrar un servicio de Azure con el proyecto de Unity. Es su trabajo usar el conocimiento que obtiene de este curso para mejorar la aplicación de realidad mixta.

Compatibilidad con dispositivos

Curso HoloLens Cascos envolventes
MR y Azure 306: Streaming de vídeo ✔️

Requisitos previos

Nota:

Este tutorial está diseñado para desarrolladores que tienen experiencia básica con Unity y C#. Tenga en cuenta también que los requisitos previos y las instrucciones escritas de este documento representan lo que se ha probado y comprobado en el momento de redactarlo (mayo de 2018). Puede usar el software más reciente, como se muestra en el artículo de instalación de las herramientas, aunque no debe asumirse que la información de este curso coincidirá perfectamente con lo que encontrará en el software más reciente que lo que se muestra a continuación.

Se recomienda el siguiente hardware y software para este curso:

Antes de comenzar

  1. Para evitar encontrar problemas al compilar este proyecto, se recomienda encarecidamente crear el proyecto mencionado en este tutorial en una carpeta raíz o casi raíz (las rutas de acceso de carpeta largas pueden causar problemas en tiempo de compilación).

  2. Configure y pruebe los cascos envolventes de Mixed Reality.

    Nota:

    No necesitará controladores de movimiento para este curso. Si necesita soporte técnico para configurar los auriculares inmersivos, haga clic en el vínculo sobre cómo configurar Windows Mixed Reality.

Capítulo 1: Azure Portal: creación de la cuenta de Azure Storage

Para usar el servicio Azure Storage, deberá crear y configurar una cuenta de almacenamiento en Azure Portal.

  1. Inicie sesión en Azure Portal.

    Nota:

    Si aún no tiene una cuenta de Azure, deberá crear una. Si sigue este tutorial en una situación de clase o laboratorio, pida a su instructor o a uno de los proctores que le ayuden a configurar la nueva cuenta.

  2. Una vez que haya iniciado sesión, haga clic en Cuentas de almacenamiento en el menú izquierdo.

    Captura de pantalla del menú de Azure Portal. Las cuentas de almacenamiento están resaltadas.

  3. En la pestaña Cuentas de almacenamiento, haga clic en Agregar.

    Captura de pantalla del cuadro de diálogo cuenta de almacenamiento. Agregar está resaltado.

  4. En la pestaña Crear cuenta de almacenamiento:

    1. Inserte un nombre para su cuenta, tenga en cuenta que este campo solo acepta números y letras minúsculas.

    2. En Modelo de implementación, seleccione Resource Manager.

    3. En Tipo de cuenta, seleccione Almacenamiento (uso general v1) .

    4. En Rendimiento, seleccione Estándar.*

    5. En Replicación, seleccione Almacenamiento con redundancia local (LRS).

    6. Deje Transferencia segura necesaria como Deshabilitada.

    7. Seleccione una opción en Suscripción.

    8. Elija un grupo de recursos o cree uno nuevo. Un grupo de recursos proporciona una manera de supervisar, controlar el acceso, aprovisionar y administrar la facturación de una colección de recursos de Azure.

    9. Determine la ubicación del grupo de recursos (si va a crear un nuevo grupo de recursos). Idealmente, la ubicación estaría en la región donde se ejecutaría la aplicación. Algunos recursos de Azure solo están disponibles en determinadas regiones.

  5. Deberá confirmar que ha comprendido los términos y condiciones aplicados a este servicio.

    Captura de pantalla de la página Crear cuenta de almacenamiento.

  6. Una vez que haya hecho clic en Crear, tendrá que esperar a que se cree el servicio, esto puede tardar un minuto.

  7. Aparecerá una notificación en el portal una vez creada la instancia de servicio.

    Captura de pantalla de la notificación de implementación correcta.

  8. En este momento no es necesario seguir el recurso, simplemente vaya al siguiente capítulo.

Capítulo 2: Azure Portal: creación de Media Service

Para usar Azure Media Service, deberá configurar una instancia del servicio para que esté disponible para la aplicación (donde el titular de la cuenta debe ser administrador).

  1. En Azure Portal, haga clic en Crear un recurso en la esquina superior izquierda y busque Media Service, presione Entrar. El recurso que desea actualmente tiene un icono rosa; Haga clic en esto para mostrar una nueva página.

    Captura de pantalla de Azure Portal. La opción Media Services está resaltada.

  2. La nueva página proporcionará una descripción de Media Service. En la parte inferior izquierda de este símbolo del sistema, haga clic en el botón Crear para crear una asociación con este servicio.

    Captura de pantalla de Azure Portal. El botón Crear está resaltado.

  3. Una vez que haya hecho clic en Crear un panel, aparecerá donde deberá proporcionar algunos detalles sobre el nuevo Servicio multimedia:

    1. Inserte el nombre de cuenta deseado para esta instancia de servicio.

    2. Seleccione una opción en Suscripción.

    3. Elija un grupo de recursos o cree uno nuevo. Un grupo de recursos proporciona una manera de supervisar, controlar el acceso, aprovisionar y administrar la facturación de una colección de recursos de Azure. Se recomienda mantener todos los servicios de Azure asociados a un único proyecto (por ejemplo, estos laboratorios) en un grupo de recursos común).

    Si desea obtener más información sobre los grupos de recursos de Azure, siga este vínculo sobre cómo administrar grupos de recursos de Azure.

    1. Determine la ubicación del grupo de recursos (si va a crear un nuevo grupo de recursos). Idealmente, la ubicación estaría en la región donde se ejecutaría la aplicación. Algunos recursos de Azure solo están disponibles en determinadas regiones.

    2. En la sección Cuenta de almacenamiento, haga clic en la sección Seleccione... y, a continuación, haga clic en la cuenta de almacenamiento que creó en el último capítulo.

    3. También deberá confirmar que ha comprendido los Términos y Condiciones aplicados a este Servicio.

    4. Haga clic en Crear.

      Captura de pantalla de la página Crear cuenta de Media Service.

  4. Una vez que haya hecho clic en Crear, tendrá que esperar a que se cree el servicio, esto puede tardar un minuto.

  5. Aparecerá una notificación en el portal una vez creada la instancia de servicio.

    Captura de pantalla del icono de notificación en el menú del portal.

  6. Haga clic en la notificación para explorar la nueva instancia de servicio.

    Captura de pantalla de la notificación para una implementación correcta.

  7. Haga clic en el botón Ir al recurso de la notificación para explorar la nueva instancia de servicio.

  8. Dentro de la nueva página servicio multimedia, en el panel de la izquierda, haga clic en el vínculo Activos , que está a mitad de camino hacia abajo.

  9. En la página siguiente, en la esquina superior izquierda de la página, haga clic en Cargar.

    Captura de pantalla de la página Activos. Las opciones Cargar y Activos están resaltadas.

  10. Haga clic en el icono Carpeta para examinar los archivos y seleccione el primer vídeo de 360 que desea transmitir.

    Puede seguir este vínculo para descargar un vídeo de ejemplo.

    Captura de pantalla de la página cargar un recurso de vídeo.

Advertencia

Los nombres de archivo largos pueden provocar un problema con el codificador: por lo tanto, para asegurarse de que los vídeos no tienen problemas, considere la posibilidad de acortar la longitud de los nombres de archivo de vídeo.

  1. La barra de progreso se volverá verde cuando el vídeo haya terminado de cargarse.

    Captura de pantalla de la barra de progreso de la carga de un recurso de vídeo.

  2. Haga clic en el texto anterior (yourservicename - Assets) para volver a la página Activos .

  3. Observará que el vídeo se ha cargado correctamente. Haga clic en él.

    Captura de pantalla de la página Activos. El vídeo 1 punto M P 4 está resaltado.

  4. La página a la que se le redirige le mostrará información detallada sobre su vídeo. Para poder usar el vídeo, debe codificarlo haciendo clic en el botón Codificar situado en la parte superior izquierda de la página.

    Captura de pantalla de la página del recurso. El botón codificar está resaltado.

  5. Aparecerá un nuevo panel a la derecha, donde podrá establecer opciones de codificación para el archivo. Establezca las siguientes propiedades (algunas ya se establecerán de forma predeterminada):

    1. Nombre del codificador multimedia Media Encoder Standard

    2. Codificación preestablecida Content Adaptive Multiple Bitrate MP4

    3. Nombre de trabajo Media Encoder Standard procesamiento de Video1.mp4

    4. Nombre del recurso multimedia de salida Video1.mp4: codificado en Media Encoder Standard

      Captura de pantalla de la página codificar un recurso.

  6. Haga clic en el botón Crear.

  7. Observará una barra con el trabajo de codificación agregado, haga clic en esa barra y aparecerá un panel con el progreso de codificación mostrado en ella.

    Captura de pantalla de la barra de avisos con la etiqueta de trabajo de codificación agregada.

    Captura de pantalla de la página de procesamiento del codificador.

  8. Espere a que se complete el trabajo. Una vez hecho esto, no dude en cerrar el panel con la "X" en la parte superior derecha de ese panel.

    Captura de pantalla de la barra de progreso con el estado finalizado.

    Captura de pantalla del menú superior de la página de procesamiento del codificador multimedia.

    Importante

    El tiempo que tarda, depende del tamaño del archivo del vídeo. Este proceso puede tardar bastante tiempo.

  9. Ahora que se ha creado la versión codificada del vídeo, puede publicarla para que sea accesible. Para ello, haga clic en el vínculo azul Activos para volver a la página activos.

    Captura de pantalla de Azure Portal. El vínculo activos está resaltado.

  10. Verá el vídeo junto con otro, que es de Tipo de recurso Multi-Bitrate MP4.

    Captura de pantalla del menú Recursos de Microsoft Azure.

    Nota:

    Es posible que observe que el nuevo recurso, junto con el vídeo inicial, es Desconocido y tiene "0" bytes para su tamaño, solo tiene que actualizar la ventana para que se actualice.

  11. Haga clic en este nuevo recurso.

    Captura de pantalla de los recursos de la lista de directorios.

  12. Verá un panel similar al que usó antes, solo este es un recurso diferente. Haga clic en el botón Publicar situado en el centro superior de la página.

    Captura de pantalla de la barra de menús superior. El botón Publicar está resaltado.

  13. Se le pedirá que establezca un localizador, que es el punto de entrada, en archivo/s en los recursos. En el escenario, establezca las siguientes propiedades:

    1. >Tipo de localizador Progresiva.

    2. La fecha y hora se establecerán para usted, desde su fecha actual, hasta una hora en el futuro (cien años en este caso). Déjelo tal como está o cámbielo para adaptarlo.

    Nota:

    Para más información sobre los localizadores y lo que puede elegir, visite la documentación de Azure Media Services.

  14. En la parte inferior de ese panel, haga clic en el botón Agregar .

    Captura de pantalla que muestra las listas de directorios con el recurso que se va a publicar.

  15. El vídeo ya está publicado y se puede transmitir mediante su punto de conexión. Más abajo, la página es una sección Archivos . Aquí es donde estarán las distintas versiones codificadas del vídeo. Seleccione la resolución más alta posible (en la imagen siguiente es el archivo 1920x960) y aparecerá un panel a la derecha. Allí encontrará una dirección URL de descarga. Copie este punto de conexión , ya que lo usará más adelante en el código.

    Captura de pantalla de la sección Microsoft Azure Files.

    Captura de pantalla de la página de información del recurso.

    Nota:

    También puede presionar el botón Reproducir para reproducir el vídeo y probarlo.

  16. Ahora debe cargar el segundo vídeo que usará en este laboratorio. Siga los pasos anteriores, repitiendo el mismo proceso para el segundo vídeo. Asegúrese de copiar también el segundo punto de conexión . Use el siguiente vínculo para descargar un segundo vídeo.

  17. Una vez publicados ambos vídeos, estará listo para pasar al siguiente capítulo.

Capítulo 3: Configuración del proyecto de Unity

A continuación se muestra una configuración típica para desarrollar con la realidad mixta y, como tal, es una buena plantilla para otros proyectos.

  1. Abra Unity y haga clic en Nuevo.

    Captura de pantalla de la pestaña Proyectos de Unity. El botón Nuevo está resaltado.

  2. Ahora deberá proporcionar un nombre de proyecto de Unity, insertar MR_360VideoStreaming.. Asegúrese de que el tipo de proyecto esté establecido en 3D. Establezca la ubicación en algún lugar adecuado para usted (recuerde que más cerca de los directorios raíz es mejor). A continuación, haga clic en Crear proyecto.

    Captura de pantalla de la página nuevos proyectos de Unity.

  3. Con Unity abierto, vale la pena comprobar que el Editor de scripts predeterminado está establecido en Visual Studio. Vaya a Editarpreferencias y, a continuación, en la nueva ventana, vaya a Herramientas externas. Cambie el Editor de scripts externos a Visual Studio 2017. Cierre la ventana Preferencias.

    Captura de pantalla del menú del editor de scripts externos. Visual Studio 2017 está seleccionado.

  4. A continuación, vaya a Configuración de compilación de archivos y cambie la plataforma a Plataforma universal de Windows haciendo clic en el botón Cambiar plataforma.

  5. Asegúrese también de que:

    1. El dispositivo de destino se establece en Cualquier dispositivo.

    2. Tipo de compilación se establece en D3D.

    3. El SDK se establece en Latest installed (Versión más reciente instalada).

    4. La versión de Visual Studio se establece en Latest installed (Versión más reciente instalada).

    5. Build and Run (Compilar y ejecutar ) está establecido en Equipo local.

    6. No se preocupe por configurar Escenas ahora mismo, ya que las configurará más adelante.

    7. La configuración restante debe dejarse como predeterminada por ahora.

      Captura de pantalla de la pantalla de configuración de compilación de Unity.

  6. En la ventana Configuración de compilación, haga clic en el botón Configuración del reproductor; se abrirá el panel relacionado en el espacio donde se encuentra el Inspector.

  7. En este panel, es necesario comprobar algunos valores:

    1. En la pestaña Otros valores :

      1. La versión del entorno de ejecución de scripting debe ser estable (equivalente a .NET 3.5).

      2. El back-end de scripting debe ser .NET.

      3. El nivel de compatibilidad de API debe ser .NET 4.6.

        Captura de pantalla que muestra la página Configuración de Plataforma universal de Windows.

    2. Más abajo en el panel, en Configuración de XR (que se encuentra a continuación de Configuración de publicación), marque Virtual Reality Supported (Compatible con la realidad virtual), asegúrese de que se agrega el SDK de Windows Mixed Reality.

      Captura de pantalla de la pantalla de configuración de Unity X R.

    3. En la pestaña Configuración de publicación, en Funcionalidades, active:

      • InternetClient

        Captura de pantalla de la pantalla Funcionalidades. Se comprueba el cliente de Internet.

  8. Una vez realizados esos cambios, cierre la ventana Configuración de compilación.

  9. Guarde el proyecto para guardar el archivode proyecto.

Capítulo 4: Importación del paquete insideOutSphere Unity

Importante

Si desea omitir el componente Configuración de Unity de este curso y continuar directamente en el código, no dude en descargar este paquete .unitypackage, importarlo en el proyecto como paquete personalizado y, a continuación, continuar desde el capítulo 5. Todavía tendrá que crear un proyecto de Unity.

Para este curso, deberá descargar un paquete de recursos de Unity denominado InsideOutSphere.unitypackage.

Procedimiento para importar unitypackage:

  1. Con el panel de Unity delante de usted, haga clic en Activos en el menú de la parte superior de la pantalla y, a continuación, haga clic en Importar paquete >personalizado.

    Captura de pantalla del menú activos. El menú importar paquete está abierto. Se selecciona Paquete personalizado.

  2. Use el selector de archivos para seleccionar el paquete InsideOutSphere.unitypackage y haga clic en Abrir. Se mostrará una lista de componentes para este recurso. Para confirmar la importación, haga clic en Importar.

    Captura de pantalla de la pantalla Importar paquete de Unity.

  3. Una vez finalizada la importación, verá que se han agregado tres carpetas nuevas, Materiales, Modelos y Objetos prefabricados, a la carpeta Assets . Este tipo de estructura de carpetas es típico de un proyecto de Unity.

    Captura de pantalla de la carpeta assets.

    1. Abra la carpeta Models y verá que se ha importado el modelo InsideOutSphere .

    2. Dentro de la carpeta Materiales encontrará el material InsideOutSpheres lambert1, junto con un material llamado ButtonMaterial, que es utilizado por el GazeButton, que verá pronto.

    3. La carpeta Prefabs contiene el objeto prefabricado InsideOutSphere que contiene tanto el modelo InsideOutSphere como el GazeButton.

    4. No se incluye ningún código, escribirá el código siguiendo este curso.

  4. En hierarchy (Jerarquía), seleccione el objeto Main Camera (Cámara principal) y actualice los componentes siguientes:

    1. Transformación

      1. Posición = X: 0, Y: 0, Z: 0.

      2. Rotación = X: 0, Y: 0, Z: 0.

      3. Escala X: 1, Y: 1, Z: 1.

    2. Camera

      1. Borrar marcas: Color sólido.

      2. Recorte de planos: Cerca: 0.1, Far: 6.

        Captura de pantalla de la pantalla Inspector.

  5. Vaya a la carpeta Prefab y arrastre el objeto prefabricado InsideOutSphere al Panel de jerarquía .

    Captura de pantalla del menú carpeta Prefab y el entorno para desarrolladores.

  6. Expanda el objeto InsideOutSphere dentro de hierarchy haciendo clic en la flecha pequeña situada junto a él. Verá un objeto secundario debajo de él denominado GazeButton. Esto se usará para cambiar escenas y, por tanto, vídeos.

    Captura de pantalla de la pestaña jerarquía.

  7. En la ventana Inspector, haga clic en el componente Transformación de InsideOutSphere, asegúrese de que se establecen las siguientes propiedades:

Transformación: posición

X Y Z
0 0 0

Transformación: rotación

X Y Z
0 50- 0

Transformación: escalado

X Y Z
0 0 0

Captura de pantalla de la pantalla Inspector abierta para Inside Out Sphere.

  1. Haga clic en el objeto secundario GazeButton y establezca su transformación como se indica a continuación:

Transformación: posición

X Y Z
3,6 1.3 0

Transformación: rotación

X Y Z
0 0 0

Transformación: escalado

X Y Z
1 1 1

Captura de pantalla de la pestaña escena abierta.

Capítulo 5: Creación de la clase VideoController

La clase VideoController hospeda los dos puntos de conexión de vídeo que se usarán para transmitir el contenido desde Azure Media Service.

Para crear esta clase:

  1. Haga clic con el botón derecho en la carpeta de recursos, que se encuentra en el Panel del proyecto y haga clic en Crear > carpeta. Asigne un nombre a la carpeta Scripts.

    Captura de pantalla del menú carpeta del recurso. El menú crear está abierto y se selecciona la carpeta .

    Captura de pantalla de la pestaña del proyecto. La carpeta Assets (Activos) está seleccionada.

  2. Haga doble clic en la carpeta Scripts para abrirla.

  3. Haga clic con el botón derecho en la carpeta y, a continuación, haga clic en Crear > script de C#. Asigne al script el nombre VideoController.

    Captura de pantalla del archivo denominado Controlador de vídeo.

  4. Haga doble clic en el nuevo script de VideoController para abrirlo con Visual Studio 2017.

    Captura de pantalla del código del archivo de controlador de vídeo.

  5. Actualice los espacios de nombres en la parte superior del archivo de código de la siguiente manera:

    using System.Collections;
    using UnityEngine;
    using UnityEngine.SceneManagement;
    using UnityEngine.Video;
    
  6. Escriba las siguientes variables en la clase VideoController, junto con el método Awake():

        /// <summary> 
        /// Provides Singleton-like behaviour to this class. 
        /// </summary> 
        public static VideoController instance; 
    
        /// <summary> 
        /// Reference to the Camera VideoPlayer Component.
        /// </summary> 
        private VideoPlayer videoPlayer; 
    
        /// <summary>
        /// Reference to the Camera AudioSource Component.
        /// </summary> 
        private AudioSource audioSource; 
    
        /// <summary> 
        /// Reference to the texture used to project the video streaming 
        /// </summary> 
        private RenderTexture videoStreamRenderTexture;
    
        /// <summary>
        /// Insert here the first video endpoint
        /// </summary>
        private string video1endpoint = "-- Insert video 1 Endpoint here --";
    
        /// <summary>
        /// Insert here the second video endpoint
        /// </summary>
        private string video2endpoint = "-- Insert video 2 Endpoint here --";
    
        /// <summary> 
        /// Reference to the Inside-Out Sphere. 
        /// </summary> 
        public GameObject sphere;
    
        void Awake()
        {
            instance = this;
        }
    
  7. Ahora es el momento de escribir los puntos de conexión de los vídeos de Azure Media Service:

    1. Primero en la variable video1endpoint .

    2. Segundo en la variable video2endpoint .

    Advertencia

    Hay un problema conocido con el uso de https en Unity, con la versión 2017.4.1f1. Si los vídeos proporcionan un error en la reproducción, intente usar "http" en su lugar.

  8. A continuación, es necesario editar el método Start( ). Este método se desencadenará cada vez que el usuario cambie la escena (en consecuencia, cambiando el vídeo) mirando el botón de mirada.

        // Use this for initialization
        void Start()
        {
            Application.runInBackground = true;
            StartCoroutine(PlayVideo());
        }
    
  9. Después del método Start(), inserte el método IEnumerator PlayVideo(), que se usará para iniciar vídeos sin problemas (por lo que no se ve ningún estutete).

        private IEnumerator PlayVideo()
        {
            // create a new render texture to display the video 
            videoStreamRenderTexture = new RenderTexture(2160, 1440, 32, RenderTextureFormat.ARGB32);
    
            videoStreamRenderTexture.Create();
    
            // assign the render texture to the object material 
            Material sphereMaterial = sphere.GetComponent<Renderer>().sharedMaterial;
    
            //create a VideoPlayer component 
            videoPlayer = gameObject.AddComponent<VideoPlayer>();
    
            // Set the video to loop. 
            videoPlayer.isLooping = true;
    
            // Set the VideoPlayer component to play the video from the texture 
            videoPlayer.renderMode = VideoRenderMode.RenderTexture;
    
            videoPlayer.targetTexture = videoStreamRenderTexture;
    
            // Add AudioSource 
            audioSource = gameObject.AddComponent<AudioSource>();
    
            // Pause Audio play on Awake 
            audioSource.playOnAwake = true;
            audioSource.Pause();
    
            // Set Audio Output to AudioSource 
            videoPlayer.audioOutputMode = VideoAudioOutputMode.AudioSource;
            videoPlayer.source = VideoSource.Url;
    
            // Assign the Audio from Video to AudioSource to be played 
            videoPlayer.EnableAudioTrack(0, true);
            videoPlayer.SetTargetAudioSource(0, audioSource);
    
            // Assign the video Url depending on the current scene 
            switch (SceneManager.GetActiveScene().name)
            {
                case "VideoScene1":
                    videoPlayer.url = video1endpoint;
                    break;
    
                case "VideoScene2":
                    videoPlayer.url = video2endpoint;
                    break;
    
                default:
                    break;
            }
    
            //Set video To Play then prepare Audio to prevent Buffering 
            videoPlayer.Prepare();
    
            while (!videoPlayer.isPrepared)
            {
                yield return null;
            }
    
            sphereMaterial.mainTexture = videoStreamRenderTexture;
    
            //Play Video 
            videoPlayer.Play();
    
            //Play Sound 
            audioSource.Play();
    
            while (videoPlayer.isPlaying)
            {
                yield return null;
            }
        }
    
  10. El último método que necesita para esta clase es el método ChangeScene(), que se usará para intercambiar entre escenas.

        public void ChangeScene()
        {
            SceneManager.LoadScene(SceneManager.GetActiveScene().name == "VideoScene1" ? "VideoScene2" : "VideoScene1");
        }
    

    Sugerencia

    El método ChangeScene() usa una característica útil de C# denominada Operador condicional. Esto permite comprobar las condiciones y, a continuación, los valores devueltos en función del resultado de la comprobación, todo dentro de una sola instrucción. Siga este vínculo para obtener más información sobre el operador condicional.

  11. Guarde los cambios en Visual Studio antes de volver a Unity.

  12. De nuevo en el Editor de Unity, haga clic y arrastre la clase VideoController [from]{.underline} a la carpeta Scripts al objeto Main Camera en el Panel jerarquía .

  13. Haga clic en la Cámara principal y examine el Panel inspector. Observará que dentro del componente script recién agregado, hay un campo con un valor vacío. Se trata de un campo de referencia, que tiene como destino las variables públicas dentro del código.

  14. Arrastre el objeto InsideOutSphere desde el Panel jerarquía hasta la ranura Sphere , como se muestra en la imagen siguiente.

    Captura de pantalla del menú jerarquía. La cámara principal está seleccionada.Captura de pantalla de la ranura Sphere.

Capítulo 6: Creación de la clase Gaze

Esta clase es responsable de crear un Raycast que se proyectará hacia delante desde la cámara principal, para detectar el objeto que el usuario está mirando. En este caso, Raycast tendrá que identificar si el usuario está viendo el objeto GazeButton en la escena y desencadenar un comportamiento.

Para crear esta clase:

  1. Vaya a la carpeta Scripts que creó anteriormente.

  2. Haga clic con el botón derecho en el Panel del proyecto , Crearscript de C#. Asigne al script el nombre Gaze.

  3. Haga doble clic en el nuevo script De mirada para abrirlo con Visual Studio 2017.

  4. Asegúrese de que el siguiente espacio de nombres está en la parte superior del script y quite los demás:

    using UnityEngine;
    
  5. A continuación, agregue las siguientes variables dentro de la clase Gaze :

        /// <summary> 
        /// Provides Singleton-like behaviour to this class. 
        /// </summary> 
        public static Gaze instance;
    
        /// <summary> 
        /// Provides a reference to the object the user is currently looking at. 
        /// </summary> 
        public GameObject FocusedGameObject { get; private set; }
    
        /// <summary> 
        /// Provides a reference to compare whether the user is still looking at 
        /// the same object (and has not looked away). 
        /// </summary> 
        private GameObject oldFocusedObject = null;
    
        /// <summary> 
        /// Max Ray Distance 
        /// </summary> 
        float gazeMaxDistance = 300;
    
        /// <summary> 
        /// Provides whether an object has been successfully hit by the raycast. 
        /// </summary> 
        public bool Hit { get; private set; }
    
  6. Ahora es necesario agregar código para los métodos Awake() e Start().

        private void Awake()
        {
            // Set this class to behave similar to singleton 
            instance = this;
        }
    
        void Start()
        {
            FocusedGameObject = null;
        }
    
  7. Agregue el código siguiente en el método Update() para proyectar un Raycast y detectar la acierto de destino:

        void Update()
        {
            // Set the old focused gameobject. 
            oldFocusedObject = FocusedGameObject;
            RaycastHit hitInfo;
    
            // Initialise Raycasting. 
            Hit = Physics.Raycast(Camera.main.transform.position, Camera.main.transform.forward, out hitInfo, gazeMaxDistance);
    
            // Check whether raycast has hit. 
            if (Hit == true)
            {
                // Check whether the hit has a collider. 
                if (hitInfo.collider != null)
                {
                    // Set the focused object with what the user just looked at. 
                    FocusedGameObject = hitInfo.collider.gameObject;
                }
                else
                {
                    // Object looked on is not valid, set focused gameobject to null. 
                    FocusedGameObject = null;
                }
            }
            else
            {
                // No object looked upon, set focused gameobject to null.
                FocusedGameObject = null;
            }
    
            // Check whether the previous focused object is this same 
            // object (so to stop spamming of function). 
            if (FocusedGameObject != oldFocusedObject)
            {
                // Compare whether the new Focused Object has the desired tag we set previously. 
                if (FocusedGameObject.CompareTag("GazeButton"))
                {
                    FocusedGameObject.SetActive(false);
                    VideoController.instance.ChangeScene();
                }
            }
        }
    
  8. Guarde los cambios en Visual Studio antes de volver a Unity.

  9. Haga clic y arrastre la clase Gaze desde la carpeta Scripts hasta el objeto Main Camera en el Panel jerarquía .

Capítulo 7: Configuración de las dos escenas de Unity

El propósito de este capítulo es configurar las dos escenas, cada una de las cuales hospeda un vídeo que se va a transmitir. Duplicará la escena que ya ha creado, de modo que no necesite volver a configurarla, aunque luego editará la nueva escena, de modo que el objeto GazeButton se encuentra en una ubicación diferente y tiene una apariencia diferente. Esto es para mostrar cómo cambiar entre escenas.

  1. Para ello, vaya a Guardar > escena como.... Aparecerá una ventana de guardado. Haga clic en el botón Nueva carpeta .

    Capítulo 7: Configuración de las dos escenas de Unity

  2. Asigne un nombre a la carpeta Escenas.

  3. La ventana Guardar escena seguirá abierta. Abra la carpeta Escenas recién creada.

  4. En el campo Nombre de archivo: texto, escriba VideoScene1 y presione Guardar.

  5. De nuevo en Unity, abra la carpeta Escenas y haga clic con el botón izquierdo en el archivo VideoScene1 . Use el teclado y presione Ctrl + D para duplicar esa escena.

    Sugerencia

    El comando Duplicar también se puede realizar si va a Editar > duplicado.

  6. Unity incrementará automáticamente el número de nombres de escena, pero lo comprobará de todos modos para asegurarse de que coincide con el código insertado anteriormente.

    Debe tener VideoScene1 y VideoScene2.

  7. Con sus dos escenas, vaya a Configuración de compilación de archivos>. Con la ventana Configuración de compilación abierta, arrastre las escenas a la sección Escenas en compilación .

    Captura de pantalla de la ventana Configuración de compilación.

    Sugerencia

    Puede seleccionar ambas escenas en la carpeta Escenas a través del botón Ctrl y, después, hacer clic con el botón izquierdo en cada escena y, por último, arrastrar ambos a través.

  8. Cierre la ventana Configuración de compilación y haga doble clic en VideoScene2.

  9. Con la segunda escena abierta, haga clic en el objeto secundario GazeButton de InsideOutSphere y establezca su transformación como se indica a continuación:

Transformación: posición

X Y Z
0 1.3 3,6

Transformación: rotación

X Y Z
0 0 0

Transformación: escalado

X Y Z
1 1 1
  1. Con el elemento secundario GazeButton aún seleccionado, examine el Inspector y en el filtro de malla. Haga clic en el pequeño destino situado junto al campo Referencia de malla :

    Captura de pantalla de la pantalla del inspector para el botón de mirada.

  2. Aparecerá una ventana emergente Seleccionar malla . Haga doble clic en la malla cubo de la lista de recursos.

    Captura de pantalla de la ventana emergente Seleccionar malla.

  3. El filtro de malla se actualizará y ahora será un cubo. Ahora, haga clic en el icono engranaje situado junto a Colisionador de esfera y haga clic en Quitar componente para eliminar el colisionador de este objeto.

    Captura de pantalla del menú Colisionador de esferas. Se selecciona Quitar componente.

  4. Con el control GazeButton aún seleccionado, haga clic en el botón Agregar componente situado en la parte inferior del Inspector. En el campo de búsqueda, escriba box y Box Collider será una opción , haga clic en ella para agregar un colisionador de cuadro al objeto GazeButton.

    Captura de pantalla del cuadro de búsqueda Agregar componente.

  5. El GazeButton ahora se actualiza parcialmente, para que parezca diferente, pero ahora creará un nuevo material, de modo que parezca completamente diferente, y es más fácil reconocer como un objeto diferente, que el objeto de la primera escena.

  6. Vaya a la carpeta Materiales , en el Panel de proyectos. Duplicar el elemento ButtonMaterial Material (presione Ctrl + D en el teclado o haga clic con el botón izquierdo en el material y, a continuación, en la opción de menú Editar archivo, seleccione Duplicar).

    Captura de pantalla de la carpeta Materiales en la pestaña del proyecto.Captura de pantalla del menú de edición con duplicado seleccionado.

  7. Seleccione el nuevo elemento ButtonMaterial Material (aquí denominado ButtonMaterial 1) y, dentro del Inspector, haga clic en la ventana de color Albedo . Aparecerá un elemento emergente, donde puede seleccionar otro color (elija el que quiera) y, a continuación, cerrar el elemento emergente. El material será su propia instancia y será diferente al original.

    Captura de pantalla del menú emergente de selección de color.

  8. Arrastre el nuevo material al elemento secundario GazeButton para actualizar completamente su aspecto, de modo que se pueda distinguir fácilmente del botón de primera escena.

    Captura de pantalla de la pestaña escena del editor del proyecto.

  9. En este momento puedes probar el proyecto en el Editor antes de compilar el proyecto para UWP.

    • Presione el botón Reproducir en el Editor y use los auriculares.

      Captura de pantalla que muestra los botones reproducir, pausar y omitir. El botón Reproducir está resaltado.

  10. Examine los dos objetos GazeButton para cambiar entre el primer y el segundo vídeo.

Capítulo 8: Compilación de la solución para UWP

Una vez que haya asegurado de que el editor no tiene errores, está listo para compilar.

Para compilar:

  1. Guarde la escena actual haciendo clic en Guardar archivo>.

  2. Active la casilla denominada Proyectos de C# de Unity (esto es importante porque le permitirá editar las clases una vez completada la compilación).

  3. Vaya a Configuración de compilación de archivos>, haga clic en Compilar.

  4. Se le pedirá que seleccione la carpeta donde desea compilar la solución.

  5. Cree una carpeta BUILDS y, dentro de esa carpeta, cree otra carpeta con el nombre adecuado de su elección.

  6. Haga clic en la nueva carpeta y, a continuación, haga clic en Seleccionar carpeta, para elegir esa carpeta, para comenzar la compilación en esa ubicación.

    Captura de pantalla de la carpeta BUILDS resaltada.Captura de pantalla de la carpeta Compilación de streaming de vídeo resaltada.

  7. Una vez que Unity haya terminado de compilar (puede tardar algún tiempo), se abrirá una ventana de Explorador de archivos en la ubicación de la compilación.

Capítulo 9: Implementación en la máquina local

Una vez completada la compilación, aparecerá una ventana Explorador de archivos en la ubicación de la compilación. Abra la carpeta en la que ha llamado y compilado y haga doble clic en el archivo de solución (.sln) dentro de esa carpeta, para abrir la solución con Visual Studio 2017.

Lo único que queda por hacer es implementar la aplicación en el equipo (o máquina local).

Para realizar la implementación en la máquina local:

  1. En Visual Studio 2017, abra el archivo de solución que acaba de crearse.

  2. En la Plataforma de soluciones, seleccione x86, Máquina local.

  3. En Configuración de la solución, seleccione Depurar.

    Captura de pantalla del menú Configuración de la solución.

  4. Ahora tendrá que restaurar los paquetes a la solución. Haga clic con el botón derecho en la solución y haga clic en Restaurar paquetes NuGet para la solución...

    Nota:

    Esto se hace porque los paquetes creados por Unity deben tener como destino trabajar con las referencias de las máquinas locales.

  5. Vaya al menú Compilar y haga clic en Implementar solución para transferir localmente la aplicación a la máquina. Visual Studio compilará primero y, a continuación, implementará la aplicación.

  6. La aplicación debería aparecer ahora en la lista de aplicaciones instaladas, lista para iniciarse.

    Captura de pantalla de la lista de aplicaciones instaladas.

Al ejecutar la aplicación mixed Reality, estará dentro del modelo InsideOutSphere que usó en la aplicación. Esta esfera será donde se transmitirá el vídeo, proporcionando una vista de 360 grados, del vídeo entrante (que se filmó para este tipo de perspectiva). No te sorprendas si el vídeo tarda un par de segundos en cargarse, la aplicación está sujeta a la velocidad de Internet disponible, ya que el vídeo debe capturarse y descargarse, por lo que transmitirlo a la aplicación. Cuando esté listo, cambie las escenas y abra su segundo vídeo, mirando en la esfera roja! ¡Entonces no dude en volver, usando el cubo azul en la segunda escena!

La aplicación de Azure Media Service finalizada

Enhorabuena, ha creado una aplicación de realidad mixta que aprovecha Azure Media Service para transmitir vídeos de 360.

Captura de pantalla de una aplicación de realidad mixta de ejemplo.

Captura de pantalla de un ejemplo de aplicación de realidad mixta.

Ejercicios de bonificación

Ejercicio 1

Solo es posible usar una sola escena para cambiar vídeos en este tutorial. Experimente con la aplicación y consícelo en una sola escena. Quizás incluso agregue otro vídeo a la mezcla.

Ejercicio 2

Experimente con Azure y Unity e intente implementar la posibilidad de que la aplicación seleccione automáticamente un vídeo con un tamaño de archivo diferente, en función de la intensidad de una conexión a Internet.