User Tools

Site Tools


informatica:realidad_virtual:unity:openai

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revisionPrevious revision
Next revision
Previous revision
informatica:realidad_virtual:unity:openai [2023/02/23 09:30] – [Text to Speech] joseinformatica:realidad_virtual:unity:openai [2023/03/03 22:29] (current) jose
Line 111: Line 111:
 Instalación de Speech to text. Asset de unityStore que cuesta 49.89€ (no es dinero)\\ Instalación de Speech to text. Asset de unityStore que cuesta 49.89€ (no es dinero)\\
 https://assetstore.unity.com/packages/tools/audio/speech-recognition-system-187171 https://assetstore.unity.com/packages/tools/audio/speech-recognition-system-187171
 +
 +Lo importamos, se llama: "Speech Recognition System"
 +{{:informatica:realidad_virtual:unity:openai_12.png|}}
  
 Descargamos el modelo de lenguaje "Spanish" está en el fichero de documentación y es un enlace a Google Drive (***investigar para conseguir el original que creo que es de Apache***) Descargamos el modelo de lenguaje "Spanish" está en el fichero de documentación y es un enlace a Google Drive (***investigar para conseguir el original que creo que es de Apache***)
 +
 +https://drive.google.com/file/d/11BvWNcp5EapeW4rbSJvl4MlPUhrz2DdD/view
  
 Copiamos el directorio en Assets/StreamingAssets/SpeechRecognitionSystem/model/spanish Copiamos el directorio en Assets/StreamingAssets/SpeechRecognitionSystem/model/spanish
  
-Nos aparece en nuestros assets como "Speech Recognition System" 
  
 Creamos dos GameObjects: Creamos dos GameObjects:
   Reconocimiento   Reconocimiento
   Microfono   Microfono
-Y les asignamos los scripts: "SpeechRecognizer" y "Audio recorder"+Y les asignamos los scripts: "SpeechRecognitionSystem > Scripts" estos dos: "SpeechRecognizer" y "Audio recorder"
   Reconocimiento -> Script "SpeechRecognizer"   Reconocimiento -> Script "SpeechRecognizer"
   Microfono -> Script "Audio recorder"   Microfono -> Script "Audio recorder"
Line 130: Line 134:
 Lo cambiamos en el script: Lo cambiamos en el script:
   public string LanguageModelDirPath = "SpeechRecognitionSystem/model/spanish";   public string LanguageModelDirPath = "SpeechRecognitionSystem/model/spanish";
-Y por si acaso también en Unity, en el GameObject de Reconocimiento, cambiamos en el Script el modelo a Spanish y que la salida sea la pantalla de Entrada.+Y por si acaso también en Unity, en el GameObject de Reconocimiento, cambiamos en el Script el modelo a Spanish y que la salida sea la pantalla de Entrada.La primera es de log, la segunda el partial (que es el que usaremos) y la tercera el final
  
 {{:informatica:realidad_virtual:unity:openai_06.png|}} {{:informatica:realidad_virtual:unity:openai_06.png|}}
Line 199: Line 203:
  
 ====== Text to Speech ====== ====== Text to Speech ======
 +Facturación de Google:\\
 +https://console.cloud.google.com/apis/api/texttospeech.googleapis.com/metrics?hl=es&project=unitytts-378321
 +
 Usamos el Asset "Text to Speech using Google Cloud" que vale 4.98€:\\ Usamos el Asset "Text to Speech using Google Cloud" que vale 4.98€:\\
 https://assetstore.unity.com/packages/tools/utilities/text-to-speech-using-google-cloud-232515 https://assetstore.unity.com/packages/tools/utilities/text-to-speech-using-google-cloud-232515
Line 220: Line 227:
 Quedaría mas o menos así: Quedaría mas o menos así:
 {{:informatica:realidad_virtual:unity:openai_10.png|}} {{:informatica:realidad_virtual:unity:openai_10.png|}}
 +
 +Ahora hacemos que cuando acabe la llamada a openAI, llame a TextToSpeech. En el script ChatGPT.cs añadimos estas líneas para poder llamar al método PressBtn() que es el que lanza TextToSpeech desde otro script:
 +
 +  using GoogleTextToSpeech.Scripts.Example;
 +
 +  [SerializeField] private TextToSpeechExample textToSpeechExample ;
 +
 +Ahora al final del SendReply() añadimos:
 +  textToSpeechExample.PressBtn();
 +  
 +Ahora señalamos el gameObject chatGPT y arrastramos el gameObject TextToSpeech dentro de: "Text To Speech Example"
 +{{:informatica:realidad_virtual:unity:openai_11.png|}}
informatica/realidad_virtual/unity/openai.1677144635.txt.gz · Last modified: 2023/02/23 09:30 by jose