ailiaVoice.AiliaVoiceModel の継承関係図

ailiaVoice.AiliaVoiceModel 連携図

公開メンバ関数
int	GetEnvironmentId (bool is_gpu)
	実行環境を取得します。 [詳解]

string	GetEnvironmentName ()
	実行環境の名称を取得します。 [詳解]

bool	Create (int env_id, int flag)
	インスタンスを作成します。 [詳解]

bool	OpenDictionary (string dict_path, int dict_type)
	辞書を指定します。 [詳解]

bool	OpenModel (string encoder, string decoder1, string decoder2, string wave, string ssl, int model_type, int cleaner_type)
	モデルを指定します。 [詳解]

virtual void	Close ()
	インスタンスを破棄します。 [詳解]

virtual void	Dispose ()
	リソースを解放します。 [詳解]

string	G2P (string utf8, int g2p_type)
	音素を取得します。 [詳解]

bool	SetReference (AudioClip ref_audio, string ref_text)
	リファレンス音声を設定します。 [詳解]

bool	Inference (string feature)
	音声合成を実行します。 [詳解]

AudioClip	GetAudioClip ()
	音声合成結果を取得します。 [詳解]

限定公開メンバ関数
virtual void	Dispose (bool disposing)

関数詳解

◆ Close()

virtual void ailiaVoice.AiliaVoiceModel.Close ( )

inlinevirtual

インスタンスを破棄します。

インスタンスを破棄し、初期化します。

     {
         if (net != IntPtr.Zero){
             AiliaVoice.ailiaVoiceDestroy(net);
             net = IntPtr.Zero;
         }
     }

◆ Create()

bool ailiaVoice.AiliaVoiceModel.Create	(	int	env_id,
		int	flag
	)

inline

インスタンスを作成します。

引数

env_id	Ailiaの実行環境
flag	フラグの論理和（AiliaVoice.AILIA_VOICE_FLAG_*)

戻り値: 成功した場合はtrue、失敗した場合はfalseを返す。

                                             {
         if (net != null){
             Close();
         }
  
         AiliaVoice.AILIAVoiceApiCallback callback = AiliaVoice.GetCallback();
  
         int memory_mode = Ailia.AILIA_MEMORY_REDUCE_CONSTANT | Ailia.AILIA_MEMORY_REDUCE_CONSTANT_WITH_INPUT_INITIALIZER | Ailia.AILIA_MEMORY_REUSE_INTERSTAGE;
         int status = AiliaVoice.ailiaVoiceCreate(ref net, env_id, Ailia.AILIA_MULTITHREAD_AUTO, memory_mode, flag, callback, AiliaVoice.AILIA_VOICE_API_CALLBACK_VERSION);
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceCreate failed " + status);
             }
             return false;
         }
  
         return true;
     }

◆ Dispose() [1/2]

virtual void ailiaVoice.AiliaVoiceModel.Dispose ( )

inlinevirtual

リソースを解放します。

     {
         Dispose(true);
     }

◆ Dispose() [2/2]

virtual void ailiaVoice.AiliaVoiceModel.Dispose ( bool disposing )

inlineprotectedvirtual

     {
         if (disposing){
             // release managed resource
         }
         Close(); // release unmanaged resource
     }

◆ G2P()

string ailiaVoice.AiliaVoiceModel.G2P	(	string	utf8,
		int	g2p_type
	)

inline

音素を取得します。

引数

utf8	入力文字列
g2p_type	G2Pタイプ

戻り値: 成功した場合はstring、失敗した場合は空文字を返す。

                                                 {
         byte[] text = System.Text.Encoding.UTF8.GetBytes(utf8+"\u0000");
         //Debug.Log(text[text.Length - 1]);
         GCHandle handle = GCHandle.Alloc(text, GCHandleType.Pinned);
         IntPtr input = handle.AddrOfPinnedObject();
         int status = AiliaVoice.ailiaVoiceGraphemeToPhoneme(net, input, g2p_type);
         handle.Free();
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceGraphemeToPhoneme faield " + status);
             }
             return "";
         }
         uint count = 0;
         status = AiliaVoice.ailiaVoiceGetFeatureLength(net, ref count);
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceGetFeatureLength faield " + status);
             }
             return "";
         }
         byte[] texts = new byte [count];
         handle = GCHandle.Alloc(texts, GCHandleType.Pinned);
         IntPtr output = handle.AddrOfPinnedObject();
         status = AiliaVoice.ailiaVoiceGetFeatures(net, output, count);
         handle.Free();
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceGetFeatures faield " + status);
             }
             return "";
         }
         return System.Text.Encoding.UTF8.GetString(texts);
     }

◆ GetAudioClip()

AudioClip ailiaVoice.AiliaVoiceModel.GetAudioClip ( )

inline

音声合成結果を取得します。

戻り値: 成功した場合はAudioClip、失敗した場合はnullを返す。

     {
         AudioClip audioClip = AudioClip.Create(audio_clip_name, audio_data.Length, (int)channels, (int)sampling_rate, false);
         audioClip.SetData(audio_data, 0);
         return audioClip;
     }

◆ GetEnvironmentId()

int ailiaVoice.AiliaVoiceModel.GetEnvironmentId ( bool is_gpu )

inline

実行環境を取得します。

引数

is_gpu GPUを使用するかどうか

戻り値: env_id

                                             {
         int env_id = Ailia.AILIA_ENVIRONMENT_ID_AUTO;
         if (is_gpu) { // GPU
             int count = 0;
             Ailia.ailiaGetEnvironmentCount(ref count);
             for (int i = 0; i < count; i++){
                 IntPtr env_ptr = IntPtr.Zero;
                 Ailia.ailiaGetEnvironment(ref env_ptr, (uint)i, Ailia.AILIA_ENVIRONMENT_VERSION);
                 Ailia.AILIAEnvironment env = (Ailia.AILIAEnvironment)Marshal.PtrToStructure(env_ptr, typeof(Ailia.AILIAEnvironment));
  
                 if (env.backend == Ailia.AILIA_ENVIRONMENT_BACKEND_MPS || env.backend == Ailia.AILIA_ENVIRONMENT_BACKEND_CUDA || env.backend == Ailia.AILIA_ENVIRONMENT_BACKEND_VULKAN){
                     env_id = env.id;
                     env_name = Marshal.PtrToStringAnsi(env.name);
                 }
             }
         } else {
             env_name = "cpu";
         }
         return env_id;
     }

◆ GetEnvironmentName()

string ailiaVoice.AiliaVoiceModel.GetEnvironmentName ( )

inline

実行環境の名称を取得します。

戻り値: env_name

                                       {
         return env_name;
     }

◆ Inference()

bool ailiaVoice.AiliaVoiceModel.Inference ( string feature )

inline

音声合成を実行します。

引数

feature 入力フューチャ

戻り値: 成功した場合はAtrue、失敗した場合はfalseを返す。

     {
         byte[] text = System.Text.Encoding.UTF8.GetBytes(feature);
         GCHandle handle = GCHandle.Alloc(text, GCHandleType.Pinned);
         IntPtr input = handle.AddrOfPinnedObject();
         int status = AiliaVoice.ailiaVoiceInference(net, input);
         handle.Free();
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceInference faield " + status);
             }
             return false;
         }
         status = AiliaVoice.ailiaVoiceGetWaveInfo(net, ref samples, ref channels, ref sampling_rate);
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceGetWaveInfo faield " + status);
             }
             return false;
         }
  
         uint count = samples * channels;
         audio_data = new float [count];
         handle = GCHandle.Alloc(audio_data, GCHandleType.Pinned);
         IntPtr output = handle.AddrOfPinnedObject();
         status = AiliaVoice.ailiaVoiceGetWave(net, output, count * sizeof(float));
         handle.Free();
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceGetWave faield " + status);
             }
             return false;
         }
  
         audio_clip_name = feature;
  
         return true;
     }

◆ OpenDictionary()

bool ailiaVoice.AiliaVoiceModel.OpenDictionary	(	string	dict_path,
		int	dict_type
	)

inline

辞書を指定します。

引数

dictionary_path	辞書フォルダのパス名
dictionary_type	AILIA_VOICE_DICTIONARY_TYPE_*

戻り値: 成功した場合はtrue、失敗した場合はfalseを返す。

                                                                {
         int status = AiliaVoice.ailiaVoiceOpenDictionaryFile(net, dict_path, dict_type);
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceOpenDictionaryFile faield " + status);
             }
             return false;
         }
         return true;
     }

◆ OpenModel()

bool ailiaVoice.AiliaVoiceModel.OpenModel	(	string	encoder,
		string	decoder1,
		string	decoder2,
		string	wave,
		string	ssl,
		int	model_type,
		int	cleaner_type
	)

inline

モデルを指定します。

引数

encoder	onnxファイルのパス名
decoder1	onnxファイルのパス名
postnet	onnxファイルのパス名
wave	onnxファイルのパス名
ssl	onnxファイルのパス名
model_type	AILIA_VOICE_MODEL_TYPE_*
cleaner_type	AILIA_VOICE_CLEANER_TYPE_*

戻り値: 成功した場合はtrue、失敗した場合はfalseを返す。

                                                                                                                                       {
         AiliaLicense.CheckAndDownloadLicense();
  
         int status = AiliaVoice.ailiaVoiceOpenModelFile(net, encoder, decoder1, decoder2, wave, ssl, model_type, cleaner_type);
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceOpenModelFile faield " + status);
             }
             return false;
         }
         return true;
     }

◆ SetReference()

bool ailiaVoice.AiliaVoiceModel.SetReference	(	AudioClip	ref_audio,
		string	ref_text
	)

inline

リファレンス音声を設定します。

引数

ref_audio	入力音声
ref_text	入力音声に対応するテキスト

戻り値: 成功した場合はAudioClip、失敗した場合はnullを返す。

     {
         float[] audio_data = new float[ref_audio.samples * ref_audio.channels];
         ref_audio.GetData(audio_data, 0);
  
         GCHandle audio_handle = GCHandle.Alloc(audio_data, GCHandleType.Pinned);
         IntPtr audio_input = audio_handle.AddrOfPinnedObject();
  
         byte[] text = System.Text.Encoding.UTF8.GetBytes(ref_text);
         GCHandle text_handle = GCHandle.Alloc(text, GCHandleType.Pinned);
         IntPtr text_input = text_handle.AddrOfPinnedObject();
         int status = AiliaVoice.ailiaVoiceSetReference(net, audio_input, (uint)(ref_audio.samples * ref_audio.channels * 4), (uint)(ref_audio.channels), (uint)(ref_audio.frequency), text_input);
         text_handle.Free();
         audio_handle.Free();
  
         if (status != 0){
             if (debug_log){
                 Debug.Log("ailiaVoiceSetReference faield " + status);
             }
             return false;
         }
  
         return true;
     }

このクラス詳解は次のファイルから抽出されました:

AiliaVoiceModel.cs

公開メンバ関数

限定公開メンバ関数

関数詳解

◆ Close()

◆ Create()

◆ Dispose() [1/2]

◆ Dispose() [2/2]

◆ G2P()

◆ GetAudioClip()

◆ GetEnvironmentId()

◆ GetEnvironmentName()

◆ Inference()

◆ OpenDictionary()

◆ OpenModel()

◆ SetReference()