fighter-programmer/voicegen

1B

2��c�@sldd
lZdd�Z
dd�Zdd�Zdd	�Zd3d�Zdd
�Zdd�Zdd�Zdd�Z	dd�Z4dd�Zdd�Zd
S)�Nc
Cs&d
dlm
}

|
|�
}t�dd|�}|S)Nr
)
�japanese_to_romaji_with_accentz([A-Za-z])$z\1.)�
text.japaneser�re�sub)�textr�r�D:\MoeGoeONNX\text\cleaners.py�japanese_cleanerss



r	c

Cst|�
�
d
d��
dd�S)N�tsuʦz...u…)r	�replace)
rrrr�japanese_cleaners2s
rc
Cs>d
dlm
}
m}m}
|
|�
}||�
}||�
}t�dd|�}|S)zPipeline for Korean textr
)�latin_to_hangul�number_to_hangul�
divide_hangulz([\u3131-\u3163])$z\1.)�text.koreanr
rrrr)rr
rrrrr�korean_cleanerss




rc
Cs>d
dlm
}
m}m}
|
|�
}||�
}||�
}t�dd|�}|S)zPipeline for Chinese textr
)�number_to_chinese�chinese_to_bopomofo�latin_to_bopomofou([ˉˊˇˋ˙])$u\1。)�
text.mandarinrrrrr)rrrrrrr�chinese_cleanerss




rc

sdd
dlm
�
d
dlm�

t�d�f
dd�|�}t�d�
f
dd�|�}t�d	d5|�}t�dd|�}|S)
Nr
)
�chinese_to_romaji)
rz\[ZH\](.*?)\[ZH\]c

s�|�d
�
�
dS)N�
�
 )
�group)
�
x)
rrr�<lambda>'sz(zh_ja_mixture_cleaners.<locals>.<lambda>z\[JA\](.*?)\[JA\]c

s*�|�d
�
�
�
dd��
dd��
dd�dS)	Nrr6uʦ�
uuɯz...u…r)rr)
r)
rrrr(s
z\s+$�u([^\.,!\?\-…~])$z\1.)rrrrrr)
rr)rrr�zh_ja_mixture_cleaners#s








rc

Cs,|�d
d��dd�}|ddkr(|d7}|S)Nu॥u।uॐu	ओम्�����u ।)
r)
rrrr�sanskrit_cleaners/s



r!c

s�d
dlm
�
d
dlm�
d
dlm�
d
dlm�

d
dlm	�
t7�d�f
dd	�|�}t8�d9�f
dd	�|�}t10�d�f
d
d	�|�}t11�d�
f
dd	�|�}t12�d�f
dd	�|�}t13�dd|�}t14�dd|�}|S)Nr
)
�chinese_to_lazy_ipa)
�japanese_to_ipa)
�korean_to_lazy_ipa)
�devanagari_to_ipa)
�english_to_lazy_ipaz\[ZH\](.*?)\[ZH\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r"rrr=szcjks_cleaners.<locals>.<lambda>z\[JA\](.*?)\[JA\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r#rrr?sz\[KO\](.*?)\[KO\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r$rrrAsz\[SA\](.*?)\[SA\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r%rrrCsz\[EN\](.*?)\[EN\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r&rrrEsz\s+$ru([^\.,!\?\-…~])$z\1.)rr"rr#rr$Z
text.sanskritr%�text.englishr&rr)
rr)r"r%r&r#r$r�
cjks_cleaners6s$

















r(c

s�d
dlm
�
d
dlm�
d
dlm�
d
dlm�

t�	d�f
dd�|�}t�	d	�f
d15d�|�}t�	d�f
dd�|�}t�	d
�
f
dd�|�}t�	dd|�}t�	dd|�}|S)Nr
)
r")
r#)
�
korean_to_ipa)
�english_to_ipa2z\[ZH\](.*?)\[ZH\]c

s*�|�d
�
�
�
dd��
dd��
dd�dS)	Nruʧutʃuʦr16uɥanuɥænr)rr)
r)
r"rrrPs
zcjke_cleaners.<locals>.<lambda>z\[JA\](.*?)\[JA\]c

s2�|�d
�
�
�
dd��
dd��
dd��
dd	�d17S)Nruʧutʃuʦr18uɥanuɥænuʥ�dzr)rr)
r)
r#rrrRs
z\[KO\](.*?)\[KO\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r)rrrUsz\[EN\](.*?)\[EN\]c

s:�|�d
�
�
�
dd��
dd��
dd��
dd	��
d19d�dS)
Nruɑ�
auɔ�
ouɛ�
euɪ�
iuʊrr)rr)
r)
r*rrrVs
z\s+$ru([^\.,!\?\-…~])$z\1.)20rr"rr#rr)r'r*rr)
rr)r"r*r#r)r�
cjke_cleanersKs














r0c

s�d
dlm
�
d
dlm�
d
dlm�
d
dlm�

t�	d�f
dd�|�}t�	d	�f
d21d�|�}t�	d�f
dd�|�}t�	d
�
f
dd�|�}t�	dd|�}t�	dd|�}|S)Nr
)
�chinese_to_ipa)
�japanese_to_ipa2)
r))
r*z\[ZH\](.*?)\[ZH\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r1rrrcsz cjke_cleaners2.<locals>.<lambda>z\[JA\](.*?)\[JA\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r2rrresz\[KO\](.*?)\[KO\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r)rrrgsz\[EN\](.*?)\[EN\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r*rrrisz\s+$ru([^\.,!\?\-…~])$z\1.)22rr1rr2rr)r'r*rr)
rr)r1r*r2r)r�cjke_cleaners2]s














r3c
Cs$d
dlm
}
m}
|
|�
}||�
}|S)Nr
)�num_to_thai�
latin_to_thai)Z	text.thair4r5)rr4r5rrr�
thai_cleanersos



r6c
Cs&d
dlm
}

|
|�
}t�dd|�}|S)Nr
)
�shanghainese_to_ipau([^\.,!\?\-…~])$z\1.)�text.shanghaineser7rr)rr7rrr�shanghainese_cleanersvs



r9c

s�d
dlm
�

d
dlm�
d
dlm�
d
dlm�
d
dlm	�
d
dl23m�
t�
d�
f
d	d24�|�}t�
d�f
dd25�|�}t�
d
�f
dd26�|�}t�
d�f
dd27�|�}t�
d�f
dd28�|�}t�
d�f
dd29�|�}t�
dd|�}t�
dd|�}|S)Nr
)
�chinese_to_ipa2)
�japanese_to_ipa3)
r7)
�cantonese_to_ipa)
�english_to_lazy_ipa2)
�ngu_dialect_to_ipaz\[ZH\](.*?)\[ZH\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r:rrr�sz*chinese_dialect_cleaners.<locals>.<lambda>z\[JA\](.*?)\[JA\]c

s�|�d
�
�
�
dd�dS)Nr�
Quʔr)rr)
r)
r;rrr�sz\[SH\](.*?)\[SH\]c

sJ�|�d
�
�
�
dd��
dd��
dd��
dd	��
d30d��
dd
��
dd�dS)Nr�
1u˥˧�
5u˧˧˦�
6u˩˩˧�
7u˥�
8u˩˨uᴀuɐuᴇr.r)rr)
r)
r7rrr�s
z\[GD\](.*?)\[GD\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r<rrr�sz\[EN\](.*?)\[EN\]c

s�|�d
�
�
dS)Nrr)
r)
r)
r=rrr�sz\[([A-Z]{2})\](.*?)\[\1\]c

s:�|�d
�
|�d�
��
dd��
dd��
dd��
d	d31�dS)N�ruʣr+uʥudʑuʦr32uʨutɕr)rr)
r)
r>rrr�s
z\s+$ru([^\.,!\?\-…~])$z\1.)rr:rr;r8r7Ztext.cantoneser<r'r=Ztext.ngu_dialectr>rr)
rr)r<r:r=r;r>r7r�chinese_dialect_cleaners}s*




















rF)
rr	rrrrr!r(r0r3r6r9rFrrrr�<module>
s3334