does this tool can process Chinese?

[mathCrazyy]

my inputs Is
0 乳腺癌骨转移全身疼痛怎么办 乳腺癌骨转移有救吗？
0 乳腺癌转移到肺能活多久 乳腺癌转移肝能活多久？
1 妊娠期高血压的概念 什么是妊娠高血压
0 骨折了又是高血压怎么办 推荐吃什么药平时饮食方面吃什么又降血压又可解决贫血的问题的
0 重型乙肝治愈率有多高 丙肝的治愈率大吗比乙肝严重吗
but output is
��荏�解决�丯���灭活破坰��肠，她77�� 能�经吃不下东西了���，��90150，但一般情况是80135��10度的室内泳池游泾��春亓�而且有初筛资格��方啊��些工作�作��地方厒�灸��旋澡��麦严重
1�重和��圳����辇�大谁能给我准
0 3年，今年出现淤�同一只��5·3是有任娠��6.2��是哪一类的��友。。交和��我口，�..型 ��常的一些习�?
0��到一点丿��ca�505年听朋友倍他乐�年吃�，伤处���圕�特别痒腿上有几个红疙瘈�阴然后用手洗阴郹�，��一7夤�高，平想食疗。��卜麻 胖����在��萎缩、���几款�来的肠炎胃窦�稳定就��脏内科血液内科��秈����几级�过的针扎过��� ��它与普��中期�护理�麦��惯和饮食习惯153值吃益肝灵呢�礋����吗��冒或发烧或嗓子������交未��我啊，点怕怕的，可
1105天左右��须在半年之内扯�细��到我?阿胶含不含胆骨醇
1，叚子痛
1５０多岁了经常��睡觉，还虚胖，不怎么?�酒炖鸽子21号晚上���放心��率���发现ED患者问��
0 平时少喝水��可乐爱���������靑14.3千多��

absoutly, the output is wrong，how should I do , or choose other tool , thank you

[mathCrazyy]

my comman is : bash scripts/deduplicate_single_file.sh /mnt/webdav/data/data/open/ori/deduplicate_sample/train.txt data/all_res3 10 8