@ -47,3 +47,8 @@ def LLMTokenizer(str):
.start()
)
return result
if __name__ == "__main__":
test_str = "请帮我把桌子上的杯子拿过来,然后放到书架上"
response = LLMTokenizer(test_str)
print(response)
该备注对被屏蔽的用户不可见。