h<SSKrSSKJr SSKJr S/SQ4S/SQ4S/S Q4S /S Q4S /S Q4S/SQ4S/SQ4S/SQ4S/SQ4S/SQ4S/SQ4S/SQ4S/SQ4/ r\R RS\5S5r\R RSS /S!Q4/5S"5r g)#N)Tamil)ORTHuகிறிஸ்துமஸ் மற்றும் இனிய புத்தாண்டு வாழ்த்துக்கள்)u!கிறிஸ்துமஸ்மற்றும்u இனியuபுத்தாண்டுu'வாழ்த்துக்கள்uyஎனக்கு என் குழந்தைப் பருவம் நினைவிருக்கிறது)uஎனக்குu என்uகுழந்தைப்uபருவம்u-நினைவிருக்கிறதுu0உங்கள் பெயர் என்ன?)uஉங்கள்uபெயர் என்ன?uஏறத்தாழ இலங்கைத் தமிழரில் மூன்றிலொரு பங்கினர் இலங்கையை விட்டு வெளியேறிப் பிற நாடுகளில் வாழ்கின்றனர்) uஏறத்தாழuஇலங்கைத்uதமிழரில்uமூன்றிலொருuபங்கினர்uஇலங்கையைuவிட்டுuவெளியேறிப்u பிறuநாடுகளில்u$வாழ்கின்றனர்uKஇந்த ஃபோனுடன் சுமார் ரூ.2,990 மதிப்புள்ள போட் ராக்கர்ஸ் நிறுவனத்தின் ஸ்போர்ட் புளூடூத் ஹெட்போன்ஸ் இலவசமாக வழங்கப்படவுள்ளது.)u இந்தuஃபோனுடன்uசுமார்u ரூ.2,990uமதிப்புள்ளu போட்uராக்கர்ஸ்u$நிறுவனத்தின்uஸ்போர்ட்uபுளூடூத்uஹெட்போன்ஸ்uஇலவசமாகu0வழங்கப்படவுள்ளது.uமட்டக்களப்பில் பல இடங்களில் வீட்டுத் திட்டங்களுக்கு இன்று அடிக்கல் நாட்டல்)u*மட்டக்களப்பில்uபலuஇடங்களில்uவீட்டுத்u*திட்டங்களுக்குuஇன்றுuஅடிக்கல்uநாட்டல்uஐ போன்க்கு முகத்தை வைத்து அன்லாக் செய்யும் முறை மற்றும் விரலால் தொட்டு அன்லாக் செய்யும் முறையை வாட்ஸ் ஆப் நிறுவனம் இதற்கு முன் கண்டுபிடித்தது)uஐuபோன்க்குuமுகத்தைuவைத்துஅன்லாக்செய்யும்u முறைruவிரலால்uதொட்டுr r uமுறையைuவாட்ஸ்u ஆப்நிறுவனம்uஇதற்குu முன்u*கண்டுபிடித்ததுu0இது ஒரு வாக்கியம்.)u இது ஒருuவாக்கியம்ruதன்னாட்சி கார்கள் காப்பீட்டு பொறுப்பை உற்பத்தியாளரிடம் மாற்றுகின்றன)uதன்னாட்சிuகார்கள்uகாப்பீட்டுuபொறுப்பைu0உற்பத்தியாளரிடம்u$மாற்றுகின்றனuநடைபாதை விநியோக ரோபோக்களை தடை செய்வதை சான் பிரான்சிஸ்கோ கருதுகிறது)uநடைபாதைuவிநியோகuரோபோக்களைu தடைuசெய்வதைu சான்u$பிரான்சிஸ்கோuகருதுகிறதுu{லண்டன் ஐக்கிய இராச்சியத்தில் ஒரு பெரிய நகரம்.)uலண்டன்uஐக்கியu*இராச்சியத்தில்r uபெரியuநகரம்ruBஎன்ன வேலை செய்கிறீர்கள்?)ru வேலைu'செய்கிறீர்கள்ruQஎந்த கல்லூரியில் படிக்கிறாய்?)u எந்தu!கல்லூரியில்u!படிக்கிறாய்rztext,expected_tokenscbU"U5nUVs/sHoDRPM nnX%:Xdegs snf)N)text) ta_tokenizerrexpected_tokenstokenstoken token_lists \/home/james-whalen/.local/lib/python3.13/site-packages/spacy/tests/lang/ta/test_tokenizer.pytest_ta_tokenizer_basicrs3 $ F*01&**&J1  (( (2s,uஆப்பிள் நிறுவனம் யு.கே. தொடக்க நிறுவனத்தை ஒரு லட்சம் கோடிக்கு வாங்கப் பார்க்கிறது) uஆப்பிள்r யு.கே.uதொடக்கuநிறுவனத்தைr uலட்சம்uகோடிக்குuவாங்கப்u!பார்க்கிறதுc[5nURRS[S0/5 U"U5nUVs/sHoDRPM nnX:Xdegs snf)Nr)r tokenizeradd_special_caserr)rrnlprrrs rtest_ta_tokenizer_special_casersY. 'CMM""#3t=M6N5OP YF*01&**&J1  (( (2sA) pytest spacy.lang.tar spacy.symbolsrTA_BASIC_TOKENIZATION_TESTSmark parametrizerrrr$sH  V d D R89wx ` " V ( [   N 2 ;  J   C   F   M  \ QQh/1LM)N)  l  ())()r#