B .(b @shddlmZddlZddlmZddZejdddd d gd d Zejd ddddgddZ dS))unicode_literalsN)like_numcCs d}||}t|dkstdS)NuHÀwọn ọmọ ìlú tí wọ́n ń ṣàmúlò ayélujára ti bẹ̀rẹ̀ ìkọkúkọ sórí àwòrán ààrẹ Nkurunziza nínú ìfẹ̀hónúhàn pẹ̀lú àmì ìdámọ̀: Nkurunziza àti Burundi: Ọmọ ilé ẹ̀kọ́ gíga ní ẹ̀wọ̀n fún kíkọ ìkọkúkọ sí orí àwòrán Ààrẹ . Bí mo bá ṣe èyí ní Burundi , ó ṣe é ṣe kí a fi mí sí àtìmọ́lé Ìjọba Burundi fi akẹ́kọ̀ọ́bìnrin sí àtìmọ́lé látàrí ẹ̀sùn ìkọkúkọ sí orí àwòrán ààrẹ. A túwíìtì àwòrán ìkọkúkọ wa ní ìbánikẹ́dùn ìṣẹ̀lẹ̀ náà. Wọ́n ní kí a dán an wò, kí a kọ nǹkan sí orí àwòrán ààrẹ mo sì ṣe bẹ́ẹ̀. Mo ní ìgbóyà wípé ẹnikẹ́ni kò ní mú mi níbí. Ìfòfinlíle mú àtakòy)lenAssertionError) yo_tokenizertexttokensr L/home/dcms/DCMS/lib/python3.7/site-packages/spacy/tests/lang/yo/test_text.py#test_yo_tokenizer_handles_long_textsr z text,match)ueníT)ogunT)Z mewadinlogunT)ZtenFcCs.||}t|dkst|dj|ks*tdS)Nr)rrr)rrmatchr r r r test_lex_attrs_like_numbersrwordZejiZejilar uaárùncCs t|s tt|stdS)N)rrupper)rr r r test_yo_lex_attrs_capitalss r) __future__rZpytestZspacy.lang.yo.lex_attrsrr markZ parametrizerrr r r r s