B
    .(фbK  у               @   sh   d dl mZ d dlZddД Zejаdddgбdd	Д ГZejаd
ddddddddddddgбddД ГZdS )щ    )┌unicode_literalsNc             C   s    d}| |Г}t |ГdkstВd S )Nuo   рдирд╛рдирд╛рд╡рд┐рдзрд╛рдирд┐ рджрд┐рд╡реНрдпрд╛рдирд┐ рдирд╛рдирд╛рд╡рд░реНрдгрд╛рдХреГрддреАрдирд┐ рдЪредредщ   )┌len┌AssertionError)┌sa_tokenizer┌text┌tokensй r	   ·L/home/dcms/DCMS/lib/python3.7/site-packages/spacy/tests/lang/sa/test_text.py┌#test_sa_tokenizer_handles_long_text   s    r   ztext,length)uЛ   рд╢реНрд░реА рднрдЧрд╡рд╛рдиреБрд╡рд╛рдЪ рдкрд╢реНрдп рдореЗ рдкрд╛рд░реНрде рд░реВрдкрд╛рдгрд┐ рд╢рддрд╢реЛрд╜рде рд╕рд╣рд╕реНрд░рд╢рдГредщ	   )un   рдЧреБрдгрд╛рдиреН рд╕рд░реНрд╡рд╛рдиреН рд╕реНрд╡рднрд╛рд╡реЛ рдореВрд░реНрдзреНрдирд┐ рд╡рд░реНрддрддреЗ редr   c             C   s   | |Г}t |Г|kstВd S )N)r   r   )r   r   ┌lengthr   r	   r	   r
   ┌test_sa_tokenizer_handles_cnts   s    r   z
text,match)┌10T)┌1T)z10.000T)Z1000T)z999,0T)u
   рдПрдХрдГ T)u   рджрд╢T)u   рдкрдЮреНрдЪрджрд╢T)u"   рдЪрддреНрд╡рд╛рд░рд┐рдВрд╢рддреН T)u   рдХреВрдкреЗF)·,F)z1/2Tc             C   s.   | |Г}t |ГdkstВ|d j|ks*tВd S )Nщ   r   )r   r   Zlike_num)r   r   ┌matchr   r	   r	   r
   ┌test_lex_attrs_like_number   s    r   )┌
__future__r   Zpytestr   ┌markZparametrizer   r   r	   r	   r	   r
   ┌<module>   s(   