
    i                     h    d dl Z dg dfdg dfgZe j                  j                  de      d        Zy)    Nu   Eftir løgtingslóg um samsýning og eftirløn landsstýrismanna v.m., skulu løgmaður og landsstýrismenn vanliga siga frá sær størv í almennari tænastu ella privatum virkjum, samtøkum ella stovnum. )Eftiru   løgtingslógumu
   samsýningogu	   eftirlønu   landsstýrismannazv.m.,skuluu
   løgmaðurr   u   landsstýrismennvanligasiga   fráu   særu   størv   í	almennariu   tænastuellaprivatumvirkjumr   u	   samtøkumr   stovnum.u   Sambandsflokkurin gongur aftur við 2,7 prosentum í mun til valið í 1994, tá flokkurin fekk undirtøku frá 23,4 prosent av veljarunum.)Sambandsflokkuringongurafturu   viðz2,7	prosentumr   muntilu   valiðr   1994r   u   tá	flokkurinfekku
   undirtøkur
   z23,4prosentav
veljarunumr   ztext,expected_tokensc                 x     | |      }|D cg c]  }|j                   r|j                   }}||k(  sJ y c c}w )N)is_spacetext)fo_tokenizerr    expected_tokenstokenstoken
token_lists         s/var/www/vps2.regionflexible.com/Desarrollo/venv/lib/python3.12/site-packages/spacy/tests/lang/fo/test_tokenizer.py)test_fo_tokenizer_handles_exception_casesr'      s=    $F*0G%**GJGj((( Hs   77)pytestFO_TOKEN_EXCEPTION_TESTSmarkparametrizer'        r&   <module>r.      sX     	Z	
 	V	
 " /1IJ) K)r-   