icu test: don't use tokenize rule="s"
[yaz-moved-to-github.git] / test / test_icu.4.xml
index 8379d35..368f78e 100644 (file)
@@ -1,7 +1,6 @@
 <icu_chain locale="en">
-  <tokenize rule="s"/>
   <transliterate>
-[:punctuation:]* } [$] > ''; 
+[,. -]* } [$] > ; 
  </transliterate>
 </icu_chain>