了解Scanner中的useDelimiter：为什么我得到空白令牌？

我正在使用具有分隔符的扫描仪，我遇到了一个我想要了解的奇怪行为。

我正在使用这个程序：

Scanner sc = new Scanner("Aller à : Navigation, rechercher"); sc.useDelimiter("\\s+|\\s*\\p{Punct}+\\s*"); String word=""; while(sc.hasNext()){ word = sc.next(); System.out.println(word); } 

输出是：

 Aller à Navigation rechercher 

首先，我不明白为什么我得到一个空白令牌， 文档说：

根据分隔模式的类型，可以返回空标记。 例如，模式“\ s +”将不返回空标记，因为它匹配分隔符的多个实例。 分隔模式“\ s”可以返回空标记，因为它一次只传递一个空格。

我正在使用\\s+所以为什么它返回一个空白令牌？

那么关于正则表达式还有另一件我想要理解的事情。 如果我使用“反向”正则表达式更改分隔符：

  sc.useDelimiter("\\s*\\p{Punct}+\\s*|\\s+"); 

输出是正确的，我得到：

 Aller à Navigation rechercher 

为什么它的方式有效？

编辑：

在这种情况下：

  Scanner sc = new Scanner("(23 ou 24 minutes pour les épisodes avec introduction) (approx.)1"); sc.useDelimiter("\\s*\\p{Punct}+\\s*|\\s+"); //second regex 

introduction和approx之间我仍然有一个空白的标记。 有可能避免它吗？

Answer 1

我有一种感觉，你在有空格后跟标点符号的地方造成两个分隔符捕获。 为什么不简单地使用[\\s\\p{Punct}]+ ？

这个正则表达式\\s+|\\p{Punct}+将首先捕获空白区并吞下它，然后将下一个分隔符捕获为标点符号。 这将是两个彼此相邻的分隔符，两者之间没有任何内容（空令牌）。

Answer 2

我碰巧遇到了Scanner类的空令牌问题。 我认为分隔符模式必须通过用括号括起来并将+附加到组来变得贪婪 。 我使用的模式看起来像这样

 "((\\s)+|(\\\\r\\\\n)+|\\p{Punct}+)+".