R 中的变音符号和正则表达式

Diacritics and regular expressions in R

在 R 中,我有一列应该只包含一个词。它是通过获取另一列的内容并使用正则表达式仅保留最后一个字来创建的。但是,对于某些行,这不起作用,在这种情况下,R 只是从第一列复制内容。这是我的 R

df$precedingWord <- gsub(".*?\W*(\w+-?)\W*$","\1", df$leftContext, perl=TRUE)

precedingWord 应该只包含一个词。它是使用正则表达式从 leftContext 中提取的。这总体上工作正常,不适用于变音符号。 leftContext 中的几行包含带变音符号的字母,例如 éà。出于某种原因,R 忽略 这些项目完全简单地将整个内容复制到 precedingWord。我觉得这很奇怪,因为正则表达式几乎不可能匹配整个事物 - 正如您所见 here。在示例中,测试字符串 是 leftContext 并且 Substitution 应该是 *precedingWord.

正如您在上面的示例中看到的,在线正则表达式测试器中的输出与我得到的输出不同。我只是得到了 leftContext 的精确副本。这并不意味着在线测试器中的输出就是想要的。现在该工具将带有变音符号的字母视为非单词字符,因此不会将其标记为我想要的输出。但实际上,我想将它们威胁为单词字符,以便它们有资格输出。

如果这是输入:

Un premier projet prévoit que l'établissement verserait 11 FF par an et par élève du secondaire et 30 FF par étudiant universitaire, une somme à évaluer et à  
Outre le prêt-à- 
And à 
Sur base de ces données, on cherchera à 
Ce sera encore le cas ce vendredi 19 juillet dans l'é

那么这就是我期望的输出

à
prêt-à-
à
à
é

这是我已有的正则表达式

.*?\W*(\w+?-?)\W*$

我已经在我的项目中使用了 stringi,所以如果它提供了我可以使用的解决方案。

在类似 Perl 的正则表达式中,您可以将任何 Unicode 字母与 \p{L} shorthand class 匹配,所有非 Unicode 字符都可以与反向 [= 匹配21=] \P{L}。见 regular-expressions.info:

You can match a single character belonging to the "letter" category with \p{L}. You can match a single character not belonging to that category with \P{L}.

因此,您可以使用的正则表达式是

df$precedingWord <- gsub(".*?\P{L}*(\p{L}+-?)\P{L}*$","\1", df$leftContext, perl=TRUE)