Wie kann ich an Wortgrenzen mit Regexen teilen?

Question

Ich versuche, dies zu tun:

import re 
sentence = "How are you?" 
print(re.split(r'\b', sentence)) 

Das Ergebnis wie [u'How', u'are', u'you', u'?']

[u'How are you?'] 

ich etwas will zu sein. Wie kann dies erreicht werden?

Answer 1

Leider kann Python nicht durch leere Zeichenfolgen aufgeteilt werden.

Um dies zu umgehen, müssten Sie findall statt split verwenden.

Eigentlich \b bedeutet nur Wortgrenze.

Es entspricht (?<=\w)(?=\W)|(?<=\W)(?=\w).

Das heißt, würde der folgende Code funktioniert:

import re 
sentence = "How are you?" 
print(re.findall(r'\w+|\W+', sentence)) 

Answer 2

import re 
split = re.findall(r"[\w']+|[.,!?;]", "How are you?") 
print(split) 

---

Ausgang:

['How', 'are', 'you', '?'] 

---

Ideone Demo

Regex101 Demo

---

Regex Erläuterung:

"[\w']+|[.,!?;]" 

    1st Alternative: [\w']+ 
     [\w']+ match a single character present in the list below 
      Quantifier: + Between one and unlimited times, as many times as possible, giving back as needed [greedy] 
      \w match any word character [a-zA-Z0-9_] 
      ' the literal character ' 
    2nd Alternative: [.,!?;] 
     [.,!?;] match a single character present in the list below 
      .,!?; a single character in the list .,!?; literally