蟒蛇正则表达式：如何根据字母，数字和标点符号

Question

我在学习使用Python 2.7

正则表达式给出一个句子串分成不同的组（假设为小写字母和ASCII）如：

input = 'i like: a, b, 007 and c!!' 

如何将令牌化输入字符串转换成

['i', 'like', ':', 'a', ',', 'b', ',', '007', 'and', 'c', '!!'] 

我可以写的自动机和代码在C++的转换矩阵，但我想这样做在python

我无法想出一个正则表达式，可以一次匹配这些不同类别的字母，数字和标点符号。

我已经看到了一些stackoverflow的帖子here和here，但不完全按照他们的方法。

我已经尝试了一段时间了，现在我很感激你的帮助。

PS：这不是一门功课的问题

Answer 1

>>> from string import punctuation 
>>> text = 'i like: a, b, 007 and c!!' 
>>> re.findall('\w+|[{0}]+'.format(punctuation),text) 
['i', 'like', ':', 'a', ',', 'b', ',', '007', 'and', 'c', '!!'] 

这也适用，但认为任何非空白字符，如果它没有找到字母数字字符

>>> re.findall('\w+|\S+',text) 
['i', 'like', ':', 'a', ',', 'b', ',', '007', 'and', 'c', '!!']