archive/preprocess/clospan.py [202:208]:
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
			tokens = nltk.regexp_tokenize(text, tokenPattern)
			if colCnt < 0:
				num = 1
			else:
				num = int(r[colCnt])
			text = []
			for t in tokens:
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -



archive/preprocess/growphrase3.py [57:63]:
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -
			tokens = nltk.regexp_tokenize(text, tokenPattern)
			if colCnt < 0:
				num = 1
			else:
				num = int(r[colCnt])
			text = []
			for t in tokens:
- - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - - -