<div style="line-height:1.7;color:#000000;font-size:14px;font-family:arial"><div><div>Hi, everyone, </div><div>I've found there was several tokens used in python's grammar(<a href="http://docs.python.org/reference/grammar.html">http://docs.python.org/reference/grammar.html</a>) but I didn't see their definition anywhere.  The tokens listed here: </div><div>NEWLINE</div><div>ENDMARKER</div><div>NAME</div><div>INDENT</div><div>DEDENT</div><div>NUMBER</div><div>STRING</div></div><div><br></div><div>I've got some infomations from the source code(<a href="http://svn.python.org/projects/python/trunk/Parser/tokenizer.c">http://svn.python.org/projects/python/trunk/Parser/tokenizer.c</a>) but I'm not sure which feature is only for this specified implementaion.  (I saw tabstop could be modified with comments using "tab-width:", ":tabstop=", ":ts=" or "set tabsize=", is this feature really in spec?)</div></div><br><br><span title="neteasefooter"><span id="netease_mail_footer"></span></span>