<div><span style="color: rgb(160, 160, 168); ">On Tuesday, July 3, 2012 at 3:48 AM, Tarek Ziadé wrote:</span></div><blockquote type="cite" style="border-left-style:solid;border-width:1px;margin-left:0px;padding-left:10px;">
                    <span><div><div>
   
    <meta content="text/html; charset=UTF-8" http-equiv="Content-Type">
   
   
     
    Not sure how <a href="http://restricted.crate.io/">http://restricted.crate.io/</a> qorks (unreachable for me
    right now - 'internal server error')<br></div></div></span></blockquote><div>Hmm that's odd, it works for me now and I don't see anything logged. All it does is it doesn't list</div><div>any external links on the simple pages so pip, easy_install etc never find any links to spider ;)</div><div><br></div><div>That's all being refactored currently to work a lot nicer though on Crate's end.&nbsp;</div>