User-agent: * Disallow: /cgi-bin/ Disallow: /docs/ Allow: /docs/index.html Allow: /docs/*.pdf Disallow: /pipermail/