User-agent: * Allow: /directory/ Allow: /image.png Allow: /index.html Allow: /file.php Allow: / Allow: /image.jpg