iThere is no intention to implement sitemap.xml for gopherspace. - eomyidae - a gopher crawler software Err bitreich.org 70
hgit clone git://bitreich.org/eomyidae URL:git://bitreich.org/eomyidae bitreich.org 70
1Log /scm/eomyidae/log.gph bitreich.org 70
1Files /scm/eomyidae/files.gph bitreich.org 70
1Refs /scm/eomyidae/refs.gph bitreich.org 70
1Tags /scm/eomyidae/tag bitreich.org 70
1README /scm/eomyidae/file/README.md.gph bitreich.org 70
1LICENSE /scm/eomyidae/file/LICENSE.gph bitreich.org 70
i--- Err bitreich.org 70
1commit 0dac4a637d7e25983b563286bb0539d53ddf8d3e /scm/eomyidae/commit/0dac4a637d7e25983b563286bb0539d53ddf8d3e.gph bitreich.org 70
1parent 571cf2bbd98fa39ddf9ea9812ae8ade9be36cf87 /scm/eomyidae/commit/571cf2bbd98fa39ddf9ea9812ae8ade9be36cf87.gph bitreich.org 70
hAuthor: Christoph Lohmann <20h@r-36.net> URL:mailto:20h@r-36.net bitreich.org 70
iDate: Sun, 4 Aug 2019 07:53:04 +0200 Err bitreich.org 70
i Err bitreich.org 70
iThere is no intention to implement sitemap.xml for gopherspace. Err bitreich.org 70
i Err bitreich.org 70
iDiffstat: Err bitreich.org 70
i M eomyidae | 1 - Err bitreich.org 70
i Err bitreich.org 70
i1 file changed, 0 insertions(+), 1 deletion(-) Err bitreich.org 70
i--- Err bitreich.org 70
1diff --git a/eomyidae b/eomyidae /scm/eomyidae/file/eomyidae.gph bitreich.org 70
i@@ -136,7 +136,6 @@ def menu2text(menu): Err bitreich.org 70
i # Disallow: /path Err bitreich.org 70
i # Allow: /path Err bitreich.org 70
i # Crawl-delay: seconds Err bitreich.org 70
i-# Sitemap: /some/sitemap.xml Err bitreich.org 70
i def parserobots(data): Err bitreich.org 70
i robots = [] Err bitreich.org 70
i lines = data.split("\n") Err bitreich.org 70
.
Response:
text/plain