Producer | FCCN ![]() | |||||||||||||||
Bot URL | http://arquivo.pt/faq-crawling ![]() | |||||||||||||||
Status | ![]() | |||||||||||||||
Known variants Arquivo-web-crawler | ||||||||||||||||
Useragentstring | Arquivo-web-crawler (compatible; brozzler/1.5 +http://arquivo.pt/faq-crawling) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
First seen | 2021-02-15 20:27:12 | |||||||||||||||
Last seen | 2021-02-15 20:27:12 | |||||||||||||||
IP addresses | 1 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | arquivo-web-crawler (compatible; heritrix/3.4.0-20200304 +http://arquivo.pt) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
Respects robots.txt | No | |||||||||||||||
First seen | 2020-05-05 20:22:49 | |||||||||||||||
Last seen | 2021-01-14 01:56:34 | |||||||||||||||
IP addresses | 3 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | arquivo-web-crawler (compatible; heritrix) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
First seen | 2020-04-27 04:12:21 | |||||||||||||||
Last seen | 2020-04-27 04:12:21 | |||||||||||||||
IP addresses | 1 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | arquivo-web-crawler (compatible; heritrix/3.4.0-20190418 +http://arquivo.pt) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
Respects robots.txt | No | |||||||||||||||
First seen | 2020-02-17 18:41:35 | |||||||||||||||
Last seen | 2020-04-11 23:03:54 | |||||||||||||||
IP addresses | 3 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | arquivo-web-crawler (compatible; heritrix/3.3.0-SNAPSHOT-2019-08-26T10:34:48Z +http://arquivo.pt) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
Respects robots.txt | No | |||||||||||||||
First seen | 2019-09-13 06:48:57 | |||||||||||||||
Last seen | 2020-01-13 04:30:51 | |||||||||||||||
IP addresses | 2 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | arquivo-web-crawler (compatible; heritrix/3.3.0-SNAPSHOT-2018-05-28T10:30:31Z +http://arquivo.pt) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
First seen | 2018-08-04 15:17:43 | |||||||||||||||
Last seen | 2019-06-25 07:52:17 | |||||||||||||||
IP addresses | 3 | |||||||||||||||
Walk from |
| |||||||||||||||
Arquivo-web-crawler | ||||||||||||||||
Useragentstring | Arquivo-web-crawler (compatible; heritrix/1.14.4 +http://arquivo.pt/faq-crawling) | |||||||||||||||
Category | -- Uncategorised -- | |||||||||||||||
First seen | 2017-06-15 11:24:16 | |||||||||||||||
Last seen | 2017-06-24 13:15:42 | |||||||||||||||
IP addresses | 1 | |||||||||||||||
Walk from |
|