OA-ZCBS-Harvester
OA-ZCBS-Harvester is de user agent die de op Perl gebaseerde harvester van Open Archieven gebruikt bij het scrapen van websites met informatie over bidprentjes en bevolkingsregister gebaseerd op het Zijper Collectie Beheer Systeem.
Werking
De harvester van Open Archieven is een enkelvoudig proces dat via HTTP GET requests HTML pagina's opvraagt (zoek- en detailpagina's) via genoemd worden in de sitemap(s) van de betreffende website. Na elk request is er één à twee seconde pauze. Na harvesting worden details van akten en personen geëxtraheerd zodat deze geïmporteerd kunnen worden in Open Archieven.
Startpunten van de harvester
- https://www.beeldbankboxtel.nl/cgi-bin/bidprent.pl
- https://www.beeldbankbest.nl/cgi-bin/bidprent.pl
- https://www.beeldbankgreccio.nl/cgi-bin/bidprent.pl
- http://www.beeldbank-berghem.nl/cgi-bin/bidprent.pl
- https://www.deplaets.nl/cgi-bin/bidprent.pl
- https://www.historischekringheemskerk.nl/cgi-bin/bidprent.pl
- https://beeldbank.de-elf-rotten.nl/cgi-bin/bidprent.pl
- https://www.beeldbankglatbeke.be/cgi-bin/gedachtenisprentjes.pl
- http://www.beeldbankenschaijkreek.nl/cgi-bin/bidprent.pl
- http://www.hetgeheugenvanettenenleur.nl/cgi-bin/bidprent.pl
- https://www.beeldbanknuwelant.nl/cgi-bin/bidprent.pl
- https://www.noordwijkerhoutvantoen.nl/cgi-bin/bidprentjes.pl
- https://www.beeldbankrosmalen.nl/cgi-bin/bidprent.pl
- https://www.beeldbankwervershoof.nl/cgi-bin/bidprent.pl
- http://www.ouduitgeest.nl/cgi-bin/bidprent.pl
- http://www.historischekringursem.nl/cgi-bin/bidprent.pl
- https://beeldbank.oudzoeterwoude.nl/cgi-bin/bevolkingsregisters.pl
- https://www.oud-castricum.nl/cgi-bin/bevolkingsregisters.pl