<!-- 
# ACOI_UvA_HTTP_errors

* arx
* 2023-10-19
* Doel: metingen over HTTP errors op de sources.
* Raport http://localhost:8888/notebooks/WooIR/wobir/Projects/ACOI_2023/URLstatusChecker.ipynb#
* Status: AF

*  9-11commentaar acoi verwerkt.

-->

##   Blijvende beschikbaarheid

Woogle verzamelt vanaf de herfst 2022 Woo-dossiers om die via haar zoeksysteem vindbaar en beschikbaar te maken. De hits in Woogle *verwijzen*  naar de originele plek waar de stukken gevonden zijn, net als we gewend zijn bij *Google*. Het blijkt dat stukken toch nog best vaak "verdwijnen"; in ieder geval krijgt de gebruiker dan een zogenaamde 404 foutmelding: het gevraagde document is op de opgegeven URL niet beschikbaar. Dit is bijvoorbeeld het geval voor [deze URL](https://www.rijksoverheid.nl/binaries/rijksoverheid/documenten/woo-besluiten/2022/09/23/besluit-op-wob-woo-verzoek-over-dierenverhuurbedrijven/Woo-besluit+over+dierenverhuurbedrijven.pdf). Het stuk lijkt verplaatst naar open.overheid.nl[^stukweg].

[^stukweg]: Zie [https://www.rijksoverheid.nl/documenten/woo-besluiten/2022/09/23/besluit-op-wob-woo-verzoek-over-dierenverhuurbedrijven](https://www.rijksoverheid.nl/documenten/woo-besluiten/2022/09/23/besluit-op-wob-woo-verzoek-over-dierenverhuurbedrijven).
In deze sectie  beantwoorden we de volgende vraag:

>Hoe goed beschikbaar zijn stukken vrijgegeven onder de Woo nog binnen een jaar?

Om de vraag te beantwoorden hebben we voor een aantal   Woo informatiecategorieën  alle bron-urls uit Woogle verzameld, en die één voor één opgevraagd, en het resultaat opgetekend. 
We rapporteren  puntsgewijs.

* **Beschikkingen** Van de 2.304 links naar (PDFs met) beschikkingen hadden er maar 5 een foutmelding. Deze kwamen van 4 aanbieders, de Kansspelauthoriteit, de AFM en 2 waterschappen. De beschikkingen van de waterschappen staan allemaal op [https://zoek.officielebekendmakingen.nl/](https://zoek.officielebekendmakingen.nl/).
* **Beslisnotas** Alle 8.092 URLs naar beslisnotas werkten nog steeds. Die staan allemaal op open.overheid.nl en zijn afkomstig van ministeries. Een voorbeeld is [https://open.overheid.nl/documenten/121dcb64-75e6-4991-b5f8-0b603fd4b52b/file](https://open.overheid.nl/documenten/121dcb64-75e6-4991-b5f8-0b603fd4b52b/file).
* **Stukken op rijksoverheid.nl** 19% van de 2.119 stukken in Woogle  die  zijn opgehaald van en verwijzen naar   rijksoverheid.nl geven een HTTP foutcode (en zijn  daar dus niet meer op te halen of te bekijken). Een voorbeeld van zo'n URL (die ten tijden van schrijven wel op te halen was) is [https://www.rijksoverheid.nl/binaries/rijksoverheid/documenten/wob-verzoeken/2022/02/18/besluit-wob-verzoek-representativiteitstoets-2010-bpf-houtwerkende-industrie/2021-0970-besluit.pdf](https://www.rijksoverheid.nl/binaries/rijksoverheid/documenten/wob-verzoeken/2022/02/18/besluit-wob-verzoek-representativiteitstoets-2010-bpf-houtwerkende-industrie/2021-0970-besluit.pdf).
* **Besluiten op Woo-verzoeken** We hebben 7.669 stukken in Woogle die zo geclassificeerd zijn. Dit zijn altijd besluiten, en vaak is daar als bijlage nog een inventarislijst en soms ook de vrijgegeven stukken aangehecht. Een flink deel daarvan kon niet meer gevonden worden, zie onderstaande tabel, uitgesplitst naar domein/aanbieder. Hierbij moet aangetekend worden dat voorlopers zoals de gemeentes Amsterdam, Utrecht en Rotterdam hier relatief slecht vanaf komen, maar dat komt allicht omdat ze  juist voorlopers waren. Positief vallen de openpub gemeentes op, allemaal foutloos.

| site                                |   #correct |   #met foutmelding |   percentage fout |
|:------------------------------------|-----------:|-------------------:|------------------:|
| https://www.utrecht.nl              |        272 |                750 |              73.4 |
| https://wob.amsterdam.nl            |        258 |                315 |              55   |
| https://www.rijksoverheid.nl        |        324 |                132 |              28.9 |
| https://www.provinciegroningen.nl   |         14 |                  2 |              12.5 |
| https://rotterdambis.notubiz.nl     |        318 |                 32 |               9.1 |
| https://cms.dordrecht.nl            |         57 |                  5 |               8.1 |
| https://wobcovid19.rijksoverheid.nl |         89 |                  4 |               4.3 |
| https://open.overheid.nl            |       3773 |                 19 |               0.5 |
| https://files.tweedekamer.nl        |         28 |                  0 |               0   |
| https://openpub.barendrecht.nl      |          6 |                  0 |               0   |
| https://openpub.ridderkerk.nl       |          9 |                  0 |               0   |
| https://www.flevoland.nl            |         13 |                  0 |               0   |
| http://www.zeeland.nl               |         21 |                  0 |               0   |
| https://www.zeeland.nl              |         25 |                  0 |               0   |
| https://www.provincie.drenthe.nl    |         58 |                  0 |               0   |
| https://www.provincie-utrecht.nl    |         43 |                  0 |               0   |
| https://www.zuid-holland.nl         |         43 |                  0 |               0   |
| https://woo.denhaag.nl              |        557 |                  0 |               0   |
| https://geo1.arnhem.nl              |         81 |                  0 |               0   |
| https://openpub.gemeentehw.nl       |         94 |                  0 |               0   |
| https://www.noord-holland.nl        |        138 |                  0 |               0   |
| https://www.politie.nl              |        183 |                  0 |               0   |
| https://openpub.albrandswaard.nl    |          6 |                  0 |               0   |
| totaal| 6410|1259| 16.4|

**Tabel: HTTP foutmeldingen op URLs in Woogle die verwijzen naar besluiten op Woo-verzoeken.**

### Conclusie

Veel stukken zijn binnen maximaal een jaar niet meer beschikbaar  op de plek waar ze eerst stonden. Dat betekent dat als men naar zo'n stuk verwijst, in een email, een rechterlijke uitspraak, een wetenschappelijk artikel, of wat dan ook, die verwijzing niets meer waard is. Het stuk is feitelijk weg, en zal opnieuw gevonden moeten worden. 

Er zijn natuurlijk allerlei redenen om stukken te verplaatsen, een URL is een *adres*, geen *unieke identifier URI*. Maar het internet heeft daar technieken voor, namelijk een *redirect*, wat gewoon betekent dat een gebruiker met de oude URL doorgestuurd wordt naar de nieuwe locatie. Als een stuk echt verwijderd (vernietigd misschien wel) is, dan kan er gekozen worden om die boodschap te melden. Bij rijksoverheid.nl lijkt het alsof men de boodschap wil afgeven dat de schuld bij de gebruiker ligt bij een 404 foutmelding. Die gebruiker krijgt namelijk dit te zien: 

>De pagina die u wilde zien of het bestand dat u wilde bekijken is niet gevonden. Controleer de URL.

De Woo gaat voor een groot deel over de betrouwbaarheid van de overheid. Fouten maken is helemaal niet erg, en hoeft betrouwbaarheid ook niet te schaden. De manier waarop met fouten wordt omgegaan kan dat wel doen.