Files

Mark Kalsbeek f74e9bcfb0 refactor: split ssr.py into package, enrich OG Online detail pages, fix travel upsert

- Split src/adapters/ssr.py (2160 LOC) into ssr/ package grouped by CMS:
  realworks.py, sure.py, schiedam.py, denhaag.py, overige.py
- Add _og_detail() to api.py; all OG Online scrapers now fall back to
  detail page fetch when energielabel/bouwjaar are missing from the API
- Fix run() to recalculate travel times for existing listings where
  fiets_mark IS NULL; upsert() now writes travel cols on existing rows too
- Update tests/cache.py to patch fetch_soup in every ssr submodule
- Update docs to reflect new package structure and mark API enrichment TODO done

Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>

2026-04-11 23:39:35 +02:00

4.5 KiB

Raw Permalink Blame History

Verkoopmakelaars Delft, Leiden, Den Haag & Schiedam

TODO

API scrapers need detail page enrichment: OG Online API (bjornd, moerman, vandaal, elzenaar, doen, vandriel) sometimes omits fields like energyLabel. We should fetch the detail page for each listing and merge in missing fields (especially energielabel, bouwjaar). This is already done for SSR scrapers; needs to be added to API-based ones. ✅ Done — _og_detail() added to api.py

Delft

| Done | Naam | Website | Adres | | [ ] | ---- |------|---------|-------| | [x] | Van Silfhout & Hogetoorn Wereldmakelaars | vansilfhout.nl | Ireneboulevard 2 | | [x] | Van Daal Makelaardij | vandaalmakelaardij.nl | Voldersgracht 33 | | [x] | Björnd Makelaardij | bjornd.nl | Oude Delft 103 | | [ ] | Hof van Delft Makelaardij | hofvandelftmakelaardij.nl | Wateringsevest 26 | | [x] | V&W Makelaars Delft | vwmakelaars.nl | Coenderstraat 31 | | [x] | Roepman Makelaardij NVM | roepman.nl | Molslaan 43 | | [x] | ZO makelaars | zomakelaars.nl | Van Foreestweg 4 | | [ ] | Marloes Makelaars | — | Maerten Trompstraat 28 | | [ ] | Makelaarskantoor J.E. Mouthaan | — | Julianalaan 43 | | [x] | Olsthoorn Makelaars Delft | olsthoornmakelaars.nl | Noordeinde 51 | | [x] | Post Makelaardij (v/h Bayense) | postmakelaardij.nl | Spoorsingel 1a | | [x] | Morris NVM Makelaars | morrismakelaardij.nl | — | | [ ] | Prinsenstad Makelaardij | — | — | | [ ] | Oude Delft Makelaardij | — | — | | [ ] | Dijksman Woningmakelaars | — | — | | [ ] | CORPOwonen | — | — | | [ ] | Bergklis Makelaars | bergklis.nl | — | | [ ] | Van Gulden Makelaardij | vanguldenmakelaardij.nl | Zaïrestraat 1 | | [ ] | Van der Togt Makelaardij | vdtmakelaardij.nl | — (Voorburg, actief in Delft) | | [x] | Van Oord Makelaardij | vanoordmakelaardij.nl | — (Delft + Schiedam) |

Schiedam

Done	Naam	Website	Adres
[x]	Anke Bodewes Makelaardij	ankebodewes.nl	Hargplein 118
[x]	Woongoed Makelaars Schiedam	woongoedmakelaars.nl	Oranjestraat 93
[x]	Ooms Makelaars Schiedam	ooms.com	Gerrit Verboonstraat 2
[x]	De Witte Garantiemakelaars	dewittegarantiemakelaars.nl	Philippusweg 2
[x]	Makelaardij Wassenaar	makelaardijwassenaar.nl	Gerrit Verboonstraat 12
[x]	3D Makelaars	3dmakelaars.nl	Gerrit Verboonstraat 17
[x]	Dupont Makelaars	dupont.nl	Rotterdamsedijk 437
[x]	D&S Makelaardij	densmakelaars.nl	Land van Belofte 50
[x]	Moerman & De Jong Makelaars	moerman-dejong.nl	Lange Kerkstraat 80B
[ ]	Hagestein Makelaardij	—	Degerfors 54
[x]	Schieland Borsboom NVM Makelaars	schielandborsboom.nl	(Rotterdam, actief in Schiedam)
[x]	Vandriel Makelaardij	vandrielmakelaardij.nl	—
[x]	Van Herk Makelaars	vanherk.nl	—

Den Haag

Done	Naam	Website	Adres
[skip]	Yuvam Makelaardij	yuvammakelaardij.nl	— (connection refused)
[x]	88 Makelaars	88makelaars.nl	—
[skip]	DIVA Makelaars	divamakelaars.nl	— (alleen Maartensdijk, niet Den Haag)
[x]	Elzenaar NVM Makelaars	elzenaar.com	—
[skip]	Frisia Makelaars	frisiamakelaars.nl	— (SPA/Vue, geen API)
[x]	Borgdorff Makelaars	borgdorff.nl	— (vestiging Den Haag)
[skip]	SMASH Makelaars	smashmakelaars.nl	— (te klein, geen API)
[x]	DOEN NVM Makelaars	doenmakelaars.com	Doezastraat 30 (Leiden, ook actief in Den Haag)

Leiden

Done	Naam	Website	Adres
[ ]	RE/MAX Makelaarsgilde	makelaars-in-leiden.nl	Levendaal 73-75
[ ]	Hypodomus Leiden	hypodomusleiden.nl	Haarlemmerstraat 268
[ ]	Alpina Leiden (v/h De Leeuw)	advies.alpina.nl	Molenwerf 4
[ ]	Fides makelaars (ERA/NVM)	fidesmakelaarsleiden.nl	Lammenschansweg 76
[ ]	Werk Makelaardij	werkmakelaardij.nl	Stevenshof (Leiden)
[ ]	Kerkvliet Makelaars	kerkvlietmakelaars.nl	Hoge Rijndijk 271A
[ ]	Kompas Makelaars & Taxateurs	kompasmakelaardij.nl	Maresingel 75-76
[ ]	Hoekstra en Van Eck Leiden	hoekstraenvaneck.nl	Schipholweg 55-75
[ ]	DOEN NVM Makelaars	doenmakelaars.com	Doezastraat 30
[ ]	Oudshoorn Makelaardij	oudshoornmakelaardij.nl	—
[ ]	April Makelaars Leiden	aprilmakelaars.nl	Haagweg 55
[ ]	Emil NVM Makelaars	emilmakelaars.nl	—
[ ]	Goedhart Makelaars	—	Oude Singel 14
[ ]	Graal Makelaardij & Taxaties	—	Rapenburg 5

4.5 KiB Raw Permalink Blame History