Los BOUNCES (rebotes) están en Light Paths, pero no sé si eso te va a solucionar eso.
Yo más bien creo que sería ponerle al suelo más rugosidad (Roughness), o no sé si se puede limitar esa llegada de luz al edificio desde Ray visibility
Lo he visto hacer por nodos, pero no tengo mucha práctica sobre el efecto de la luz.