Над and перед are exception, you never say над что или перед что. But with за and под the general rule goes on:
Поставь щётку за дверь. Щётка стоит за дверью.
Ключ упал под стол. Ключ лежит под столом.