Die Idee ist schon nicht schlecht, nur als Praktiker kann ich Folgendes sagen:
Freie 3D Modelle sind sehr oft:

  1. Ohne richtige Drehung sonder einfach entlang X-Y Ache ausgerichtet
  2. maßstabslos ( nachträgliche Skalierung erforderlich)
  3. Nehmen keine Rücksicht auf benachbarte Gebäude. Dadurch kommt es meistens, wenn man mehrere Objekte nebeneinander hat, zu Überschneidungen die extrem störend sind.
  4. Die Modelle nehmen keine Rücksicht auf Geländeverlauf sonder generalisieren Erdboden als flache Ebene. Auch wenn das bei geschätzt 2/3 der Objekte nicht auffält, ist es dennoch schwierig, wenn man ein 3D Modell inklusive Gelände anstrebt.

Daher ist die Idee 3D Modelle per Link in OSM zu integrieren zwar als Anfang gut und wurde schon von Vielen geäußert, jedoch für die Zukunft wäre sicherlich ein eigenes Erfassungswerkzeug besser:

Statt außerhalb von OSM arbeiten zu lassen der OSM Gemeinschaft ein Arbeitswerkzeug zur Verfügung zu stellen, welches die 3D Fans richtung OSM zieht.
Entsprechende Exportfilter aus OSM in andere Formate werden die Leute dann auch entwickeln.