Das ist bei mir (JOSM 14026, Linux) definitiv nicht der Fall. Das kann man ja leicht überprüfen, indem man nur einen kleinen Ausschnitt herunterlädt. Generell hängt die Dauer des Downloads natürlich von der Bandbreite der Internetverbindung und vom gewählten Ausschnitt ab. Wenn in dem Bereich eine Autobahn liegt, dann ist die GPS-Punktdichte sehr viel höher als in Gegenden, wo selten ein Mapper hinkommt. Um welchen Bereich geht es denn? Im Tab “Koordinaten” des Download-Dialogs werden die Koordinaten der BBox angezeigt. Die kannst du ja hier mal posten.
Reduziere den zu ladenden Bereich 
Im Gegensatz zu chris66 wüsste ich nicht, wie das gehen soll. Bei mir gibt es zumindest keine entsprechende Checkbox.