Yo uso OsmAnd+ 2.3.5 y eso fue lo primero que pensé: demasiado de todo. Sin embargo, todo es configurable.
tap the menu button -> Configure Map -> swipe up to reveal more options
Mira las imágenes de abajo, he resaltado las opciones de tu interés. Puedes desactivar los POIs (los círculos naranjas que mencionas) y puedes ocultar más cosas como los edificios y muchos otros detalles varios.
Desactivando lo que mencioné anteriormente esto es lo que puedes lograr (puedes ir aún más lejos y ocultar los polígonos también (hierba, agua, etc.)).