在上海，当气温在4-10度之间时，建议穿着保暖且舒适的衣物。以下是一些具体的建议：

上衣方面，可以选择穿一件长袖内衣，加上一件毛衣或者卫衣。如果感到冷，还可以在外面加上一件外套，比如羽绒服、羊绒大衣、皮夹克等。年老体弱者建议穿着厚军大衣、冬大衣或者厚羽绒服等。

裤子方面，建议选择穿厚拉绒紧身裤、羽绒裤、保暖裤等，或者穿休闲裤与保暖裤搭配。这样可以有效地防止冷空气进入裤子中，使保暖裤更加有效地起到保暖作用。

鞋子方面，建议穿厚袜加上棉鞋或者旅游鞋。鞋底最好厚一些，这样传递温度较慢，冷气上升的慢，能有效地保护好脚不着凉。下雪天气可以穿上雪地靴。

此外，还可以佩戴一些保暖的配饰，如毛线围巾、呢质围巾、棉毛质围巾、棉手套、皮手套、毛线帽等，以增加保暖效果。

总的来说，在这个温度范围内，应该尽量穿着多层衣物，保持身体的温暖。同时，也要注意衣物的透气性，避免因为过度保暖而出汗导致感冒。