Так как страна мусульманская есть ли какие-то ограничения по одежде, как в Дубае например.

Страна светская , соблюдайте этикет , без вульгарщины и все будет хорошо.

Смотря где ходить собираетесь. если в центре города, то как угодно можно. Если в поселках рядом с Баку, типа Маштаги, Нардарана, то могут быть неприятности. И если у вас тут есть какие-нибудь родственники, типа мужа, то они не дадут одеваться как вам хочется.