Одинакова ли плотность воздуха во всех точках высотного здания?

нет, чем выше, тем воздух разрежённее и плотность меньше!

Плотность воздуха с увеличением высоты становится все иеньше и меньше. Поэтому в точках высотного здания плотность воздуха несущественно различается.