воду из под крана здесь можно кипячёную употреблять, для супа, например? Или лучше покупную?

Конечно можно. По всему городу из питьевых фонтанчиков тоже пьём.

Минеральный состав другой, мало магния, если ничего не путаю. Имеет смысл помимо водопроводной пить минералку.

Лучше купить фильтры.

Употребляем и в суп, и в чайник.