С одной стороны, камень прочнее. С другой - брус натуральный, деревянный, дыщащий, в таком доме уютно, как говорят зимой тепло и летом не жарко. Кроме того красивый и быстро строится.

Если именно для ПМЖ — то только клееныф брус. Раньше мы рассматривали дома из бревна и обычного бруса, а потом поближе все это изучили — там никакого сравнения с домами из клееного бруса нет.
Кирпич или камень (вы же кирпич имеете в виду?) не рассматриваем — смысл тогда из города уезжать? Тем более, что клееный брус практически не уступает по долговечности. В смысле — при использовании. Ну то есть вы поняли — лома из клееного бруса forever

Можно поставить временный дом из клееного, пока строите каменный

Посмотрите на сайте Нархозстроя проекты домов Шале, комбинированные. первый этаж каменный, второй брусовый. Компромисс! А выглдят они еще красивее.