Вы правы. В данном случае слово "доме" является существительным, обозначающим место или здание, в котором кто-то живет. Наречие же бы указывало на обстоятельства обитания, например "живет хорошо в доме".