Да, в этом случае перед "как" нужна запятая, так как она разделяет вводное слово "как" и его пояснение "окно". Правильно будет так: "Окно, как окно, что тут такого?"