В данном случае правильно писать слитно: «неоткрывающимися». Это связано с тем, что слово «открывающимися» является частью составного прилагательного, и "не" с такими словами пишется слитно. Таким образом, правильный вариант: «Окна должны быть неоткрывающимися».