Да, вода расширяется при нагревании. Это происходит из-за того, что тепловое движение молекул воды при нагревании становится более интенсивным, что приводит к увеличению расстояния между молекулами и, соответственно, к увеличению объема воды. Это явление называется тепловым расширением.