Да, ошибка есть, по смыслу получается, что купались не в озере, а в саду. Лучше сказать: "С одной стороны озера, в котором мы купались, был сад".