Да, стеклянная бутылка, заполненная водой, будет плавать в воде, так как плотность стекла и воды примерно одинакова. В этом случае бутылка будет плавать также, как и другие предметы плотностью практически равной воде.