Вероятно, это связано с тем, что ветер считается нечто невидимым и неосязаемым, поэтому его направление источника измеряется по направлению дуновения. Таким образом, когда говорят "ветер северный" или "ветер южный", это обозначает направление, из которого дует ветер, а не откуда он исходит.