Это связано с тем, что в разных культурах чёрт часто ассоциируется с нечистой силой, злом, греховностью, агрессией и темными сторонами человеческой природы. Отсюда и происходит негативное значение фразеологизмов, связанных с чёртом. Люди часто используют эти выражения в ругательных контекстах, чтобы выразить негодование, недовольство либо презрение к кому-либо или чему-либо.