«Бесконечные сумерки» - это словосочетание, состоит из двух слов.

Фразеологизм — устойчивое сочетание слов, которое имеет постоянное звучание и значение. В речи употребляется как готовая единица, это сближает фразеологизм со словом (повесить нос — загрустить, умыть руки — отстраниться от участия в чём-либо, снять с себя ответственность).

Если убрать или заменить какое-нибудь слово во фразеологизме, он уже не будет иметь присущего ему значения.