Algunas veces me pasaba eso. Una de las razones es por que el server se puso offline o por alguna razon se borra (pareciera que fuera un bug). Actualmente no hay problema aunque solo tengo 2 servidores añadidos a mis favoritos. Trata fijarte desde la opcion de servidores del Steam. Ahi normalmente muestra todos e incluso los desconectados.

Saludos