Guten Tag,
wie hier beschrieben, gibt es wohl keine Möglichkeit in ihrem Router den DNS zu ändern. Sie können allerdings an den betreffenden Computern direkt den DNS Server ändern.
Unter Windows sähe das ganze so aus, wie dies unter Linux/Ubuntu von statten geht, ist hier nachzulesen.

Beste Grüße