Serveur DHCP sous Linux et client sous Windows

J'ai installé une machine Ubuntu et j'ai configuré un serveur DHCP sur celle-ci. Maintenant, je veux utiliser ce serveur DHCP pour tous mes clients Windows. J'ai essayé plusieurs fois mais sans succès. Actuellement, les machines clientes Windows utilisent le DHCP du routeur. En fait, je veux que tous les clients de notre réseau utilisent le serveur DHCP ubuntu au lieu du DHCP du routeur. Une idée de ce que je dois faire ? Merci d'avance.