Salut,
Apparemment ce que tu nous décris c'est de la micro-deconnexion (je ne sais pas si ça se dis), mais c'est ton modem qui décroche, et se re-connecte dans la foulée.
Essaye de voir si ta ligne téléphonique est 'propre' (filtres ADSL sur chaque prise, pas de condensateurs branchés (cherches sur google 'nettoyer ligne téléphonique') etc.
Essais aussi d'éloigner les sources de perturbation électromagnétiques de ton modem (Transformateur, autre appareil électronique, chat bionique, bobine de Tesla maison, etc).
Puis reboot un coup la neufbox, ça lui fera pas de mal