Vorwort: ich bin da kein Experte, kann also nur auf Halbwissen und Erfahrung bauen.
Dem Gefühl nach kann die Bandbreite ein Problem sein, muss aber nicht. Der Router kann schonmal Probleme machen, wenn viele Geräte in einem Netzwerk angemeldet sind, ob das aber an der Bandbreite liegt, kann ich nicht sagen. Wenn alle 3 PCs etwas Bandbreitenintensives machen, z.B. Videos streamen, kann ich mir vorstellen, dass du mit dem Handy Probleme bekommst. Video-Streaming mit 2Mbit/s ist sowieso nicht das Wahre, aber das nur nebenbei
Allgemein solltest du in dem Fall aber eher das Problem haben, dass du zwar verbunden bist, aber wenig Bandbreite übrig hast, denke ich. Dass du dann aus dem Netz gekickt wirst, finde ich komisch. Zeigt denn das Handy an, dass es verbunden ist und es lädt nichts oder trennt es die Verbindung?
Evtl sind auch andere Router von den Nachbarn in der Nähe, die auf einer ähnlichen Frequenz senden und sich gegenseitig stören. Das passiert gerne mal bei Fritzboxen, da sie so beliebt sind. Bei den Fritzboxen kann man die Kanäle der umliegenden Boxen ermitteln und sich den besten raussuchen, standardmäßig macht sie das aber selbst.