Sur mon ancien setup télétravail c'était un peu à l'arrache. Deux hub usb un pour chaque pc et un dock pour le pc portable. Mes deux écrans avaient deux entrées vidéo. Pour chaque écran une prise par pc. Bref c'est pas l'idéal.
Tu as des boîtiers kvm pour unifier et simplifier le switch (dans mon cas je l' effectué manuellement). Par exemple ça: https://amzn.eu/d/09b1KD5
Regarde se qui correspond à tes besoins.