Hallo!
Was ist das denn für ein Rechnermodell?
In den erweiterten Optionen des Windows Bootmangers sollte eigentlich der Link zu den "UEFI-Firmwareeinstellungen" erscheinen, der dann nach Neustart das Set-UP (UEFI-BIOS) öffnet. So hier auf 2 Rechnern.
Geh mal in "Ein Gerät verwenden" bei den Optionen. Hier sollte ein Eintrag für "EFI USB Device" sein. Booten klappt dann aber nur, wenn der USB-Stick auch für EFI eingerichtet ist. Dazu nimmt man unter Windows "Rufus" mit der Voreibstellung "gpt".
Stell ansonsten ggf. doch schon mal Fastboot in Windows ab(siehe Link unten in der Linksammlung!. Müsste aber auch noch im Set-Up abgeschaltet werden, Probier es trotzdem. Musst du aber eh machen, wenn du im Dualboot arbeiten willst. Tipp: Lass es grundsätzlich aus! Die paar Sekunden fressen kein Brot.
Eventuell könnte es noch möglich sein die Bootorder im NVRAM zu ändern. dazu das Tool "EasyUEFI" installieren und schauen welche Einträge hinterlegt sind.
Bei Debian überprüfe auch erst mal, ob das mittlerweile Secureboot-fähig ist, ggf. abstellen.
Gruß