Ja. Het werkt in alle browsers die <video> ondersteunen. En zonder <video> is querySelector sowieso al niet nodig. Dus die kan gewoon gebruikt.
https://developer.mozilla.org/en-US/docs/DOM/Document.querySelector
Het werkt volgens mij grotendeels hetzelfde als de jQuery selector.