Falls es wen interessiert: Bei sehr alten Schiffen war das Ruder/Steuer an der "rechten" Seite angebracht. Der Steuermann hatte daher der Backbordseite den Rücken (back) zugewandt.
Im Englischen ist es auch einleuchtend. Da das Ruder auf der rechten Seite ist, möchte man mit der linken Seite anlegen. Daher ist die dem Hafen (port) zugewandt.
Seit ich das weiß, habe ich ein Bild von solch einem Schiff im Kopf und es ist drin.