Порт Байкал находится на левом берегу истока Ангары, у подножия мыса Баранчик. Поселок является конечным пунктом Кругобайкальской железной дороги.
Порт Байкал – своеобразный поселок, он выходит как на берег Байкала, так и на берег Ангары. Все здания умещаются на узкой полосе берега вдоль железной дороги, которая, по сути, является центральной улицей поселка.