Pierwsze chaty rybackie zaczęły powstawać tam w XI wieku, ale do czasów współczesnych zachował się już tylko układ średniowiecznych uliczek, który obecnie jest pod ochroną konserwatorską. Jednym z wyróżniających się budynków na tym obszarze jest zbudowany w 1804 roku i odrestaurowany w XXI wieku Dom Kapitana Hasse, który stanowi przykład tzw. budownictwa szachulcowego, charakterystycznego dla XIX-wiecznej Ustki.

Ciekawostka: Częścią Starej Osady Rybackiej jest Zaułek Kapitański – niewielki placyk, wokół którego swoje domy zbudowali najbogatsi szyprowie oraz kapitanowie. Kilka z nich zachowało się do czasów obecnych.