Białystok - 45.0 km
Białowieża - 48.4 km
Warszawa - 229 km
Bielsk Podlaski - 26.7 km
Hajnówka - 26.5 km
Narew - 6.4 km

Wieś założona w XVIII w. na gruntach należących do miasta Narew. Ówcześnie funkcjonowała jako przedmieście. Skaryszewo wybudowano przy drodze prowadzącej do legendarnego, lecz nieistniejącego już grodziska Ratynek. Według archiwalnych spisów parafian w XVIII-XIX w. wieś zamieszkiwało 34 gospodarzy. W 1880 r. liczba ta zmniejszyła się już tylko do 22 gospodarzy. Nagły spadek liczby mieszkańców spowodowany był epidemiami cholery i tyfusu. Obecnie Skarzyszewo zamieszkuje zaledwie 15 mieszkańców, głównie wyznania prawosławnego.
Zwiedzając okolicę warto odwiedzić Regionalną Izbę Białoruską „RUTA” - prywatne muzeum, w którym właściciel, Michał Filianowicz stworzył niezwykły zbiór związany z regionem pogranicza, a szczególnie z kulturą białoruską.