Publiczna biblioteka w Skaryszewie powstała w grudniu 1947 - w jednoizbowym lokalu przy ul. Kościelnej (obecnie ul. Mickiewicza). Wyposażenie stanowiły dwie szafy, w których mieściło się 446 książek.