아도서숙은 일제 강점기에 무섬마을 주민들이 계몽 활동과 항일 운동을 벌인 근거지였다. ‘아도’는 아세아 조선의 섬인 수도리를 뜻하며 ‘서숙’은 서당을 의미한다. 1928년 10월, 이 지역 항일운동 지도자인 김화진 선생의 주도로 무섬마을 청년들이 대중의 모임 장소인 공회당을 세우고 모임·배움·단결을 기치로 아도서숙을 운영하기 시작하였다. 아도서숙은 당시 사회 분위기가 봉건적·억압적이었지만 파격적으로 열린 교육을 실시하였다. 신분 계급과 남녀노소에 관계없이 배울 수 있었고, 학급 편성은 오전·오후·야간반을 두어 학생들이 가능한 시간에 와서 배우고 자유롭게 토론하도록 하였다. 주로 민족 교육과 문맹 퇴치 및 신문명 교육, 농사 기술 교육 등을 실시했으며, 새끼를 꼬거나 멍석을 만들면서도 수업에 참여해 배울 수 있도록 하였다. 또 학생들의 단결심 고양과 체력 향상을 위해 강변 백사장에서 축구 같은 운동도 자주 즐기도록 했다. 농사일이 바쁘지 않은 겨울철에는 제한 없이 학생을 수용하였다. 아도서숙은 9명의 운영위원회를 두고 이 같은 교육 체제를 유지했다. 운영위원이었던 김화진, 김종진, 김성규, 김종규, 김계진, 김명진, 김광진, 김희규, 박찬하 등은 모두 영주 지역 사회운동의 핵심 인물들이기도 했다. 이들은 줄기차게 항일운동을 전개했으며, 수시로 체포되어 구류·투옥과 고문을 당하였다. 또한 광주학생운동에 호응하는 격문 의거가 있을 때에는 무섬마을의 부녀자들이 아도서숙의 호롱불 밑에서 밤을 새워 태극기를 만들기도 했다. 1931년 9월에는 일경 1개 소대가 몰려와 무섬마을 청년 18명을 체포하여 굴비처럼 한 오랏줄에 엮어 외나무다리를 건너 압송하기도 했다. 온갖 탄압에도 무섬마을 주민들이 굴복하지 않자 일제는 1933년 7월, 아도서숙에 불을 질러 5년 만에 강제로 폐쇄하였다. 아도서숙은 이 지역 항일운동의 특징적 역사를 잘 말해 주는 뜻깊은 장소이다. 현재 건물은 원래 자리에 고증을 거쳐 복원한 것이다.