Музей города Пераст, наряду с остальными музейными ценностями, хранит и выставляет в своей постоянной экспозиции большую драгоценность – библиотеку знаменитой перастской семьи Вискович.
Членами семьи Вискович были люди с богатым жизненным опытом, широким кругозором и разнообразными интересами, и поэтому библиотека этой семьи является отражением их самих, а библиотечный фонд отличает разноликость и обилие книг.
Знаменитые Висковичи зачастую пополняли свою библиотеку произведениями собственного сочинения (авторскими текстами и переводами). Некоторые из произведений членов семьи Вискович включают перевод книги «Телемах» Йосипа Конто Висковича, разные пособия, специальную литературу, исторические документы, а произведение «Storia di Perasto» Конто Франо Висковича, необходимо выделить как особую драгоценность, написанную и оставленную потомкам и Перасту этим умным и высокообразованным человеком, влюблённым в свой город.
Библиотечный фонд семьи Вискович насчитывает около 903 обработанных библиотечных единицы, хотя общее число материалов значительно больше.
О богатстве фонда свидетельствуют заголовки, касающиеся различных областей: теологии, литературы (в основном проза и драматические произведения), истории, этики, юридических наук, администрации, торговли, оккультных наук, а также энциклопедии и многочисленные словари.
Постоянную экспозицию Музея города Пераст представляет и библиотека семьи Балович. Важные произведения, включённые в эту библиотеку, попали в Музей города Пераст вместе с библиотекой семьи Вискович. В основном, книги написаны на немецком языке. Наряду со словарями и энциклопедиями произведения библиотеки относятся к области юридических, естественных и военных наук, мореходства, философии, истории, литературы, истории искусств.
Библиотека дона Антона Милошевича не включена в постоянную экспозицию Музея города Пераст, так как лишь часть её находится в помещениях Музея. Большая часть фонда этой библиотеки состоит из публикаций и периодических изданий.
Библиотека Музея города Пераст располагает большим количеством выкупленных книг, а также книг, которые были подарены фонду, например библиотека Крклец. Данный фонд отличается разнообразием тематики из следующих областей: юридические науки, мореходство, история, литература, а часть Библиотеки представляют каталоги и периодические издания.