Экспозиция музея открывалась запечатленными на полотне словами Алексея Максимовича Горького, сказанными им на милицейской конференции, которая в марте 1920 год а проходила в Таврическом дворце: «С удовольствием буду работать с милицией и в милиции».

Чего только не было в этом музее! Каждый принятый на работу сотрудник мог познакомиться здесь со знаменитым приказом начальника Петроградской губернской милиции, который был зачитан на Дворцовой площади у арки Главного штаба, где проходил первый в республике милицейский парад: «…Быть постоянно на посту завоеваний Октябрьской революции - вот одна из наших неотложных задач… Всё, что добыто морем крови и жизнями многих тысяч лучших сынов трудовой России, - все это отдается под охрану красному милиционеру…»

Тут же отпечатанный на стареньком «ундервуде» текст милицейской присяги: «Я, сын трудового народа… обязуюсь стоять на страже революционной законности и порядка и защищать интересы рабочих и крестьян…»

Под текстом присяги - фотографии сотрудников Петрогуброзыска, погибших при выполнении своего долга. Многие красные милиционеры расстались с жизнью, очищая молодую республику от скверны бандитизма…

В музее экспонировались отобранное у преступников оружие (ножи, револьверы, пистолеты, винтовки, гранаты), воровские инструменты («рвотки», «шапоры», «гусиные лапки», «балерины»), поддельные документы, дагерротипы, отпечатки пальцев, альбомы фотографий воров различных специальностей. А в дальнем углу комнаты находилась витрина, которую можно было бы назвать так: «Искусство, история и уголовный розыск». Здесь под толстым стеклом лежали скромный медальон, рисунки перстня, старинных часов, фотографии солдата петровских времен и кресла.

Ничем не примечательные как будто экспонаты. Но Усольцев не зря выделил для них специальную витрину. С каждым из этих экспонатов была связана история. Весьма любопытная история, полная самых различных и разнообразных приключений.