Здание огибала улица, около трех футов в ширину с южной стороны, а на северной – разной ширины, постепенно сужающаяся к одной точке. Северная дорожка вела к огромному помещению, получившему название «Пещера воров», в котором жили более 75 мужчин, женщин и детей, черных и белых, без мебели и удобств. Многие из этих женщин были проститутками и принимали своих клиентов прямо в Пещере. На противоположной стороне проход назывался «Аллеей убийц», полностью соответствуя своему названию. Многие историки путали ее с другой «Аллеей убийц», известной также как «Дорога Донована», на Бакстер-стрит, недалеко от Точек, где много лет прожил известный одноглазый вор-карманник и мошенник Джордж Аппо, сын китайца и ирландки.

Подвалы Старой пивоварни были разделены примерно на 12 комнат, где раньше стояло пивоваренное оборудование; также там были надземные комнаты, расположенные двойными рядами вдоль «Аллеи убийц» и улицы, ведущей к «Пещере воров». В период пика своей славы здание вмещало более тысячи мужчин, женщин и детей, половина из которых были ирландцы, а половина – негры. Большинство подвальных отсеков принадлежало неграм, многие из которых жили с белыми женами. В этих логовищах рождались дети, которые проживали свое отрочество, не видя света и не вдыхая свежего воздуха, так для жителя Старой пивоварни было так же опасно покидать свое убежище, как постороннему в него входить. В одной из подвальных комнат шириной в 15 футов (4,5 метра) менее чем за десять лет до Гражданской войны 26 человек жили в ужасающей бедности и грязи. Однажды в комнате было совершено убийство (маленькую девочку забили до смерти после того, как по глупости она показала пенни, которое у кого-то выпросила), так ее тело лежало в углу пять дней, прежде чем было похоронено в неглубокой могиле, вырытой в полу ее матерью. В 1850 году полицейские докладывали, что на протяжении недели с лишним ни один из 26 человек не выходил из комнаты, только иногда они прятались в дверном проходе, поджидая тех жителей, которые проходили с едой. Когда такой человек появлялся, его быстро ударяли по голове и крали еду.

Драки здесь были почти постоянным явлением, и вряд ли нашелся хотя бы час в дневное или ночное время, когда бы не происходили пьяные оргии. Через тонкие дощатые стены слышались удары кирпичом или железной арматурой, визг несчастных жертв, вой голодающих младенцев, неистовые крики мужчин и женщин, а иногда и детей, корчащихся от боли и судорог. Убийства случались часто; было подсчитано, что почти за 15 лет в Старой пивоварне происходило в среднем по одному убийству за ночь и почти столько же в домах Коровьей бухты. Мало кто из убийц бывал наказан – пока полиция не набрала силы, ее представители не могли надеяться на то, чтобы уйти из Старой пивоварни живыми, а жители трущоб были очень скрытными. Даже если полиция определяла личность убийцы, его редко удавалось найти: он растворялся в норах Точек и убегал по подземным переходам. Многие обитатели притонов Старой пивоварни и Коровьей бухты когда-то были добропорядочными и даже влиятельными людьми, но после нескольких лет трущобного существования и они опускались до уровня остальных жителей. Говорили, что последний из рода Бленнерхассетс, второй сын Хармана Бленнерхассетса, который совместно с Аароном Бурром участвовал в тайном заговоре с целью основания Западной империи, умер в Старой пивоварне. И такое случилось не с ним одним.

Церкви и благотворительные общества открыто говорили о бедственном существовании Пяти Точек в течение многих лет, но ничего не было предпринято для спасения и восстановления района до конца 1830 года, когда община пресвитериан с улиц Центральной и Спринг послала туда миссионеров.