Личность знаменитого изобретателя-алхимика окутана ореолом самых необыкновенных слухов и домыслов. Простые люди считали ученого чернокнижником, причисляли к армии колдунов, по мнению образованных современников, Яков Брюс был убежденным материалистом, скептически относившимся к религии.
Современники считали, что Яков Брюс создает свои заклинания и ставит опыты по ночам в Сухаревой башне, сохраняя заметки в легендарной Черной Книге. Если книгу изъять без разрешения колдуна, башня рухнет. Но книга исчезла, башня рухнула, а останки могущественного мага были похищены.
По утверждению народной молвы, у Якова Брюса все же была магическая книга, принадлежавшая когда-то знаменитому своими премудростями царю Соломону. При помощи этой книги колдун мог узнать тайну любого места на земле, узнать где и что спрятано. Магический фолиант, который не давался никому в руки, был спрятан в тайной комнате. Чтобы Черная книга не оказалась в руках недостойных людей после смерти Брюса, чародей, владевший шестью европейскими языками, замуровал ее внутри одной из стен Сухаревой башни. Разрушение самой башни приписывали действию могучих заклинаний из Брюсовой книги.
Сохранились сведения о попытках археологических изысканий 19 века на руинах Сухаревой башни. Руководитель раскопок утверждал, что ему удалось разобраться в загадках Брюса, но сам археолог неожиданно скончался. Куда исчезли останки московского чернокнижника, до сих пор не удалось выяснить. Тайна Черной книги и ее местонахождение до сих пор не дает покоя адептам магии и поклонникам сверхъестественного.