камень треснет

с кем. Прост. Презр. Кто-либо совершенно невыносим, нетерпим, надоел до предела. [Пролаз (тащит его):] Вы знаете ль, сударь, что с вами треснет камень! (Я. Княжнин. Чудаки).

Источник: Фразеологический словарь русского литературного языка на Gufo.me