из окна в окно

Прост. Совсем рядом, напротив (жить). Богатый откупщик в хоромах пышных жил, Ел сладко, вкусно пил… Бог дал ему певца соседа. С ним из окна в окно жил в хижине бедняк (Крылов. Откупщик и Сапожник).

Источник: Фразеологический словарь русского литературного языка на Gufo.me