Olive, 11 ans, emménage dans une grande maison isolée, pleine d'objets bizarres, de peintures étranges. Ses parents mathématiciens sont absorbés par leur métier et entretiennent des relations distanciées avec leur fille qui a peur de leur déplaire.Seule dans la journée, Olive comble sa solitude en visitant les pièces, explorant les recoins sombres de cette ancienne demeure très spéciale. Elle a l'impression d'être constamment épiée, fait la connaissance de chats mystérieux qui lui parlent, et découvre des choses inattendues : elle ne peut décrocher les tableaux des murs, et en les examinant, elle voit des détails bouger à l'intérieur.
Un jour, en fouillant dans les tiroirs, elle trouve une paire de lunettes qui va lui permettre d'entrer dans les peintures ! À l'intérieur de celles-ci, elle rencontre Aldous McMartin, le premier propriétaire de la maison : un sorcier fantomatique, cruel et avide. Mais y rester trop longtemps ou perdre ses lunettes, c'est risquer de rester enfermée dans ce monde insolite. Olive va être entrainée dans une aventure rocambolesque et fantastique, nouer des amitiés, prendre confiance en elle et faire preuve de courage.
Depuis qu'elle a emménagé dans la demeure du vieux McMartin, Olive en a vu de toutes les couleurs :
Objets ensorcelés, peintures vivantes, chats qui parlent... Pourtant, elle n'est pas au bout de ses surprises car l'horrible Annabelle McMartin a réussi à s'échapper des tableaux magiques et semble déterminée à libérer les forces les plus maléfiques de la vieille masure... Et comme Morton et Rutherford, ses amis, lui tournent le dos, on dirait bien qu'Olive va devoir déjouer seule les pièges de la maison !