Au milieu des années 1860, Whistler entreprend une série d’œuvres dans lesquelles des modèles typiquement anglais en costumes exotiques sont représentés comme des courtisanes japonaises entourées d’objets de la collection personnelle d’art asiatique de l’artiste. Ici, il présente le modèle irlandais Joanna Hiffernan sous les traits d’une courtisane japonaise, contemplant une estampe de Vues des soixante-et-une provinces d’Utagawa Hiroshige, une série emblématique de meisho-e, ou images de lieux remarquables.
Lorsque Charles Lang Freer découvre ce tableau pour la première fois en 1902, il possède une impressionnante collection d’estampes et de peintures japonaises ainsi que des centaines d’œuvres de Whistler. Freer déclare que Caprice est « l’une des choses les plus parfaites en termes de composition et de couleur dans toute la gamme de l’art de M. Whistler ».