Национальная галерея Же-де-Пом представляет собой центр современного искусства, где проводятся выставки современной живописи, графики и фотографии, но так было не всегда. Изначально здание, в котором она находится, предназначалось для других целей. Наполеон III облюбовал сад Тюильри для игры в мяч (именно так и переводится jeu de paume), и ему было нужно специальное помещение. Поэтому сооружение, построенное в 1861 году в этом месте, было ничем иным, как теннисным кортом.

Превращение здания в музей произошло в 1909 году, когда здесь стали организовываться тематические выставки. Спустя 13 лет строение подверглось реконструкции, после чего галерея обзавелась собственной коллекцией произведений искусства, которые демонстрировались посетителям в рамках постоянной экспозиции. Работники Национальной галереи Же-де-Пом собирали для нее картины таких известных мастеров кисти, как Пикассо, Шагал, Модильяни, Грис и Сутин. Во время нацистской оккупации некоторые из них были уничтожены.