Sein familiärer Hintergrund und sein Drang nach Unabhängigkeit machten Pissarro zu einem Außenseiter. Er stammte aus einer jüdischen Auswandererfamilie, die Wurzeln in Portugal und Frankreich hatte. Geboren wurde Pissarro auf den Antillen, einer Inselgruppe in der Karibik, wo er in einem multikulturellen Umfeld aufwuchs.