Después de los leves elogios de la crítica al álbum anterior del grupo, If You Ever See an Owl... , el cantante principal del grupo, Matt Pryor , comenzó a escribir más canciones, en parte inspirado por su hija Lily, (quien contribuyó con varias letras de muchas de las canciones) como así como a su hijo menor, Jerzy, de quien lleva el nombre el álbum. El álbum fue grabado en el verano de 2007 en el estudio de la casa de Pryor con los otros miembros de The New Amsterdams . [3] El álbum fue grabado en un mes en el estudio de la casa de Pryor, y editado y mezclado al mismo tiempo que Pryor estaba grabando su primer álbum en solitario Confidence Man . [4]