Fontenelle es una comuna en el departamento de Territoire de Belfort en Bourgogne-Franche-Comté en el noreste de Francia .