En 1968, comenzó una estafa por correo en la que la gente le enviaba una tarifa de solicitud de $ 5 para recibir sobres de relleno de trabajo . 1973 fue sentenciado por fraude postal y encarcelado en Springfield, Missouri .
En prisión escuchó que los cajeros de los bancos asegurados por el gobierno federal recibieron instrucciones de entregar el dinero a los ladrones sin incidentes. Entonces, cuando Toye fue liberado en 1974, procedió a realizar su primer robo a un banco poco después de haber salido de la prisión. Estaba armado únicamente con su bastón blanco y una nota que decía que tenía un arma.
Toye se concentró en usar su ojo derecho para ver las huellas oscuras de los pies de otras personas y las siguió hasta la ventanilla del cajero del banco. Allí mostraría un gato tuerto con el texto "Date prisa, cállate o estás muerto. Pon todo el dinero en efectivo en la bolsa. Tengo un arma". Cuando hubo recibido el dinero, se retiró a la puerta. Usó la misma técnica muchas veces.
Toye fue capturado en 1977 en la ciudad de Nueva York cuando chocó con guardias armados que entregaban dinero al banco. Los siguientes seis años los pasó en el Centro Correccional Metropolitano de Nueva York. Cuando salió en febrero de 1983, fue a un Citibank y robó $18,000.
Toye se mudó a Las Vegas pero hizo una lista de todas las sucursales de Citibank en Nueva York. Nueve veces voló a Nueva York para robar un banco e inmediatamente regresó a Las Vegas después del robo. Puso el dinero en una cuenta bancaria de Las Vegas con un nombre falso. Fue arrestado el 24 de mayo de 1983 cuando se desvió hacia una tienda de descuento. Toye fue sentenciado a 17 años y trató de escapar 11 veces.
En una entrevista para la revista People en 1990, Toye afirmó que había donado parte de su botín a organizaciones benéficas, incluida la investigación de la retinosis pigmentaria. En ese momento, había robado 17 bancos y cumplía condena en la Penitenciaría Federal de Lompoc , cerca de Santa Bárbara, California , a punto de ser liberado en 1993.