Scott nació en Mount Pleasant (Nueva York), Estados Unidos,[1] ejerció como pianista, vibrafonista y cantante, también podía tocar el acordeón, el violonchelo, el clarinete y el contrabajo . Estudió con Edvard Moritz en la Escuela de Música La Follette a la edad de ocho años y a los once ya trabajaba profesionalmente.[2] En 1952, comenzó a hacer giras con Louis Prima. También realizó giras y actuó con Gene Krupa, Lester Young y Tony Scott en la década de 1950.[1] En 1956 alcanzó el Billboard Hot 100 en Estados Unidos con la canción " Chain Gang ", alcanzando el puesto 13.[3] Vendió más de un millón de copias y recibió un disco de oro.[4]
Como director de orquesta, realizó sesiones para las discográficas Verve, ABC-Paramount, Bethlehem y Musicmasters. Como compositor, ganó un premio Grammy a la Mejor Composicióna Instrumental por la canción " A Taste of Honey ".[5] Además de "A Taste of Honey", Scott también coescribió la canción "He Ain't Heavy, He's My Brother" popularizada por la banda británica The Hollies.[6] En la década de 1960 se convirtió en profesor de música y estudió nuevamente con Moritz, pero ocasionalmente también grabó, incluido un álbum tributo a Nat King Cole lanzado en la década de 1980. También compuso bandas sonoras de películas, incluidas las partituras de Slaves (1969), Joe (1970) y Who Says I Can't Ride a Rainbow! (1971). Durante la década de 1980 compuso música para guitarra clásica, arpa y piano. También hizo arreglos para músicos de jazz y música fácil como Les y Larry Elgart .
Scott murió de cáncer de pulmón en la ciudad de Nueva York, a la edad de 53 años[7]
