Baskett berada dalam kesehatan yang buruk selama pembuatan film Song of the South karena diabetes dan dia menderita serangan jantung pada bulan Desember 1946 tak lama setelah film itu dirilis. Kesehatannya terus menurun, dan dia sering tidak dapat menghadiri acara radio Amos 'n' Andy yang dia hadiri, melewatkan hampir separuh musim 1947–1948. Pada tanggal 9 Juli 1948, selama jeda musim panas pertunjukan,[1] James Baskett meninggal di rumahnya karena gagal jantung akibat diabetes pada usia 44 tahun.[2][3] Dia meninggalkan istrinya Margaret dan ibunya Elizabeth. Ia dimakamkan di Pemakaman Crown Hill di Indianapolis.[4]