Nació en Dresden y estudió en la universidad de Bellas Artes en Weimar. Estuvo reclutado durante la Primera Guerra Mundial desde 1914 hasta 1917.
Fue herido en el estomago y casi murió. Esta experiiencia fue fuente de inspiración en su obra. Despues de la guerra vivió en Berlin hasta 1919
A finales de 1919 woheim y Pankok se fueron a Düsseldorf y fundaron el grupo Young Rhineland que incluía tambien a Max Ernst, Otto Dix y Ulrich Leman
Se unió al grupo político Aktivistenbund, un grupo de artistas e intelectuales que se dedicaban al pacifismo y a la defensa de las clases trabajadoras. En 1925 volvió a Berlin.
Con la subida de Hitler al poder, su obra fue declarada degenerada y muchos de sus cuadros fueron destruidos. Escapó a Francia y se unió a la resistencia. En 1937 fue uno de los fundadores de la federación de "la unión de artistas libres" en París y se convirtió en compañero de la bailarina Tatiana Babakoff, que fue asesinada en Auschwitz en 1944
En Munich, se expusieron tres obras suyas en la exposición difamatoria de "arte degenerado" en 1937. Se trasladó a Suiza y en 1939 fue arrestado y trasladado a un campo de concentración, del que huyó en 1942 y despues estuvo escondido en Los Pirineos Cuando acabó la guerra, en 1945, volvió a Francia y en 1947 se trasladó a Nueva York y adquirió la nacionalidad americana. Murió en Nueva York en 1974