En stor kraft i udformningen af borgerrettighedsbevægelsen i Usa, Ella Baker var premiere bag-the-scenes arrangør, medstifter af the Southern Christian Leadership Conference (SCLC), der ledes af Martin Luther King, Jr., og en inspirerende kraft bag oprettelsen af den Studerende Non-Violent Coordinating Committee (SNCC).
Baker begyndte sin lange tilknytning til National Association for the Advancement of Colored People arrangør i 1938., Hun blev ansat i 1940 og rejste vidt og bredt for at skaffe penge og organisere lokale filialer. I slutningen af 1950 ‘ erne hjalp hun med at skabe SCLC for at bekæmpe racisme; i sin rolle som administrerende direktør (i modsætning til Kings primære talsperson rolle).da studerende-sort / hvid-blev involveret i bevægelsen, støttede Baker ideen om en elevdrevet organisation og opfordrede unge til at finde SNCC. SNCC organiseret mange succesfulde vælgerregistrering drev og andre aktiviteter., Baker var også rådgiver for oprettelsen af Mississippi Democratic Freedom Party (MDFP), skabt for at hjælpe med at vælte all-whitehite Democratic Party delegation til partiets konventioner.