Вот как мне удалось решить эту проблему.
Я удалил это из своего кода
actionbar.setDisplayHomeAsUpEnabled(true);
actionbar.setHomeAsUpIndicator(R.drawable.icon_menu_white);
и использовал вместо этого:
ActionBarDrawerToggle toggle = new ActionBarDrawerToggle(
this, mDrawerLayout, toolbar, R.string.text_in,
R.string.text_out);
mDrawerLayout.addDrawerListener(toggle);
toggle.syncState();