выбранные элементы в представлении списка не выделяются

Я пытаюсь реализовать MultiChoiceModeListener для использования контекстной панели действий в моем фрагменте (библиотека поддержки v4). Но у меня проблемы с отображением того, что элемент в представлении списка был выбран. Я ожидаю, что выбранные элементы будут выделены. На самом деле происходит то, что отображается только панель действий, показывающая количество выбранных элементов, но нет указания на то, какой элемент был выбран.

    if (Utils.hasHoneycomb()) {
        Log.d("faizal","has honeycomb");

        //Enable selection of multiple chat messages
        lv_chatMessages.setChoiceMode(ListView.CHOICE_MODE_MULTIPLE_MODAL);

        //Handle Action mode events
        lv_chatMessages
                .setMultiChoiceModeListener(new MultiChoiceModeListener() {

                    @Override
                    public boolean onActionItemClicked(ActionMode arg0,
                            MenuItem arg1) {
                        // TODO Auto-generated method stub
                        return false;
                    }

                    @Override
                    public boolean onCreateActionMode(ActionMode mode,
                            Menu menu) {
                        Log.d("faizal","oncreateactionmode");
                        MenuInflater inflater = mode.getMenuInflater();
                        inflater.inflate(R.menu.chatsession_contextmenu, menu);
                        return true;
                    }

                    @Override
                    public void onDestroyActionMode(ActionMode arg0) {
                        // TODO Auto-generated method stub

                    }

                    @Override
                    public boolean onPrepareActionMode(ActionMode arg0,
                            Menu arg1) {
                        // TODO Auto-generated method stub
                        return false;
                    }

                    @Override
                    public void onItemCheckedStateChanged(ActionMode mode,
                            int position, long id, boolean checked) {
                        Log.d("faizal","onItemCheckedStateChanged : " + position);
                        mode.setTitle(lv_chatMessages.getCheckedItemCount() + " selected");

                    }

                });
    }

Я пытался использовать listview.setSelection(position) в onItemCheckedStateChanged(), но это не имело никакого значения.

Я также попытался вручную изменить цвет фона выбранного элемента с помощью селектора строк в моем файле макета элемента, как показано ниже, но это также не имеет никакого значения:

chat_list_item.xml :

<?xml version="1.0" encoding="utf-8"?>
<LinearLayout xmlns:android="https://schemas.android.com/apk/res/android"
    android:layout_width="match_parent"
    android:layout_height="wrap_content">

    <LinearLayout
        android:id ="@+id/wrapper"
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:background="@drawable/rowselector">

        <TextView
            android:id="@+id/txt_chat"
            android:layout_height="wrap_content"
            android:layout_width="wrap_content"
            android:layout_gravity="center"
            android:focusable="false"
            />

        </LinearLayout>
</LinearLayout>

rowselector.xml:

<?xml version="1.0" encoding="utf-8"?>
<selector xmlns:android="https://schemas.android.com/apk/res/android">

    <item android:state_selected="true" android:drawable="@color/yellow" />

</selector>

Итак, есть ли способ указать, какие элементы были выбраны?