Это часть ее токо, ещё стоит вопрос о том, как вернуть кликабельные айтем в исходное (некдикаьельное) состояние, если я мимо прошел например
да ты постановленной задачей себя путаешь
у тебя не должно быть не кликабельных итемов
у тебя должны быть те кто пропускает дальше после проверки на то что он соседний и те что нет
и тогда решение заключается в ресайклере в холдере и листнере ну и еще в адаптере обработчик нужен раз переключать надо когда встал на какуюто клетку чтобы другие начали пропускать и некоторые не пускать в обработчик листнера