Правильно, что делаете и продолжайте делать, больше давайте ощупывать, трогать и играть предметами разных размеров и фактуры, чтобы больше информации поступало через рецепторы пальчиков. А вообще по ходу своей работы, я и мои коллеги пришли к выводу, что главное у ребенка развить мелкую моторику, а с ней придет и речь, естественно мышление, и тогда и память и внимание не будут отставать.
В любую свободную минутку старайтесь поразмять  пальчики: делайте гимнастику, различные фигуры из пальцев, играйте мозаикой, конструкторами и всегда сопровождайте свои действия речью. Сначала покажется очень  сложно совмещать движения и речь, но поверьте это возможно и даже очень интересно, а со временем можно научиться рассказывать стихи руками.