A avaliação de objetos de aprendizagem (OA) que buscam apoiar o processo de alfabetização se faz mais que necessária no contexto tecnológico atual, pois atividades mais tradicionais como exercícios de repetição nem sempre conseguem manter a atenção dos alunos, o que gera desmotivação durante esse processo. Neste artigo é apresentado o “Embaralhado”, um OA personalizável para a plataforma Android desenvolvido com o objetivo de auxiliar o processo de alfabetização de maneira lúdica. São apresentados dados relativos a uma avaliação por meio de observação direta de alunos inseridos no processo de alfabetização. Além disso, são apresentados resultados de uma avaliação que considerou o nível de satisfação e aceitabilidade do "Embaralhado" por parte de professores e pais/responsáveis. De maneira geral, pelas avaliações realizadas foi possível identificar no aplicativo aspectos técnicos positivos como: robustez, estabilidade, adaptabilidade de acordo com as necessidades de cada usuário e um uso adequado do emprego de imagens. Percebeu-se também que o “Embaralhado” foi bem aceito por pais/responsáveis e professores e que pode apoiar o processo de alfabetização favorecendo a motivação.