Shoya Ishida, habitant à Ōgaki dans la préfecture de Gifu, vit en combattant l’ennui par les jeux les plus insensés qui lui viennent à l’esprit. Un jour, Shoko Nishimiya rejoint sa classe d’école primaire et essaie de s’y faire une place, mais cette dernière est atteinte de surdité et va causer quelques soucis à ses camarades, ce qui va permettre au jeune Shoya de s’occuper en profitant des faiblesses de celle-ci.

Mais tout cet amusement se retournera contre lui. Une fois lycéen, Shoya, qui décide de revoir une dernière fois Shoko pour s’excuser, va finalement se rapprocher d’elle à travers la langue des signes.