Basicamente nada, seus conteúdos baixados continuarão lá. São duas formas de limpar o cache: nas configurações de aplicativo do seu celular ou ir em dados e armazenamento e arrastar a barra do smart cache até o início e esperar o valor alocado diminuir.

A única forma de você ter que baixar o conteúdo novamente é se você clicar em limpar tudo.