O que fazer quando o companheiro parece ter vergonha de você, mas não admite?

Sou mais velha do que ele, mais de 10 anos, não foi algo que planejei e hoje gostaria muito de não ter iniciado essa relação, justamente por essa especificidade. Tenho consciência da grande dificuldade que isso traz, também sei dos diversos julgamentos, foi algo que aconteceu despretensiosamente, ele é um homem com mais de 30, não é um menino, pelo menos. Ninguém diz que temos essa diferença de idade, mas é lógico que ela pesa.
Nosso relacionamento quando estamos só os dois, sem ninguém por perto, é de muita troca, companheirismo e confiança, mas em público é como se fôssemos dois amigos, raramente tem um toque ou abraço, nem mãos dadas ou coisa assim, beijo nunca. Já conversei, perguntei, mas nega, disse que se tivesse vergonha não sairia em público. Acho que sei o que devo fazer, mas como é uma decisão difícil, acabei por aqui, mais para relatar o fato do que achar uma outra solução, uma espécie de " empurrãozinho".
Primeira vez que vivo isso, porque em outros relacionamentos eu sentia que eles me admiravam e tinham até um certo orgulho, então é uma situação nova. Obrigada!