Você adicionou o PeerTube à configuração de lista de permissões de iframe?
Ainda assim, seria pedir demais aos seus usuários para incorporar iframes.
Existe um componente de tema do YouTube + Vimeo que alcançou praticamente o que você está buscando (pelo menos com o Vimeo), mas infelizmente não tem sido mantido: