Você pode fazer isso, basta usar um feed RSS com o plugin RSS. Depois, você deve inseri-lo neste formato:
https://www.youtube.com/feeds/videos.xml?channel_id=SEU_CANAL
Por exemplo, se o seu canal for https://m.youtube.com/channel/UCnCikd0s4i9KoDtaHPlK-JA, você deve pegar o UCnCikd0s4i9KoDtaHPlK-JA e colocá-lo na parte “SEU_CANAL” do link acima. Após isso, siga as instruções do link mencionado e o RSS começará a funcionar.