Puedes hacerlo, puedes usar un feed RSS con el plugin RSS. Luego, debes ponerlo en este formato:
https://www.youtube.com/feeds/videos.xml?channel_id=TU_CANAL
Por ejemplo, si tu canal es https://m.youtube.com/channel/UCnCikd0s4i9KoDtaHPlK-JA, tomarás UCnCikd0s4i9KoDtaHPlK-JA y lo pondrás en la parte de “tu canal” del enlace anterior. Después de eso, sigue las instrucciones del enlace mencionado y el RSS comenzará a funcionar.