Hmm, você já usou o TensorFlow? 
Talvez seja melhor evitar muitos dados não estruturados desde o início. Eu tenho o mesmo problema aqui. Mas estou tentando organizar tudo na origem. Tenho um inferno de conversas no Slack aqui, e vou resolver isso fazendo com que as pessoas estruturem os dados…