Как использовать вектор 4096D в качестве входных данных для LSTM?

Я пытаюсь создать систему глубокого обучения, которая генерирует описание предложения для изображения. Для этого я использовал обученную модель кафе CNN, чтобы получить 4096-мерный вектор признаков. Насколько я понимаю, мне нужно передать этот 4096-мерный вектор в качестве входных данных для LSTM. Как это можно сделать в caffe или какой-либо другой среде?