Keras 如何预测一层'；s以端到端的方式使用另一个模型的权重？

我正在从事视觉问答任务，我想复制本文中的工作 其中，他们使用问题嵌入预测网络中的层权重。我想知道我能在keras做到这一点吗？
我试过了，我知道每个张量都有一个参数权重 ex：密度（128，重量=） 但它期望一个真实的数字，我想以端到端的方式训练网络