Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/tensorflow/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Tensorflow 利用BERT开发问答系统_Tensorflow_Nlp_Information Retrieval_Transformer_Question Answering - Fatal编程技术网

Tensorflow 利用BERT开发问答系统

Tensorflow 利用BERT开发问答系统,tensorflow,nlp,information-retrieval,transformer,question-answering,Tensorflow,Nlp,Information Retrieval,Transformer,Question Answering,我目前正在开发一个问答系统(,印度尼西亚语),我的论文中使用了BERT。 数据集和给出的问题以印度尼西亚语表示 问题是,我仍然不清楚如何一步一步地开发BERT中的问答系统 从我阅读了大量研究期刊和论文后得出的结论来看,这个过程可能是这样的: 准备主数据集 加载列车前数据 使用预训练数据训练主数据集(以便生成“微调”模型) 对微调模型进行聚类 测试(向系统提问) 评价 我想问的是: 这些步骤正确吗?或者可能有遗漏的步骤 此外,如果BERT提供的默认列车前数据是英文的,而我的主要数据集是印尼文的,

我目前正在开发一个问答系统(,印度尼西亚语),我的论文中使用了BERT。 数据集和给出的问题以印度尼西亚语表示

问题是,我仍然不清楚如何一步一步地开发BERT中的问答系统

从我阅读了大量研究期刊和论文后得出的结论来看,这个过程可能是这样的:

  • 准备主数据集
  • 加载列车前数据
  • 使用预训练数据训练主数据集(以便生成“微调”模型)
  • 对微调模型进行聚类
  • 测试(向系统提问)
  • 评价
  • 我想问的是:

    • 这些步骤正确吗?或者可能有遗漏的步骤
    • 此外,如果BERT提供的默认列车前数据是英文的,而我的主要数据集是印尼文的,我如何创建自己的印尼列车前数据
    • 它真的需要在BERT中执行数据/模型聚类吗
    我很感激任何有帮助的回答。 事先非常感谢