《TreeGen A Tree-Based Transformer Architecture for Code Generation》论文笔记

1、 依赖于神经网络的代码生成器有两个问题: (1)长期依赖问题,一个代码元素经常依赖于另一个遥远的代码元素; (2)结构建模问题。 2、TreeGen的特点: (1)TreeGen使用“Transformer”的attention机制来缓解长期依赖问题; (2)并引入AST reader将语法规则和AST(抽象语法树)结构相结合; (3)准确性、时间效率比CNN和RNN等神经模型要高,但是在实验
相关文章
相关标签/搜索