9 语言
      9 纠错
      9 是
      9 对
      9 存在
      9 上
      8 注意力
      8 作为
      7 隐
      7 状态
      7 地
      7 和
      7 到
      6 通过
      6 词
      6 计算
      6 而
      6 编码
      6 机制
      6 最
      6 时
      6 我们
      6 成为
      6 得分
      6 使用
      6 不
      5 距离
      5 规则
      5 给出
      5 简单
      5 用
      5 排序
      5 利用
      5 其中
      5 RNN
      4 高
      4 重
      4 进行
      4 被
      4 英语
      4 神经
      4 标注
      4 来
      4 更
      4 新
      4 数据
      4 提高
      4 技术
      4 性能
      4 得到
      4 很
      4 当前
      4 实用
      4 如
      4 多
      4 可以
      4 做
      4 信息
      4 依赖
      4 但
      4 不同
      4 下图
      4 上下文
      4 Grammatical
      4 ESL
      3 长度
      3 长
      3 说明
      3 该
      3 表示
      3 自动
      3 能
      3 网络
      3 统计
      3 结果
      3 类别
      3 直接
      3 直
      3 步
      3 权重
      3 有
      3 最终
      3 时间
      3 无
      3 方向
      3 文档
      3 批注
      3 并不
      3 并
      3 就是
      3 图片
      3 图
      3 后
      3 句
      3 取消
      3 十分
      3 具体
      3 其
      3 关注
      3 假设
      3 候选
      3 保留
      3 从
      3 仅
      3 人
      3 也
      3 两
      3 且
      3 与
      3 下
      3 Translation
      3 SMT
      3 search
      3 NMT
      3 NLP
      3 Neural
      3 Machine
      3 jpg
      3 head
      3 et
      3 Error
      3 default
      3 Correction
      3 beam
      3 al
     36 一
     33 个
      3 3
      3 2
      2 驱动
      2 首先
      2 面试
      2 非
      2 需
      2 随着
      2 阶段
      2 门
      2 重要
      2 采用
      2 都
      2 逐渐
      2 这些
      2 还
      2 辅助
      2 资源
      2 语料
      2 评测
      2 解决
      2 若干
      2 能否
      2 考虑
      2 组合
      2 类
      2 第二
      2 第一
      2 研究
      2 矩阵
      2 目前
      2 理论
      2 特征
      2 然而
      2 然后
      2 法
      2 比如说
      2 每
      2 概率
      2 核心
      2 某些
      2 有效
      2 更加
      2 显然
      2 明显
      2 方
      2 文本
      2 改为
      2 搜索
      2 提出
      2 拼接
      2 找出
      2 成
      2 思想
      2 很多
      2 引入
      2 开始
      2 建模
      2 工具
      2 对于
      2 实例
      2 好
      2 复杂
      2 基本
      2 因此
      2 回复
      2 可能
      2 可
      2 双向
      2 原
      2 单词
      2 包含
      2 前
      2 删除
      2 初学者
      2 则
      2 分配
      2 分类器
      2 分别
      2 典型
      2 公开
      2 充分
      2 做法
      2 保存
      2 例子
      2 作者
      2 任务
      2 仍
      2 介绍
      2 人们
      2 于
      2 之后
      2 主谓
      2 主流
      2 为了
      2 世界
      2 下面
      2 一致
      2 一些
      2 to
      2 the
      2 state
      2 rerank
      2 Precision
      2 of
      2 is
      2 in
      2 Human
      2 English
      2 CoNLL
      2 attention
      2 art
      2 A
      2 a
     29 句子
      2 5
     24 GEC
      2 2014年
      2 100
     20 错误
      1 高度
      1 领域
      1 预测
      1 面临
      1 非常
      1 集成
      1 集中
      1 隐状态
      1 限制
      1 陆续
      1 阅读
      1 重新
      1 部
      1 遍历
      1 造成
      1 通知
      1 通用
      1 选择
      1 适合
      1 迭代
      1 进一步
      1 这里
      1 这样
      1 还有
      1 返
      1 近年
      1 过程
      1 迅速
      1 较
      1 转换
      1 超过
      1 质量
      1 贝叶斯
      1 误差
      1 语言学
      1 语义
      1 试图
      1 词汇
      1 识别
      1 设计
      1 许多
      1 记录
      1 记
      1 训练
      1 认为
      1 计算机
      1 规范
      1 规模
      1 见
      1 表上
      1 蕴含
      1 营养
      1 范围
      1 自然
      1 能够
      1 背景
      1 联系
      1 编辑
      1 编程
      1 编
      1 综述
      1 维
      1 络
      1 结语
      1 经历
      1 组件
      1 线上
      1 累积
      1 篇
      1 简而言之
      1 简历
      1 等人
      1 等
      1 端到端
      1 端
      1 突出
      1 种
      1 私有
      1 离
      1 神经网
      1 确认
      1 硬
      1 码成
      1 着
      1 看成
      1 看到
      1 看似
      1 相比
      1 相对
      1 相同
      1 相关
      1 直观
      1 目标
      1 目录
      1 监督
      1 由于
      1 由
      1 用于
      1 珠玑
      1 现实
      1 环节
      1 独立
      1 特定
      1 点
      1 演变
      1 源端
      1 添加
      1 深刻
      1 汲取
      1 母语
      1 段
      1 步骤
      1 此外
      1 此
      1 模态
      1 梯度
      1 标记
      1 标签
      1 查看
      1 极
      1 来源于
      1 条
      1 朴素
      1 本质
      1 未
      1 最早
      1 最后
      1 替换
      1 更大
      1 易于
      1 易事
      1 时候
      1 早
      1 日常
      1 无限大
      1 无能为力
      1 文稿
      1 文献
      1 整个
      1 数
      1 教育
      1 效果
      1 改进
      1 改善
      1 提取
      1 提升
      1 提供
      1 提交
      1 接近
      1 接着
      1 据
      1 持续
      1 报告
      1 把
      1 才
      1 我
      1 意义
      1 想象
      1 想法
      1 情况
      1 忽略
      1 必备
      1 影响
      1 当然
      1 强大
      1 引发
      1 开发者
      1 建议
      1 建立
      1 应用
      1 应
      1 广泛
      1 广
      1 并非
      1 年度
      1 平行
      1 干
      1 已经
      1 差别
      1 巨大
      1 工程化
      1 居然
      1 就
      1 少
      1 对角
      1 对应
      1 客户端
      1 实际
      1 实现
      1 实则
      1 定义
      1 完美地
      1 完全
      1 它们
      1 学者
      1 字符串
      1 字数
      1 如果
      1 如何
      1 如下
      1 夺冠
      1 天才
      1 大量
      1 大部分
      1 大学
      1 大体
      1 多数
      1 外部
      1 复杂性
      1 增长
      1 填写
      1 基础
      1 基
      1 坏
      1 均
      1 地区
      1 在线
      1 在一起
      1 国家
      1 固定
      1 困难
      1 回原
      1 啥
      1 商机
      1 名词
      1 同时
      1 同
      1 只有
      1 只
      1 另
      1 变
      1 受
      1 取得
      1 取代
      1 发展
      1 反向
      1 参考
      1 即
      1 占据
      1 单独
      1 单复数
      1 匹配
      1 动态地
      1 加权
      1 加
      1 剑桥
      1 利
      1 初
      1 分类
      1 分析
      1 分布
      1 分为
      1 函数
      1 冠词
      1 内容
      1 具
      1 关闭
      1 公式
      1 全世界
      1 先于
      1 像
      1 值得
      1 修改
      1 保证
      1 使得
      1 使
      1 你
      1 体验
      1 位置
      1 但是
      1 传统
      1 传播
      1 会议
      1 会
      1 优化
      1 众多
      1 任何
      1 件
      1 以下
      1 以
      1 代
      1 从未
      1 仍然
      1 介词
      1 今天
      1 今后
      1 仅仅
      1 交互式
      1 事情
      1 争相
      1 书写
      1 为例
      1 丰富
      1 中局
      1 严重
      1 业务
      1 不断
      1 不可否认
      1 不仅
      1 下载
      1 一定
      1 一举
      1 Zheng
      1 Yuan
      1 xixibufu
      1 Writer
      1 Workbench
      1 with
      1 Tutorial
      1 translation
      1 To
      1 SVM
      1 Statistical
      1 Shamil
      1 Sequence
      1 sequence
      1 Seq2
      1 Seq
      1 Second
      1 s
      1 Roman
      1 resource
      1 Recall
      1 plays
      1 play
      1 pipeline
      1 Performance
      1 non
      1 Neubig
      1 networks
      1 Network
      1 network
      1 Near
      1 native
      1 Multilayer
      1 multi
      1 Models
      1 mechanism
      1 Mariano
      1 machine
      1 low
      1 Level
      1 Language
      1 label
      1 k个
      1 k
      1 Hybrid
      1 Grundkiewicz
      1 Graham
      1 for
      1 Felice
      1 error
      1 err
      1 Encoder
      1 Divine
      1 Decoder
      1 correction
      1 Correct
      1 Convolutional
      1 classification
      1 Chollampatt
      1 c
      1 Brockett
      1 b
      1 as
      1 and
     19 o
      1 90年代
     18 在
     18 encoder
     17 纠正
     15 这
     15 输出
     15 模型
     15 方法
      1 5亿
      1 50
     14 输入
     14 语法
     14 翻译
     14 向量
     14 decoder
      1 4736
      1 40
      1 4
     13 机器
      1 20世纪
      1 2018
      1 2006年
     11 问题
     11 解码
     11 将
     11 基于
     11 中
      1 1982年
      1 17
    115 的
      1 15T06
      1 1103
     10 系统
     10 学习
     10 了
     10 为
     10 BUTTON
      1 08
     10 1
      1 01
      1 000000Z
      1 __________________________________________________________________
      1 ______________________________________________________________
      1 ____________________