Skip to content

Commit

Permalink
把模型下载地址独立出来
Browse files Browse the repository at this point in the history
  • Loading branch information
AlongWY committed Dec 1, 2020
1 parent bb95117 commit 10a7b94
Show file tree
Hide file tree
Showing 2 changed files with 44 additions and 38 deletions.
42 changes: 42 additions & 0 deletions MODELS.md
Original file line number Diff line number Diff line change
@@ -0,0 +1,42 @@
# 模型下载

| 模型 | 大小 | sha256 |
| :-------: | :---------------------------------------------: | :--------------------------------------------------------------: |
| Base(v3) | [491.9MB](http://39.96.43.154/ltp/v3/base.tgz) | 5c24a476d505a8c0a3385bbecb0ce816e876922450edf93e2d2bc6f3a01795ca |
| Small(v3) | [156.8MB](http://39.96.43.154/ltp/v3/small.tgz) | 2a9a090f84ae0effc37c3d5ba2cb20e2856b149b380eeeebc6f9b3808ad8e9e4 |
| Tiny(v3) | [31.3MB](http://39.96.43.154/ltp/v3/tiny.tgz) | 0f40bce82c4610829aabb3363e82305289ced721cc846631907af3594bea453e |
| Base(v2) | [531MB](http://39.96.43.154/ltp/v2/base.tgz) | 4ba5b16e90c073fced2ba45ebd6a663e78bf081f8a83a3d68582d53ce544ed3a |
| Small(v2) | [170MB](http://39.96.43.154/ltp/v2/small.tgz) | 26e79fc2912bf2ed9bff72c1de908045e471e4f520b1652f9db246bc38b7b6c6 |
| Tiny(v2) | [34MB](http://39.96.43.154/ltp/v2/tiny.tgz) | 8ed110819c9fd600c1e9cd99a82107d79c804b93d0701055e9215b93035393ba |
| Small(v1) | [170MB](http://39.96.43.154/ltp/v1/small.tgz) | d78bd6507eb4b1a45859ca4d36065dc6ce69202a8fc0edfdce29934fd8307222 |
| Tiny(v1) | [34MB](http://39.96.43.154/ltp/v1/tiny.tgz) | 877bb0cd97d82fdbd2c6f74144c4f9abf9e44ce79075cd17bde02abe314a1e49 |

**注意**: LTP 4.1.X 与旧版本 v1,v2 模型不兼容
**备注**: Tiny模型使用electra前三层进行初始化

## V2/v3 指标

| 模型 | 分词 | 词性 | 命名实体 | 语义角色 | 依存句法 | 语义依存 | 速度(句/S) |
| :-------------: | :---: | :---: | :------: | :------: | :------: | :------: | :--------: |
| LTP 4.0 (Base) | 98.7 | 98.5 | 95.4 | 80.6 | 89.5 | 75.2 | |
| LTP 4.0 (Small) | 98.4 | 98.2 | 94.3 | 78.4 | 88.3 | 74.7 | 12.58 |
| LTP 4.0 (Tiny) | 96.8 | 97.1 | 91.6 | 70.9 | 83.8 | 70.1 | 29.53 |

**备注**: 本版本SDP采用 [CCL2020语义依存分析](http://ir.hit.edu.cn/sdp2020ccl) 语料,其他语料同V1

## V1 指标

| 模型 | 分词 | 词性 | 命名实体 | 语义角色 | 依存句法 | 语义依存 | 速度(句/S) | 模型大小 |
| :-------------: | :---: | :---: | :------: | :----------------: | :------: | :------: | :--------: | :------: |
| LTP 3.X | 97.8 | 98.3 | 94.1 | ~~77.92(Gold Pi)~~ | 81.1 | ~~78.9~~ | 2.75 | 1940M |
| LTP 4.0 (Small) | 98.4 | 98.2 | 94.3 | 77.2(端到端) | 88.0 | 79.9 | 12.58 | 171M |
| LTP 4.0 (Tiny) | 96.8 | 97.2 | 91.6 | 68.1(端到端) | 82.6 | 75.5 | 29.53 | 34M |

测试环境如下:

+ Python 3.7
+ LTP 4.0 Batch Size = 1
+ Centos 3.10.0-1062.9.1.el7.x86_64
+ Intel(R) Xeon(R) CPU E5-2640 v4 @ 2.40GHz

**备注**: 速度数据在人民日报命名实体测试数据上获得,速度计算方式均为所有任务顺序执行的结果。另外,语义角色标注与语义依存新旧版采用的语料不相同,因此无法直接比较(新版语义依存使用Semeval 2016语料,语义角色标注使用CPB3.0语料)。
40 changes: 2 additions & 38 deletions README.md
Original file line number Diff line number Diff line change
Expand Up @@ -35,51 +35,15 @@ sdp = ltp.sdp(hidden)

**[详细说明](docs/quickstart.rst)**

## 模型

### 模型下载

| 模型 | 大小 | sha256 |
| :-------: | :---------------------------------------------: | :--------------------------------------------------------------: |
| Base(v3) | [491.9MB](http://39.96.43.154/ltp/v3/base.tgz) | 5c24a476d505a8c0a3385bbecb0ce816e876922450edf93e2d2bc6f3a01795ca |
| Small(v3) | [156.8MB](http://39.96.43.154/ltp/v3/small.tgz) | 2a9a090f84ae0effc37c3d5ba2cb20e2856b149b380eeeebc6f9b3808ad8e9e4 |
| Tiny(v3) | [31.3MB](http://39.96.43.154/ltp/v3/tiny.tgz) | 0f40bce82c4610829aabb3363e82305289ced721cc846631907af3594bea453e |
| Base(v2) | [531MB](http://39.96.43.154/ltp/v2/base.tgz) | 4ba5b16e90c073fced2ba45ebd6a663e78bf081f8a83a3d68582d53ce544ed3a |
| Small(v2) | [170MB](http://39.96.43.154/ltp/v2/small.tgz) | 26e79fc2912bf2ed9bff72c1de908045e471e4f520b1652f9db246bc38b7b6c6 |
| Tiny(v2) | [34MB](http://39.96.43.154/ltp/v2/tiny.tgz) | 8ed110819c9fd600c1e9cd99a82107d79c804b93d0701055e9215b93035393ba |
| Small(v1) | [170MB](http://39.96.43.154/ltp/v1/small.tgz) | d78bd6507eb4b1a45859ca4d36065dc6ce69202a8fc0edfdce29934fd8307222 |
| Tiny(v1) | [34MB](http://39.96.43.154/ltp/v1/tiny.tgz) | 877bb0cd97d82fdbd2c6f74144c4f9abf9e44ce79075cd17bde02abe314a1e49 |

**备注**: Tiny模型使用electra前三层进行初始化, 4.0.3.post1 版本包含对v1模型的fix,新版本请使用v2模型, 其中v3模型是从v2转换得来

**注意**: LTP 4.1.X 与旧版本 v1,v2 模型不兼容

### V2/v3 指标
## 指标

| 模型 | 分词 | 词性 | 命名实体 | 语义角色 | 依存句法 | 语义依存 | 速度(句/S) |
| :-------------: | :---: | :---: | :------: | :------: | :------: | :------: | :--------: |
| LTP 4.0 (Base) | 98.7 | 98.5 | 95.4 | 80.6 | 89.5 | 75.2 | |
| LTP 4.0 (Small) | 98.4 | 98.2 | 94.3 | 78.4 | 88.3 | 74.7 | 12.58 |
| LTP 4.0 (Tiny) | 96.8 | 97.1 | 91.6 | 70.9 | 83.8 | 70.1 | 29.53 |

**备注**: 本版本SDP采用 [CCL2020语义依存分析](http://ir.hit.edu.cn/sdp2020ccl) 语料,其他语料同V1

### V1 指标

| 模型 | 分词 | 词性 | 命名实体 | 语义角色 | 依存句法 | 语义依存 | 速度(句/S) | 模型大小 |
| :-------------: | :---: | :---: | :------: | :----------------: | :------: | :------: | :--------: | :------: |
| LTP 3.X | 97.8 | 98.3 | 94.1 | ~~77.92(Gold Pi)~~ | 81.1 | ~~78.9~~ | 2.75 | 1940M |
| LTP 4.0 (Small) | 98.4 | 98.2 | 94.3 | 77.2(端到端) | 88.0 | 79.9 | 12.58 | 171M |
| LTP 4.0 (Tiny) | 96.8 | 97.2 | 91.6 | 68.1(端到端) | 82.6 | 75.5 | 29.53 | 34M |

测试环境如下:

+ Python 3.7
+ LTP 4.0 Batch Size = 1
+ Centos 3.10.0-1062.9.1.el7.x86_64
+ Intel(R) Xeon(R) CPU E5-2640 v4 @ 2.40GHz

**备注**: 速度数据在人民日报命名实体测试数据上获得,速度计算方式均为所有任务顺序执行的结果。另外,语义角色标注与语义依存新旧版采用的语料不相同,因此无法直接比较(新版语义依存使用Semeval 2016语料,语义角色标注使用CPB3.0语料)。
**[模型下载地址](MODELS.md)**

## 模型算法

Expand Down

0 comments on commit 10a7b94

Please sign in to comment.