Transformersは、世界中で使われているデファクトスタンダードな自然言語処理の深層学習フレームワークです。
このフレームワークを使うことで、最先端の自然言語処理を体験することができます。
Transformersの概要
Transformersは、PyTorchとTensorflowの両方に対応していて、深層学習を使って下記のような自然言語処理を行うことができます。
- テキスト分類
- 質疑応答
- 要約
- テキスト生成
- 言語モデル
モデルアーキテクチャ
次のような最先端のモデルアーキテクチャを提供しています。
- BERT
- GPT-2
- T5
事前学習モデル
様々な事前学習モデルが提供されており、最先端の自然言語処理アルゴリズムを容易に試すことができます。
提供されている事前学習モデルは以下のサイトで確認できます。
提供されている事前学習モデル - https://huggingface.co/transformers/pretrained_models.html
またコミュニティで提供されている学習済みモデルもあります。
The All community building the future - https://huggingface.co/models
次回は、Transformersのインストールとテキスト分類を行います。