Outils pour utilisateurs

Outils du site


dialogpt

Ceci est une ancienne révision du document !


DialoGPT

Large-scale pretraining for dialogue

Ressources

  • DialoGPT A State-of-the-Art Large-scale Pretrained Response Generation Model

The model is trained on 147M multi-turn dialogue from Reddit discussion thread.

Test sur Nvidia 1060 GTX

sudo pip3 install pytorch_pretrained_bert

Successfully installed boto3-1.12.46 botocore-1.15.46 jmespath-0.9.5 pytorch-pretrained-bert-0.6.2 regex-2020.4.4 s3transfer-0.3.3 torch-1.5.0 tqdm-4.45.0

python3 demo.py --data small

Installation

Installation de Conda

cd DialoGPT 
conda env create -f LSP-linux.yml -n LSP

To activate this environment, use

conda activate LSP

To deactivate an active environment, use

conda deactivate

Install de Docker sur Xubuntu 18.04

Install Docker on Ubuntu Using Default Repositories

sudo apt-get remove docker docker-engine docker.io
conda activate LSP
sudo apt install docker.io

NVIDIA Container Toolkit

Erreur de dépendance avec libcurl

apt remove -y libcurl4
apt install -y libcurl4 curl

Erreur de GPG

W: Erreur de GPG : https://nvidia.github.io/libnvidia-container/ubuntu18.04/amd64 InRelease : Les signatures suivantes n'ont pas pu être vérifiées car la clé publique n'est pas disponible : NO_PUBKEY 6ED91CA3AC1160CD

curl -s -L https://nvidia.github.io/nvidia-docker/gpgkey | sudo apt-key add -

Test

sudo docker run nvidia/cuda:9.0-base nvidia-smi
docker: Error response from daemon: OCI runtime create failed: container_linux.go:348: starting container process caused "exec: \"nvidia-smi\": executable file not found in $PATH": unknown.
ERRO[0130] error waiting for container: context canceled 

erreur aussi avec:

sudo apt install nvidia-container-runtime
sudo docker run nvidia/cuda:10.0-base nvidia-smi

A essayer:

docker run --gpus all --ipc=host --rm -it -v $PWD:/workspace --network=host icaruszyz/large-scale-training:dialogpt bash

mais sans le –gpus all que docker run refuse

dialogpt.1587834987.txt.gz · Dernière modification : 2020/04/25 17:16 de serge