Différences
Ci-dessous, les différences entre deux révisions de la page.
| Les deux révisions précédentes Révision précédente | |||
|
archiver_et_rendre_statique_un_wiki [2019/10/11 17:40] Labomedia |
archiver_et_rendre_statique_un_wiki [2019/10/28 00:16] (Version actuelle) Labomedia |
||
|---|---|---|---|
| Ligne 3: | Ligne 3: | ||
| Ne pas utiliser httrack qui veux toujours aspirer tous les internets ! | Ne pas utiliser httrack qui veux toujours aspirer tous les internets ! | ||
| - | Exemples de commandes : | + | Par contre, cette commande aspire tout un site en bourrant le serveur de requêtes (attention à pas se faire bannir) : |
| - | wget --mirror --convert-links --html-extension --wait=2 -o log http://monsite.org | + | wget --mirror --convert-links --html-extension -o log http://monsite.org |
| | | ||
| - | wget -k -p -r --user-agent='Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/37.0.2049.0 Safari/537.36' -R '*Special*' -R '*Help*' -E https://monsite.org | + | Cela aspirera le site en écrivant tout ce qu'il se passe dans un fichier log. En enlevant le paramètre <code>-o log</code> cela affichera tout devant vos yeux victorieux. Pour y aller + molo avec le nombre de requêtes par secondes, vous pouvez ajouer un paramètre <code>--wait=1</code> qui ne fera une requête que toutes les secondes. Du coup ça risque de durer un moment pour un gros site. Pour les autres paramètres : |
| - | + | ||
| - | Explication des paramètres : | + | |
| <code> | <code> | ||
| - | -k: convert links to suit local viewing | + | --mirror : Equivalent à '-r -N -l inf --no-remove-listing', cela permet de faire un mirroir le + exact possible. |
| - | -p: download page requisites/dependencies | + | </code> |
| - | -r: download recursively | + | <code> |
| - | --user-agent: set "fake" user agent for the purpose of emulating regular browsing as sometimes site checks user agent. | + | --convert-links : Cela converti les liens après que le téléchargement est terminé pour relier les assets au HTML (pour une vue locale. Ce qu'il nous faut quoi). |
| + | </code> | ||
| + | <code> | ||
| + | --html-extension : Ajoute une extension .html à tous les fichiers téléchargés. Votre Apache/Nginx/etc... vous remerciera. | ||
| </code> | </code> | ||
| ====Ressources==== | ====Ressources==== | ||
| + | |||
| * https://alvinalexander.com/linux-unix/how-to-make-offline-mirror-copy-website-with-wget | * https://alvinalexander.com/linux-unix/how-to-make-offline-mirror-copy-website-with-wget | ||
| * http://meng6.net/pages/computing/sysadmin/backup_mediawiki/ | * http://meng6.net/pages/computing/sysadmin/backup_mediawiki/ | ||