ホーム > ブログ > プログラミングTips > wgetでサイトを丸ごとダウンロード

wgetでサイトを丸ごとダウンロード

2016.12.09

こんちゃ、銀ねこです。

今日は仕事中ファイルのバックアップをとろうと思いftpソフトでDLしていましたが途中止まってしまいました。

なので、wgetコマンドについてまとめておきます。

wgetコマンドってなんぞ?

HTTPアクセスをしてコンテンツをファイルに保存するコマンドです。

homebrewでインストールできます。
ないようならまずはhomebrewをインストール。
ターミナルを開いて下記サイトにあるコードを貼り付けて実行するだけです。

インストールされたら、次のコードでインストール。
※もし拒否されるようでしたら頭にsudo+スペースをつけてみてください。

ファイルを格納するディレクトリーを作成、移動します。

  1. brew install wget

基本のコマンドは以下のとおり。

  1. wget [option] URL

サイトを丸ごと落としたい

-lはサイトの階層の深さ。0だと全ての階層を落とします。

  1. wget -r -l0 http://example.com/

 --convert-linksをつけるとローカルでもみれるよう絶対パスを相対パスに書き換えてくれます。

  1. wget -r -l0 --convert-links http://example.com/

ベーシック認証のかかったサイトをDL

パスワードとIDを追加します。

  1. wget --http-user=user --http-passwd=password http://example.com/

この記事のタグ