インストールと準備
多くのLinuxディストリビューションでは、 wget プリインストールされています。インストールが必要な場合は、以下のコマンドを使用してください。また、コマンドを使用してバージョンを確認することもできます。 wget --version 活用してください。.
apt update
apt install -y wget
yum install -y wget
brew install wget
wget --version
基本的なダウンロードと出力の管理
特定のアドレスから単純なファイルをダウンロードするには: wget 保存したファイルの名前を変更したり、詳細な出力を削減したりできます。.
wget https://example.com/file.tar.gz
wget -O custom-name.tar.gz https://example.com/file.tar.gz
wget -q https://example.com/file.tar.gz
wget -nv https://example.com/file.tar.gz
wget -o /var/log/wget-download.log https://example.com/file.tar.gz
継続的なダウンロードと大きなファイル
大きなファイルをダウンロードする場合や、ネットワークが切断されて接続できない場合は、オプションを使用してください。 -c 再開時に使用します。また、速度と試行回数を制御することは、共有サーバーの場合に役立ちます。.
wget -c https://example.com/large.iso
wget --limit-rate=1m https://example.com/large.iso
wget --tries=10 --timeout=30 --retry-connrefused https://example.com/large.iso
再帰ダウンロードとミラーダウンロード
再帰オプションを使用して、パスを再帰的にダウンロードしたり、サイトのミラーを作成したりします。. -np 親パスへの登りを防止し、 -k リンクをローカル アクセス用に変換します。.
wget -r -np -k https://example.com/some/path/
wget --mirror -p --convert-links -P ./localdir https://example.com/
wget を使用した REST API の操作
それでも カール APIを操作する際の柔軟性が高く、 wget GETやPOSTといった単純なやり取りやヘッダーの送信に便利です。以下に一般的な例をいくつか示します。.
ヘッダーの送信
オプションからカスタムヘッダーを追加するには - ヘッダ 使用。.
wget --header="X-API-Version: 2" --header="Accept: application/json" -O response.json "https://api.example.com/resource?id=10"wget による認証の一般的な例は次のとおりです。.
wget --http-user=USERNAME --http-password='PASSWORD' -O resp.json "https://api.example.com/secure"
wget --header="Authorization: Bearer YOUR_TOKEN" -O resp.json "https://api.example.com/protected"
wget --save-cookies cookies.txt --keep-session-cookies --post-data='username=me&password=secret' https://example.com/login
wget --load-cookies cookies.txt -O dashboard.html https://example.com/dashboardJSONとPOSTの送信
JSONペイロードを送信するには、 --post-data または --postファイル ペイロードが大きい場合は、データをファイルに格納することをお勧めします。.
wget --header="Content-Type: application/json" --post-data='{"name":"test","value":42}' -O resp.json "https://api.example.com/items"
echo '{"name":"big","value":123}' > payload.json
wget --header="Content-Type: application/json" --post-file=payload.json -O resp.json "https://api.example.com/items"制限と代替案
覚えておいてください wget GETとPOST以外のHTTPメソッドには制限があります。 置く、 パッチ、 消去 あるいは、マルチパートフォームの方が カール 使用。.
並列ダウンロードやファイル分割には、次のようなツールを使用します。 アリア2 活用してください。.
スクリプト、再試行、バックオフ
APIとの安定したインタラクションとレート制限への対処には、指数バックオフを用いたリトライアルゴリズムが適しています。以下のシンプルなbashスクリプト例が使用できます。.
#!/bin/bash
URL="https://api.example.com/data"
OUT="resp.json"
TOKEN="YOUR_TOKEN"
attempt=0
max=5
sleep_time=1
while [ $attempt -lt $max ]; do
wget --header="Authorization: Bearer $TOKEN" -O "$OUT" "$URL"
code=$?
if [ $code -eq 0 ]; then
echo "Success"
exit 0
fi
attempt=$((attempt+1))
echo "Attempt $attempt failed, sleeping $sleep_time"
sleep $sleep_time
sleep_time=$((sleep_time * 2))
done
exit 1cron または systemd タイマーを使用してダウンロードを定期的にスケジュールし、さまざまな場所にある VPS またはクラウド サーバーでタスクを自動的に実行します。.
プロキシ、TLS、証明書
プロキシ経由で接続している場合、wget は環境変数をサポートしています。CA ファイルへのパスを指定して証明書の検証を制御できます。.
export http_proxy="http://proxy.example:3128"
export https_proxy="http://proxy.example:3128"証明書オプション:
--ca-certificate=/path/to/ca.pem--証明書をチェックしない（テスト環境以外では使用しないでください）
クラウドサーバーと場所のパフォーマンスに関するヒント
適切な場所を選ぶことで、RTTとpingを削減できます。取引、ゲーム、レンダリング、GPUサーバーを使ったAIといった機密性の高いアプリケーションでは、宛先サービスへの近さが重要です。対象となる企業は、 85以上の拠点 そうですよ。.
- 場所を選択してください: 遅延を減らすには、目的地に最も近いデータセンターを選択してください。.
- AI モデルとレンダリングをダウンロード: から
-c履歴書と--制限レート重い処理をするときに使用します。. - ネットワークセキュリティ: トラフィック量の多いファイルをホストするには、DDoS 保護サーバーを使用します。.
- CDN と BGP: ポイントツーポイントテスト用の wget と最終配布用の CDN の組み合わせが推奨されます。.
大規模なモデルを GPU サーバーにダウンロードする実際の例:
wget -c https://models.example.com/large-model.tar.gz -O /mnt/nvme/models/large-model.tar.gz --limit-rate=5m --tries=20
wget、curl、その他のツールの比較
各ツールの利点と用途の概要:
- wget: ファイルのダウンロード、サイトのミラーリング、再帰ダウンロードに適しています。シンプルでスクリプトに適しています。.
- カール： REST API の高い柔軟性、HTTP およびマルチパート メソッドの完全なサポート。.
- アリア2: 並列ダウンロードと複数接続によりダウンロードを高速化します。.
- rsync/scp: 安全なサーバー間同期 (SSH/SFTP)。.
セキュリティとベストプラクティス
wget を安全に使用し、秘密を管理するための重要な推奨事項は次のとおりです。
- トークンの保管: トークンを含むファイルを制限し、シークレット マネージャーを使用します。.
- TLS: 証明書の検証を有効にして、
--証明書をチェックしないテストにのみ使用してください。. - レート制限: ブロックを回避するには、Rate-Limit ヘッダーとバックオフ アルゴリズムを使用します。.
- ネットワーク保護: 頻繁に使用するファイルをホストするには、DDoS 対策サーバーと CDN を使用します。.
結論
主な質問に対する答えは、 wget ファイルのダウンロード、ミラーリング、REST APIとの基本的なやり取りを行うためのシンプルで安定したツールです。より複雑なHTTPのニーズや、より多様なやり取りには、 カール より良い選択肢です。クラウド環境では、適切な場所を選択し、安全なサーバーを使用し、適切なネットワークを構成することで、作業環境を劇的に向上させることができます。.
プランとサポート情報
以上の計画 85か所 これらは世界中で利用可能で、GPU サーバー、取引用の低遅延サーバー、ゲームや高トラフィックのホスティングに適したサーバーなど、特定の用途に合わせてさまざまなオプションが提供されています。.
プランの詳細を表示したり、追加情報を取得するには、Web パネルにアクセスするか、サポートを通じて詳細情報を入手してください。.
