curl

 curl - transfer a URL

1) Получение html кода страницы
curl ya.ru

2) Вывести только заголовки

curl -I url

3) Формирование POST запросов
curl -d "Key=Value" -d "Key=Value" url

4) Работа с формами
curl -F name=value url

5) Работать с перенаправленими
curl -L url

6) Установка Сookie
curl -b "Key=Value" url

7) Сохранение Cookie
curl -c nametosave url

8) Загрузка Cookie
curl -b nametoload url

9) Произвольные заголовки
curl -H "Header:value" url