Conceptos básicos de peticiones Web

Composición de la URL

No todos los componentes son necesarios para acceder a un recurso. Los principales campos obligatorios son el esquema y el host, sin los cuales la solicitud no tendría ningún recurso que solicitar.

CURL

Podemos enviar una solicitud HTTP básica a cualquier URL usándola como argumento para cURL, de la siguiente manera:

	curl inlanefreight.com

También podemos usar cURL para descargar una página o un archivo:

	curl -O inlanefreight.com/index.html

También podemos hacer la petición en modo silencioso con el parametro -s

	curl -s -O inlanefreight.com/index.html

Cuando visitamos un sitio por https con un certificado no válido o expirado curl nos lo expone, sin embargo si nos queremos saltar esa comprobación utilizamos el parametro -k:

	curl -k https://inlanefreight.com

Para ver la solicitud y respuesta HTTP completa, simplemente podemos agregar el indicador -v:

	curl -v https://inlanefreight.com

Para ver solo los encabezados de las solicitud usamos el parámetro -I, en cambio si queremos ver tanto el cuerpo de la solicitud más los encabezados usamos el parámetro -i

	curl -I https://inlanefreight.com

Algunos encabezados, como los User-Agento Cookielos encabezados, tienen sus propios indicadores. Por ejemplo, podemos usar el -Apara configurar nuestro User-Agent, de la siguiente manera:

curl https://www.inlanefreight.com -A 'Mozilla/5.0'

Si por ejemplo estamos en una situación donde tenemos un usuario que está autenticado y queremos acceder mediante curl con la sesión de ese usuario podemos fijarnos en parametros como son las cookies(las vemos en la parte de resources en las herramientas d e desarrollo), algunos headers como Authorization( la vemos en la parte de network en las herrmientas de desarrollo) y su valor donde lo podemos reflejar de la siguiente manera:

curl -H 'Authorization: Basic YWRtaW46YWRtaW4=' https://www.inlanefreight.com

Para solicitudes POST donde por ejemplo necesitamos tramitar data podemos apoyarnos del parámetro -d. Por ejemplo en un panel de autenticación donde vamos a proporcionar nuestras credenciales.

curl -X POST -d 'username=admin&password=admin' http://<SERVER_IP>:<PORT>/

En caso que nos autentiquemos se nos debe asignar por lo general unas cookies de sesión donde con ellas no necesitamos en volver a poner la contraseña en caso queren entrar mediante otros medios ya sea curl u otro navegador.

curl -b 'PHPSESSID=c1nsa6op7vtk7kdis7bcnbadf1' http://<SERVER_IP>:<PORT>/

Para el caso de las APIs podemos obtener un recurso de la siguiente manera, suponemos que estamos en una aplicación donde hacemos la query de dar la Ciudad y el pais y nos devuelve ciudades de la misma region, vease que debemos proporcionar la peticion con los datos en el formato correcto en este caso json:

curl http://<SERVER_IP>:<PORT>/api.php/city/london
[{"city_name":"London","country_name":"(UK)"}]

Parar crear un recurso en el servidor debemos utilizar el metodo POST, donde proporcionamos los datos -d que se van a añadir a la tabla y especificamos uno de los headers -h como Content-Type como json.

curl -X POST http://<SERVER_IP>:<PORT>/api.php/city/ -d '{"city_name":"HTB_City", "country_name":"HTB"}' -H 'Content-Type: application/json'

Para editar un recurso de la base de datos usamos el Metodo PUT especificando el valor que deseamos actualizar y pasandole los nuevos valores en su lugar. En el siguiente ejemplo vemos que para el recurso ciudad london le hacemos un PUT y pasamos una nueva ciudad New_HTB_City pasando a actualizar estos recursos en el servidor.

curl -X PUT http://<SERVER_IP>:<PORT>/api.php/city/london -d '{"city_name":"New_HTB_City", "country_name":"HTB"}' -H 'Content-Type: application/json'

Para el caso de eliminar simplemente especificamos el nombre de la ciudad para la API y usamos el DELETEmétodo HTTP:

curl -X DELETE http://<SERVER_IP>:<PORT>/api.php/city/New_HTB_City

HTTP

Flujo:

Nuestros navegadores generalmente buscan primero los registros en el /etc/hosts en local y si el dominio solicitado no existe en él, se comunicarán con otros servidores DNS. Podemos usar el /etc/hosts para agregar registros manualmente para la resolución DNS, agregando la IP seguida del nombre de dominio.

Ejemplo de Petición:

La versión 1.X de HTTP envía las solicitudes como texto sin formato y utiliza un carácter de nueva línea para separar los distintos campos y solicitudes. La versión 2.X de HTTP, en cambio, envía las solicitudes como datos binarios en formato de diccionario.

Encabezados HTTP(Headers) Los encabezados pueden tener uno o varios valores, que se añaden después del nombre del encabezado y se separan con dos puntos. Tipos de encabezados:

1. General Headers Se utilizan tanto en solicitudes como en respuestas HTTP. Son contextuales y se utilizan para describir el mensaje más que su contenido. (Date, Connection)
2. Entity Headers Se utilizan para describir el contenido transferido por el mensaje. Por lo general, se encuentran en respuestas y solicitudes POST o PUT. (Content-Type, Media-Type, Boundary, Content-Length, Content-Encoding)
3. Request Headers Son utilizados en la solicitud HTTP y no se relaciona con el contenido del mensaje.(Host, User-Agent, Referer,Accept, Cookie, Authorization)
4. Response Headers Se utilizan en la respuesta HTTP y no se relacionan con el contenido. (Server, Set-Cookie, WWW-Authenticate)
5. Security Headers Utilizados para especificar ciertas reglas y políticas deben ser seguidos por el navegador al acceder al sitio web.(Content-Security-Policy, Strict-Transport-Security, Referrer-Policy)

Una de las principales desventajas de HTTP es que todos los datos se transfieren en texto plano. Esto significa que cualquier persona entre el origen y el destino puede realizar un ataque de intermediario (MiTM) para acceder a los datos transferidos.

Flujo HTTPS

Si escribimos http:// en lugar de https:// para visitar un sitio web que implementa HTTPS, el navegador intenta resolver el dominio y redirige al usuario al servidor web que aloja el sitio web de destino. Primero se envía una solicitud al puerto 80, que es el protocolo HTTP sin cifrar. El servidor lo detecta y redirige al cliente al puerto HTTPS seguro 443. Esto se realiza mediante el código de respuesta 301 “Movido Permanentemente”.

Los datos se transfieren como un único flujo cifrado, lo que hace que sea muy difícil para cualquier persona capturar información como credenciales o cualquier otro dato confidencial.

Métodos de Solicitud

Códigos de respuesta

Estos son mis apuntes del modulo de Web Requests de Hack The Box Academy. Te animo a que le heches un vistazo.

https://academy.hackthebox.com/module/details/35

Escríbeme por cualquiera de las vías