User-Agent: Analisi Tecnica Avanzata di un Header Sottovalutato

Cos’è esattamente lo User-Agent?

Lo User-Agent è uno degli header HTTP inviati con una richiesta client (browser, bot, script, ecc.) che descrive l’ambiente in cui viene eseguita la richiesta. È definito nello RFC 9110 §10.1.5, e la sua sintassi è formalmente:

User-Agent: product / product-version (system-information) [optional-products...]

Nella pratica, la struttura è molto più libera, e ciò ha portato a un uso (e abuso) creativo dello user-agent string.

Esempio reale:

User-Agent: Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/125.0.6422.60 Safari/537.36

Analisi:

• Mozilla/5.0 – stringa legacy per compatibilità
• (X11; Linux x86_64) – sistema operativo e architettura
• AppleWebKit/537.36 – motore di rendering
• Chrome/125.0… – nome e versione del browser
• Safari/537.36 – dichiarazione di compatibilità

Usi comuni e tecniche avanzate

1. Content Negotiation (UA sniffing vs feature detection)

I server implementano logiche condizionali basate sull’user-agent. Due approcci:

• User-Agent sniffing: fragile, facilmente falsificabile
• Feature detection: lato client, più affidabile

Esempio in Node.js:

app.get('/', (req, res) => {
  const ua = req.get('User-Agent');
  if (/Mobile/.test(ua)) {
    res.render('mobile-home');
  } else {
    res.render('desktop-home');
  }
});

2. Bot detection & rate limiting

I bot etici (Googlebot, Bingbot, AhrefsBot) usano UA riconoscibili. Tuttavia, è buona prassi validare via DNS e reverse DNS per Googlebot.

dig -x 66.249.66.1 +short
# crawl-66-249-66-1.googlebot.com

I sistemi WAF o CDN (es. Cloudflare, mod_security) possono bloccare user-agent sospetti tramite regex o fingerprint JS.

3. A/B Testing e Feature Flagging

I reverse proxy come Varnish o CDN edge (es. Fastly) possono variare le cache key in base al device:

if (req.http.User-Agent ~ "iPhone") {
  set req.http.X-Device = "mobile";
} else {
  set req.http.X-Device = "desktop";
}

4. SEO e cloaking

Servire contenuti diversi a Googlebot rispetto agli utenti può essere considerato cloaking (rischio penalizzazioni), ma differenziazioni basate su UX mobile/desktop sono lecite.

5. Logging & Analisi Avanzata

Lo user-agent è spesso usato per:

• Segmentazione traffico per browser/OS
• Bot recognition
• Compatibilità retro

from user_agents import parse

ua_string = "Mozilla/5.0 (iPhone; CPU iPhone OS 13_2 like Mac OS X)..."
user_agent = parse(ua_string)

print(user_agent.is_mobile)           # True
print(user_agent.browser.family)      # 'Mobile Safari'

Limitazioni dello User-Agent

• Falsificabile: facilmente spoofabile da bot/scraper
• Non standardizzato: UA arbitrari, difficile parsing
• Deprecazione parziale: sostituito da Client Hints nei browser moderni

Il Futuro: Client Hints

I Client Hints sono una risposta moderna alle criticità dello User-Agent, migliorando privacy e granularità.

Esempio:

Sec-CH-UA: "Chromium";v="125", "Google Chrome";v="125"
Sec-CH-UA-Mobile: ?0
Sec-CH-UA-Platform: "Windows"

Per riceverli, il server deve inviare:

Accept-CH: Sec-CH-UA, Sec-CH-UA-Mobile, Sec-CH-UA-Platform

Lo User-Agent è ancora oggi uno strumento potente per chi sviluppa, analizza, protegge o ottimizza. Nonostante i suoi limiti, rimane utile in moltissimi scenari tecnici. Per progetti avanzati, l’integrazione di Client Hints e tecniche di fingerprinting più robuste sarà sempre più rilevante nel prossimo futuro.