I 20 Migliori Utilizzi dei Proxies per l'Ingegneria

In ingegneria e scienza, il progresso è oggi spesso guidato dalla capacità di raccogliere, elaborare e analizzare enormi quantità di dati. I proxy, e per estensione i proxy aperti, sono strumenti indispensabili in questa attività incentrata sui dati, principalmente consentendo la raccolta automatizzata dei dati e i test su scala globale. Scienziati e ingegneri hanno spesso bisogno di raccogliere grandi set di dati pubblici da fonti web per la ricerca, ad esempio per raccogliere dati climatici da siti web governativi, compilare corpus linguistici da forum online o aggregare dati di mercato per addestrare modelli economici. Un singolo indirizzo IP che effettua migliaia di richieste verrebbe rapidamente bloccato, ma instradando il traffico attraverso un pool di proxy, questi script automatizzati possono funzionare senza interruzioni.

L'utilità dei proxy si estende oltre la raccolta dati, fino alle fasi critiche di test e verifica. Per gli ingegneri del software che sviluppano applicazioni per un pubblico globale, i proxy sono essenziali per simulare le esperienze utente da diverse posizioni geografiche. Utilizzando un proxy situato in Giappone, uno sviluppatore in Germania può testare la localizzazione di un sito web, verificare il posizionamento degli annunci e misurare le prestazioni dell'applicazione come se fosse un utente locale. Allo stesso modo, gli ingegneri di rete possono utilizzare proxy esterni per testare la robustezza delle proprie configurazioni firewall.

Gli analisti utilizzano anche proxy in OSINT techniques, to view public pages as a visitor from another country would see them without revealing their own network. Open source intelligence techniques of this kind help researchers compare the regional versions of a website.

This specific article is a complementary reading to the OSINT article:

Vedi ancheGuida essenziale alle tecniche e agli strumenti OSINT

►

I lettori potranno inoltre usufruire del nostro elenco di proxy gratuiti, costantemente aggiornato:

Vedi ancheElenco di proxy gratuiti (aggiornato continuamente)

►

Che cos'è un proxy?

Un proxy Internet, spesso chiamato server proxy, funge da gateway intermedio tra un utente e Internet. Quando un utente si connette a Internet tramite un proxy, le sue richieste web vengono prima inviate al server proxy. Il server proxy inoltra quindi la richiesta al sito web o alla risorsa online per conto dell'utente, utilizzando il proprio indirizzo IP. Questo processo maschera efficacemente l'indirizzo IP originale dell'utente, fornendo un livello di anonimato e facendo sembrare che sia il server proxy a effettuare la richiesta. Il sito web invia le informazioni richieste al proxy, che a sua volta le inoltra all'utente. Questo processo fondamentale di instradamento del traffico attraverso un server di terze parti è il fulcro del funzionamento dei proxy Internet.

L'utilizzo di proxy Internet offre diversi vantaggi chiave in termini di sicurezza, privacy e prestazioni. Nascondendo il vero indirizzo IP di un utente, i proxy migliorano la privacy online e possono aiutare ad aggirare le restrizioni geografiche sui contenuti. In ambito aziendale o organizzativo, i proxy vengono spesso utilizzati come firewall e filtri web per controllare l'utilizzo di Internet e bloccare l'accesso a siti web dannosi o inappropriati. Possono anche migliorare le prestazioni di rete memorizzando nella cache (memorizzazione) le pagine web a cui si accede di frequente, consentendo un accesso più rapido alle richieste successive. Nel complesso, fungendo da intermediario, un server proxy offre a utenti e organizzazioni un maggiore controllo sul proprio traffico Internet, rafforzando sicurezza e privacy.

Livelli di "qualità" dei proxy aperti

I proxy aperti sono classificati in diversi livelli di "qualità" in base al grado di anonimato che forniscono all'utente. Questi livelli sono determinati dal modo in cui il server proxy gestisce l'indirizzo IP del client e altre informazioni identificative quando inoltra le richieste a un server web. I tre livelli principali di proxy aperti, distinti dal loro anonimato, sono Elite Proxy, Anonymous Proxy e Transparent Proxy.

Si noti che quanto descritto di seguito sono le consuete caratteristiche e comportamenti definiti (quando non ci sono errori, né trucchi particolari, né caratteristiche dannose…).

1. Proxy d'élite Livello 1 – Elevato anonimato Spesso definiti proxy ad alto anonimato, i proxy Elite offrono il massimo livello di privacy. Quando si utilizza un proxy Elite, il server di destinazione non può rilevare l'utilizzo di un proxy. Questi proxy non devono inoltrare alcuna informazione che possa identificare l'utente, come l'indirizzo IP originale. Questo obiettivo viene raggiunto eliminando tutte le intestazioni identificative dalla richiesta dell'utente. Nasconde il tuo indirizzo IP: il server di destinazione non dovrebbe ricevere il tuo vero indirizzo IP. Nasconde il fatto che stai utilizzando un proxy: il server non può dire che la richiesta proviene da un proxy. Nessuna intestazione identificativa: intestazioni come `X-Forwarded-For` e `Via` non vengono inviate al server di destinazione.

2. Proxy anonimi Livello 2 – Anonimato medio I proxy anonimi, noti anche come proxy distorti, garantiscono un livello di anonimato moderato. Nascondono efficacemente il tuo vero indirizzo IP al server di destinazione, ma rivelano che la richiesta viene effettuata tramite un proxy. Questo avviene in genere aggiungendo un'intestazione `Via` alla richiesta o inviando l'indirizzo IP del proxy nell'intestazione `X-Forwarded-For`.* Nasconde il tuo indirizzo IP: il server di destinazione vede l'indirizzo IP del proxy, non il tuo. Si identifica come proxy: il server è a conoscenza del fatto che è in uso un proxy. Potrebbe essere bloccato: alcuni siti web potrebbero limitare l'accesso da parte di proxy anonimi noti.

3. Proxy trasparenti Livello 3 – Nessun anonimato I proxy trasparenti, chiamati anche “intercettare i proxy", non forniscono alcun anonimato all'utente. Trasmettono il vero indirizzo IP dell'utente nel `X-inoltrato-per` header e si identificano anche come server proxy. Questi proxy sono spesso utilizzati per memorizzare nella cache i dati per velocizzare l'accesso ai siti web visitati di frequente o dalle organizzazioni per filtrare i contenuti. Rivela il tuo vero indirizzo IP: il server di destinazione può vedere il tuo indirizzo IP effettivo. Si identifica come proxy: il server sa che è in uso un proxy. Pprincipalmente utilizzato per la memorizzazione nella cache e il filtraggio: il loro scopo principale non è quello di garantire la privacy.

Ciascuno dei tipi di anonimato sopra menzionati può essere pubblico o privato. Per confronto: proxy privati Un proxy privato è un indirizzo IP che normalmente viene assegnato esclusivamente a un singolo utente o a un piccolo gruppo autorizzato. La tecnologia di base è la stessa degli altri proxy; può essere configurato come proxy Anonymous o Elite, la differenza sta nel modello di business: poiché sei l'unico utente, hai il controllo completo sul traffico inviato tramite quell'indirizzo IP (nota: dipende dal servizio e dalla qualità del provider): Alta velocità e affidabilità, poiché non condividi la larghezza di banda con migliaia di utenti anonimi. L'indirizzo IP può avere una cronologia pulita. Non è presente in blacklist per spam o abusi, un problema comune con i proxy aperti/pubblici. Uptime garantito e supporto da parte di un provider. Non inoltri i tuoi dati attraverso un server sconosciuto e potenzialmente dannoso. Casi d'uso principali: Attività critiche per il business e ad alto rischio. Ciò include la gestione di account di e-commerce o social media di alto valore, l'estrazione continua e su larga scala di dati per la business intelligence e qualsiasi attività automatizzata in cui prestazioni, affidabilità e una proprietà intellettuale incontaminata sono fondamentali. reputazione.

Protocolli proxy

Oltre ai livelli di anonimato (come Elite) o ai modelli di accesso (come Private), esistono diversi protocolli tecnici che definiscono il funzionamento dei proxy. Ecco una ripartizione di queste tipologie e applicazioni:

Miti sui proxy “gratuiti” e “aperti”

Le organizzazioni raramente ospitano proxy aperti su base volontaria.

Le organizzazioni non forniscono quasi mai intenzionalmente proxy "aperti" per uso pubblico a causa dei significativi rischi legali e di sicurezza che comportano. Un proxy aperto è un server che consente a qualsiasi utente Internet di instradare il proprio traffico attraverso di esso senza autenticazione. Sebbene questo possa offrire anonimato e un modo per aggirare le restrizioni geografiche per l'utente finale, per l'organizzazione che lo ospita rappresenta una seria minaccia.

La stragrande maggioranza dei proxy aperti sui server aziendali è il risultato di una configurazione errata, in cui un proxy destinato all'uso interno viene accidentalmente esposto alla rete Internet pubblica.

Questi server aperti involontariamente diventano obiettivi allettanti per i malintenzionati. Possono essere sfruttati per una serie di attività illegali, tra cui nascondere l'origine di attacchi informatici, distribuire malware, inviare spam e condurre campagne di phishing. L'organizzazione il cui server viene utilizzato per questi scopi può subire una reputazione IP compromessa, con conseguente blocco del suo traffico legittimo da parte di altre reti e servizi. Inoltre, potrebbe dover affrontare conseguenze legali e costi significativi per la larghezza di banda derivanti dall'uso non autorizzato delle proprie risorse.

In casi estremamente rari e specifici, un'organizzazione potrebbe intenzionalmente utilizzare un proxy accessibile al pubblico. Un esempio significativo è la ricerca sulla sicurezza, dove un proxy aperto funge da "honeypot" per attrarre e studiare il comportamento dei criminali informatici. In passato, alcune istituzioni accademiche o no-profit potrebbero aver utilizzato proxy aperti per promuovere la libertà di Internet e aiutare gli utenti ad aggirare la censura. Tuttavia, a causa dell'elevato potenziale di abuso e dei rischi associati, questa pratica è ormai praticamente obsoleta.

In definitiva, la presenza di un proxy aperto sul server di un'azienda è un forte indicatore di vulnerabilità di sicurezza, piuttosto che un'offerta di servizi intenzionale. I rischi di agevolare traffico anonimo e potenzialmente dannoso superano di gran lunga i benefici percepiti per l'organizzazione.

Consiglio dell'esperto: come detto sopra, può essere il risultato di una configurazione errata. Bisogna anche ricordare il famoso marketing Dire: "Se un prodotto è gratuito, allora il prodotto sei tu“. Se la tua vita si basa sull’anonimato, non affidarti ai proxy a meno che tu non ne conosca con precisione l’origine (e usa almeno il “Elite"livello descritto sopra).

Proxy aperto vs. VPN

A prima vista, proxy aperti e reti private virtuali (VPN) potrebbero sembrare simili, poiché entrambi possono mascherare il tuo indirizzo IP e reindirizzare il tuo traffico internet. Tuttavia, le differenze tecniche tra loro portano a implicazioni molto diverse per la tua sicurezza, la tua privacy e la tua libertà online. La differenza fondamentale risiede nella crittografia e nel livello a cui operano all'interno del tuo sistema.

Un proxy aperto è un server che funge da semplice intermediario per le richieste web. Quando configuri il tuo browser o un'altra applicazione per utilizzare un proxy, il traffico per quella specifica applicazione viene inviato al server proxy, che lo inoltra alla destinazione desiderata su Internet. Questo processo nasconde il tuo vero indirizzo IP ai siti web che visiti. Tuttavia, uno svantaggio tecnico cruciale della maggior parte dei proxy aperti è la mancanza di crittografia. Ciò significa che, sebbene il tuo indirizzo IP possa essere nascosto al sito web di destinazione, i dati che invii e ricevi possono essere intercettati e letti dall'operatore del server proxy o da chiunque monitori il traffico tra te e il proxy. Inoltre, i proxy operano in genere a livello applicativo (Livello 7) del modello OSI, il che significa che gestiscono solo il traffico proveniente dalle applicazioni specifiche configurate per utilizzarli, lasciando esposto il resto del traffico Internet.

Al contrario, una VPN offre una soluzione molto più robusta e sicura creando un "tunnel" crittografato per tutto il traffico internet. Quando ti connetti a una VPN, questa crittografa tutti i dati in uscita dal tuo dispositivo, non solo il traffico di una singola applicazione. Questi dati crittografati vengono quindi inviati al server VPN, che li decrittografa e li inoltra alla destinazione finale. Questo è quasi end-to-end La crittografia garantisce che il tuo provider di servizi Internet (ISP), gli amministratori di rete o gli attori malintenzionati non possano spiare le tue attività online. Tecnicamente, le VPN operano a un livello inferiore del modello OSI, in genere al livello di rete (livello 3) o al livello di collegamento dati (livello 2). Ciò consente loro di catturare e crittografare tutto il traffico di rete dal tuo dispositivo, fornendo una protezione completa.

Valutare i rischi e i benefici

La scelta tra un proxy aperto e una VPN si riduce a un compromesso tra costo, praticità e sicurezza.

Come configurare e utilizzare i proxy

La maggior parte delle applicazioni elencate di seguito utilizza la stessa configurazione tecnica di base. Innanzitutto, è necessario trovare un elenco di proxy pubblici aperti online. Questi elenchi forniranno un indirizzo IP e un numero di porta (ad esempio, `198.51.100.1:8080`). È importante conoscere il tipo di proxy utilizzato. La stragrande maggioranza dei proxy aperti sono proxy HTTP/HTTPS, che gestiscono solo il traffico web. Meno comuni sono i proxy SOCKS (solitamente SOCKS4 o SOCKS5), che possono gestire qualsiasi tipo di traffico internet (web, email, torrent, ecc.).

The same proxy setup works with chat tools too: a free irc client or an online irc client can be used behind a SOCKS proxy to join chat networks without exposing your own address.

Le istruzioni riportate di seguito si concentrano principalmente sulle versioni HTTP/HTTPS, salvo diversamente specificato:

Caso 1: Configurazione a livello di sistema (sistemi operativi)

La configurazione del proxy a livello di sistema operativo tenta di instradare tutto il traffico Internet applicabile dal computer attraverso il proxy.

Caso 2: Configurazione specifica dell'applicazione

A volte si desidera che solo un programma specifico utilizzi un proxy.

Cromo

Configurare un proxy in Google Chrome è un processo semplice, ma è importante capire che Chrome non dispone di impostazioni proxy indipendenti. Per apportare modifiche, reindirizza l'utente alle impostazioni del sistema operativo del computer. Ciò significa che quando si imposta un proxy tramite l'interfaccia di Chrome, le impostazioni verranno applicate a tutto il sistema, influenzando anche altri browser e applicazioni.

Questa procedura iniziale è la stessa sia per Windows che per macOS:

1. Apri Google Chrome.
2. Fare clic su tre punti verticali (⋮) nell'angolo in alto a destra della finestra del browser per aprire il menu.
3. Seleziona “Impostazioni” dal menu a discesa.
4. Nel menu di navigazione a sinistra, fare clic su "Sistema“.
5. Fare clic sull'opzione etichettata "Apri le impostazioni proxy del tuo computer“.

Da questo punto, Chrome aprirà la finestra di configurazione del proxy nativo del tuo sistema operativo. I passaggi saranno diversi a seconda che tu stia utilizzando Windows o macOS: devi fare riferimento ai due capitoli precedenti dedicati a Windows 10 e 11 o a macOS.

Firefox

Firefox può gestire le proprie impostazioni proxy, indipendentemente dal sistema operativo.

1. Fare clic sul pulsante del menu (tre linee orizzontali) e andare a Impostazioni.
2. Nel pannello Generale, scorrere verso il basso fino a Impostazioni di rete sezione.
3. Fare clic su Impostazioni… pulsante.
4. Seleziona il Configurazione manuale del proxy pulsante di scelta.
5. Inserisci l'indirizzo IP e la porta per Proxy HTTP.
6. Si consiglia di selezionare anche la casella "Utilizza questo proxy anche per HTTPS“.
7. In alternativa, se si dispone di un proxy SOCKS, è possibile immettere i relativi dettagli nel Host di SOCKS campo.
8. Clic OK.

Script e codice: Python `richieste` esempio

Per attività automatizzate come il web scraping, un'opzione è definire il proxy direttamente nel codice Python in questo modo:

[dm_code_snippet background=”yes” background-mobile=”yes” slim=”no” line-numbers=”no” bg-color=”#abb8c3″ theme=”dark” language=”python” wrapped=”no” height=”700px” copy-text=”Copy Code” copy-confirmed=”Copied”]

import requests

# Define the proxy server's address and port
proxy_ip_port = '198.51.100.1:8080'

# Create a dictionary specifying the proxy for both HTTP and HTTPS traffic
proxies = {
 'http': f'http://{proxy_ip_port}',
 'https': f'https://{proxy_ip_port}',
}

try:
 # The 'proxies' argument tells the requests library to send this specific request through the proxy
 response = requests.get('https://api.ipify.org?format=json', proxies=proxies, timeout=10)
 print("Request sent through proxy. My apparent IP is:", response.json()['ip'])
except requests.exceptions.ProxyError as e:
 print(f"Failed to connect to the proxy: {e}")
except requests.exceptions.RequestException as e:
 print(f"An error occurred: {e}")

[/dm_code_snippet]

20 applicazioni proxy

È fondamentale comprendere che, sebbene i proxy "aperti" siano spesso gratuiti, comportano rischi significativi, tra cui velocità ridotte, inaffidabilità e potenziale esposizione dei dati a operatori proxy sconosciuti. Per qualsiasi applicazione sensibile o commerciale, si consiglia vivamente di utilizzare un servizio proxy privato affidabile o una VPN. Tuttavia, per attività non sensibili, esistono numerose applicazioni legali per i proxy aperti.

Raccolta dati e intelligence di mercato

1. Confronto dei prezzi

Per raccogliere automaticamente informazioni sui prezzi di un prodotto specifico da decine di siti di e-commerce. Molti grandi siti di vendita al dettaglio mostrano prezzi diversi in base alla posizione geografica dell'utente o bloccano troppe richieste da un singolo indirizzo IP. I proxy consentono di aggirare questi blocchi e verificare i prezzi regionali.

In genere, questo viene fatto utilizzando uno script automatizzato (un web scraper). Lo script è configurato per ruotare un elenco di proxy aperti per ogni richiesta o dopo un certo numero di richieste, facendo sembrare che il traffico provenga da molti utenti diversi.

2. Ricerca di mercato

Raccogliere dati pubblicamente disponibili sulle tendenze di mercato, sulle attività della concorrenza e sul sentiment dei clienti da forum, siti di notizie e social media. L'utilizzo di proxy da diverse regioni può rivelare tendenze specifiche per località o la disponibilità dei prodotti.

Simile al confronto dei prezzi, questo implica il web scraping. Lo script prenderebbe di mira forum o siti web specifici e dovrebbe gestire la rotazione dei proxy per evitare di essere bloccato durante la raccolta di dati su larga scala.

3. Audit SEO e monitoraggio del posizionamento

I professionisti dell'ottimizzazione per i motori di ricerca (SEO) devono verificare il posizionamento dei loro siti web e di specifiche parole chiave sui motori di ricerca in diverse parti del mondo. Una ricerca per "miglior pizza" produrrà risultati diversi a New York rispetto a Napoli. I proxy consentono loro di simulare ricerche da qualsiasi parte del mondo.

Gli strumenti SEO (come Screaming Frog o script personalizzati) possono essere configurati con un elenco di proxy. Ogni proxy, appartenente a un Paese o a una città diversa, viene utilizzato per inviare una query al motore di ricerca e la pagina dei risultati viene salvata per l'analisi.

4. Ricerca accademica

I ricercatori in campi come le scienze sociali o la linguistica spesso hanno bisogno di raccogliere grandi quantità di dati da fonti web pubbliche (ad esempio, commenti pubblici ad articoli di notizie, discussioni nei forum). I proxy vengono utilizzati per raccogliere questi dati senza essere soggetti a limitazioni di velocità o blocchi da parte del sito web di origine.

Un ricercatore potrebbe scrivere uno script (ad esempio in Python con librerie come BeautifulSoup o Scrapy) e configurarlo in modo che utilizzi un elenco di proxy aperti per distribuire le richieste su molti indirizzi IP.

5. Aggregazione delle tariffe di viaggio

Per trovare le migliori offerte su voli e hotel. I siti web di compagnie aeree e viaggi sono noti per l'utilizzo di prezzi dinamici, che mostrano tariffe diverse in base alla posizione geografica, alla cronologia di navigazione e alla domanda. I proxy consentono agli utenti di confrontare i prezzi di diversi Paesi, il che a volte può comportare risparmi significativi.

Uno script di scraping o anche un utente manuale possono configurare il proprio browser con un proxy situato in un paese diverso per verificare prezzi più bassi. La chiave è cancellare i cookie o utilizzare una finestra di navigazione in incognito per ogni nuova verifica di posizione.

6. Aggregazione di dati pubblici

Per raccogliere grandi quantità di dati pubblici da siti web governativi, portali finanziari o servizi meteorologici, a scopo di analisi o per alimentare un'applicazione. Questi portali possono limitare il numero di chiamate o richieste API da un singolo IP.

Ciò richiede uno script automatizzato che ruoti attraverso un pool di proxy per effettuare migliaia di richieste senza raggiungere i limiti di velocità.

Test e sviluppo

7. Verifica degli annunci

Le aziende spendono ingenti somme online pubblicità e devono verificare che i loro annunci vengano visualizzati correttamente al pubblico di destinazione nelle giuste aree geografiche e che non vengano mostrati su siti web inappropriati. I proxy consentono loro di visualizzare i propri annunci come se fossero utenti residenti in quella regione di destinazione.

I servizi di verifica degli annunci pubblicitari utilizzano strumenti automatizzati che passano in rassegna i proxy in vari paesi e città. Visitano i siti web in cui dovrebbero apparire gli annunci, acquisiscono screenshot e verificano la visualizzazione dell'annuncio e il link alla landing page.

8. Test di localizzazione del sito web

Per garantire che un sito web mostri la lingua, la valuta, i contenuti e la formattazione corretti per gli utenti di diversi Paesi, uno sviluppatore negli Stati Uniti può utilizzare un proxy in Giappone per vedere esattamente ciò che vedrebbe un utente giapponese.

Un tester o uno sviluppatore addetto al controllo qualità (QA) configura manualmente il proprio browser con un proxy del Paese di destinazione. Quindi naviga sul sito web per verificare la presenza di errori di localizzazione. Questa operazione può anche essere automatizzata con framework di test come Selenium.

9. Test delle prestazioni dell'applicazione

Per simulare il traffico proveniente da posizioni geograficamente diverse per vedere come si comporta un'applicazione web o un sito web sotto un carico distribuito. Questo aiuta a identificare i colli di bottiglia e garantisce un buon esperienza utente per un pubblico globale.

Gli strumenti di test del carico (come JMeter o Gatling) possono essere configurati per instradare il traffico utente simulato attraverso un elenco di diversi proxy aperti, creando uno scenario di carico globale più realistico.

10. Test delle applicazioni mobili

Per testare il funzionamento di un'app mobile in diverse condizioni di rete e da diverse posizioni geografiche. Questo aiuta a garantire che le API e le reti di distribuzione dei contenuti dell'app funzionino correttamente per una base di utenti globale.

Un dispositivo mobile è configurato per utilizzare un proxy. Sia su Android che su iOS, è possibile accedere alle impostazioni Wi-Fi di una rete specifica e configurare manualmente un proxy HTTP inserendo l'IP e la porta del server proxy aperto.

Sicurezza e privacy

11. Ricerca sulla sicurezza informatica (Honeypot)

I ricercatori di sicurezza impostano intenzionalmente proxy aperti come "honeypot". Questi server attraggono malintenzionati che li utilizzano per lanciare attacchi. Registrando tutto il traffico che li attraversa, i ricercatori possono studiare nuovi metodi di attacco e malware in modo controllato.

Questo è un caso d'uso avanzato. Un ricercatore configurerebbe un server con software proxy e registrazione estesa. Il server viene intenzionalmente lasciato aperto e il suo IP viene spesso pubblicato in chiave pubblica liste per attirare gli aggressori.

12. Aggirare la censura per l'accesso alle informazioni

Per giornalisti, ricercatori e cittadini di regioni con una forte censura di Internet, un proxy aperto può rappresentare un'ancora di salvezza per accedere a siti di notizie globali bloccati, social media e altre risorse informative.

Un utente configurerebbe il proprio browser web con l'indirizzo di un proxy aperto situato in un paese privo di tale censura. Questo gli consentirebbe di aggirare i filtri della propria rete locale.

13. Tutela del marchio e applicazione del marchio

Per scansionare Internet, compresi i mercati online e i forum in diversi paesi, alla ricerca di merci contraffatte, contenuti piratati o usi non autorizzati di un'azienda logo e marchi commerciali.

Si tratta di web crawler automatizzati configurati per utilizzare proxy specifici per ogni Paese per accedere alle versioni locali dei più diffusi siti di e-commerce e aste, al fine di identificare le inserzioni che violano i diritti d'autore.

14. Ricognizione tramite test di penetrazione

Nella fase iniziale e non intrusiva di un audit di sicurezza (penetration test), un professionista della sicurezza potrebbe utilizzare proxy aperti per sondare i server pubblici di un cliente. Questo aiuta a testare le capacità di rilevamento e registrazione del cliente senza rivelare l'indirizzo IP del tester.

Gli strumenti di sicurezza utilizzati per la ricognizione possono essere configurati per instradare il traffico attraverso una catena di proxy. Questo viene spesso fatto utilizzando uno strumento come `proxychains` su un sistema Linux.

15. Test delle regole del firewall

Un amministratore di rete può utilizzare un proxy aperto esterno per verificare se il firewall della propria organizzazione è configurato correttamente. Tentando di accedere alla propria rete dal proxy, può verificare che le regole progettate per bloccare il traffico da determinate posizioni o di determinate tipologie funzionino come previsto.

L'amministratore configurerebbe una macchina esterna alla propria rete (ad esempio un server cloud) per utilizzare un proxy aperto, quindi tenterebbe di connettersi ai servizi all'interno della propria rete.

Social media e contenuti

16. Gestire più account di social media

I social media manager o le agenzie di marketing che gestiscono più account per clienti diversi su piattaforme come Instagram o X (ex Twitter) utilizzano i proxy per evitare di essere segnalati per attività sospette. L'accesso a più account da un unico indirizzo IP può comportare un ban.

Utilizzano un software specializzato per la gestione dei social media che consente di assegnare un proxy diverso a ciascun account. In questo modo, sembra che ogni account venga gestito da una postazione separata.

17. Accesso ai contenuti con restrizioni geografiche

Per accedere a contenuti in streaming, articoli di notizie o video la cui visione è legalmente gratuita ma è limitata a un Paese specifico. Ad esempio, guardare una trasmissione su BBC iPlayer, disponibile solo per gli utenti nel Regno Unito.

Un utente al di fuori del Regno Unito troverebbe un proxy aperto situato nel Regno Unito e configurerebbe il proprio browser per utilizzarlo, facendo così apparire ai server della BBC che si trovano nella posizione corretta.

18. Monitoraggio delle recensioni online

Le aziende raccolgono e analizzano le recensioni dei clienti da numerosi siti web (come Yelp, Google Maps, TripAdvisor) per sondare l'opinione pubblica. I proxy aiutano ad automatizzare questo processo senza che l'IP dello scraper venga bloccato.

Uno script viene utilizzato per visitare un elenco di pagine di recensioni. Un nuovo proxy viene utilizzato ogni poche richieste per evitare CAPTCHA e blocchi IP.

19. Aggregazione di annunci immobiliari

Per raccogliere dati sugli annunci immobiliari da vari siti web immobiliari per analisi di mercato, scopi di investimento o per creare un meta-motore di ricerca.

Si tratta di un'altra applicazione di web scraping in cui è essenziale scorrere un elenco di proxy aperti per raccogliere un ampio volume di annunci senza essere bloccati dai siti immobiliari di destinazione.

20. Aggirare le restrizioni della rete locale

A volte studenti o dipendenti utilizzano proxy aperti per accedere a siti web (come social media, notizie o email personali) bloccati sulla rete scolastica o aziendale. Questo utilizzo deve essere conforme alla politica di utilizzo accettabile dell'organizzazione.

L'utente configura il proxy direttamente nel sistema operativo o nelle impostazioni del browser del proprio dispositivo per bypassare il sistema di filtraggio della rete locale.

Conclusione

I proxy forniscono un meccanismo fondamentale per disaccoppiare una richiesta digitale dalla sua origine fisica, una capacità che funge da fattore abilitante fondamentale per l'ingegneria e la scienza moderne, basate sull'uso intensivo di dati. Ciò consente a ricercatori e sviluppatori di raccogliere sistematicamente informazioni globali e convalidare sistemi distribuiti in un modo che altrimenti sarebbe impraticabile o impossibile.

The choice between using a volatile open proxy versus a managed private one is therefore a critical decision, governed by the same principles of valutazione del rischio and resource allocation inherent to any scientific endeavor. While open versions offer a zero-cost entry point for exploratory or non-sensitive tasks, a more stable and secure proxy infrastructure becomes an essential investment for any project where the reliability of the process and the integrity of the results are non-negotiable.

Argomenti correlati

• Protocolli di sicurezza di rete: comprendere protocolli come SSL/TLS per la trasmissione sicura dei dati.
• Tecniche di bilanciamento del carico: metodi per distribuire in modo efficiente il traffico di rete su più server.
• Reti per la distribuzione di contenuti (CDN): utilizzando CDN per migliorare la velocità e l'affidabilità della distribuzione dei contenuti.
• Metodi di crittografia dei dati: tecniche di crittografia dei dati per proteggere le informazioni sensibili durante la trasmissione.
• Reti private virtuali (VPN): esplorare l'uso delle VPN per l'accesso remoto sicuro e la protezione dei dati.
• Tecniche di web scraping: metodi per estrarre dati dai siti web, spesso utilizzati insieme ai proxy.
• Tecniche di anonimizzazione: strategie per mascherare l'identità e la posizione degli utenti online.
• Strumenti di monitoraggio delle prestazioni: strumenti e metodi per monitorare le prestazioni dei proxy e dei servizi correlati.
• Progettazione della topologia di rete: progettazione di strutture di rete efficienti per ottimizzare il flusso di dati e ridurre la latenza.
• Qualità del servizio (QoS): tecniche per dare priorità a determinati tipi di traffico di rete per garantire le prestazioni.
• Architettura dei sistemi distribuiti: comprendere i principi di creazione di sistemi distribuiti scalabili e resilienti.
• Conformità normativa nel trattamento dei dati: comprendere le leggi e le normative che regolano la privacy e l'utilizzo dei dati.

Glossario dei termini utilizzati

Application Programming Interface (API): un insieme di regole e protocolli che consente a diverse applicazioni software di comunicare e interagire tra loro, consentendo l'integrazione di funzionalità e lo scambio di dati tra sistemi.

Computed Tomography (CT): Una tecnica di imaging medico che utilizza raggi X ed elaborazione computerizzata per creare immagini trasversali del corpo, consentendo una visualizzazione dettagliata delle strutture e dei tessuti interni. Migliora le capacità diagnostiche fornendo rappresentazioni tridimensionali a partire da dati bidimensionali.

Conversion Rate (CR): the percentage of visitors to a website or landing page who complete a desired action, such as making a purchase or signing up for a newsletter, calculated by dividing the number of conversions by the total number of visitors.

Domain Name System (DNS): Un sistema gerarchico che traduce i nomi di dominio leggibili dall'uomo in indirizzi IP, consentendo ai browser di individuare e accedere alle risorse su Internet. È costituito da server che memorizzano e gestiscono i record dei nomi di dominio, facilitando l'instradamento efficiente del traffico Internet.

File Transfer Protocol (FTP): Un protocollo di rete standard utilizzato per trasferire file tra un client e un server su una rete TCP/IP, che consente comandi come upload, download, delete e rename, operando in genere sulle porte 21 e 20 rispettivamente per il controllo e il trasferimento dei dati.

Hypertext Transfer Protocol (HTTP): Un protocollo utilizzato per la trasmissione di ipertesti tramite Internet, che consente la comunicazione tra browser web e server. Definisce i formati di richiesta e risposta, facilitando il recupero di risorse web come documenti HTML, immagini e altri contenuti multimediali.

Open Source Intelligence (OSINT): Informazioni raccolte da fonti pubblicamente accessibili per produrre intelligence fruibile, spesso utilizzata in ambito di sicurezza, applicazione della legge e analisi aziendale. Le fonti includono siti web, social media, pubblicazioni e database, consentendo di ottenere informazioni senza la necessità di ricorrere a metodi occulti.

Optical Character Recognition (OCR): Una tecnologia che converte diversi tipi di documenti, come documenti cartacei scansionati o immagini, in testo leggibile da una macchina, analizzando la forma dei caratteri e traducendoli in dati digitali.

Point of Purchase (POP): una strategia di marketing che prevede espositori, segnaletica o materiali promozionali posizionati nel punto in cui il consumatore prende una decisione di acquisto, volta a influenzare gli acquisti d'impulso e a migliorare la visibilità del prodotto nei punti vendita al dettaglio.

Secure Shell (SSH): Un protocollo di rete che consente l'accesso e la gestione remota sicura dei dispositivi su una rete non protetta, utilizzando la crittografia per la trasmissione, l'autenticazione e l'integrità dei dati. In genere supporta l'accesso tramite interfaccia a riga di comando e il trasferimento di file attraverso canali sicuri.

Surface-Mount Technology (SMT): Un metodo per assemblare componenti elettronici direttamente sulla superficie di circuiti stampati, che consente una maggiore densità e una riduzione delle dimensioni dei dispositivi. Utilizza pasta saldante e tecniche di saldatura a rifusione per il fissaggio dei componenti. È ottimizzato per l'assemblaggio automatico ad alta velocità, sebbene sia possibile anche l'assemblaggio manuale.

Toyota Production System (TPS): una metodologia di produzione che enfatizza la riduzione degli sprechi, il miglioramento continuo e l'efficienza del flusso di produzione, utilizzando tecniche come Just-In-Time e Jidoka per migliorare la qualità e l'efficienza operativa.

Transmission Control Protocol (TCP): Un protocollo fondamentale della suite di protocolli Internet che garantisce la trasmissione affidabile, ordinata e priva di errori dei dati tra le applicazioni su una rete. Stabilisce le connessioni, gestisce il flusso di dati e si occupa delle ritrasmissioni in caso di perdita di pacchetti.

Uniform Resource Locator (URL): Un riferimento a una risorsa su Internet, costituito da un identificatore di protocollo, un nome di dominio e, facoltativamente, parametri di percorso o di query, che consente l'accesso a pagine web, file o servizi.

User experience (UX): la soddisfazione complessiva e la percezione di un utente quando interagisce con un prodotto, un sistema o un servizio, comprendendo usabilità, accessibilità, design e risposta emotiva durante l'intero processo di interazione.

User Datagram Protocol (UDP): Un protocollo di livello di trasporto senza connessione che consente la trasmissione di datagrammi senza stabilire una connessione, fornendo servizi minimi di ripristino degli errori. È adatto per applicazioni che richiedono un trasferimento dati rapido ed efficiente, come lo streaming e i giochi online, dove la velocità è prioritaria rispetto all'affidabilità.

Virtual Private Network (VPN): un metodo di connessione sicuro che crittografa il traffico Internet e maschera l'indirizzo IP dell'utente, consentendo l'accesso remoto a reti private tramite reti pubbliche, mantenendo al contempo la privacy e l'integrità dei dati.

Voice Over IP (VoIP): Una tecnologia che consente la comunicazione vocale e sessioni multimediali su reti IP (Internet Protocol), consentendo agli utenti di effettuare chiamate telefoniche utilizzando Internet a banda larga anziché le tradizionali linee telefoniche. Converte i segnali audio in pacchetti di dati digitali per la trasmissione.