[{"data":1,"prerenderedAt":-1},["ShallowReactive",2],{"blog-post-pl-got-scraping-nodejs-proxy":3},{"success":4,"payload":5,"related":60,"errors":124},true,{"id":6,"slug":7,"title":8,"excerpt":9,"body_html":10,"meta_title":11,"meta_description":12,"canonical_url":13,"canonical_override":14,"og_title":11,"og_description":15,"og_image_url":16,"faq_json":17,"key_takeaways":14,"allow_index":4,"noindex_google_only":27,"allow_follow":4,"published_at":28,"updated_at":28,"content_updated_at":29,"featured_image_url":30,"featured_image_alt":31,"card_image_url":32,"reading_time_minutes":33,"author":34,"categories":38,"tags":45,"alternates":46,"locale_paths":54,"views":59},176,"got-scraping-nodejs-proxy","got-scraping w Node.js: kompletny przewodnik po proxy i header generator","got-scraping to biblioteka HTTP dla Node.js oparta na got, zaprojektowana do scrapingu. Dowiedz się, jak łączyć ją z residential proxy ProxyHat, konfigurować header generator i unikać blokad na dużą skalę.","\u003Cp>Jeśli scrapujesz w Node.js od dłuższego czasu, pewnie spotkałeś się z sytuacją: żądanie \u003Ccode>got\u003C\u002Fcode> lub \u003Ccode>axios\u003C\u002Fcode> działa lokalnie, a na produkcji dostaje \u003Cstrong>403 Forbidden\u003C\u002Fstrong> albo \u003Cstrong>429 Too Many Requests\u003C\u002Fstrong> po kilkudziesięciu odpytaniach. Biblioteka got-scraping w Node.js powstała właśnie po to, aby rozwiązać ten problem — to rozszerzenie \u003Ccode>got\u003C\u002Fcode> z wbudowanym generatorem nagłówków przeglądarki, obsługą HTTP\u002F2 i prostą konfiguracją proxy. W tym przewodniku pokazujemy, jak zintegrować ją z residential proxy ProxyHat i zbudować pipeline scrapingu, który działa na dużą skalę.\u003C\u002Fp>\n\u003Cp>Zanim jednak przejdziemy do kodu, ważna uwaga prawna: ten artykuł dotyczy wyłącznie danych publicznie dostępnych. Scraping może naruszać \u003Ca href=\"https:\u002F\u002Fen.wikipedia.org\u002Fwiki\u002FComputer_Fraud_and_Abuse_Act\" rel=\"noopener noreferrer\">Computer Fraud and Abuse Act (CFAA)\u003C\u002Fa> oraz RODO\u002FGDPR, jeśli dotyczy danych osobowych. Zawsze sprawdzaj \u003Ccode>robots.txt\u003C\u002Fcode>, regulaminy serwisów i preferuj oficjalne API, gdy jest dostępne.\u003C\u002Fp>\n\n\u003Ch2>Dlaczego zwykłe żądania got\u002Faxios zostają zablokowane\u003C\u002Fh2>\n\n\u003Cp>Systemy anty-bot nie opierają się już tylko na sprawdzaniu pojedynczych nagłówków. Nowoczesne rozwiązania jak Cloudflare, Akamai czy PerimeterX analizują \u003Cstrong>cały zestaw nagłówków\u003C\u002Fstrong>, ich kolejność, spójność oraz sygnaturę TLS. Dlatego zwykłe żądanie \u003Ccode>got\u003C\u002Fcode> z nagłówkiem \u003Ccode>User-Agent: Mozilla\u002F5.0...\u003C\u002Fcode> łatwo wykryć — brakuje mu nagłówków \u003Ccode>sec-ch-ua\u003C\u002Fcode>, \u003Ccode>accept-language\u003C\u002Fcode>, \u003Ccode>sec-fetch-dest\u003C\u002Fcode>, a kolejność nagłówków różni się od tej, którą wysyła prawdziwa przeglądarka.\u003C\u002Fp>\n\n\u003Cp>Ponadto biblioteki HTTP w Node.js domyślnie używają TLS opartego na OpenSSL, którego sygnatura (JA3\u002FJA4) różni się od przeglądarek Chrome czy Firefox. Nawet jeśli nagłówki wyglądają poprawnie, fingerprint TLS zdradza, że żądanie pochodzi z aplikacji, a nie z przeglądarki. got-scraping adresuje pierwszy problem — spójne nagłówki — a \u003Ca href=\"\u002Fpl\u002Fproxy\u002Fresidential\">residential proxy\u003C\u002Fa> adresuje drugi: realny adres IP z ISP.\u003C\u002Fp>\n\n\u003Cp>\u003Ca href=\"https:\u002F\u002Fdeveloper.mozilla.org\u002Fen-US\u002Fdocs\u002FWeb\u002FHTTP\u002FReference\u002FHeaders\" rel=\"noopener noreferrer\">Dokumentacja MDN o nagłówkach HTTP\u003C\u002Fa> dobrze opisuje, jak przeglądarki konstruują żądania. Zrozumienie tego mechanizmu to pierwszy krok do unikania blokad.\u003C\u002Fp>\n\n\u003Ch3>Kluczowe sygnały, które analizują systemy anty-bot\u003C\u002Fh3>\n\u003Cul>\n\u003Cli>\u003Cstrong>Kolejność nagłówków\u003C\u002Fstrong> — przeglądarki mają powtarzalny porządek; biblioteki HTTP nie zawsze.\u003C\u002Fli>\n\u003Cli>\u003Cstrong>Nagłówki sec-ch-ua\u003C\u002Fstrong> — Client Hints ujawniające wersję przeglądarki i platformę.\u003C\u002Fli>\n\u003Cli>accept-language — musi pasować do geo IP i nagłówków sec-ch-ua.\u003C\u002Fli>\n\u003Cli>Fingerprint TLS (JA3\u002FJA4) — sygnatura handshake TLS różni się między OpenSSL a przeglądarkami.\u003C\u002Fli>\n\u003Cli>Adres IP — datacenter IP (AWS, DigitalOcean) są na wielu listach blokad; residential IP nie.\u003C\u002Fli>\n\u003C\u002Ful>\n\n\u003Ch2>Czym jest got-scraping w Node.js i jak działa header generator\u003C\u002Fh2>\n\n\u003Cp>got-scraping to pakiet npm od Apify, zbudowany na bazie \u003Ccode>got\u003C\u002Fcode> v11. Dodaje dwie kluczowe funkcje dla scrapingu: \u003Ccode>useHeaderGenerator\u003C\u002Fcode> — middleware, który dla każdego żądania generuje spójny zestaw nagłówków przeglądarki — oraz obsługę proxy HTTP\u002F2. Kod źródłowy dostępny jest na \u003Ca href=\"https:\u002F\u002Fgithub.com\u002Fapify\u002Fgot-scraping\" rel=\"noopener noreferrer\">GitHubie Apify\u003C\u002Fa>.\u003C\u002Fp>\n\n\u003Cp>got scraping header generator korzysta z biblioteki \u003Ccode>header-generator\u003C\u002Fcode>, która utrzymuje bazy danych nagłówków dla Chrome, Firefox i Safari w różnych wersjach, systemach operacyjnych i urządzeniach. Zamiast ręcznie ustawiać \u003Ccode>User-Agent\u003C\u002Fcode>, przekazujesz opcje takie jak \u003Ccode>browsers: ['chrome']\u003C\u002Fcode>, \u003Ccode>devices: ['desktop']\u003C\u002Fcode>, \u003Ccode>operatingSystems: ['windows', 'macos']\u003C\u002Fcode>, a generator dobiera pasujące nagłówki — w odpowiedniej kolejności.\u003C\u002Fp>\n\n\u003Ch3>Dlaczego to ma znaczenie dla użytkowników proxy\u003C\u002Fh3>\n\u003Cp>Nagłówki muszą być spójne z adresem IP. Jeśli wysyłasz żądanie z residential IP w Niemczech, ale \u003Ccode>accept-language\u003C\u002Fcode> to \u003Ccode>en-US\u003C\u002Fcode>, system anty-bot to zauważy. got-scraping z header generatorem i residential proxy ProxyHat z geo-targetingiem tworzy spójną tożsamość: nagłówki przeglądarki + język + IP z tego samego kraju.\u003C\u002Fp>\n\n\u003Ch2>Idiomatyczne API got-scraping: got.extend, useHeaderGenerator, proxyUrl\u003C\u002Fh2>\n\n\u003Cp>got-scraping jest zaprojektowane jako rozszerzenie \u003Ccode>got\u003C\u002Fcode>, więc używa tych samych wzorców co biblioteka bazowa. Zamiast pisać hacky middleware, korzystasz z \u003Ccode>got.extend()\u003C\u002Fcode>, aby utworzyć instancję z prekonfigurowanymi opcjami. To idiomatyczne podejście \u003Ccode>got\u003C\u002Fcode> — opcje są merge'owane na poziomie instancji i pojedynczego żądania.\u003C\u002Fp>\n\n\u003Ch3>Podstawowy przykład z useHeaderGenerator\u003C\u002Fh3>\n\n\u003Cpre>\u003Ccode>import { gotScraping } from &apos;got-scraping&apos;;\n\nconst client = gotScraping.extend({\n  headerGeneratorOptions: {\n    browsers: [&apos;chrome&apos;],\n    devices: [&apos;desktop&apos;],\n    operatingSystems: [&apos;windows&apos;],\n  },\n});\n\nconst response = await client(&apos;https:\u002F\u002Fexample.com&apos;, {\n  headerGeneratorOptions: {\n    locales: [&apos;de-DE&apos;, &apos;de&apos;], \u002F\u002F nadpisz dla żądania do Niemiec\n  },\n});\nconsole.log(response.statusCode);\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Cp>Zauważ, że \u003Ccode>headerGeneratorOptions\u003C\u002Fcode> można ustawić zarówno na poziomie instancji (w \u003Ccode>got.extend\u003C\u002Fcode>), jak i na poziomie pojedynczego żądania. To idiomatyczne podejście \u003Ccode>got\u003C\u002Fcode> — opcje są merge'owane.\u003C\u002Fp>\n\n\u003Ch3>Opcja proxyUrl dla HTTP\u002F1 i HTTP\u002F2 proxy\u003C\u002Fh3>\n\u003Cp>got-scraping obsługuje \u003Ccode>proxyUrl\u003C\u002Fcode> w formacie standardowym: \u003Ccode>http:\u002F\u002Fuser:pass@host:port\u003C\u002Fcode> lub \u003Ccode>socks5:\u002F\u002Fuser:pass@host:port\u003C\u002Fcode>. Dla proxy HTTP\u002F2 got-scraping używa natywnego klienta HTTP\u002F2, co jest istotne dla stron, które wymagają HTTP\u002F2 — niektóre CDN-y odrzucają żądania HTTP\u002F1.1.\u003C\u002Fp>\n\n\u003Ch2>Integracja residential proxy ProxyHat z got-scraping\u003C\u002Fh2>\n\n\u003Cp>Gdy nagłówki i TLS wyglądają poprawnie, ostatnim sygnałem jest adres IP. Residential proxy to adresy IP przypisane do realnych ISP — wyglądają jak ruch zwykłego użytkownika, a nie serwera w chmurze. ProxyHat oferuje residential i mobile proxy z geo-targetingiem na poziomie kraju i miasta.\u003C\u002Fp>\n\n\u003Ctable>\n\u003Cthead>\n\u003Ctr>\n\u003Cth>Typ proxy\u003C\u002Fth>\n\u003Cth>Poziom wykrywalności\u003C\u002Fth>\n\u003Cth>Średnia latencja\u003C\u002Fth>\n\u003Cth>Najlepsze zastosowanie\u003C\u002Fth>\n\u003C\u002Ftr>\n\u003C\u002Fthead>\n\u003Ctbody>\n\u003Ctr>\n\u003Ctd>Datacenter\u003C\u002Ftd>\n\u003Ctd>Wysoki — IP na listach blokad\u003C\u002Ftd>\n\u003Ctd>~50ms\u003C\u002Ftd>\n\u003Ctd>API bez weryfikacji IP, testowanie\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Residential\u003C\u002Ftd>\n\u003Ctd>Niski — wygląda jak zwykły ISP\u003C\u002Ftd>\n\u003Ctd>~200–500ms\u003C\u002Ftd>\n\u003Ctd>Scraping stron, SERP, e-commerce\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Mobile\u003C\u002Ftd>\n\u003Ctd>Bardzo niski — IP operatorów komórkowych\u003C\u002Ftd>\n\u003Ctd>~300–800ms\u003C\u002Ftd>\n\u003Ctd>Trudne cele, social media\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003C\u002Ftbody>\n\u003C\u002Ftable>\n\n\u003Cp>Dla got-scraping w Node.js, residential proxy ProxyHat to naturalny wybór. Konfiguracja sprowadza się do ustawienia \u003Ccode>proxyUrl\u003C\u002Fcode> z odpowiednim username zawierającym flagi geo i sesji.\u003C\u002Fp>\n\n\u003Ch3>Format połączenia ProxyHat\u003C\u002Fh3>\n\u003Cpre>\u003Ccode>\u002F\u002F HTTP proxy — domyślny port 8080\nconst proxyUrl = &apos;http:\u002F\u002Fuser-country-US:PASSWORD@gate.proxyhat.com:8080&apos;;\n\n\u002F\u002F HTTP proxy z sesją sticky i geo na poziomie miasta\nconst proxyUrlDE = &apos;http:\u002F\u002Fuser-country-DE-region-state_of_berlin-city-berlin-sid-abc123:PASSWORD@gate.proxyhat.com:8080&apos;;\n\n\u002F\u002F SOCKS5 proxy — port 1080\nconst socks5Url = &apos;socks5:\u002F\u002Fuser-country-US-sid-abc123:PASSWORD@gate.proxyhat.com:1080&apos;;\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Cp>Flagi w username pozwalają kontrolować rotację i geo-targeting: \u003Ccode>country-XX\u003C\u002Fcode> wybiera kraj, \u003Ccode>city-xxx\u003C\u002Fcode> miasto, a \u003Ccode>sid-xxx\u003C\u002Fcode> utrzymuje ten sam IP dla kolejnych żądań w ramach sesji. Pełną listę lokalizacji znajdziesz na stronie \u003Ca href=\"\u002Fpl\u002Flocations\">lokalizacji ProxyHat\u003C\u002Fa>.\u003C\u002Fp>\n\n\u003Ch2>Przykład Node.js: rotacja sesji residential z hookami retry\u003C\u002Fh2>\n\n\u003Cp>Poniższy przykład pokazuje pełny, uruchomieniowy pipeline: generator nagłówków, rotacja sesji per żądanie, hooki retry i obsługa błędów. To wzorzec, który możesz skopiować do projektu.\u003C\u002Fp>\n\n\u003Cpre>\u003Ccode>import { gotScraping } from &apos;got-scraping&apos;;\nimport { randomUUID } from &apos;crypto&apos;;\nimport pLimit from &apos;p-limit&apos;;\n\nconst PROXYHAT_GATEWAY = &apos;gate.proxyhat.com&apos;;\nconst PROXYHAT_PORT = 8080;\nconst PROXYHAT_USER = &apos;user&apos;;\nconst PROXYHAT_PASS = &apos;twoje_haslo&apos;;\n\nfunction buildProxyUrl(country = &apos;US&apos;, session = randomUUID()) {\n  const username = `${PROXYHAT_USER}-country-${country}-sid-${session}`;\n  return `http:\u002F\u002F${username}:${PROXYHAT_PASS}@${PROXYHAT_GATEWAY}:${PROXYHAT_PORT}`;\n}\n\nconst client = gotScraping.extend({\n  headerGeneratorOptions: {\n    browsers: [&apos;chrome&apos;],\n    devices: [&apos;desktop&apos;],\n    operatingSystems: [&apos;windows&apos;, &apos;macos&apos;],\n  },\n  retry: {\n    limit: 3,\n    statusCodes: [403, 429, 500, 502, 503],\n  },\n  hooks: {\n    beforeRequest: [\n      (options) =&gt; {\n        \u002F\u002F Rotacja sesji per żądanie — nowy IP\n        options.proxyUrl = buildProxyUrl(&apos;US&apos;);\n      },\n    ],\n    beforeRetry: [\n      (options, error, retryCount) =&gt; {\n        console.log(`Retry ${retryCount} po ${error.code} — nowa sesja proxy`);\n        options.proxyUrl = buildProxyUrl(&apos;US&apos;);\n      },\n    ],\n  },\n  timeout: { request: 30000 },\n});\n\nasync function scrape(urls) {\n  const limit = pLimit(10); \u002F\u002F max 10 równoległych żądań\n  const results = await Promise.allSettled(\n    urls.map((url) =&gt; limit(() =&gt; client(url).then((r) =&gt; r.body)))\n  );\n  return results;\n}\n\nconst urls = [\n  &apos;https:\u002F\u002Fexample.com\u002Fpage1&apos;,\n  &apos;https:\u002F\u002Fexample.com\u002Fpage2&apos;,\n  &apos;https:\u002F\u002Fexample.com\u002Fpage3&apos;,\n];\n\nconst results = await scrape(urls);\nresults.forEach((r, i) =&gt; {\n  if (r.status === &apos;fulfilled&apos;) {\n    console.log(`URL ${i}: ${r.value.length} bajtów`);\n  } else {\n    console.error(`URL ${i}: ${r.reason.message}`);\n  }\n});\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Cp>Kluczowe elementy tego przykładu:\u003C\u002Fp>\n\u003Cul>\n\u003Cli>beforeRequest hook — ustawia nowy \u003Ccode>proxyUrl\u003C\u002Fcode> z unikalną sesją dla każdego żądania, co wymusza rotację IP.\u003C\u002Fli>\n\u003Cli>beforeRetry hook — przy ponowieniu generuje nową sesję, aby ominąć IP, które zostało zablokowane.\u003C\u002Fli>\n\u003Cli>p-limit — ogranicza współbieżność do 10 żądań, zapobiegając przeciążeniu proxy i celu.\u003C\u002Fli>\n\u003Cli>retry — konfiguracja \u003Ccode>got\u003C\u002Fcode> z kodami statusów typowymi dla blokad anty-bot.\u003C\u002Fli>\n\u003C\u002Ful>\n\n\u003Ch2>Wzorce produkcyjne: retry, afterResponse, cookie jars, Crawlee\u003C\u002Fh2>\n\n\u003Ch3>Cookie jar dla sesji logowania\u003C\u002Fh3>\n\u003Cp>Jeśli strona wymaga sesji (koszyk, logowanie), użyj \u003Ccode>tough-cookie\u003C\u002Fcode> z \u003Ccode>got\u003C\u002Fcode>. got-scraping obsługuje cookie jar natywnie:\u003C\u002Fp>\n\n\u003Cpre>\u003Ccode>import { gotScraping } from &apos;got-scraping&apos;;\nimport { CookieJar } from &apos;tough-cookie&apos;;\n\nconst cookieJar = new CookieJar();\n\nconst client = gotScraping.extend({\n  cookieJar,\n  headerGeneratorOptions: {\n    browsers: [&apos;chrome&apos;],\n    devices: [&apos;desktop&apos;],\n    operatingSystems: [&apos;macos&apos;],\n  },\n  hooks: {\n    beforeRequest: [\n      (options) =&gt; {\n        options.proxyUrl = buildProxyUrl(&apos;US&apos;, &apos;persistent-sid-001&apos;);\n      },\n    ],\n  },\n});\n\n\u002F\u002F Pierwsze żądanie — strona ustawia cookies\nawait client(&apos;https:\u002F\u002Fexample.com\u002Flogin&apos;);\n\n\u002F\u002F Drugie żądanie — cookies są wysyłane automatycznie\nconst dashboard = await client(&apos;https:\u002F\u002Fexample.com\u002Fdashboard&apos;);\nconsole.log(dashboard.body);\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Cp>W tym przypadku używamy sticky session (\u003Ccode>session-persistent-sid-001\u003C\u002Fcode>), aby utrzymać ten sam IP przez całą sesję logowania. Rotacja IP w trakcie sesji może wywołać flagę bezpieczeństwa.\u003C\u002Fp>\n\n\u003Ch3>afterResponse hook do logowania i metryk\u003C\u002Fh3>\n\u003Cpre>\u003Ccode>const client = gotScraping.extend({\n  hooks: {\n    afterResponse: [\n      (response, retryWithMergedOptions) =&gt; {\n        const url = response.url;\n        const status = response.statusCode;\n        const elapsed = response.timings?.phases?.total ?? 0;\n        console.log(`${status} ${url} — ${elapsed}ms`);\n\n        \u002F\u002F Jeśli 403, spróbuj z nowym proxy i nagłówkami\n        if (status === 403) {\n          return retryWithMergedOptions({\n            proxyUrl: buildProxyUrl(&apos;US&apos;),\n            headerGeneratorOptions: {\n              browsers: [&apos;firefox&apos;],\n              devices: [&apos;desktop&apos;],\n              operatingSystems: [&apos;windows&apos;],\n            },\n          });\n        }\n        return response;\n      },\n    ],\n  },\n});\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Ch3>Skalowanie z Crawlee CheerioCrawler\u003C\u002Fh3>\n\u003Cp>Dla większych projektów rozważ \u003Ca href=\"https:\u002F\u002Fcrawlee.dev\u002Fjs\u002Fdocs\u002Fquick-start\" rel=\"noopener noreferrer\">Crawlee\u003C\u002Fa> — framework Apify, który integruje got-scraping z kolejką żądań, routerem i automatycznym retry. \u003Ccode>CheerioCrawler\u003C\u002Fcode> używa got-scraping pod spodem:\u003C\u002Fp>\n\n\u003Cpre>\u003Ccode>import { CheerioCrawler } from &apos;crawlee&apos;;\n\nconst crawler = new CheerioCrawler({\n  requestHandler: async ({ $, request }) =&gt; {\n    const title = $(&apos;title&apos;).text();\n    console.log(`${request.url}: ${title}`);\n  },\n  proxyConfiguration: {\n    proxyUrls: [\n      &apos;http:\u002F\u002Fuser-country-US-sid-s1:pass@gate.proxyhat.com:8080&apos;,\n    ],\n  },\n  maxConcurrency: 20,\n  maxRequestRetries: 3,\n  useHeaderGenerator: true,\n  headerGeneratorOptions: {\n    browsers: [&apos;chrome&apos;],\n    devices: [&apos;desktop&apos;],\n    operatingSystems: [&apos;windows&apos;, &apos;macos&apos;],\n  },\n});\n\nawait crawler.run([&apos;https:\u002F\u002Fexample.com&apos;]);\n\u003C\u002Fcode>\u003C\u002Fpre>\n\n\u003Cp>Crawlee automatycznie zarządza kolejką, retry, współbieżnością i proxy rotation. To najbardziej produkcyjne podejście do scrapingu w Node.js. Więcej o przypadkach użycia przeczytasz na stronie \u003Ca href=\"\u002Fpl\u002Fuse-cases\u002Fweb-scraping\">web scraping\u003C\u002Fa> ProxyHat.\u003C\u002Fp>\n\n\u003Ch2>Kiedy headless browser jest niezbędny i etyka scrapingu\u003C\u002Fh2>\n\n\u003Cp>got-scraping rozwiązuje problem nagłówków i proxy, ale nie wykonuje JavaScript. Strony, które renderują treść przez SPA (React, Vue) lub używają zaawansowanych skryptów anty-bot (Arkose Labs, reCAPTCHA v3), mogą wymagać headless browser — Playwright lub Puppeteer. Crawlee oferuje \u003Ccode>PlaywrightCrawler\u003C\u002Fcode> jako następny krok, gdy \u003Ccode>CheerioCrawler\u003C\u002Fcode> nie wystarcza.\u003C\u002Fp>\n\n\u003Cp>Koszt jest jednak realny: headless Chrome zużywa ~150–300 MB RAM na instancję i jest 10–50x wolniejszy niż żądanie HTTP. Dlatego warto zacząć od got-scraping i przejść na browser tylko gdy konieczne.\u003C\u002Fp>\n\n\u003Ch3>Etyka i legalność\u003C\u002Fh3>\n\u003Cul>\n\u003Cli>Publiczne dane tylko — nie scrapuj treści za loginem bez zgody.\u003C\u002Fli>\n\u003Cli>Honoruj robots.txt — sprawdź \u003Ccode>\u002Frobots.txt\u003C\u002Fcode> i respektuj dyrektywy.\u003C\u002Fli>\n\u003Cli>Stosuj rate limiting — nie wysyłaj więcej niż 1 żądania\u002Fsekundę do małych serwisów.\u003C\u002Fli>\n\u003Cli>Preferuj API — wiele serwisów oferuje oficjalne API z dokumentacją.\u003C\u002Fli>\n\u003Cli>RODO\u002FGDPR — dane osobowe podlegają regulacji; zapoznaj się z \u003Ca href=\"https:\u002F\u002Fgdpr.eu\u002F\" rel=\"noopener noreferrer\">przewodnikiem GDPR.eu\u003C\u002Fa>.\u003C\u002Fli>\n\u003C\u002Ful>\n\n\u003Cp>Więcej o strategiach scrapingu SERP znajdziesz na stronie \u003Ca href=\"\u002Fpl\u002Fuse-cases\u002Fserp-tracking\">SERP tracking\u003C\u002Fa>, a cennik residential proxy na stronie \u003Ca href=\"\u002Fpl\u002Fpricing\">cennika ProxyHat\u003C\u002Fa>. Dokumentację techniczną ProxyHat znajdziesz na \u003Ca href=\"https:\u002F\u002Fdocs.proxyhat.com\u002F\" rel=\"noopener noreferrer\">docs.proxyhat.com\u003C\u002Fa>.\u003C\u002Fp>\n\n\u003Ch2>Najważniejsze wnioski\u003C\u002Fh2>\n\u003Cblockquote>\n\u003Cp>got-scraping w Node.js rozwiązuje problem nagłówków przeglądarki i obsługi proxy HTTP\u002F2, a residential proxy ProxyHat rozwiązuje problem adresu IP. Razem tworzą pipeline scrapingu, który jest trudny do wykrycia i łatwy do skalowania.\u003C\u002Fp>\n\u003C\u002Fblockquote>\n\n\u003Cul>\n\u003Cli>Header generator — używaj \u003Ccode>headerGeneratorOptions\u003C\u002Fcode> w \u003Ccode>got.extend\u003C\u002Fcode> zamiast ręcznych nagłówków.\u003C\u002Fli>\n\u003Cli>Residential proxy — ustaw \u003Ccode>proxyUrl\u003C\u002Fcode> z \u003Ccode>gate.proxyhat.com:8080\u003C\u002Fcode> i flagami geo\u002Fsesji w username.\u003C\u002Fli>\n\u003Cli>Rotacja sesji — generuj unikalne \u003Ccode>sid-xxx\u003C\u002Fcode> w hooku \u003Ccode>beforeRequest\u003C\u002Fcode> dla per-request IP rotation.\u003C\u002Fli>\n\u003Cli>Retry — konfiguruj \u003Ccode>retry.statusCodes\u003C\u002Fcode> z 403, 429 i hook \u003Ccode>beforeRetry\u003C\u002Fcode> z nowym proxy.\u003C\u002Fli>\n\u003Cli>Współbieżność — używaj \u003Ccode>p-limit\u003C\u002Fcode> lub \u003Ccode>maxConcurrency\u003C\u002Fcode> w Crawlee, aby uniknąć przeciążenia.\u003C\u002Fli>\n\u003Cli>Skalowanie — dla dużych projektów przejdź na Crawlee \u003Ccode>CheerioCrawler\u003C\u002Fcode>.\u003C\u002Fli>\n\u003C\u002Ful>","got-scraping w Node.js: proxy i header generator | ProxyHat","Kompletny przewodnik po got-scraping w Node.js: konfiguracja header generatora, integracja residential proxy ProxyHat i wzorce produkcyjne. Poznaj najlepsze praktyki.","\u002Fpl\u002Fblog\u002Fgot-scraping-nodejs-proxy",null,"Kompletny przewodnik po got-scraping w Node.js: konfiguracja header generatora, integracja residential proxy i wzorce produkcyjne.","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fgot-scraping-nodejs-proxy-og.webp",[18,21,24],{"question":19,"answer":20},"Dlaczego got-scraping w Node.js jest ważny dla użytkowników proxy?","got-scraping rozwiązuje problem nagłówków, a proxy rozwiązuje problem adresu IP. Systemy anty-bot analizują oba sygnały: jeśli nagłówki mówią Chrome na Windows, a IP to datacenter AWS, żądanie zostaje zablokowane. got-scraping z residential proxy tworzy spójną tożsamość — nagłówki, język i IP pasują do siebie, co dramatycznie zmniejsza wskaźnik blokad i pozwala skalować scraping.",{"question":22,"answer":23},"Który typ proxy najlepiej działa z got-scraping w Node.js?","Residential proxy są najlepsze dla scrapingu stron internetowych z got-scraping, ponieważ adresy IP pochodzą od realnych ISP i nie są na listach blokad datacenter. Mobile proxy są jeszcze trudniejsze do wykrycia, ale droższe i wolniejsze (~300–800ms). Datacenter proxy nadają się do API bez weryfikacji IP, ale większość stron z anty-bot je zablokuje. Dla większości zastosowań residential to optymalny kompromis między wykrywalnością a kosztem.",{"question":25,"answer":26},"Jak unikać blokad implementując got-scraping w Node.js?","Po pierwsze, używaj headerGeneratorOptions z odpowiednimi browsers, devices i operatingSystems zamiast ręcznych nagłówków. Po drugie, łącz się przez residential proxy z geo-targetingiem dopasowanym do accept-language. Po trzecie, rotuj sesje (session-xxx) w hooku beforeRequest, aby każde żądanie miało nowy IP. Po czwarte, ogranicz współbieżność p-limit i konfiguruj retry z kodami 403 i 429, a w beforeRetry generuj nową sesję proxy.",false,"2026-08-04T16:05:06+00:00","2026-11-17T09:21:32+00:00","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fgot-scraping-nodejs-proxy-master.webp","got-scraping in Node.js: A Developer's Guide with Residential Proxies","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fgot-scraping-nodejs-proxy-card.webp",12,{"name":35,"slug":36,"bio":37,"avatar_url":14,"website_url":14,"social_links":14},"ProxyHat Team","proxyhat-team","The ProxyHat editorial team covers proxies, web scraping, and data extraction.",[39],{"id":40,"slug":41,"name":42,"description":14,"meta_title":43,"meta_description":44,"parent_id":14},4,"developer-guides","Przewodniki dla programistów","Przewodniki dla programistów 124; ProxyHat Blog","Poradniki kodowe i przewodniki SDK do integracji proxy z aplikacjami.",[],{"ru":47,"en":48,"zh":49,"it":50,"fr":51,"pl":13,"ko":52,"ja":53,"x-default":48},"\u002Fru\u002Fblog\u002Fgot-scraping-nodejs-residential-proxies","\u002Fblog\u002Fgot-scraping-nodejs-residential-proxies","\u002Fcn\u002Fblog\u002Fgot-scraping-nodejs-proxy-guide","\u002Fit\u002Fblog\u002Fguida-got-scraping-nodejs-proxy","\u002Ffr\u002Fblog\u002Fgot-scraping-nodejs-proxy-residentiel-1","\u002Fko\u002Fblog\u002Fgot-scraping-nodejs-proxy-guide-1","\u002Fja\u002Fblog\u002Fgot-scraping-nodejs-purokishi",{"pt":55,"ru":47,"en":48,"zh":49,"it":50,"es":56,"de":57,"fr":51,"pl":13,"ko":52,"ja":53,"tr":58},"\u002Fpt\u002Fblog\u002Fguia-got-scraping-nodejs-proxies-residenciais","\u002Fes\u002Fblog\u002Fguia-got-scraping-nodejs-proxy-residencial","\u002Fde\u002Fblog\u002Fgot-scraping-nodejs-proxy-guide","\u002Ftr\u002Fblog\u002Fnodejs-got-scraping-proxy-rehberi",129,[61,76,92,108],{"id":62,"slug":63,"title":64,"excerpt":65,"featured_image_url":66,"featured_image_alt":67,"card_image_url":68,"og_image_url":69,"published_at":70,"updated_at":70,"content_updated_at":29,"reading_time_minutes":33,"is_featured":27,"indexable":27,"views":71,"author":72,"categories":73,"tags":75},175,"rotacja-proxy-w-colly-1","Rotacja Proxy w Colly: Kompletny Przewodnik dla Programistów Go","Praktyczny przewodnik po rotacji proxy w frameworku Colly dla Go. Dowiedz się, jak skonfigurować RoundRobinProxySwitcher, geo-targeting i wzorce produkcyjne z residential proxy.","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Frotacja-proxy-w-colly-1-master.webp","Rotating Proxies in Colly: A Framework-Idiomatic Guide for Go Developers","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Frotacja-proxy-w-colly-1-card.webp","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Frotacja-proxy-w-colly-1-og.webp","2026-08-04T10:05:34+00:00",80,{"name":35,"slug":36,"bio":37,"avatar_url":14,"website_url":14,"social_links":14},[74],{"id":40,"slug":41,"name":42,"description":14,"meta_title":43,"meta_description":44,"parent_id":14},[],{"id":77,"slug":78,"title":79,"excerpt":80,"featured_image_url":81,"featured_image_alt":82,"card_image_url":83,"og_image_url":84,"published_at":85,"updated_at":85,"content_updated_at":86,"reading_time_minutes":33,"is_featured":27,"indexable":4,"views":87,"author":88,"categories":89,"tags":91},195,"jak-scrapowac-bybit-v5-api-proxy","Pobieranie danych rynkowych krypto z rotującymi proxy (przykład: API rynku Bybit V5)","Przewodnik dla programistów: pobieraj dane orderbook, tickers i kline z Bybit V5 Market API z rotującymi proxy ProxyHat. Gotowe przykłady w Python i Node.js, obsługa limitów, geo-blokad i sesji sticky.","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-bybit-v5-api-proxy-master.webp","How to Scrape the Bybit V5 Market API with Rotating Proxies","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-bybit-v5-api-proxy-card.webp","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-bybit-v5-api-proxy-og.webp","2026-08-03T16:09:16+00:00","2026-10-04T01:29:51+00:00",103,{"name":35,"slug":36,"bio":37,"avatar_url":14,"website_url":14,"social_links":14},[90],{"id":40,"slug":41,"name":42,"description":14,"meta_title":43,"meta_description":44,"parent_id":14},[],{"id":93,"slug":94,"title":95,"excerpt":96,"featured_image_url":97,"featured_image_alt":98,"card_image_url":99,"og_image_url":100,"published_at":101,"updated_at":101,"content_updated_at":102,"reading_time_minutes":33,"is_featured":27,"indexable":27,"views":103,"author":104,"categories":105,"tags":107},194,"jak-scrapowac-rest-api-binance-proxy","Jak scrapować REST API Binance z proxy — przewodnik dla programistów","Kompletny przewodnik po pobieraniu publicznych danych rynkowych z REST API Binance z wykorzystaniem rotacyjnych proxy. Przykłady kodu w Python i Node.js, limit wag, sesje sticky i strategie omijania blokad IP.","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-rest-api-binance-proxy-master.webp","How to Scrape the Binance REST API with Proxies: A Developer Guide","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-rest-api-binance-proxy-card.webp","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fjak-scrapowac-rest-api-binance-proxy-og.webp","2026-08-03T10:04:04+00:00","2026-11-17T10:13:54+00:00",96,{"name":35,"slug":36,"bio":37,"avatar_url":14,"website_url":14,"social_links":14},[106],{"id":40,"slug":41,"name":42,"description":14,"meta_title":43,"meta_description":44,"parent_id":14},[],{"id":109,"slug":110,"title":111,"excerpt":112,"featured_image_url":113,"featured_image_alt":114,"card_image_url":115,"og_image_url":116,"published_at":117,"updated_at":117,"content_updated_at":118,"reading_time_minutes":33,"is_featured":27,"indexable":4,"views":119,"author":120,"categories":121,"tags":123},172,"uzywanie-proxy-w-swift-urlsession","Używanie proxy w Swift z URLSession — przewodnik dla programistów iOS i macOS","Kompletny przewodnik po konfiguracji proxy w Swift z URLSession: HTTP\u002FHTTPS, SOCKS5, autoryzacja, geo-targeting, async\u002Fawait i wskazówki produkcyjne.","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fuzywanie-proxy-w-swift-urlsession-master.webp","Using Proxies in Swift: A Code-First Guide to URLSession, SOCKS5 & Residential IPs","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fuzywanie-proxy-w-swift-urlsession-card.webp","https:\u002F\u002Fstatic.proxyhat.com\u002Fstorage\u002Fblog-covers\u002Fpl\u002Fuzywanie-proxy-w-swift-urlsession-og.webp","2026-07-26T16:03:44+00:00","2026-10-03T08:57:48+00:00",242,{"name":35,"slug":36,"bio":37,"avatar_url":14,"website_url":14,"social_links":14},[122],{"id":40,"slug":41,"name":42,"description":14,"meta_title":43,"meta_description":44,"parent_id":14},[],[]]