Apify-Proxy-Integration
Die Verwendung von Bright Data-Proxys mit Apify steigert die Effizienz des Web-Scrapings, indem sie eine sichere, anonyme Datenextraktion gewährleistet und das Risiko von IP-Sperren und Erkennung verringert.
Dieser Leitfaden ist möglicherweise veraltet. Einen aktuellen Leitfaden finden Sie in unserer Dokumentation.
- 150M+ Residential-IPs
- Sticky- und Rotating-Sessions
- 99,95 % Erfolgsquote
- Geolokalisierungs-Targeting – KOSTENLOS
Was ist Apify?
Apify ist eine leistungsstarke Plattform für Web-Scraping, Datenextraktion und Web-RPA. Sie kann alles automatisieren, was Sie manuell in einem Webbrowser tun können, und es in großem Maßstab ausführen. Der Apify Store bietet Hunderte von gebrauchsfertigen Scraping-Tools, bei denen Sie nur wenige Einstellungen ändern müssen.
Proxys sind oft ein wesentlicher Bestandteil des Web-Scrapings. Sie sollten beim Web-Scraping immer Ihre Identität schützen und müssen sich möglicherweise auch mit Anti-Scraping-Maßnahmen und anderen Einschränkungen Ihrer Zielwebsite auseinandersetzen.
Hier kommt Bright Data ins Spiel 💪
Die Proxys von Bright Data können Ihnen dabei helfen, Ihre Scraping- und Automatisierungsaufgaben erfolgreich zu erledigen. Die Proxys von Bright Data lassen sich nahtlos in Apify integrieren, sodass Sie Ihre Arbeit ohne Blockierungen ausführen können.
So richten Sie Apify
mit Bright Data-Proxys ein:
Besuchen Sie Bright Data:
- Melden Sie sich bei Ihrem Bright Data-Kontoan und gehen Sie zum Dashboard
- Klicken Sie auf „Proxies & Infra“ und erstellen Sie eine Zone
- Sie können zwischen Datacenter-, Residential-IPs, ISP- und Mobile-IPs wählen
- Konfigurieren und erstellen Sie die Zone entsprechend Ihren Projektanforderungen
- Klicken Sie auf das Symbol „Einstellungen“ neben dem Namen der Zone.
- Rufen Sie den Benutzernamen und das Passwort ab.
Besuchen Sie Apify:
- Gehen Sie zu apify.com und melden Sie sich bei Ihrem Konto an.
- Sobald Sie sich in der Apify-Konsole befinden, klicken Sie im Menü auf der linken Seite auf „Actors ”.
- Unter der Registerkarte „Store“ finden Sie „Web Scraper“. Wir werden dies als Beispiel verwenden. Klicken Sie darauf.
- Navigieren Sie zur Registerkarte „Eingabe “.
- Geben Sie „lumtest“ als Start-URL für das Scraping ein: https://lumtest.com/myip.json
- Fügen Sie diesen Code in die Seitenfunktion ein:
async function pageFunction(context) {
// jQuery ist praktisch, um DOM-Elemente zu finden und Daten aus ihnen zu extrahieren.
// Um es zu verwenden, stellen Sie sicher, dass die Option „Inject jQuery” aktiviert ist.
const $ = context.jQuery;
// Wählen Sie das Element mit dem CSS-Selektor „body > pre” aus und extrahieren Sie dessen Textinhalt.
const data = $('body > pre').text();
// Geben Sie ein Objekt mit den extrahierten Daten zurück. Es wird im resultierenden Datensatz gespeichert.
return {
data: data
};
}
- Scrollen Sie dann nach unten, um die Proxy- und Browserkonfiguration zu finden.
- Klicken Sie auf „Eigener Proxy” und geben Sie Ihre Proxy-Anmeldedaten im folgenden Format ein.
- http://username:[email protected]:33335 und das Passwort können Sie den soeben erstellten Zoneneinstellungen entnehmen.
- Der Hostname für Bright Data-Proxys lautet:brd.superproxy.io und der Port ist 33335.
- So sieht die endgültige Bright Data-Proxy-URL aus: http://lum-customer-c_375eb5c4-Zone-Zone5:[email protected]:33335
- Klicken Sie dann einfach auf „Start“.
- Anschließend können Sie die Daten als HTML, JSON, CSV, Excel, XML und RSS-Feed in der Vorschau anzeigen und herunterladen oder sie auf der Registerkarte „Ausgabe“ anzeigen.
- Um zu überprüfen, ob Apify den Proxy verwendet hat, gehen Sie zu Ihrem Bright Data-Dashboard, navigieren Sie zu „Proxies“ und überprüfen Sie das Ereignisprotokoll.
⚠️Wichtiger Hinweis: Wenn Sie die Residential-Proxys, den Web Unlocker oder die SERP-API von Bright Data verwenden, müssen Sie ein SSL-Zertifikat installieren, um eine durchgängig sichere Verbindung zu Ihrer/Ihren Zielwebsite(s) zu ermöglichen. Dies ist ein einfacher Vorgang. Eine Anleitung finden Sie unter https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate.
Holen Sie sich Proxys für Apify
Angetrieben von einem preisgekrönten Residential-Proxy-Netzwerk
Über 150 million+ residential IPs, erstklassige Technologie und die Fähigkeit jedes Land, jede Stadt, jeden Anbieter und jede ASN zu erreichen, machen unsere Premium-Proxy-Dienste zur ersten Wahl für Entwickler
Proxy-Arten für jeden Bedarf
Residential Proxys
- 150,000,000+ IPs
- Verfügbar in 195 Ländern
- Das größte rotierende Real-Peer-IP-Netz
- Zugriff auf und Crawlen durch alle anspruchsvollen Websites
Datacenter Proxys
- 1,300,000+ IPs
- Verfügbar in 195 Ländern
- Geteilte und dedizierte IP-Pools verfügbar
- Schneller Zugriff auf nicht komplexe Websites
ISP-Proxys
- 1,300,000+ IPs
- Verfügbar in 35 Ländern
- Echte statische private IPs ohne IP-Rotation
- Optimal für die Anmeldung an mehreren Konten
Mobile Proxies
- 7,000,000+ IPs
- Verfügbar in 195 Ländern
- Größtes echtes Peer-3G/4G-IP-Netz der Welt
- Mobil-Anzeigen überprüfen und durch Mobil-Websites crawlen
Proxy Network Pricing
Der führende Anbieter von Proxies und Datenerfassung
Das beste Kundenerlebnis in der Branche!
Neue Funktionsveröffentlichungen jeden Tag
Um Fragen zu beantworten, wenn Sie sie benötigen
Echtzeit-Netzwerkleistungs-Dashboard
Um Ihre Leistung zu optimieren
Um Ihre Datensammelziele zu erreichen