Thema: Proxies

Hallo,

für ein Projekt benötige ich eine Menge Proxies. (Socks4 / Socks5 egal) am besten USA. Also so paar 1000 sollten es schon sein.

Kennt jemand ne Quelle und Preise?

Feste! Wäre wichtig. Also ich brauch so 10.000 Stück oder so

Naja.

Le Problem....

Linkcrypter mit Millionen Links. Zu viele Request an die Filehoster kann in nem Block enden. Und um das zu umgehen dachte ich an Proxies.

das solltest du auch gleich mal vergessen falls du nicht Geld zum kacken hast hab selber sowas gesucht und ohne Zugang zu einem botnet Betreiber was dich 2-3 k oder mehr im Monat kostet wird es wohl nix kannst ja mal dein Glück bei vip72.com versuchen ob er sowas bietet normal suchen die Leute socks nur für paar Minuten und in kleinen Mengen das abartig viel was du suchst da hilft nur eigens botnet aufsetzen oder dir Zugang zu einem botnet kaufen viel Erfolg bei der suche

günstiger als das so zu machen lohnt es sich einfach auf die linkcrypter zu verzichten linkcrypter schützen eh nicht vor abuse

Bot-Network? 😄

Naja ich weiß halt nicht was die Filehoster fressen an Request. Sagen wir mal ich hab 10 Mio Links. und davon sind 3 Mio uploaded.net. Kann mir kaum vorstellen das da 3 Proxies reichen ^^

Zitat von SpongeBob Schwammkopf

Naja ich weiß halt nicht was die Filehoster fressen an Request. Sagen wir mal ich hab 10 Mio Links. und davon sind 3 Mio uploaded.net. Kann mir kaum vorstellen das da 3 Proxies reichen ^^

Hat Dein Kunde einen API-Zugang? Wenn ja, dann hat er doch auch bei UL angegeben, wieviel Anfragen er erzeugt. Ich würde dann einfach mal mit denen reden, wie die Jungs sich das vorstellen. Wenn nein, würde ich mit UL mal in Kontakt treten und so einen Zugang beantragen, denn das wird ja bei dieser Linklast auch für den Kundenserver eine erhebliche Trafficreduktion bedeuten, wenn Du die API benutzen kannst.

The Don, wie habt Ihr das denn damals mit Euren 3 Proxies gemacht? Normale Seitenaufrufe oder API?

Cannonau

@Ex-LC: Schönes Design, danke :-)

@SpoBo: Ist doch für einen Kunden mit so vielen Links bezahlbar, so eine Infrastruktur oder ist das eher so ein Saturn-Kunde?

Da hier schon über zeitliche Streuung der Anfragen gesprochen wurde: eine weitere Maßnahme zur Lastreduktion kann die Priorisierung nach Zugriffsstatistik und / oder Onlinezeit sein. "Wenn Link x Tage ohne Löschung, reduziere Checkfrequenz auf 0.5/Tag" - das sollte die Anzahl der notwendigen Checker weiter reduzieren.

Cannonau

Naja alle 24 Stunden sollte es aber schon sein. Dazu kommt noch die Recheck Option. Also 3 - 6 Mio Anfragen könnten denk ich trotzdem Probleme geben?!?

Du checkst alle Links nicht gleichzeitig, sondern verteilt.