Έλεγχος πληρεξουσίου

Πριν βάλετε τα proxies σε λειτουργία, πρέπει να τα ελέγξετε: αυτός ο κανόνας ισχύει τόσο για ένα επί πληρωμή πακέτο ιδιωτικών διευθύνσεων όσο και για μια δωρεάν λίστα που κατεβάσατε από ένα forum. Η περιγραφή του προγράμματος και η πραγματική κατάσταση των διευθύνσεων σχεδόν ποτέ δεν ταιριάζουν απόλυτα: ορισμένα IP είναι ήδη απενεργοποιημένα, ορισμένα μετά βίας λειτουργούν και μεταφέρουν μερικά kilobytes ανά δευτερόλεπτο, ορισμένα περιλαμβάνονται σε βάσεις δεδομένων antispam και εμφανίζουν captcha στο πρώτο αίτημα, ενώ ορισμένα βγαίνουν στο internet από χώρα για την οποία δεν πληρώσατε καθόλου. Ο μόνος τρόπος για να το διαπιστώσετε είναι να περάσετε τη λίστα από έναν online έλεγχο proxy.

Το Checker.net είναι ένας δωρεάν ελεγκτής proxy που λειτουργεί απευθείας στο πρόγραμμα περιήγησης: χωρίς προγράμματα, χωρίς εγκατάσταση και χωρίς λογαριασμό. Μπορείτε να επικολλήσετε τη λίστα στο πεδίο, να την επισυνάψετε ως αρχείο ή να δώσετε έναν σύνδεσμο προς αυτήν. Μέσα σε λίγα δευτερόλεπτα μπορείτε να δείτε για κάθε διεύθυνση:

Μία εκτέλεση χωρά έως 30.000 διευθύνσεις: ένας βολικός μαζικός έλεγχος proxy και ένας έλεγχος λίστας proxy χωρίς όριο στον αριθμό των εκτελέσεων. Τα αποτελέσματα δεν αποθηκεύονται μέχρι να ολοκληρωθεί ο έλεγχος· φτάνουν ως ροή, οπότε ο πίνακας μεγαλώνει μπροστά σας.

Ο ελεγκτής proxy, αλλιώς validator proxy ή δοκιμαστής λίστας proxy, είναι υπηρεσία που συνδέεται μόνη της σε κάθε διακομιστή proxy, στέλνει αιτήματα μέσω αυτού και από τις απαντήσεις κρίνει αν η διεύθυνση είναι κατάλληλη. Χωρίς τέτοιο εργαλείο θα έπρεπε να γράφετε κάθε IP στις ρυθμίσεις του προγράμματος περιήγησης ένα ένα και να βλέπετε αν ανοίγει η σελίδα. Ο ελεγκτής κάνει το ίδιο για όλη τη λίστα μονομιάς και δεν δίνει ένα αόριστο «φαίνεται να δουλεύει», αλλά πίνακα με αριθμούς.

Τα εργαλεία αυτής της κατηγορίας διαφέρουν πολύ στο πόσο βαθιά κοιτούν. Ο απλούστερος ελεγκτής μπορεί να πει μόνο ένα: απάντησε η διεύθυνση ή σώπασε. Για πραγματική δουλειά αυτό δεν αρκεί, επειδή proxy που απαντά δεν σημαίνει ακόμη χρήσιμο. Μπορεί να είναι σε μια ντουζίνα βάσεις spam. Μπορεί να μην αφήνει στο κοινωνικό δίκτυο για το οποίο αγοράστηκε. Μπορεί να αναγνωρίζεται από ιστοτόπους ως διακομιστή εκεί όπου χρειάζεται οικιακή IP. Μπορεί να αργεί δεκαπέντε δευτερόλεπτα εκεί όπου ο κανόνας είναι εκατοντάδες χιλιοστά του δευτερολέπτου. Γι’ αυτό μετράμε όχι μόνο το γεγονός της διαθεσιμότητας, αλλά και την ποιότητα: βρίσκουμε την προέλευση της IP, κοιτάμε τη φήμη της, ελέγχουμε πώς συμπεριφέρεται σε μεγάλες πλατφόρμες και τα ενώνουμε σε μία βαθμολογία.

Ο online έλεγχος είναι πιο βολικός από ένα πρόγραμμα ελέγχου proxy, και υπάρχουν τρεις λόγοι:

Μόλις πατήσετε «Έναρξη ελέγχου», ο ελεγκτής διαβάζει τη λίστα γραμμή γραμμή. Σε καθεμία αναγνωρίζει τη μορφή, ξεχωρίζει host, θύρα, όνομα και κωδικό και παραλείπει σκουπίδια και διπλότυπα. Έπειτα όλα τα proxy ελέγχονται παράλληλα: πρώτα τα πρωτόκολλα, μετά οι υπόλοιπες παράμετροι.

Για να ελέγξει ένα πρωτόκολλο, ο ελεγκτής ανοίγει μια σύνδεση μέσω του proxy και καλεί έναν πόρο υπηρεσίας που αναφέρει τη διεύθυνση IP του client που τον προσέγγισε. Ένα τέτοιο αίτημα παρέχει πολλά ταυτόχρονα: επιβεβαιώνει ότι το proxy λειτουργεί, δείχνει τον χρόνο απόκρισης και, το πιο σημαντικό, αποκαλύπτει την IP εξόδου — τη διεύθυνση που θα βλέπουν οι ιστότοποι.HTTP/HTTPS και SOCKS5ελέγχονται ξεχωριστά. Στον ίδιο κεντρικό υπολογιστή και θύρα, τα πρωτόκολλα συχνά συμπεριφέρονται διαφορετικά: η περιγραφή λέει HTTP, αλλά η διεύθυνση στην πραγματικότητα κατανοεί μόνο SOCKS, ή το αντίστροφο.

Η IP εξόδου χρησιμοποιείται στη συνέχεια για να προσδιοριστεί πού βρίσκεται η διεύθυνση και σε ποιον ανήκει: χώρα, περιοχή, πόλη και τύπος — κινητή, οικιακή ή εταιρική.

Ταυτόχρονα, η διεύθυνση IP ελέγχεται σε μια τοπική βάση δεδομένων μαύρης λίστας, την οποία ενημερώνουμε τακτικά από ανοικτά αποθετήρια antispam.

Στην πλήρη λειτουργία προστίθεται το πιο πολύτιμο βήμα: τα αιτήματα περνούν μέσω του proxy σε έντεκα δημοφιλείς υπηρεσίες και γίνεται σαφές ποιες από αυτές επιτρέπουν σε αυτήν τη διεύθυνση την πρόσβαση και ποιες της κλείνουν την πόρτα.

Τα αποτελέσματα εμφανίζονται στη διεπαφή μόλις είναι έτοιμα, όχι όλα μαζί σε μία παρτίδα στο τέλος. Ακόμη και σε μια μεγάλη λίστα, δεν χρειάζεται να παρακολουθείτε μια μπάρα προόδου που τρέχει: οι πρώτες σειρές εμφανίζονται μέσα σε δευτερόλεπτα, καιενεργές διευθύνσειςμπορεί να ληφθεί ενώ ο ελεγκτής είναι ακόμα απασχολημένος με τα υπόλοιπα.

Το βασικό που πρέπει να γνωρίζετε για μια διεύθυνση είναι ανλειτουργεί. Αν ο διακομιστής μεσολάβησης δεν ανταποκρίθηκε, ο ελεγκτής αναφέρει τον λόγο: η σύνδεση απορρίφθηκε, η αναμονή έληξε, η εξουσιοδότηση απέτυχε ή ο διακομιστής επέστρεψεένα σφάλμα. Η διαφορά εδώ είναι θεμελιώδης. "Η διεύθυνση είναινεκρός" και "η διεύθυνση είναι ενεργή, αλλά υπάρχει τυπογραφικό λάθος στον κωδικό πρόσβασης" είναι δύο εντελώς διαφορετικές ιστορίες, και τοδιατύπωση σφάλματοςδείχνει αμέσως αν πρέπει να εγκαταλείψεις τον proxy ή απλώς να διορθώσεις τη λίστα σου.

HTTP/HTTPS και SOCKS5ελέγχονται για κάθε διεύθυνση ξεχωριστά, και κάθε πρωτόκολλο έχει τον δικό του χρόνο απόκρισης. Αυτό δείχνει τι μπορεί πραγματικά να κάνει το proxy, όχι τι λέει ο πωλητής. Αυτό κλείνει ένα πολύ συνηθισμένολάθος: ένας λειτουργικός διακομιστής μεσολάβησης SOCKS δηλώνεται ως μη λειτουργικός μόνο επειδή προσπελάστηκε ως HTTP.

Ο χρόνος απόκρισης είναι πόσο περνά από την αποστολή αιτήματος μέσω proxy μέχρι να έρθει η απάντηση. Κρίνει τα πάντα εκεί όπου μετρά η αντίδραση: στο πρόγραμμα περιήγησης, στην αυτοματοποίηση ενεργειών σε διεπαφές, στην εξαγωγή σε πολλά νήματα με σύντομα αιτήματα. Την ταχύτητα καναλιού τη μετράμε χωριστά. Μετρά όταν μέσω του proxy περνούν μεγάλοι όγκοι: εξαγωγές, αρχεία μέσων, βίντεο. Δεν πρέπει να μπερδεύετε αυτούς τους δύο αριθμούς — μια διεύθυνση μπορεί να απαντά ακαριαία και ταυτόχρονα να δίνει δεδομένα με ταχύτητα εκατοντάδων kilobit.

Ο ελεγκτής διαπιστώνει από πού πάρθηκε η διεύθυνση: από δίκτυο εταιρείας κινητής, από οικιακή σύνδεση ή από κέντρο δεδομένων. Πόσο εμπιστεύονται οι ιστότοποι την κίνηση καθορίζεται σε μεγάλο βαθμό από αυτό, γι’ αυτό ο τύπος IP είναι μία από τις τρεις συνιστώσες της αξιολόγησης. Λεπτομέρειες παρακάτω, στην ενότητα για τα είδη proxy.

Η IP συγκρίνεται με βάσεις όπου καταχωρούνται διευθύνσεις που εμφανίστηκαν σε spam, επιθέσεις σε ιστοτόπους και απάτη.

Αρκεί ένα χτύπημα για να φανεί ότι η φήμη της διεύθυνσης είναι τρωμένη, και μέρος των υπηρεσιών θα τη συναντήσει με captcha ή άρνηση.

Το πιο πρακτικό μέρος της αναφοράς. Μέσω του proxy, ο ελεγκτής ανοίγει έντεκα μεγάλες πλατφόρμες και για καθεμία αναφέρει αν λειτούργησε, πόσο χρόνο χρειάστηκε και ποιος κωδικός HTTP επιστράφηκε. Μια διεύθυνση που είναιενεργόμε βάση κάθε τεχνική ένδειξη, μπορεί εύκολα να είναι μπλοκαρισμένο στην ακριβή υπηρεσία που χρειάζεστε — και το να το ανακαλύψετε εδώ είναι πολύ πιο ευχάριστο από ένα email για έναν μπλοκαρισμένο λογαριασμό.

Η βαθμολογίααπό 0 έως 5συνδυάζει τρία πράγματα: τύπο IP, φήμη σε μαύρες λίστες και αποτελέσματα υπηρεσιών. Με αυτό δεν χρειάζεται να διαβάζετε κάθε γραμμή του πίνακα — αρκεί να ταξινομήσετε τη λίστα και να πάρετε τις διευθύνσεις από την κορυφή.

Ο ελεγκτής καταλαβαίνει τρεις τρόπους γραφής proxy και δεν ζητά ρυθμίσεις γι’ αυτό:

Host μπορεί να είναι είτε διεύθυνση IP είτε όνομα τομέα: αρκετοί πάροχοι εκδίδουν proxy ακριβώς ως τομέα με θύρα. Οι μορφές μπορούν να αναμειχθούν σε μία λίστα — κάθε γραμμή επεξεργάζεται μόνη της.

Υπάρχουν επίσης τρεις τρόποι για να ανεβάσετε.Επικόλληση κειμένου: οι διευθύνσεις αντιγράφονται στο πεδίο, καθεμία σε νέα γραμμή.Αρχείο: κατάλληλο εάν η λίστα εξήχθη από τον λογαριασμό πωλητή ή αποθηκεύτηκε σε έγγραφο κειμένου.Σύνδεσμος: βολικό όταν η λίστα βρίσκεται σε μόνιμο URL και ενημερώνεται τακτικά. Ο ελεγκτής κατεβάζει τη σελίδα, εξάγει τα proxies από αυτήν και ξεκινά αμέσως τον έλεγχο. Για όσους παρακολουθούν δημόσιες πηγές, αυτή είναι η πιο πρακτική επιλογή — δεν χρειάζεται να μεταφέρετε τα δεδομένα χειροκίνητα κάθε φορά.

Οι λειτουργίες είναι τρεις, και καθεμία είναι για τη δική της εργασία. Στην ουσία η επιλογή είναι ανάμεσα σε ταχύτητα και λεπτομέρεια.

Το χρονικό όριο ορίζεται από 1 έως 60 δευτερόλεπτα και η προεπιλογή είναι 10. Αυτό είναι το διάστημα που περιμένει ο ελεγκτής για απόκριση proxy πριν το επισημάνει ως μη διαθέσιμο.

Αν συνεχίζουν να εμφανίζονται σφάλματα λήξης χρονικού ορίου για μια λίστα που προφανώς θα έπρεπε να λειτουργεί, ξεκινήστε αυξάνοντας αυτήν την τιμή.

Μια αξιολόγηση είναι μια βαθμολογία από0 έως 5. Δεν υπάρχει εκεί για να σας πει αν μια διεύθυνση είναι ενεργή, αλλά αν πρέπει να της εμπιστευτείτε εργασία. Οι περισσότεροι ελεγκτές σταματούν στην κατάσταση "λειτουργεί", αν και δύο εξίσου ενεργές διευθύνσεις μπορεί να διαφέρουν κατά μήνες διάρκειας ζωής λογαριασμού. Υπολογίζουμε τη βαθμολογία με ένα σταθμισμένο σχήμα τριών μερών: προέλευση IP, η φήμη της σεμαύρες λίστεςκαι πώς ανοίγει πραγματικά δημοφιλείς υπηρεσίες. Το αποτέλεσμα λαμβάνει υπόψη τη φύση της διεύθυνσης, το παρελθόν της και τη συμπεριφορά της αυτήν τη στιγμή — έτσι η βαθμολογία προκύπτει αντικειμενική.

Το σύνολο είναι το άθροισμα τριών αριθμών: η βαθμολογία για τον τύπο διεύθυνσης, η βαθμολογία για τη φήμη και η βαθμολογία για τις υπηρεσίες. Η φήμη και οι υπηρεσίες ακολουθούν το ίδιο σχήμα: ένατέλειοαποτέλεσμα φέρνει όλα2 πόντοι, και κάθε απόκλιση αφαιρεί0.2. Κανένα από αυτά τα μέρη δεν μπορεί να χάσει περισσότερους από δύο βαθμούς. Μπορεί να πέσει στο μηδέν, αλλά δεν γίνεται αρνητικό και δεν παρασύρει τους άλλους όρους προς τα κάτω. Επομένως, η βαθμολογία παραμένει πάντα μεταξύ0 και 5, και τα μερίδια παραμένουν σε ισορροπία:40%το καθένα πηγαίνει στη φήμη και στην πραγματική δουλειά με πλατφόρμες, και το υπόλοιπο20%πηγαίνει στην προέλευση IP.

Σε επιλεκτική λειτουργία, το τμήμα της υπηρεσίας υπολογίζεται μόνο για τις πλατφόρμες που επισημάνατε, και ο κανόνας είναι ο ίδιος: μείον0.2για κάθε κλειστή υπηρεσία στο σύνολό σας. Αν έχουν μείνει τρεις υπηρεσίες στον έλεγχο, αυτό το μέρος μπορεί να χάσει το πολύ0.6 βαθμοί, και η φήμη αρχίζει να επηρεάζει περισσότερο τη βαθμολογία. Αυτό είναι χρήσιμο όταν χρειάζεστε έναν αριθμό για το δικό σας σενάριο, όχι μια μέση βαθμολογία "για ολόκληρο το διαδίκτυο".

Αυτά τα κατώφλια είναι οδηγός, όχι νόμος: η απόφαση παίρνεται από τη βαθμολογία μαζί με τις λεπτομέρειες της αναφοράς. Το κύριο όφελος είναι αλλού. Ο πίνακας ταξινομείται κατά αξιολόγηση σε ένα δευτερόλεπτο, και πάνω εμφανίζονται αμέσως οι διευθύνσεις που αξίζει να πάρετε. Ό,τι είναι κάτω από τον πήχη σας μπορεί να επιστραφεί στον πωλητή για αντικατάσταση σε μία δέσμη, χωρίς να εξετάζετε κάθε διεύθυνση με το χέρι.

Πάρτε δύο διακομιστές μεσολάβησης, και οι δύο επισημασμένοι ως "λειτουργεί" στον πίνακα. Η πρώτη είναι μια IP κινητής τηλεφωνίας που δεν βρίσκεται σε καμία βάση δεδομένων και μέσω της οποίας ανοίγουν και οι έντεκα υπηρεσίες: βαθμολογία5.0. Η δεύτερη είναι μια διεύθυνση διακομιστή από ένα κέντρο δεδομένων, βρέθηκε σε τρεις μαύρες λίστες και έκλεισε σε έξι από τις έντεκα πλατφόρμες: βαθμολογία2.2. Τυπικά δεν υπάρχει διαφορά, και τα δύο είναιενεργό. Στην πράξη, το πρώτο θα διαρκέσει για μήνες, ενώ το δεύτερο θα δεχτεί αποκλεισμό με την πρώτη εγγραφή. Η αξιολόγηση δείχνει ακριβώς αυτή τη διαφορά, οπότε η ταξινόμηση βάσει αυτής εξοικονομεί περισσότερο χρόνο από οποιοδήποτε φίλτρο κατάστασης.

Σε μεγάλους όγκους αυτό είναι ιδιαίτερα αισθητό. Ένα φίλτρο κατάστασης αφαιρεί μόνο μερικές χιλιάδεςνεκρόςδιακομιστές μεσολάβησης από τη λίστα — σε μια αγορασμένη δεξαμενή συνήθως υπάρχουν δέκα έως σαράντα τοις εκατό από αυτούς, σε μιαδωρεάνκαταγράψτε σχεδόν όλα αυτά. Αλλά για τα μισά από τα υπόλοιπα "ενεργό" αυτά στα οποία η βαθμολογία θα είναι κάτω3.0, και πριν ξεκινήσετε την εργασία μπορείτε να το δείτε μόνο από τη βαθμολογία. Η μέση βαθμολογία ενός pool βοηθά επίσης να συγκρίνετε τους παρόχους με ειλικρίνεια: όχι από το κείμενο στον ιστότοπο, αλλά από έναν μετρήσιμο αριθμό στο ίδιο σύνολο πλατφορμών.

Η αξιολόγηση αποτυπώνει μια στιγμή, επομένως οι διακυμάνσεις από έλεγχο σε έλεγχο είναι φυσιολογικές. Τα mobile proxies αλλάζουν IP κατά την εναλλαγή, και η επόμενη εκτέλεση ελέγχει μια διαφορετική διεύθυνση παρόχου. Ενημερώνουμε τακτικά τομαύρη λίσταβάση δεδομένων από ανοικτά αποθετήρια antispam, οπότε μια διεύθυνση μπορεί να φύγει από μια λίστα ή να μπει σε μία επειδή κάποιος τη χρησιμοποίησε πριν από εσάς. Η πολιτική της πλατφόρμας ανά εύρη αλλάζει επίσης: μια υπηρεσία που άνοιξε το πρωί μπορεί να εμφανίσει έναcaptchaτο βράδυ. Και με σύντομο χρονικό όριο, οι αργές διευθύνσεις καταχωρούνται ως μη διαθέσιμες και χάνουν βαθμούς διαθεσιμότητας. Αν οι βαθμολογίες αυξηθούν αισθητά, αυξήστε το χρονικό όριο και ελέγξτε ξανά.

Στο API η βαθμολογία κάθε διεύθυνσης επιστρέφει στο πεδίο sc, γι’ αυτό η επιλογή κατά κατώφλι και η ταξινόμηση δεξαμενής ανατίθενται εύκολα σε σενάριο. Η αξιολόγηση μπαίνει στην πλήρη και την επιλεκτική λειτουργία. Στη γρήγορη δεν υπάρχει: αυτή ελέγχει μόνο διαθεσιμότητα, αλλά μια μεγάλη λίστα την περνά πολύ πιο γρήγορα.

Ο τύπος proxy δείχνει σε ποιον ανήκει πραγματικά η IP: σε έναν πάροχο κινητής, σε έναν οικιακό πάροχο ή σε φιλοξενία σε κέντρο δεδομένων. Η ταχύτητα, η σταθερότητα και, πάνω απ’ όλα, ο βαθμός εμπιστοσύνης με τον οποίο οι ιστότοποι αποδέχονται την κίνηση προκύπτουν από αυτό. Ο σωστός τύπος επηρεάζει τόσο το κόστος όσο και τον κίνδυνο ενόςαποκλεισμός, οπότε όταν αγοράζετε αυτό είναι το πρώτο πράγμα που πρέπει να αποφασίσετε, όχι μια επίσημη γραμμή στο πλάνο.

Η κίνηση αυτών των proxy περνά μέσα από δίκτυα παρόχων κινητής τηλεφωνίας, από τις ίδιες διευθύνσεις με εκατομμύρια κατόχους smartphone. Ο πάροχος δίνει μία IP σε πολλούς συνδρομητές ταυτόχρονα και την αλλάζει συνεχώς. Γι’ αυτό οι ιστότοποι είναι πολύ απρόθυμοι νααποκλεισμόςδιευθύνσεις κινητών: χιλιάδες πραγματικοί χρήστες θα πιάνονταν. Από εδώ προέρχεται επίσης η υψηλότερη φήμη μεταξύ όλων των τύπων.

Τα κινητά proxy επιλέγονται εκεί όπου διακυβεύονται λογαριασμοί: προώθηση σε κοινωνικά δίκτυα, αρμπιτράζ κίνησης, διαφημιστικοί λογαριασμοί, εγγραφές, υπηρεσίες με αυστηρό antifraud. Τα μειονεκτήματα είναι κόστος και ταχύτητα. Η κινητή σύνδεση είναι πιο αργή και λιγότερο σταθερή από την ενσύρματη, και κατά την εναλλαγή η διεύθυνση μπορεί να χαθεί για λίγα δευτερόλεπτα. Για μαζική εξαγωγή είναι ακριβό και απλώς περιττό.

Πρόκειται για IP πραγματικών οικιακών συνδέσεων που οι συνηθισμένοι πάροχοι διαδικτύου εκχώρησαν στους συνδρομητές τους. Για έναν ιστότοπο, ένας τέτοιος επισκέπτης δεν διαφέρει από έναν συνηθισμένο άνθρωπο που κάθεται στο σπίτι του σε μια συγκεκριμένη πόλη. Οι οικιακοί proxies είναι ένα καθολικό εργαλείο γιααπόξεση ιστού, επαλήθευση διαφημίσεων, ανάλυση περιφερειακών αποτελεσμάτων, παράκαμψη γεωγραφικών περιορισμών και κάθε εργασία που χρειάζεται ένα «ανθρώπινο» ίχνος και μεγάλη επιλογή τοποθεσιών.

Στην ισορροπία εμπιστοσύνης και τιμής αυτή είναι η βέλτιστη επιλογή: φθηνότερη από την κινητή και αισθητά πιο αξιόπιστη από τα proxy διακομιστή. Πόσο σταθερή είναι μια συγκεκριμένη διεύθυνση εξαρτάται από ποια οικιακή σύνδεση βρίσκεται πίσω της. Γι’ αυτό μια τέτοια δεξαμενή είναι ιδιαίτερα χρήσιμο να ελεγχθεί πριν από τη δουλειά.

IP πλατφορμών φιλοξενίας και κέντρων δεδομένων. Επιλέγονται για ελάχιστη καθυστέρηση, παχύ κανάλι, ομαλή δουλειά χωρίς διακοπές και προσιτή τιμή. Όταν χρειάζεται πολλή κίνηση και πολλές παράλληλες ροές, δεν υπάρχει καλύτερη επιλογή. Εξαγωγή μεγάλων όγκων, παρακολούθηση τιμών και διαθεσιμότητας, αυτοματισμός, μαζική αντιπαραβολή δεδομένων, bot και υπηρεσιακές ενσωματώσεις δουλεύουν άψογα σε proxy διακομιστή.

Το αδύναμο σημείο τους είναι η αναγνωρισιμότητα. Τα εύρη κέντρων δεδομένων είναι γνωστά, και ιστότοποι με προστασία από bot ορίζουν αμέσως τέτοια κίνηση ως μη οικιακή. Η διεύθυνση δεν γίνεται κακή από αυτό· απλώς δεν ταιριάζει εκεί όπου η υπηρεσία περιμένει οικιακό χρήστη. Μηδέν βαθμοί στη βαθμολογία σημαίνει όχι «το proxy είναι κακό», αλλά «δεν υπάρχει μπόνους εμπιστοσύνης».

Η μαύρη λίστα είναι μια ανοιχτή βάση διευθύνσεων IP που έχουν εντοπιστεί σε ανεπιθύμητη δραστηριότητα. Τέτοιες βάσεις τηρούν έργα antispam, εταιρείες φιλοξενίας, υπηρεσίες αλληλογραφίας και ερευνητές ασφάλειας, και τις χρησιμοποιούν διακομιστές αλληλογραφίας, CDN, συστήματα antifraud και ιδιοκτήτες ιστοτόπων. Αν μια διεύθυνση είναι στη βάση, οποιαδήποτε υπηρεσία μπορεί να την αρνηθεί χωρίς να μπει σε λεπτομέρειες.

Κάθε IP τη συγκρίνουμε με τοπική βάση που συμπληρώνεται τακτικά από ανοιχτά αποθετήρια antispam. Τις περισσότερες φορές οι διευθύνσεις μπαίνουν εκεί για τρεις λόγους:

Έχετε υπόψη: τις περισσότερες φορές δεν φταίτε εσείς. Δημόσιο proxy το χρησιμοποιούν ταυτόχρονα δεκάδες άνθρωποι, και διευθύνσεις από δεξαμενές μεταπωλούνται και νοικιάζονται ξανά για χρόνια. Μαζί με την IP παίρνετε και το παρελθόν της, μαζί και τις συνέπειες όσων έκαναν πριν από εσάς άλλοι.

Εάν η δική σας IP κατέληξε σε μια blacklist, θα πρέπει να τη βγάλετε μέσω delisting, ξεχωριστά σε κάθε βάση δεδομένων, και πριν από αυτό πρέπει να σταματήσετε τη δραστηριότητα που την οδήγησε εκεί. Με ένα αγορασμένο proxy είναι πιο απλό: είναι πιο γρήγορο να ζητήσετε από τον πωλητή να αντικαταστήσει τη διεύθυνση. Ένας κανονικός πάροχος αλλάζειαποκλεισμένοIPs χωρίς όρισμα, και τα αποτελέσματα του ελέγχου καθιστούν τη συζήτηση συγκεκριμένη.

Οι περισσότεροι ελεγκτές δεν διαθέτουν αυτή τη λειτουργία, αν και στην πράξη είναι πιο χρήσιμη από όλες τις άλλες. Μια διεύθυνση μπορεί να είναι ενεργή, με ένακαθαρόιστορικό και τη σωστή χώρα — και παρ’ όλα αυτάάχρηστογια τη δουλειά, επειδή η πλατφόρμα που χρειάζεστε γνωρίζει ήδη αυτήν τη διεύθυνση και δεν θα την αφήσει να περάσει. Το διαπιστώνουμε εκ των προτέρων. Μέσω κάθε proxy, ο ελεγκτής καλεί έντεκα δημοφιλείς υπηρεσίες και εμφανίζει το αποτέλεσμα για καθεμία ξεχωριστά: αν άνοιξε η υπηρεσία, πόσο χρόνο πήρε η απόκριση, ποιος κωδικός HTTP επέστρεψε και ποιεςσφάλμαεμφανιζόταν αν μπορούσε να διαβαστεί.

Αρχικά είναι σημειωμένες και οι έντεκα πλατφόρμες. Όταν σας ενδιαφέρουν μόνο δύο-τρεις, αφαιρέστε τα υπόλοιπα πλαίσια στις σύνθετες ρυθμίσεις: η εκτέλεση γίνεται συντομότερη και η βαθμολογία αντικατοπτρίζει ακριβώς το δικό σας σύνολο. Στον πίνακα το αποτέλεσμα συμπτύσσεται σε μετρητή όπως «9 / 11», και το κλικ ανοίγει λίστα με λεπτομέρειες για κάθε πλατφόρμα.

Για κάθε υπηρεσία έρχονται τρεις τιμές: αν άνοιξε η σελίδα, πόση ώρα πήρε η απάντηση και ποιον κωδικό HTTP επέστρεψε η πλατφόρμα. Περισσότερα λέει ο κωδικός: από αυτόν φαίνεται γιατί η διεύθυνση δεν ταίριαξε και τι να κάνετε μετά.

Ο χρόνος απάντησης πρέπει να διαβάζεται μαζί με τον κωδικό. Αν μια υπηρεσία άνοιξε σε πέντε δευτερόλεπτα, τυπικά είναι διαθέσιμη, αλλά η δουλειά μέσω τέτοιας διεύθυνσης στη διεπαφή διαφημιστικού λογαριασμού θα είναι βασανιστική. Όταν σε μια ντουζίνα πλατφόρμες φαίνεται πού η απάντηση ήρθε ακαριαία και πού μετά βίας έφτασε, η πραγματική ποιότητα του καναλιού γίνεται προφανής.

Τα αποτελέσματα της πλατφόρμας επηρεάζουν άμεσα τη βαθμολογία. Αν ανοίγει κάθε ελεγμένη υπηρεσία, η διεύθυνση λαμβάνει+2 πόντοι, και κάθε κλειστή υπηρεσία αφαιρεί0.2, αλλά όχι περισσότερο από2 πόντοισυνολικά. Επομένως, η διαθεσιμότητα της υπηρεσίας αντιπροσωπεύει έως και40%της αξιολόγησης — το ίδιο μερίδιο με τη φήμη στομαύρες λίστες. Οι υπηρεσίες ελέγχονται σε πλήρη και επιλεκτική λειτουργία. Η γρήγορη λειτουργία απαντά μόνο στο αν ο ίδιος ο proxy είναι διαθέσιμος. Στο API, τα αποτελέσματα πλατφόρμας έρχονται στο πεδίο s: για κάθε υπηρεσία περιέχει τον κωδικό υπηρεσίας, μια σημαία επιτυχίας, τον χρόνο απόκρισης και την κατάσταση HTTP. Γι’ αυτό ένα φίλτρο όπως "μόνο διευθύνσεις μέσω των οποίων ανοίγει το Instagram" είναι μία μόνο γραμμή.

Η ανωνυμία δείχνει πόσο καλά το proxy κρύβει ότι το χρησιμοποιείτε και αν κρύβει την πραγματική σας IP. Συμβαίνει το proxy να περνά σωστά την κίνηση, αλλά στις κεφαλίδες να ομολογεί ειλικρινά στον ιστότοπο ότι είναι μεσάζων — ή και να γράφει εκεί τη δική σας διεύθυνση. Συνήθως διακρίνονται τρία επίπεδα.

Ένα επίπεδο ανωνυμίας δεν αρκεί για να εμπιστευτείτε έναν proxy. Μια διεύθυνση που τυπικά είναι elite μπορεί να περιλαμβάνεται σε βάσεις δεδομένων spam και να αποτυγχάνει να ανοίξει τις μισές υπηρεσίες, και τότε η ανωνυμία δεν προσφέρει τίποτα. Γι’ αυτό ο checker δεν σταματά στην ανωνυμία: μαθαίνει το IP εξόδου, βρίσκει από πού προήλθε η διεύθυνση, την ελέγχει σε βάσεις δεδομένων και προσπαθεί να ανοίξειζωντανάυπηρεσίες μέσω αυτού. Το αν ένας proxy είναι κατάλληλος για χρήση αποφασίζεται από αυτήν τη συνολική εικόνα συνολικά, όχι από μία μόνο κεφαλίδα.

Το πρωτόκολλο αποφασίζει ποια γλώσσα μιλά το λογισμικό με τον proxy και τι μπορεί να σταλεί μέσω αυτού γενικά. Ο ελεγκτήςλειτουργείμε HTTP, HTTPS και SOCKS5 — στην πράξη αυτές οι τρεις επιλογές καλύπτουν σχεδόν τα πάντα.

Ένας απλός κανόνας: πάρτεHTTP/HTTPSγια ιστότοπους και APIs, καιSOCKS5για αυθαίρετη κίνηση από εφαρμογές. Μία διεύθυνση συχνά υποστηρίζει και τα δύο, αλλά κάθε άλλο παρά πάντα, και οι πωλητές συχνά ονομάζουν το πρωτόκολλο ανακριβώς. Γι’ αυτό ελέγχουμε τα HTTP και SOCKS5 ανεξάρτητα: η αναφορά δείχνει αμέσως ποιο πρωτόκολλο πράγματιλειτουργείστη διεύθυνση, και δεν θα χρειαστεί να διαμορφώσετε το λογισμικό με λανθασμένα δεδομένα.

Ένας διακομιστής μεσολάβησης πολύ συχνά "δεν λειτουργεί" ακριβώς λόγω του πρωτοκόλλου. Αν το πρόγραμμα εμφανίζει τη διεύθυνση ως HTTP, αλλά δέχεται μόνοSOCKS5, η σύνδεση δεν θα δημιουργηθεί, παρόλο που ο ίδιος ο proxy λειτουργεί πλήρως. Γράψτε το πρωτόκολλο ρητά, μέσω του προθέματος socks5:// ή http://, και δεν θα υπάρξει καμία σύγχυση.

Ένα νεκρό proxy σε parser ή σε πρόγραμμα περιήγησης antidetect εύκολα εκλαμβάνεται ως βλάβη του ίδιου του προγράμματος. Οι εργασίες πέφτουν, οι συνεδρίες κόβονται, τα αρχεία καταγραφής γεμίζουν ασαφή σφάλματα και μπορεί να περάσετε μισή μέρα ψάχνοντας την αιτία αλλού. Ο έλεγχος της λίστας παίρνει δευτερόλεπτα και αποκλείει αμέσως αυτή την εκδοχή: ξέρετε σίγουρα ότι οι διευθύνσεις είναι εντάξει και το πρόβλημα είναι αλλού.

Αυτός είναι ο πιο δαπανηρός κίνδυνος. Η σύνδεση σε έναν λογαριασμό έστω και μία φορά από μια διεύθυνση με κακή φήμη αρκεί για να ενεργοποιηθεί ένας έλεγχος ταυτότητας και συχνά ένααποκλεισμός. Μαζί με τον λογαριασμό μπορεί να χάσετε τους συνδεδεμένους διαφημιστικούς λογαριασμούς και ολόκληρο το ιστορικό. Η ανάκτηση διαρκεί εβδομάδες και δεν πετυχαίνει πάντα. Ένας έλεγχος μαύρης λίστας και μια δοκιμή υπηρεσιών δείχνουν μια επικίνδυνη διεύθυνση πριν συνδεθείτε μέσω αυτής.

Η χώρα στην περιγραφή και η πραγματική χώρα εξόδου αποκλίνουν συνεχώς. Αν η εργασία συνδέεται με μια περιοχή — τοπικά αποτελέσματα, τοπικές τιμές, μια υπηρεσία για μία χώρα — μια διεύθυνση με λάθος γεωγραφική τοποθεσία είναι άχρηστη. Και αυτό είναι δύσκολο να το προσέξετε ενώ εργάζεστε: τεχνικά όλαλειτουργεί, τα δεδομένα που συλλέγονται είναι απλώς τα λάθος δεδομένα.

Ένας τακτικός έλεγχος ενός αγορασμένου pool είναι ο μόνος τρόπος για να μάθετε τι πουλάει πραγματικά ο πάροχος. Ποιο ποσοστό των διευθύνσεων είναι ενεργό, πόσες από αυτές βρίσκονται σεμαύρες λίστες, αν οι IP διακομιστών πωλούνται ως οικιακές και αν η ταχύτητα αντιστοιχεί σε αυτό που είχε υποσχεθεί. Όταν έχετε στα χέρια σας τα αποτελέσματα του ελέγχου, η αντικατάσταση προβληματικών διευθύνσεων γίνεται διαδικασία ρουτίνας, όχι διαφωνία.

Αν το pool είναι ελεγμένο και καθαρό, η επόμενη εκκίνηση θα εξελιχθεί με τον ίδιο τρόπο όπως η προηγούμενη. Με ένα μη ελεγμένο pool, το αποτέλεσμα εξαρτάται από την τύχη: μία εκκίνηση θα συλλέξει τα πάντα, και μια άλλη θα πέσει σε έναcaptchaστις μισές διευθύνσεις, και δεν θα μπορείτε πλέον να καταλάβετε τι άλλαξε.

Proxy που να ταιριάζει σε όλα δεν υπάρχει. Διεύθυνση ιδανική για εξαγωγή δεν θα ταιριάξει καλά σε διαφημιστικό λογαριασμό, και το αντίστροφο. Ξεκινήστε από την εργασία και από το πόσο πρέπει η πλατφόρμα να σας εμπιστεύεται.

Τα δωρεάν proxy αξίζουν ξεχωριστό λόγο. Για εφάπαξ εργασίες, μελέτη και πειράματα κάνουν, για δουλειά όχι. Διευθύνσεις από δημόσιες λίστες τις χρησιμοποιούν πολλοί ταυτόχρονα, γι’ αυτό είναι υπερφορτωμένες, συχνά ήδη σε μαύρες λίστες και ζουν λίγες ώρες. Αν η εργασία είναι σημαντική, τα ιδιωτικά proxy αποσβένονται αμέσως — έστω και μόνο επειδή η δεξαμενή δεν χρειάζεται επανέλεγχο κάθε ώρα.

Εάν μια διεύθυνση δεν πέρασε τον έλεγχο, τοσφάλματο κείμενο σχεδόν πάντα υποδεικνύει την αιτία. Ακολουθούν οι πιο συνηθισμένες περιπτώσεις:

Αν το ίδιοσφάλματαπεράσει όλη τη λίστα, η αιτία συνήθως δεν είναι το proxy. Ελέγξτε τη μορφή της γραμμής, τα δεδομένα εξουσιοδότησης και το πρωτόκολλο. Αν τοσφάλματαείναι διαφορετικές και διάσπαρτες χωρίς κάποιο μοτίβο, η λίστα είναι πράγματι ανάμεικτη, και για δημόσιες διευθύνσεις αυτό είναι συνηθισμένο αποτέλεσμα.

Ένας έλεγχος μπορεί να ενσωματωθεί στο δικό σας προϊόν: ένα πάνελ παρόχου, ένας parser, ένα Telegram bot, ένας antidetect browser, εσωτερική παρακολούθηση pool ή μια εργασία CI που εκτελεί διευθύνσεις βάσει προγράμματος. Το API εκθέτει όλα όσα δείχνει το web interface: κατάσταση για κάθε πρωτόκολλο, IP εξόδου, χρόνος απόκρισης, ταχύτητα, γεωγραφική τοποθεσία, τύπος διεύθυνσης,μαύρη λίστακαιυπηρεσίααποτελέσματα, και το τελικό σκορ.

Η βασική διεύθυνση είναι https://checker.net. Οι εξωτερικές ενσωματώσεις εξουσιοδοτούνται με ένα κλειδί στην κεφαλίδα x-api-key, το οποίο μπορείτε να λάβετε στον λογαριασμό. Τα σχήματα αιτημάτων και τα παραδείγματα αποκρίσεων περιγράφονται λεπτομερώς στην τεκμηρίωση.

Τα αποτελέσματα είναι διαθέσιμα από τον σύνδεσμο 30 λεπτά μετά τη δημιουργία του ελέγχου. Ό,τι ξεπερνά το όριο 30,000 δεν γίνεται δεκτό. Το αίτημα ωστόσο θα ολοκληρωθεί επιτυχώς, και ο αριθμός απορριφθεισών γραμμών θα έρθει στο πεδίο skippedCount. Παρακολουθήστε το όταν ανεβάζετε μεγάλες λίστες.

Κάθε μέρα οι διευθύνσεις που πέρασαν τον έλεγχο μπαίνουν στο ανοιχτό αρχείο τουλειτουργικοί διακομιστές μεσολάβησης. Επιλέξτε μια ημερομηνία και λάβετε τη λίστα των διακομιστών μεσολάβησης που λειτουργούσαν τη στιγμή του ελέγχου — σε μία ημέρα συλλέγει από μερικές χιλιάδες έως αρκετές δεκάδες χιλιάδες διευθύνσεις. Το ιστορικό διατηρείται για μήνες και μπορείτε να το εξαγάγετε τόσο στον ιστότοπο όσο και μέσω του API.

Θυμηθείτε ότι το αρχείο δείχνει κατάσταση σε συγκεκριμένη στιγμή και δεν εγγυάται ότι οι διευθύνσεις είναι ζωντανές τώρα. Τα δημόσια proxy δεν κρατούν πολύ και είναι φορτωμένα από πολλούς χρήστες ταυτόχρονα, οπότε μέσα σε ένα εικοσιτετράωρο αισθητό μέρος της λίστας σταματά να απαντά. Πριν από τη δουλειά περάστε την εξαγωγή άλλη μία φορά από τον ελεγκτή: θα πάρετε επίκαιρη δεξαμενή και φρέσκες βαθμολογίες. Για εφάπαξ εργασίες, πειράματα και μάθηση αρκεί. Για σταθερή δουλειά με λογαριασμούς και εξαγωγή χρειάζονται ιδιωτικές κινητές ή οικιακές διευθύνσεις.

Τα proxy σας μπαίνουν στο αρχείο μόνο αν το θέλετε εσείς. Για να μην συμβεί, πριν από την εκκίνηση σημειώστε στη φόρμα «Να μην αποθηκεύονται τα proxy μου στη δημόσια λίστα». Σε όσους ελέγχουν αγορασμένες ιδιωτικές διευθύνσεις αξίζει να το κρατούν πάντα ενεργό.

Για να ελέγξετε ιδιωτικό proxy, πρέπει να δώσετε όνομα και κωδικό, και εμείς τα χειριζόμαστε ανάλογα. Τα στοιχεία εξουσιοδότησης χρειάζονται μόνο για τον έλεγχο: με αυτά ο ελεγκτής συνδέεται στο proxy και στέλνει αιτήματα μέσω αυτού. Στο αρχείο και στις ανοιχτές λίστες δεν μπαίνουν.

Το πλαίσιο ελέγχου «Να μην αποθηκεύονται οι proxy μου στη δημόσια λίστα» αφαιρεί πλήρως τις επιλεγμένες διευθύνσεις από τη δημοσίευση. Τα αποτελέσματα παραμένουν διαθέσιμα μέσω του συνδέσμου για περιορισμένο χρονικό διάστημα —30 λεπτάαπό τη στιγμή που ξεκινά ο έλεγχος — μετά από την οποία δεν είναι πλέον διαθέσιμα. Ένας έλεγχος δεν απαιτεί εγγραφή και ένα κλειδί API απαιτείται μόνο για εξωτερικές ενσωματώσεις.

Ένας διαδικτυακός έλεγχος έχει ένα ακόμη πλεονέκτημα. Οι συνδέσεις σε χιλιάδες διευθύνσεις ανοίγονται από τους διακομιστές μας, όχι από το κανάλι σας. Η δική σας IP δεν συμμετέχει στις μαζικές συνδέσεις, επομένως δεν τραβά την προσοχή του παρόχου και δεν κινδυνεύει να καταλήξει στην ίδιαμαύρες λίστεςμε βάση το οποίο ελέγχετε τους διακομιστές μεσολάβησης.