Το Reddit προσπαθεί να αποκλείσει τα bots, τους web crawlers για να σταματήσει την άνευ αδείας απόσπαση δεδομένων

ΑΠΟ PCMag
27 Ιούν, 2024

Το Reddit ενημερώνει το Robots Exclusion Protocol, ή αρχείο robots.txt, για να προσπαθήσει να εμποδίσει τα bots και τους web crawlers από το να κλέβουν δεδομένα και περιεχόμενο από τον ιστότοπό του.

Ωστόσο, το Reddit αναφέρει ότι οι “καλόπιστοι φορείς”, όπως το Internet Archive, θα συνεχίσουν να έχουν πρόσβαση στην πλατφόρμα του και προσθέτει ότι οι περισσότεροι χρήστες του Reddit δεν θα επηρεαστούν ή δεν θα παρατηρήσουν την αλλαγή.

Όπως σημειώνει όμως η Google, υπάρχουν παραθυράκια για την παράκαμψη των κανόνων του robots.txt.

“Οι οδηγίες στα αρχεία robots.txt δεν μπορούν να επιβάλουν τη…

Διαβάστε ολόκληρο το άρθρο στο PCMag

Το Reddit προσπαθεί να αποκλείσει τα bots, τους web crawlers για να σταματήσει την άνευ αδείας απόσπαση δεδομένων

Το Reddit προσπαθεί να αποκλείσει τα bots, τους web crawlers για να σταματήσει την άνευ αδείας απόσπαση δεδομένων

Περισσότερα

Η OpenAI καθυστερεί την εξάπλωση της προηγμένης φωνητικής λειτουργίας του ChatGPT

Το YouTube θέλει να πληρώσει τις δισκογραφικές εταιρείες για να εκπαιδεύσει τα εργαλεία AI του στη μουσική των καλλιτεχνών

Η TeamViewer παραβιάστηκε από Ρώσους χάκερς

Το Vision Pro φτάνει στην Ασία και σύντομα θα είναι διαθέσιμο και στην Ευρώπη

Κλείνει το domain που ανακατεύθυνε το Hulu, και 491.000+ άλλους ιστότοπους σε πορνογραφικό περιεχόμενο

Ρωσικός δορυφόρος 7 τόνων διαλύεται και δημιουργεί διαστημικά συντρίμμια

Το Google Translate προσθέτει υποστήριξη για 110 γλώσσες

Η OpenAI θα περιορίσει την πρόσβαση σε χρήστες στην Κίνα και σε μη υποστηριζόμενες περιοχές

Το Υπουργείο Δικαιοσύνης των ΗΠΑ κατηγορεί Ρώσο υπήκοο για κυβερνοεπιθέσεις σε Ουκρανία και Ηνωμένες Πολιτείες

Ο αντίπαλος του Starlink, το Project Kuiper της Amazon, αντιμετωπίζει άλλη μια καθυστέρηση