comparano

Meie voo allalaadija

Mis on ComparanoFeedBot ja kuidas lasta ta tulemüürist läbi.

Lühidalt

  • Olete tõenäoliselt siin, sest see string ilmus serverilogisse või tulemüüri aruandesse.
  • Laadime alla ainult faili, mille kaupmees on oma Comparano kontos määranud. Me ei roomata kunagi veebisaiti läbi.
  • Kui tulemüür meid blokeerib, lubage see kasutajaagent — levinud süsteemide reeglid on allpool.
  • Me ei avalda IP-aadresside loendit; 4. jaotis selgitab, miks see oleks meie hinnangul halvem.

1.Millest jutt käib

Comparano on hinnavõrdlusteenus. Pood, kes meil oma tooteid pakub, annab meile oma tootevoo aadressi — faili, mille pood ise avaldab — ja me laadime selle alla poe valitud sagedusega, et meil kuvatavad hinnad ja saadavus püsiksid värsked.

Laadime alla üksnes aadressi, mille kaupmees on oma Comparano kontos määranud. Me ei roomata saiti läbi, ei järgi linke, ei saada vorme ega otsi lehti, mida keegi pole meile andnud.

2.Kasutajaagendid

Neid on kaks ja need on meelega eraldi: majutaja võib põhjendatult tahta lubada väikest juhuslikku kontrolli ja piirata suurt allalaadimist teisiti — ühe nimega poleks seda võimalik väljendada.

KasutajaagentMida teebKui tihti
ComparanoFeedBot/1.1 (+https://comparano.com/bot)Laadib alla kaupmehe määratud tootevoo.Kaupmehe valitud intervalliga — tavaliselt iga 3–24 tunni järel, vahepeal väike ainult päiseid küsiv päring, et näha, kas fail on veel kättesaadav.
ComparanoBot/1.1 (+https://comparano.com/bot)Kontrollib, kas pood vastab, ja loeb faili või sildi, mis tõendab, et domeen kuulub selle esitanud kaupmehele.Harva. Korra registreerumisel, seejärel aeg-ajalt.

Mõlemad saadavad ka From-päise (info@comparano.com), nii et alati on keegi, kellele kirjutada.

3.Kuidas seda lubada

Ükskõik milline neist on omaette piisav; kõiki pole vaja.

Sobitage tunnust, mitte kogu stringi. ComparanoFeedBot ja ComparanoBot ei muutu kunagi. Kaldkriipsu järel olev versioon muutub iga meie väljalaskega — kogu kasutajaagendile seatud reegel lakkab töötamast.

Cloudflare — WAF › Custom rules › Skip

(http.user_agent contains "ComparanoFeedBot") or (http.user_agent contains "ComparanoBot")

ModSecurity / OWASP CRS

SecRule REQUEST_HEADERS:User-Agent "@contains ComparanoFeedBot" \
    "id:1900001,phase:1,pass,nolog,ctl:ruleEngine=Off"

nginx

map $http_user_agent $comparano {
    default              0;
    "~*ComparanoFeedBot"  1;
    "~*ComparanoBot"      1;
}

Apache

SetEnvIfNoCase User-Agent "ComparanoFeedBot" comparano
Allow from env=comparano

WordPressi turvapluginatel — Wordfence, Sucuri, iThemes — on igaühel lubatute loend, mis võtab vastu nii kasutajaagendi kui IP; lisage sinna ComparanoFeedBot. Kõige sagedamini blokeerib meid loendist väljas robotite päringupiirang: see käsitleb üht suurt allalaadimist rünnakuna.

Majutuspaneelid nagu cPanel, Plesk või DirectAdmin panevad saidi ette tavaliselt mod_security ja piiraja. Paluge oma teenusepakkujal lubada kasutajaagent voo aadressi jaoks; nende poolel on see üldjuhul üks rida ja sellele lehele viitamisest piisab enamasti.

4.Miks me ei avalda IP-loendit

Meilt küsitakse kindlat aadressiloendit piisavalt sageli, et vastus siia kirja panna. Meie allalaadijad töötavad taristul, mille aadressid muutuvad, ja vananenud loend ebaõnnestub vaikselt — poe voog katkeb ja miski ei ütle miks. Kasutajaagendi järgi sobitamine töötab edasi.

Kui teie reeglid nõuavad aadresse, kirjutage meile: leiame teie seadistusele lahenduse, selle asemel et avaldada vahemik, mis kuu pärast on vale.

5.Kuidas blokeering meie poolelt paistab

Blokeeritud voog ei ebaõnnestu kaupmehe jaoks valjult. Märgime staatuse üles, pärast paari katset märgime voo vigaseks ja kirjutame talle — kuid sõnum ütleb, et tema voog pole kättesaadav, ja seetõttu pöördub ta oma majutaja, mitte meie poole. Neid vastuseid näeme, kui miski poe ees meid peatab.

StaatusTähendab tavaliselt
403WAF-reeglit või lubatute loendit, kus meid pole.
429Piirajat, mis loeb meie ainsa allalaadimise kuritarvituseks.
503Robotikontrolli lehte. Me ei oska seda lahendada, seega käsitleme kättesaamatusena.
—Vastust polegi — tulemüür hülgab ühenduse, selle asemel et keelduda.

6.Kui soovite, et lõpetaksime

Laadime voogu, sest kaupmees palus seda; kiireim viis lõpetada on, et pood peatab või eemaldab selle oma Comparano kontos. Kui arvate, et küsime midagi, mida keegi pole seadistanud, kirjutage meile logireaga — vaatame sama päeva jooksul.