Groups | Search | Server Info | Keyboard shortcuts | Login | Register
Groups > dk.edb.database > #1384
| From | Arne Vajhøj <arne@vajhoej.dk> |
|---|---|
| Newsgroups | dk.edb.database |
| Subject | Re: Sikring af website mod botter der kopierer databaser |
| Date | 2018-01-15 11:46 -0500 |
| Organization | Aioe.org NNTP Server |
| Message-ID | <p3ilto$13o7$1@gioia.aioe.org> (permalink) |
| References | <p3ddnp$b3b$1@dont-email.me> <p3djig$fku$1@gioia.aioe.org> <p3hfk8$nqq$1@dont-email.me> |
On 1/15/2018 12:53 AM, Kurt Hansen wrote: > Den 13/01/2018 kl. 19.36 skrev Arne Vajhøj: >> Brugere automatiserer henting af data fra dit web interface >> (sceeen scraping style): principielt ikke muligt at gardere sig >> 100% imod, men du kan gøre det lidt besværligt for dem - >> begrænse hvor mange resultater du returnerer ved søgning, >> lade funktionaliteten afhænge af at JavaScript bliver udført >> client side, vise billeder i.s.f. text, lidt CAPTCHA her >> og der etc.. > > Her er et dugfrisk eksempel som jeg lige har modtaget fra en bekendt: > (TNG er et program til præsentation af sin stamtræ på nettet). > > - - - > Lige et klip fra TNG på Facebook > Opdatering: Fik ikke stoppet denne IP før der var gået 16 timer med > 49606 besøg. Se advarsel på AbuseIPDB. > Vil lige bringe en advarsel over tidsrummet fra 2018-01-13 04:24:00 til > 2018-01-13 10:48:04 altså godt 5 timer har min egen udviklet Site Access > Manager ( SAM ) logget en crawler fra Snapback AB der har udført 19241 > kald for at udføre data scraping (kopiering uden tilladelse). Den > besøgende crawler er nu blocked i HTaccess. Data om synderen kan læses her: > > Der er en slægtsforskningsgruppe på Facebook for Mors og Thy. Ikke så > meget aktivitet. Det kunne automatiseres d.v.s. at web applikationen tracker antal requests per IP addresse per tidsenhed og afviser hvis over X. Bare vær klar over at X bliver arbitrær og det ikke er umuligt at crawle via et stort antal forskellige IP adresser, hvis man vil omgå den slags check. Arne
Back to dk.edb.database | Previous | Next — Previous in thread | Next in thread | Find similar
Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-13 17:56 +0100
Re: Sikring af website mod botter der kopierer databaser Arne Vajhøj <arne@vajhoej.dk> - 2018-01-13 13:36 -0500
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-15 06:53 +0100
Re: Sikring af website mod botter der kopierer databaser Arne Vajhøj <arne@vajhoej.dk> - 2018-01-15 11:46 -0500
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-17 14:16 +0100
Re: Sikring af website mod botter der kopierer databaser Krabsen <usenet@krabsen.dk> - 2018-01-17 14:22 +0100
Re: Sikring af website mod botter der kopierer databaser Jan Hansen <jhjjhjhhansen@gmail.com> - 2018-01-17 13:35 +0000
Re: Sikring af website mod botter der kopierer databaser Arne Vajhøj <arne@vajhoej.dk> - 2018-01-17 08:45 -0500
Re: Sikring af website mod botter der kopierer databaser Jan Hansen <jhjjhjhhansen@gmail.com> - 2018-01-17 15:40 +0000
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-19 07:29 +0100
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-19 14:06 +0100
Re: Sikring af website mod botter der kopierer databaser Jan Hansen <jhjjhjhhansen@gmail.com> - 2018-01-19 14:16 +0000
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-20 06:58 +0100
Re: Sikring af website mod botter der kopierer databaser Jan Hansen <jhjjhjhhansen@gmail.com> - 2018-01-20 18:09 +0000
Re: Sikring af website mod botter der kopierer databaser Jan Hansen <jhjjhjhhansen@gmail.com> - 2018-01-25 17:58 +0000
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-30 05:18 +0100
Re: Sikring af website mod botter der kopierer databaser Kurt Hansen <kurt@invalid.dk> - 2018-01-20 07:10 +0100
csiph-web