English version 
Rosenborg Web
SESONGEN 2019
 NYHETER
 KAMPER
 SPILLERE
 STATISTIKK
KLUBBEN
 HISTORIE
 KLUBBFAKTA
 MERITTER
 REKORDER
 LERKENDAL STADION
EKSKLUSIVT
 LESESTOFF
 I GAMLE DAGER
 LEGENDER
 BILDESPESIAL
 LERKENDAL360°
MENINGER
 DEBATTFORUM
 KOMMENTAR
 DIN MENING
RBKweb
 OM RBKweb
 ANNONSEINFORMASJON
 RSS-KANAL
 ARKIV
 TA KONTAKT
SØK I ARTIKLER
Debattforum

Alle kan lese innleggene, men man må registrere seg for å delta aktivt i diskusjonene.
Everyone can read the posts, but you have to register before writing your own posts.

 FAQFAQ   SearchSearch   MemberlistMemberlist   UsergroupsUsergroups   StatistikkStatistikk   RegisterRegister 
 ProfileProfile   Log in to check your private messagesLog in to check your private messages   Log inLog in 
Setetellerautomat
Goto page Previous  1, 2, 3 ... 58, 59, 60
 
Post new topic   Reply to topic    Forum -> På sidelinja
View previous topic :: View next topic  
Author Message
OrionPax
Forumsjef


Joined: 12 Aug 2011
Posts: 7500
Location: Drammen

PostPosted: 04.10.2018 22:25    Post subject: Reply with quote

Fotballbitter og grim som få (andre gangen i år vi har to tap på rad, jeg kan myrde) så jeg satt meg ned for å banke løs på STAut-problematikken igjen. Her er det jo noen gode nyheter å oppdrive.

For det første var vi ganske nære på annonsert tall på stadion i kveld. Viser at det er datasankingen og ikke selve tellingen vi må jobbe med.

For det andre; Hovedproblemet med ticketmaster er at de motarbeider oss ved å forsøke å stoppe bots fra å laste ned dataene deres. Dette gjør de ved å ikke tillate setedata med mindre sesjonen man kommer fra allerede har vært igjennom en captcha variant (ala den "Jeg er ikke en robot" man finner rundt omkring på nettet). Dette er ekstremt vanskelig å omgå for et program som datasankeren til STAut uten å i praksis implementere en moderne webbrowser for å gjøre det som skal til for å få tilgang.

Etter å ha utforsket diverse alternativer landet vi på at det enkleste da er å bruke en ekte webbrowser, gå inn på ticketmaster sine sider (så vi oppfyller deres krav), og la de laste "Kjøp billett"-siden som et normalt menneske ville. Så har vi avansert lureri med at det ligger en proxyserver imellom og lukter på alle data som overføres til browseren. Denne er satt opp med sertifikater så den også kan se innholdet i kryptert https-trafikk (som ticketmaster benytter seg av), og jeg har nå laget et script som ved match på URL lagrer datafilene som browseren mottar. Og det funker!

Dette er en betydelig seier for STAut, men det betyr ikke at vi er i mål. Det er ting som mangler både foran og bak.

Noe må åpne en browser på riktig side og få den til å gå inn på de forskjellige kampene for å trigge datasank. Vi må også erstatte den eksisterende mekanismen som lister kamper som ligger ute for salg, da den er utsatt for samme problem. Dette bør ikke være veldig vanskelig, men det er litt jobb for å få det riktig.

Så er det sånn at STAut sitt Ingest-program - som er hjernen, hjertet og vaktmesteren i hele rallemikket - er vant til å få data servert fra Vemundo sin datasanker. Ettersom den nå er stengt ute, må vi dra til med en ny cajigger som henter data fra den nye sankemekanismen og gjør de klare til prosessering og data-pipeline for import og datatygging. Dette er egentlig veldig enkelt, men igjen en del jobb.

Det finnes noen potensielle skjær i sjøen her, men det å få tak i datafilene i det hele tatt var det jeg i utgangspunktet var mest skeptisk til, og det har vi faktisk nå en fungerende løsning på. Så får vi se hvor lang tid det tar å løse resten.
_________________
Rosenborg for alltid - uansett! | Troillprat.no
Back to top
View user's profile Send private message Visit poster's website
2mas
Sjef


Joined: 06 Sep 2002
Posts: 50225
Location: Trondhjem

PostPosted: 20.10.2018 21:52    Post subject: Reply with quote

Semifinalen ikke tilgjengelig?
Back to top
View user's profile Send private message Send e-mail
larsarus
Veteran


Joined: 12 Oct 2010
Posts: 8856
Location: Trolla

PostPosted: 20.10.2018 22:19    Post subject: Reply with quote

Sveiva må vel dras rundt en runde manuelt. Og auto-oppdatering er ikke på plass andre steder enn i hodet på de som skal implementere det ennå...
_________________
Putte-ventrilokvist. RUSK-utvikler.
Back to top
View user's profile Send private message
OrionPax
Forumsjef


Joined: 12 Aug 2011
Posts: 7500
Location: Drammen

PostPosted: 20.10.2018 23:58    Post subject: Reply with quote

Skal se om jeg kan dra nevnte sveiv en runde i morra. Dataene får vi tak i, det er bare en ganske omfattende manuell prosess for tiden.
_________________
Rosenborg for alltid - uansett! | Troillprat.no
Back to top
View user's profile Send private message Visit poster's website
larsarus
Veteran


Joined: 12 Oct 2010
Posts: 8856
Location: Trolla

PostPosted: 21.10.2018 00:04    Post subject: Reply with quote

slettet
_________________
Putte-ventrilokvist. RUSK-utvikler.


Last edited by larsarus on 21.10.2018 14:47; edited 1 time in total
Back to top
View user's profile Send private message
haavarl
Forumsjef


Joined: 10 Sep 2002
Posts: 13317
Location: Askim

PostPosted: 21.10.2018 11:59    Post subject: Reply with quote

Viktig at STAut holder seg over treshold, si.
_________________
Si ifra når det trengs - www.facebook.com/motfylla
Back to top
View user's profile Send private message
JohnTiger
Veteran


Joined: 27 Nov 2007
Posts: 1690
Location: Heimdal

PostPosted: 21.11.2018 10:31    Post subject: Reply with quote

Fantastisk flott at du tar deg tid til å kjøre manuell oppdatering på B/G og Celtic såpass ofte nå OrionPax.

Tommel'n opp! Tommel'n opp! Tommel'n opp!
_________________
Rosenborg e laget!

Twitter : @JohnTiger67
Back to top
View user's profile Send private message
OrionPax
Forumsjef


Joined: 12 Aug 2011
Posts: 7500
Location: Drammen

PostPosted: 21.11.2018 11:21    Post subject: Reply with quote

Har strømlinjeformet det en del for meg selv - i påvente av å få det 100% automatisert - så nå er det utelukkende et spørsmål om å huske å gjøre det. Og det gjør jeg jo innimellom. Smile
_________________
Rosenborg for alltid - uansett! | Troillprat.no
Back to top
View user's profile Send private message Visit poster's website
OrionPax
Forumsjef


Joined: 12 Aug 2011
Posts: 7500
Location: Drammen

PostPosted: 16.05.2019 21:51    Post subject: Reply with quote

Så, etter masse kjip venting, og koding i tre forskjellige programmeringsspråk for å komme seg rundt forsøkene til TicketMaster på å blokkere oss...


_________________
Rosenborg for alltid - uansett! | Troillprat.no
Back to top
View user's profile Send private message Visit poster's website
Mustrum Ridcully
Veteran


Joined: 15 Nov 2011
Posts: 8012
Location: UU

PostPosted: 16.05.2019 21:54    Post subject: Reply with quote

Herlige greier, dere jobber veldig bra! Det er bra sikkert. Tommel'n opp!
_________________
Quis custodiet ipsos custodes?
Back to top
View user's profile Send private message
Display posts from previous:   
Post new topic   Reply to topic    Forum -> På sidelinja All times are GMT + 2 Hours
Goto page Previous  1, 2, 3 ... 58, 59, 60
Page 60 of 60

 
Jump to:  


Utviklet av phpBB. Tilrettelagt for RBKweb.

ANNONSE
SITATET
© 1999-2019 RBKweb