https://github.com/zarGonnn/FOK-crewgeschiedenis/wiki.quote:Op maandag 16 juni 2014 10:13 schreef zarGon het volgende:
Ik ga vanavond maar eens een wiki aanmaken op GitHub. Maakt het uitleggen makkelijker.
Wat voor gegevens zou je willen scrapen?quote:Op maandag 16 juni 2014 22:33 schreef zarGon het volgende:
[..]
https://github.com/zarGonnn/FOK-crewgeschiedenis/wiki.
Gegevens die je op een profiel ziet. esv7.quote:Op maandag 16 juni 2014 22:38 schreef esv7 het volgende:
[..]
Wat voor gegevens zou je willen scrapen?
En is er ergens ook een lijst met moderators te vinden of zou die alle geregistreerde users af moeten gaan?quote:Op maandag 16 juni 2014 22:45 schreef zarGon het volgende:
[..]
Gegevens die je op een profiel ziet. esv7.
In jouw geval:
- UserID (384959)
- Registratiedatum (20 september 2012)
- UI (http://i.fokzine.net/usericons/384959/dilla_small.jpg / alleen link opslaan of ook het plaatje)
Natuurlijk de hierbij behorende username. .
Om te gebruiken op de user-pagina straks; zie voorbeeld: http://fok.zevkiselim.nl/crew/?user=zarGon (bovenaan).
Zo'n lijst is helaas nooit bijgehouden. Eventueel zou ik een tabel met usernames kunnen aanmaken die ooit crew zijn geweest. Anders is het alle geregistreerde users afgaan...quote:Op dinsdag 17 juni 2014 11:50 schreef esv7 het volgende:
[..]
En is er ergens ook een lijst met moderators te vinden of zou die alle geregistreerde users af moeten gaan?
Alle users afgaan is flink wat denk ik:P maar dan zal het alleen wat langer aan staan, voor mij zelf zal het weinig schelen denk ik. Ik ga wel even wat proberen.quote:Op dinsdag 17 juni 2014 11:53 schreef zarGon het volgende:
[..]
Zo'n lijst is helaas nooit bijgehouden. Eventueel zou ik een tabel met usernames kunnen aanmaken die ooit crew zijn geweest. Anders is het alle geregistreerde users afgaan...
Wat is handiger (voor jou)?
.quote:Op dinsdag 17 juni 2014 12:01 schreef esv7 het volgende:
[..]
Alle users afgaan is flink wat denk ik:P maar dan zal het alleen wat langer aan staan, voor mij zelf zal het weinig schelen denk ik. Ik ga wel even wat proberen.
Ik ga even wat proberen om wat gegevens te verzamelen.quote:Op dinsdag 17 juni 2014 12:04 schreef zarGon het volgende:
[..]
.
Je gaat nu eenmalig al die data ophalen/opslaan?
Cool cool cool!quote:Op dinsdag 17 juni 2014 12:43 schreef esv7 het volgende:
[..]
Ik ga even wat proberen om wat gegevens te verzamelen.
Hai!quote:
Ik haal voor de stats geen data uit de profielen op maar importeer alle losse posts per topic. Arcee doet het volgens mij wel op basis van profielen.quote:Op dinsdag 17 juni 2014 14:33 schreef zarGon het volgende:
[..]
Hai!
esv7 (twee posts omhoog) is bezig met een scrapen, die gegevens uit een FOK!profiel zou moeten halen. Het lukt 'm echt niet helemaal, en ik vroeg me af of jij mee kon helpen/kijken... Gezien je eerdere werk en zo. .
Het probleem is dat ik de profielpagina niet kan includen, ik krijg dan:quote:Op dinsdag 17 juni 2014 14:40 schreef bondage het volgende:
[..]
Ik haal voor de stats geen data uit de profielen op maar importeer alle losse posts per topic. Arcee doet het volgens mij wel op basis van profielen.
Edit: mocht het probleem ergens in het inloggen zitten kan ik uiteraard wel helpen.
Volgens mij moet je voor het inzien van profielen ingelogd zijn. Heb je een actieve sessie? Ik gebruik overigens de text-only layout onder een ander account (monitor), ik vind dat wat makkelijker te parsen.quote:Op dinsdag 17 juni 2014 14:48 schreef esv7 het volgende:
[..]
Het probleem is dat ik de profielpagina niet kan includen, ik krijg dan:
[ afbeelding ]
Includen? Waarom geen curl gebruiken?quote:Op dinsdag 17 juni 2014 14:48 schreef esv7 het volgende:
[..]
Het probleem is dat ik de profielpagina niet kan includen, ik krijg dan:
[ afbeelding ]
Die kun je sowieso beter gebruiken als je, zoals in dit geval, met cookies moet werken.quote:Op dinsdag 17 juni 2014 14:51 schreef Sitethief het volgende:
[..]
Includen? Waarom geen curl gebruiken?
quote:Op dinsdag 17 juni 2014 14:51 schreef Sitethief het volgende:
[..]
Includen? Waarom geen curl gebruiken?
Ja die had ik ook geprobeerd maar dat werkte ook niet.quote:Op dinsdag 17 juni 2014 14:52 schreef bondage het volgende:
[..]
Die kun je sowieso beter gebruiken als je, zoals in dit geval, met cookies moet werken.
Ik heb voor het inloggen en maken van het koekje een script. Ben echter op kantoor dus kan je nu geen voorbeeld sturen.quote:Op dinsdag 17 juni 2014 14:54 schreef esv7 het volgende:
[..]
[..]
Ja die had ik ook geprobeerd maar dat werkte ook niet.
Het ligt inderdaad aan het uitgelogd zijn, dat ik dat over het hoofd heb gezien .
Oké dan kijk ik uit naar het voorbeeld:).quote:Op dinsdag 17 juni 2014 14:58 schreef bondage het volgende:
[..]
Ik heb voor het inloggen en maken van het koekje een script. Ben echter op kantoor dus kan je nu geen voorbeeld sturen.
Ben tegen 19:00 thuis, zal dan ff voor je kijken. Kunnen anders wel ff wat per DM regelen denk ik.quote:Op dinsdag 17 juni 2014 15:28 schreef esv7 het volgende:
[..]
Oké dan kijk ik uit naar het voorbeeld:).
Met de hulp van bondage moet ik nu alleen nog uitgraven wat ik wil scrapen en dan is die klaar .quote:Op dinsdag 17 juni 2014 16:25 schreef zarGon het volgende:
.
Eventueel een issue erin schieten? https://github.com/zarGonnn/FOK-crewgeschiedenis/issues. Kan de rest meekijken en zo. Weet niet of het gemakkelijker is though.
. Ben benieuwd!quote:Op dinsdag 17 juni 2014 16:28 schreef esv7 het volgende:
[..]
Met de hulp van bondage moet ik nu alleen nog uitgraven wat ik wil scrapen en dan is die klaar .
1 2 | 2014-01-01 - 2014-01-05 2014-01-03 - 2014-01-07 |
1 2 3 4 5 6 7 | 2014-01-01 2014-01-02 2014-01-03 2014-01-04 2014-01-05 2014-01-06 2014-01-07 |
Hoe pak je de UI's aan eigenlijk? Op welke manier ga je die opslaan?quote:Op dinsdag 17 juni 2014 16:28 schreef esv7 het volgende:
[..]
Met de hulp van bondage moet ik nu alleen nog uitgraven wat ik wil scrapen en dan is die klaar .
Forum Opties | |
---|---|
Forumhop: | |
Hop naar: |