abonnement Unibet Coolblue Bitvavo
pi_8044211
quote:
Op woensdag 22 januari 2003 11:51 schreef K3 het volgende:
Ik heb net 1500 topics naar binnen gesleept, en dat is bij elkaar al 35 MB

* K3 wordt een beetje ontmoedigd (scriptje haalt de eerste 20.000 topics binnen).


Probeer het anders eerst eens met alleen K&L
"Dear life, When I said "can my day get any worse?" it was a rhetorical question, not a challenge."
  woensdag 22 januari 2003 @ 11:53:51 #152
693 ChOas
** Warning: Choking hazard **
pi_8044219
quote:
Op woensdag 22 januari 2003 11:53 schreef Tijn het volgende:
Nou ja, ik kan thuis wel wat ruimte beschikbaar stellen. Kheb op dit moment nog zo'n 30 GB vrij en ik draai al MySQL. Kheb ADSL-verbinding zonder caps (dus 8 MBit/s downstream en 512 kbps upstream). Zou dat werken?

Sowieso moet nog wel iemand aan Danny vragen in hoeverre hij dit allemaal toestaat, voordat we van alles gaan regelen en afspreken he Kzal kijken of ik met 'em in contact kan komen.


Hmmmmm... Dat zou een mooi servertje er voor zijn
"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
  woensdag 22 januari 2003 @ 11:54:54 #153
12221 Tijn
Powered by MS Paint
pi_8044239
quote:
Op woensdag 22 januari 2003 11:53 schreef ChOas het volgende:

[..]

Hmmmmm... Dat zou een mooi servertje er voor zijn


Is het een erg groot probleem dat 'ie Windows 2000 Server draait en geen Linux/BSD?
pi_8044247
quote:
Op woensdag 22 januari 2003 11:51 schreef K3 het volgende:
Ik heb net 1500 topics naar binnen gesleept, en dat is bij elkaar al 35 MB

* K3 wordt een beetje ontmoedigd (scriptje haalt de eerste 20.000 topics binnen).


Oke, maar heb je dat dan ook al een beetje efficient opgeslagen? Of gewoon plaintext (en dan ook nog het html bestand zoals het wordt binnengehaald zeker, da's niet efficient.)
  woensdag 22 januari 2003 @ 11:57:26 #155
693 ChOas
** Warning: Choking hazard **
pi_8044294
quote:
Op woensdag 22 januari 2003 11:54 schreef Tijn het volgende:

[..]

Is het een erg groot probleem dat 'ie Windows 2000 Server draait en geen Linux/BSD?


... Say WHAT ?

Nee... hoor... niet zo`n groot probleem...

Maar toch.. het idee, hè

"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8044311
quote:
Op woensdag 22 januari 2003 11:55 schreef Light het volgende:

[..]

Oke, maar heb je dat dan ook al een beetje efficient opgeslagen? Of gewoon plaintext (en dan ook nog het html bestand zoals het wordt binnengehaald zeker, da's niet efficient.)


Gewoon plaintext: <topicnr>.html
Ik ben nog bezig met een scriptje dat de boel in de database gooit, dat zijn de waarden: topicID, msgID, userID, posticon (?, leuk voor de statistieken), date, message

Helemaal leuk zou het zijn om de boel in hetzelfde formaat als mijn eigen forum te storen .

123
pi_8044330
quote:
Op woensdag 22 januari 2003 11:53 schreef Tijn het volgende:
Nou ja, ik kan thuis wel wat ruimte beschikbaar stellen. Kheb op dit moment nog zo'n 30 GB vrij en ik draai al MySQL. Kheb een ADSL-verbinding zonder caps (dus 8 MBit/s downstream en 512 kbps upstream). Zou dat werken?
Volgens mij moet dat meer dan genoeg zijn, zeker als je op een gegeven moment het punt bereikt dat je alleen de updates maar hoeft te indexeren.
quote:
Sowieso moet nog wel iemand aan Danny vragen in hoeverre hij dit allemaal toestaat, voordat we van alles gaan regelen en afspreken he Kzal kijken of ik met 'em in contact kan komen.
Lijkt me handig. Dit gaat nl. waarschijnlijk meer serverbelasting opleveren dan een baksteen op je F5-toets leggen en ik meen me te herinneren dat Danny daar al niet echt gelukkig mee was.
Zonder directe databaseaccess is een "Arcee" helaas toch echt verplicht om complete topics in te lezen en te parsen, dus probeer Danny (danwel Arjen of Jorma) ervan te overtuigen om een directe datastroom op te zetten (gebruik makend van bijv. XML).
"If you are depressed you shouldn't be in C major!" - Rick Beato
  woensdag 22 januari 2003 @ 11:59:23 #158
12221 Tijn
Powered by MS Paint
pi_8044347
quote:
Op woensdag 22 januari 2003 11:57 schreef ChOas het volgende:

[..]

... Say WHAT ?

Nee... hoor... niet zo`n groot probleem...

Maar toch.. het idee, hè


Naja, hij draait dus wel MySQL en daar gaat het toch om

Wat heb je verder nodig? Want het lijkt me idd wel het handigst als de lijstjes ook op die bak zelf gemaakt worden.

pi_8044396
quote:
Op woensdag 22 januari 2003 11:59 schreef Tijn het volgende:

[..]

Naja, hij draait dus wel MySQL en daar gaat het toch om

Wat heb je verder nodig? Want het lijkt me idd wel het handigst als de lijstjes ook op die bak zelf gemaakt worden.


PHP of Perl.
Je kan kiezen om online stats pagina's te maken, of af en toe op Fok te posten a la Arcee .
123
  woensdag 22 januari 2003 @ 12:01:42 #160
693 ChOas
** Warning: Choking hazard **
pi_8044400
quote:
Op woensdag 22 januari 2003 11:59 schreef Tijn het volgende:

[..]

Naja, hij draait dus wel MySQL en daar gaat het toch om

Wat heb je verder nodig? Want het lijkt me idd wel het handigst als de lijstjes ook op die bak zelf gemaakt worden.


Perl!
"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
  woensdag 22 januari 2003 @ 12:03:55 #161
12221 Tijn
Powered by MS Paint
pi_8044445
quote:
Op woensdag 22 januari 2003 12:01 schreef ChOas het volgende:

[..]

Perl!


Mkay Hij draait al Apache met PHP, kzal vanavond ff kijken of ik ook Perl aan de gang wil krijgen
  woensdag 22 januari 2003 @ 12:04:51 #162
12221 Tijn
Powered by MS Paint
pi_8044464
quote:
Op woensdag 22 januari 2003 12:01 schreef K3 het volgende:

[..]

Je kan kiezen om online stats pagina's te maken, of af en toe op Fok te posten a la Arcee .


Online stats lijkt me niet zo'n goed idee in verband met mn beperkte bandbreedte (512 kbps upstream).
  woensdag 22 januari 2003 @ 12:08:23 #163
693 ChOas
** Warning: Choking hazard **
pi_8044530
Kijk ... Als ik mijn scriptje over deze pagina draai komt
er zo iets uit (de inhoud van de post even weggelaten, want
dat fucked de layout up)
code:
Poster: 'Isabeau'
Date: 'woensdag 22 januari 2003 11:53'
Sub: 'flowers of blood'
Img: 'http://forum.fok.nl/usericons/859/Vampirella.jpg'
Poster: 'ChOas'
Date: 'woensdag 22 januari 2003 11:53'
Sub: 'DreamChaser'
Img: 'http://forum.fok.nl/usericons/693/math.gif'
Poster: 'Tijn'
Date: 'woensdag 22 januari 2003 11:54'
Sub: 'La la laaa la la laaa la la la'
Img: 'http://forum.fok.nl/usericons/12221/tijn_mod.gif'
Poster: 'Light'
Date: 'woensdag 22 januari 2003 11:55'
Sub: ''
Img: 'http://forum.fok.nl/usericons/11802/lampje.jpg'
Poster: 'ChOas'
Date: 'woensdag 22 januari 2003 11:57'
Sub: 'DreamChaser'
Img: 'http://forum.fok.nl/usericons/693/math.gif'
Poster: 'K3'
Date: 'woensdag 22 januari 2003 11:57'
Sub: '(moderator K3-forum)'
Img: 'http://forum.fok.nl/usericons/19383/K3.gif'
Poster: 'Litpho'
Date: 'woensdag 22 januari 2003 11:58'
Sub: 'www.somethingpositive.net'
Img: 'http://forum.fok.nl/usericons/28445/difrancoshouting.jpg'
Poster: 'Tijn'
Date: 'woensdag 22 januari 2003 11:59'
Sub: 'La la laaa la la laaa la la la'
Img: 'http://forum.fok.nl/usericons/12221/tijn_mod.gif'
Poster: 'K3'
Date: 'woensdag 22 januari 2003 12:01'
Sub: '(moderator K3-forum)'
Img: 'http://forum.fok.nl/usericons/19383/K3.gif'
Poster: 'ChOas'
Date: 'woensdag 22 januari 2003 12:01'
Sub: 'DreamChaser'
Img: 'http://forum.fok.nl/usericons/693/math.gif'
Poster: 'Tijn'
Date: 'woensdag 22 januari 2003 12:03'
Sub: 'La la laaa la la laaa la la la'
Img: 'http://forum.fok.nl/usericons/12221/tijn_mod.gif'
Poster: 'Tijn'
Date: 'woensdag 22 januari 2003 12:04'
Sub: 'La la laaa la la laaa la la la'
Img: 'http://forum.fok.nl/usericons/12221/tijn_mod.gif'

Makkelijk in een DB te inserten dus...
"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8044622
quote:
Op woensdag 22 januari 2003 12:08 schreef ChOas het volgende:
Kijk ... Als ik mijn scriptje over deze pagina draai komt
er zo iets uit (de inhoud van de post even weggelaten, want
dat fucked de layout up)
code:
Poster: 'Isabeau'
Date: 'woensdag 22 januari 2003 11:53'
Sub: 'flowers of blood'
Img: 'http://forum.fok.nl/usericons/859/Vampirella.jpg'

Makkelijk in een DB te inserten dus...
Sub en Img zijn niet echt nuttig om in een database te planten. Punt 1 horen ze bij het profiel, niet bij de post. En echt nuttig voor de stats zijn ze ook niet...
  woensdag 22 januari 2003 @ 12:14:09 #165
17061 mvt
blame Canada
pi_8044657
quote:
Op woensdag 22 januari 2003 12:08 schreef ChOas het volgende:
Kijk ... Als ik mijn scriptje over deze pagina draai komt
er zo iets uit (de inhoud van de post even weggelaten, want
dat fucked de layout up)
code:

Makkelijk in een DB te inserten dus...
En dan te bedenken dat sub en img overbodig zijn (waar is sign??)
We were to understand there would be pie and punch?
  woensdag 22 januari 2003 @ 12:16:18 #166
693 ChOas
** Warning: Choking hazard **
pi_8044695
quote:
Op woensdag 22 januari 2003 12:12 schreef Light het volgende:

[..]

Sub en Img zijn niet echt nuttig om in een database te planten. Punt 1 horen ze bij het profiel, niet bij de post. En echt nuttig voor de stats zijn ze ook niet...


Het was maar een voorbeeld jongens, sorry!!

Ik bedoel maar alleen te laten zien dat het makkelijk te
parsen is, en ik heb maar gewoon een paar items genomen
die kort waren, zodat de layout niet opgefucked werd

Eentje doen met inhoud van posts, poster, en datum dan ?

Of gewoon ff scrippie posten zodat je kan experimenteren ?

"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8045020
quote:
Op woensdag 22 januari 2003 12:16 schreef ChOas het volgende:

[..]

Het was maar een voorbeeld jongens, sorry!!

Ik bedoel maar alleen te laten zien dat het makkelijk te
parsen is, en ik heb maar gewoon een paar items genomen
die kort waren, zodat de layout niet opgefucked werd

Eentje doen met inhoud van posts, poster, en datum dan ?

Of gewoon ff scrippie posten zodat je kan experimenteren ?


Scriptje posten is wel een idee, dan kan ik vanavond eventueel ook nog wat gaan spelen.
pi_8045043
Wat dacht je van NIET
Lurf is the message and the message is Lurf
  woensdag 22 januari 2003 @ 12:38:18 #169
693 ChOas
** Warning: Choking hazard **
pi_8045064
quote:
Op woensdag 22 januari 2003 12:36 schreef Light het volgende:

[..]

Scriptje posten is wel een idee, dan kan ik vanavond eventueel ook nog wat gaan spelen.


Is meer een hack, dan een netjes script, maar het werkt voorlopig :
php:
<?
#!/usr/bin/perl -w

use strict;

use 
LWP::Simple;
my $MaxnumberOfTopics=1;
for (
my $Topic=1$Topic<=$MaxnumberOfTopics; ++$Topic)
{
  
#my $Content=get("http://forum.fok.nl/showtopic.php/$Topic/1/255");
  
my $Content=get("http://forum.fok.nl/showtopic.php/257667/1/255");
  
my @Messages=split /);message(/,$Content;
  
$Messages[0]=~s/.*?<SCRIPT TYPE="text\/javascript">message(//;
  
$Messages[-1]=~s/</SCRIPT>.*//;

  
for (@Messages)
  {
    
my @Info=Parse_Msg($_);
    
my ($Poster,$Message,$Sub,$Img,$Date)=@Info[1,8,3,4,6];
    print 
"Poster: $Poster\n";
    print 
"Date: $Date\n";
    print 
"Sub: $Sub\n";
    print 
"Img: $Img\n";
    
#print "Message: $Message\n";
  
};
};

 
sub Parse_Msg
 
{
  
my $Text shift;
  
my @New = ();
  
push(@New, $+) while $Text =~ m{"([^\"\\]*(?:\\.[^\"\\]*)*)",?| ([^,]+),?| ,}gx;
  
push(@New, undef) if substr($Text, -1,1eq ',';
  return @New;
};
?>

"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8045065
quote:
Op woensdag 22 januari 2003 12:37 schreef lurf_doctor het volgende:
Wat dacht je van NIET
Wat zouden we toch moeten doen zonder jouw goede advies?
"If you are depressed you shouldn't be in C major!" - Rick Beato
  woensdag 22 januari 2003 @ 12:39:24 #171
693 ChOas
** Warning: Choking hazard **
pi_8045086
quote:
Op woensdag 22 januari 2003 12:38 schreef Litpho het volgende:

[..]

Wat zouden we toch moeten doen zonder jouw goede advies?


Een fijner leven hebben ?
"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8045241
Overigens werd er hier al over bandbreedte gerept. Dat valt reuze mee hoor.
De scriptjes om de statistieken te maken draaien op de server en die geven alleen serverbelasting, geen dataverkeer.
Alleen de output genereert dataverkeer.

[Dit bericht is gewijzigd door sop op 22-01-2003 12:51]

  woensdag 22 januari 2003 @ 12:49:58 #173
693 ChOas
** Warning: Choking hazard **
pi_8045257
quote:
Op woensdag 22 januari 2003 12:49 schreef sop het volgende:
Overigens werd er hier al over bandbreedte gerept. Dat valt reuze mee hoor.
De scriptjes om de statistieken te maken draaien op de server en die geven alleen serverbelasting, geen dataverkeer.
Alleen de output genereerd dataverkeer.
Uuuuuhm... en de database leegtrekken dus
"I contend that we are both atheists. I just believe in one fewer god than you do.
When you understand why you dismiss all the other possible gods, you will understand why I dismiss yours."

[Stephen Roberts]
pi_8045344
quote:
Op woensdag 22 januari 2003 12:49 schreef ChOas het volgende:

[..]

Uuuuuhm... en de database leegtrekken dus


uiteraard. Maar da's toch gewoon normaal fok! gebruik
pi_8045379
quote:
Op woensdag 22 januari 2003 12:54 schreef sop het volgende:

[..]

uiteraard. Maar da's toch gewoon normaal fok! gebruik


Vast. De hele database in een nachtje leegtrekken normaal gebruik? Ik denk het niet...
abonnement Unibet Coolblue Bitvavo
Forum Opties
Forumhop:
Hop naar:
(afkorting, bv 'KLB')