GC General Chat
Hier kun je praten over van alles en nog wat. Eigenlijk alles wat niet in een van de andere rubrieken thuishoort.
Wacht maar even, bouw ik wel ff in (als het me nog lukt, heb bier en een joint opquote:Op zaterdag 12 april 2008 23:33 schreef Piles het volgende:
Wordt / is het ook mogelijk om alleen op TT te zoeken?
) 
Edit: laat eerst maar even, gaat nu niet lukken. Ik ga wel een functie inbouwen dat het met de operator 'title:' mogelijk is om alleen dat in de titel te zoeken. Nu wordt er standaard ook in de titel gezocht.
[ Bericht 16% gewijzigd door The_Terminator op 12-04-2008 23:43:25 ]
Ja, maar ik was pas bijvoorbeeld opzoek naar alle MooiWeerDeLeeuw-topics, en als je daar op zoekt krijg je vanallesquote:Op zaterdag 12 april 2008 23:37 schreef The_Terminator het volgende:
Nu wordt er standaard ook in de titel gezocht.
Maar heeft geen haast
- Prive gegevens op verzoek van de poster weggehaald. -
[ Bericht 89% gewijzigd door Sander op 13-05-2011 00:20:42 ]
[ Bericht 89% gewijzigd door Sander op 13-05-2011 00:20:42 ]
Wat je zou kunnen doen is een + voor het woord zetten dat je zoekt. Dus bijv: +mooi +weer of "De leeuw".quote:Op zaterdag 12 april 2008 23:50 schreef Piles het volgende:
[..]
Ja, maar ik was pas bijvoorbeeld opzoek naar alle MooiWeerDeLeeuw-topics, en als je daar op zoekt krijg je vanalles
Maar heeft geen haast
Dan krijgt dat woord een hogere waardering zeker?quote:Op zondag 13 april 2008 00:09 schreef The_Terminator het volgende:
[..]
Wat je zou kunnen doen is een + voor het woord zetten dat je zoekt. Dus bijv: +mooi +weer of "De leeuw".
Ze weten er wel van hoorquote:Op zaterdag 12 april 2008 23:53 schreef Yashaaaaa het volgende:
Beetje apart alleen dat ik nog geen rood heb gezien in dit topic
Nope, met een + moet verplicht voorkomen. Een soort van AND operatorquote:Op zondag 13 april 2008 00:13 schreef Piles het volgende:
[..]
Dan krijgt dat woord een hogere waardering zeker?
Even een kleine update, ik heb namelijk het volgende aangepast:
-Zoekterm alleen in het topicdata veld zoeken en niet in het topicstarter veld.
-Betere uitleg bij bepaalde opties geplaatst.
-Zoeken naar meerdere topicstarters toegevoegd, dit geldt ook voor het veld met de topicstarter(s) die niet mag/mogen voorkomen.
-Zoekterm alleen in het topicdata veld zoeken en niet in het topicstarter veld.
-Betere uitleg bij bepaalde opties geplaatst.
-Zoeken naar meerdere topicstarters toegevoegd, dit geldt ook voor het veld met de topicstarter(s) die niet mag/mogen voorkomen.
quote:Warning: Division by zero in /srv/www/htdocs/foksearch/search.php on line 361
Dit was de link.
[edit]
repareren pls.
Ik moet zoeken
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
Fixed.quote:Op maandag 14 april 2008 02:22 schreef Jegorex het volgende:
[..]
Dit was de link.
[edit]
repareren pls.
Ik moet zoeken
wow, dat was snelquote:
thnx.
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
quote:Op maandag 14 april 2008 02:22 schreef Jegorex het volgende:
[Warning: Division by zero in /srv/www/htdocs/foksearch/search.php on line 361]
Props voor deze search, TT! Jammer dat er dan weer gezeik is, en dat hij niet gewoon op FOK! wordt gezet, maar fok dat, zo werkt hij ook prima
.
Het is tijd voor taart, bier en joints!
Alle topics zijn namelijk geïndexeerd (met uitzondering van topics in besloten fora), en dit is wel iets om trots op te zijn vind ik
1095308 topics in de index die meer dan een gig groot is, een paar maand om alles binnen te halen en 64328791 geïndexeerde woorden. Echter ben ik nog niet klaar aangezien ik nog niet de status van alle topics heb, echter zou dit over een paar week ook volledig moeten zijn.
Veel zoekplezier, en als deze search het niet vind bestaat het simpelweg niet!
Alle topics zijn namelijk geïndexeerd (met uitzondering van topics in besloten fora), en dit is wel iets om trots op te zijn vind ik
1095308 topics in de index die meer dan een gig groot is, een paar maand om alles binnen te halen en 64328791 geïndexeerde woorden. Echter ben ik nog niet klaar aangezien ik nog niet de status van alle topics heb, echter zou dit over een paar week ook volledig moeten zijn.
Veel zoekplezier, en als deze search het niet vind bestaat het simpelweg niet!
Huldequote:Op zondag 20 april 2008 00:37 schreef The_Terminator het volgende:
Het is tijd voor taart, bier en joints!
Alle topics zijn namelijk geïndexeerd (met uitzondering van topics in besloten fora), en dit is wel iets om trots op te zijn vind ik
1095308 topics in de index die meer dan een gig groot is, een paar maand om alles binnen te halen en 64328791 geïndexeerde woorden. Echter ben ik nog niet klaar aangezien ik nog niet de status van alle topics heb, echter zou dit over een paar week ook volledig moeten zijn.
Veel zoekplezier, en als deze search het niet vind bestaat het simpelweg niet!
Het duurde gewoon meer dan 3 uur om de MySQL data om te zetten naar een bruikbare Lucene indexquote:
Maargoed, voor wat hoort wat
. Puick werck.
Ja, met deze account wel. Boefje.quote:Op zondag 20 april 2008 00:58 schreef The_Terminator het volgende:
[..]
Wat dit: ( klaag *hier* over wk ) jouw eerste topic?
Even de search testenquote:
Als je namelijk op een TS zoekt zonder zoekopdracht zou hij namelijk met de datum oplopend als eerste resultaat het eerste topic van die ts moeten weergeven.
Gaat idd snel zeg 
Maar zou je ook een kolom kunnen maken met het aantal posts in een topic? Want soms klik je een topic aan met 2 replies...schiet niet op
Maar zou je ook een kolom kunnen maken met het aantal posts in een topic? Want soms klik je een topic aan met 2 replies...schiet niet op
(:
Dat is te variabel. Het kan wel, echter kan het dan zeer onnauwkeurig worden. Dit betekend dat ik elke dag zeer veel topics moet indexeren en verwerken in de zoekindex, iets dat op mijn manier van indexeren gewoon niet mogelijk is.quote:Op zondag 20 april 2008 01:38 schreef nein het volgende:
Maar zou je ook een kolom kunnen maken met het aantal posts in een topic? Want soms klik je een topic aan met 2 replies...schiet niet op
En versie 1.1 is hierbij vrijgegeven
Deze versie bevat zoals eerder vermeld de grotere index, hiernaast heb ik ook wat verbeteringen aangebracht wat betreft het specifiek zoeken. Je kunt nu ook het subforum aanklikken bij de gevonden resultaten, dan wordt er alleen in dat subforum gezocht naar de opgegeven zoekopdracht. Hetzelfde kan bij de TS, dan wordt er specifiek op die TS gezocht gecombineerd met de gegeven zoekopdracht en (als opgegeven) ook het subforum.
Verder heb ik de eerdervermelde 'division by zero' fout verholpen, dit werd veroorzaakt door het niet goed verwerken van de URL, dit ging echter wel goed bij de paginaparser en die wou pagina's verwerken die er niet waren.
Dat was het wel zo'n beetje, mocht je bugs tegenkomen wees dan niet bang om het hier te vermelden
Deze versie bevat zoals eerder vermeld de grotere index, hiernaast heb ik ook wat verbeteringen aangebracht wat betreft het specifiek zoeken. Je kunt nu ook het subforum aanklikken bij de gevonden resultaten, dan wordt er alleen in dat subforum gezocht naar de opgegeven zoekopdracht. Hetzelfde kan bij de TS, dan wordt er specifiek op die TS gezocht gecombineerd met de gegeven zoekopdracht en (als opgegeven) ook het subforum.
Verder heb ik de eerdervermelde 'division by zero' fout verholpen, dit werd veroorzaakt door het niet goed verwerken van de URL, dit ging echter wel goed bij de paginaparser en die wou pagina's verwerken die er niet waren.
Dat was het wel zo'n beetje, mocht je bugs tegenkomen wees dan niet bang om het hier te vermelden
Waarom wordt deze "pure porno snelle zoek" niet eingezetzt als standaard zoekfunctie van Fok! ? Ben benieuwd hoe de zoek het onder zwaardere load doet namelijk. Will it break or triumph?
Hoe staat de crew eigenlijk tegenover deze zoek TT? Daar al iets van vernomen?
Hoe staat de crew eigenlijk tegenover deze zoek TT? Daar al iets van vernomen?
Common sense is my super power. What's yours?
Has anyone really been far even as decided to use even go want to do look more like?
Has anyone really been far even as decided to use even go want to do look more like?
Volgens mij mag die search gewoon, maar wat ik ervan begreep zijn ze ook bezig voor een search in RDEquote:Op zondag 20 april 2008 14:12 schreef neo2000 het volgende:
Waarom wordt deze "pure porno snelle zoek" niet eingezetzt als standaard zoekfunctie van Fok! ? Ben benieuwd hoe de zoek het onder zwaardere load doet namelijk. Will it break or triumph?
Hoe staat de crew eigenlijk tegenover deze zoek TT? Daar al iets van vernomen?
Ja, sinds jaar en dag. Alleen heeft dat project weinig prioriteit (Danny: "Als je wilt zoeken gebruik je google.fok.nl maar, of de search lite") en derhalve duur het al "even". Waraom dan niet in de tussentijd een beter product gebruiken wat het al doet, en nog goed ook?quote:Op zondag 20 april 2008 14:14 schreef JortK het volgende:
[..]
Volgens mij mag die search gewoon, maar wat ik ervan begreep zijn ze ook bezig voor een search in RDE
De zoekfunctie (of thuisserver.net) ligt er even uit schat ik..quote:
Al met al is de downtime van de zoek altijd nog minder dan de downtime van fok in het algemeen, dus geen reden tot klagen..
Common sense is my super power. What's yours?
Has anyone really been far even as decided to use even go want to do look more like?
Has anyone really been far even as decided to use even go want to do look more like?
Daar zijn ze helemaal niet mee bezig, dat was slechts een kutsmoes.quote:Op zondag 20 april 2008 14:14 schreef JortK het volgende:
[..]
Volgens mij mag die search gewoon, maar wat ik ervan begreep zijn ze ook bezig voor een search in RDE
Ah. Dat had ik nog niet meegekregenquote:Op zondag 20 april 2008 14:26 schreef Farenji het volgende:
[..]
Daar zijn ze helemaal niet mee bezig, dat was slechts een kutsmoes.
Tja, dit soort dingen kunnen gebeuren. Nu heb ik er wel een UPS tussen zitten, echter zorgt die ervoor dat de server veilig af kan sluiten en werkt de site nog steeds nietquote:
Danny weet hiervan, ik heb hem immers moeten vragen of ik zijn layout mocht gebruiken. Als ze deze search standaard in willen bouwen mogen ze van mij, echter wordt er volgens Breuls al aan een andere zoekfunctie gewerkt en zou dit niet zo heel lang meer op zich mogen laten wachten.quote:Op zondag 20 april 2008 14:14 schreef JortK het volgende:
[..]
Volgens mij mag die search gewoon, maar wat ik ervan begreep zijn ze ook bezig voor een search in RDE
Niet volgens Breuls hier:quote:Op zondag 20 april 2008 15:17 schreef The_Terminator het volgende:
[..]
..echter wordt er volgens Breuls al aan een andere zoekfunctie gewerkt en zou dit niet zo heel lang meer op zich mogen laten wachten.
Dus ik zeg, er in rammen dat ding..!quote:Op zondag 20 april 2008 14:26 schreef Farenji het volgende:
[..]
Daar zijn ze helemaal niet mee bezig, dat was slechts een kutsmoes.
Common sense is my super power. What's yours?
Has anyone really been far even as decided to use even go want to do look more like?
Has anyone really been far even as decided to use even go want to do look more like?
Tja, hier vermeld Breuls weer heel iets anders: Zoekfunctie, tijdelijk etcquote:Op zondag 20 april 2008 15:21 schreef neo2000 het volgende:
[..]
Niet volgens Breuls hier:
[..]
Dus ik zeg, er in rammen dat ding..!
Het is allemaal een beetje tegenstrijdig, en ook ik weet niet meer wat ik nou moet geloven.
quote:Op zondag 20 april 2008 15:17 schreef The_Terminator het volgende:
[..]
Danny weet hiervan, ik heb hem immers moeten vragen of ik zijn layout mocht gebruiken. Als ze deze search standaard in willen bouwen mogen ze van mij, echter wordt er volgens Breuls al aan een andere zoekfunctie gewerkt en zou dit niet zo heel lang meer op zich mogen laten wachten.
"Er komt een search! En die zal de beste van allemaal komen! En hij komt er binnen een maand! Echt waar! Daarom ondersteunen we geen enkel ander initiatief, want er komt namelijk heel snel een officiele search. Die zal beter zijn dan alle andere searches! Er is alleen niemand aan bezig en prioriteit heeft ie ook niet! We hebben het namelijk te druk met de oneindig krachtige servers en onze geweldige supersnelle forumsoftware. Die gaat zo snel en het forum heeft daardoor zo weinig downtime, die moeten we een beetje afremmen! Dan heeft de vijand ook nog wat kans! Maar berg je maar voor de search want hij komt! Echt!"
Aldus Breuls Al'Sahhaf.
Waarschuwing: ik ben totaal geen database kenner!!quote:Op zondag 20 april 2008 01:57 schreef The_Terminator het volgende:
[..]
Dat is te variabel. Het kan wel, echter kan het dan zeer onnauwkeurig worden. Dit betekend dat ik elke dag zeer veel topics moet indexeren en verwerken in de zoekindex, iets dat op mijn manier van indexeren gewoon niet mogelijk is.
Maar..zou het dan niet mogelijk zijn om alleen de titel op jouw manier te indexeren, en zodra je zoekmachine de titels (+URLs dus) heeft gevonden, dat dan op dat moment de meest recente data van het aantal posts eruit vist en dat dan in de zoekresultaten zet? Want als je iets realtime eruit vist, hoeft dat toch niet geindexeert te worden?
Of ben ik nu gewoon onwetend aan het lullen
(:
quote:Op zondag 20 april 2008 15:45 schreef Farenji het volgende:
[..]
[ afbeelding ]
"Er komt een search! En die zal de beste van allemaal komen! En hij komt er binnen een maand! Echt waar! Daarom ondersteunen we geen enkel ander initiatief, want er komt namelijk heel snel een officiele search. Die zal beter zijn dan alle andere searches! Er is alleen niemand aan bezig en prioriteit heeft ie ook niet! We hebben het namelijk te druk met de oneindig krachtige servers en onze geweldige supersnelle forumsoftware. Die gaat zo snel en het forum heeft daardoor zo weinig downtime, die moeten we een beetje afremmen! Dan heeft de vijand ook nog wat kans! Maar berg je maar voor de search want hij komt! Echt!"
Aldus Breuls Al'Sahhaf.
prachtig
(:
Dat kan wel, echter moet ik dan voor elke pagina een stuk of 40 requests doen op het forum, ik denk niet dat Danny hier heel blij mee is aangezien dat een enorme belasting voor de database is.quote:Op zondag 20 april 2008 19:47 schreef nein het volgende:
[..]
Waarschuwing: ik ben totaal geen database kenner!!
Maar..zou het dan niet mogelijk zijn om alleen de titel op jouw manier te indexeren, en zodra je zoekmachine de titels (+URLs dus) heeft gevonden, dat dan op dat moment de meest recente data van het aantal posts eruit vist en dat dan in de zoekresultaten zet? Want als je iets realtime eruit vist, hoeft dat toch niet geindexeert te worden?
Of ben ik nu gewoon onwetend aan het lullen
Oow..jeumig, das idd wel erg zwaar ja!quote:Op zondag 20 april 2008 22:46 schreef The_Terminator het volgende:
[..]
Dat kan wel, echter moet ik dan voor elke pagina een stuk of 40 requests doen op het forum, ik denk niet dat Danny hier heel blij mee is aangezien dat een enorme belasting voor de database is.
(:
Komt nog bij dat FOK! soms erg langzaam is en het dan een eeuwigheid duurt om al die data op te halen. Op het moment gaat het wel weer lekker snel, maar als ik voor elke zoekopdracht 40 requests ga versturen kan dat negatieve gevolgen hebben.quote:
Dit zou alleen mogelijk zijn als de zoekfunctie op de FOK! servers zelf draait, dan is het namelijk periodiek mogelijk om die data in de index weg te schrijven, laten we zeggen van de laatste 10000 topics.
Top T_Tquote:Op zondag 20 april 2008 00:37 schreef The_Terminator het volgende:
64328791 geïndexeerde woorden.
Wat is het meestgebruikte woord op FOK?
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
Hierbij de top 10:quote:Op maandag 21 april 2008 02:46 schreef Jegorex het volgende:
[..]
Top T_T
Wat is het meestgebruikte woord op FOK?
1. niet 444725
2. maar 407241
3. voor 377922
4. zijn 314873
5. naar 228756
6. door 225080
7. hier 223782
8. mijn 209076
9. 2003 204018
10. heeft 196037
Hoe doe je dat eigenlijk met smilies, levert dat geen shit op, of converteer je die terug naar de UBBcode?
Smilies worden verwijderd bij het indexeren, die zie je dus nooit meer terug in de index.quote:Op maandag 21 april 2008 15:55 schreef JortK het volgende:
Hoe doe je dat eigenlijk met smilies, levert dat geen shit op, of converteer je die terug naar de UBBcode?
Kan Danny geen kopietje van de benodigde tabellen voor je regelen, ouderwetsch op DVD bijvoorbeeld, zodat jij thuis een index t/m April 2008 kunt maken? En daarna de boel op een eigen fok search server zetten die nieuwe topics toevoegt en die iedereen naar hartelust laat zoeken zonder de rest te belasten?quote:Op zondag 20 april 2008 23:18 schreef The_Terminator het volgende:
Komt nog bij dat FOK! soms erg langzaam is en het dan een eeuwigheid duurt om al die data op te halen. Op het moment gaat het wel weer lekker snel, maar als ik voor elke zoekopdracht 40 requests ga versturen kan dat negatieve gevolgen hebben.
De database is een gig of 75, dus dat zouden dan 10 DVD'tjes worden, en dan moeten het nog dual layers zijn ookquote:Op maandag 21 april 2008 16:26 schreef dvr het volgende:
[..]
Kan Danny geen kopietje van de benodigde tabellen voor je regelen, ouderwetsch op DVD bijvoorbeeld, zodat jij thuis een index t/m April 2008 kunt maken? En daarna de boel op een eigen fok search server zetten die nieuwe topics toevoegt en die iedereen naar hartelust laat zoeken zonder de rest te belasten?
Dan nog zit ik met het probleem dat ik nog steeds de huidige status moet ophalen via http requests van de laatst geupdate topics, anders kun je met DVD's blijven slepenquote:Op maandag 21 april 2008 16:26 schreef dvr het volgende:
[..]
Kan Danny geen kopietje van de benodigde tabellen voor je regelen, ouderwetsch op DVD bijvoorbeeld, zodat jij thuis een index t/m April 2008 kunt maken? En daarna de boel op een eigen fok search server zetten die nieuwe topics toevoegt en die iedereen naar hartelust laat zoeken zonder de rest te belasten?
Op zich heb ik de benodigde data al, ik heb namelijk alle openingposts al geïndexeerd. Ik mis alleen alle reacties, echter gaat het hier om bijna 60000000 berichten (juist, 60 miljoen), ik ben bang dat zelfs Lucene het daar moeilijk mee gaat krijgen en er een andere engine benodigd is.
Sommige mensen hebben niet door hoe groot FOK! eigenlijk is... Als je de statistieken zou zien dan zou je ook meteen weten waarom er nog geen volledige search is en waarom het soms heel traag is.quote:Op maandag 21 april 2008 16:32 schreef JortK het volgende:
[..]
De database is een gig of 75, dus dat zouden dan 10 DVD'tjes worden, en dan moeten het nog dual layers zijn ook
Iets meer dan een gig, echter zijn het alleen openingposts die ik geïndexeerd heb, en veelvoorkomende woorden zijn hier ook nog eens uitgehaald.quote:
Ik begrijp het wel, heb zelf ook dagelijks met dit soort omgevingen te maken dusquote:Op maandag 21 april 2008 16:39 schreef The_Terminator het volgende:
[..]
Sommige mensen hebben niet door hoe groot FOK! eigenlijk is... Als je de statistieken zou zien dan zou je ook meteen weten waarom er nog geen volledige search is en waarom het soms heel traag is.
Gesloten gedeeltes zeker ook niet meegenomen?quote:Op maandag 21 april 2008 16:41 schreef The_Terminator het volgende:
[..]
Iets meer dan een gig, echter zijn het alleen openingposts die ik geïndexeerd heb, en veelvoorkomende woorden zijn hier ook nog eens uitgehaald.
Besloten fora zijn idd niet geïndexeerd, gearchiveerde fora echter wel.quote:Op maandag 21 april 2008 16:42 schreef JortK het volgende:
[..]
Ik begrijp het wel, heb zelf ook dagelijks met dit soort omgevingen te maken dus
[..]
Gesloten gedeeltes zeker ook niet meegenomen?
En, wat vinden jullie van de search in de huidige staat? Ik ben wel benieuwd naar het volgende; is de snelheid voldoende? Vind je wat je zoekt? Weet je verbeterpunten (buiten het feit dat de subfora nog even op alfabetische volgorde moeten en dat er eventueel meer velden met data beschikbaar komen)?
Uiteraard mag je gerust kritiek leveren. Ik krijg maar weinig feedback in dit topic, en dat kan of een goed teken zijn, of een slecht teken omdat maar weinig deze search blijken te gebruiken (mijn statistieken laten namelijk zien dat er wel degelijk veel gebruik van wordt gemaakt).
Als iemand overigens weet hoe ik die rare tekens in titels om kan zetten naar de juiste tekens hoor ik het graag, trema's en sommige andere tekens worden namelijk niet goed weergegeven op het moment.
Uiteraard mag je gerust kritiek leveren. Ik krijg maar weinig feedback in dit topic, en dat kan of een goed teken zijn, of een slecht teken omdat maar weinig deze search blijken te gebruiken (mijn statistieken laten namelijk zien dat er wel degelijk veel gebruik van wordt gemaakt).
Als iemand overigens weet hoe ik die rare tekens in titels om kan zetten naar de juiste tekens hoor ik het graag, trema's en sommige andere tekens worden namelijk niet goed weergegeven op het moment.
HTML entities?quote:Op dinsdag 22 april 2008 17:26 schreef The_Terminator het volgende:
En, wat vinden jullie van de search in de huidige staat? Ik ben wel benieuwd naar het volgende; is de snelheid voldoende? Vind je wat je zoekt? Weet je verbeterpunten (buiten het feit dat de subfora nog even op alfabetische volgorde moeten en dat er eventueel meer velden met data beschikbaar komen)?
Uiteraard mag je gerust kritiek leveren. Ik krijg maar weinig feedback in dit topic, en dat kan of een goed teken zijn, of een slecht teken omdat maar weinig deze search blijken te gebruiken (mijn statistieken laten namelijk zien dat er wel degelijk veel gebruik van wordt gemaakt).
Als iemand overigens weet hoe ik die rare tekens in titels om kan zetten naar de juiste tekens hoor ik het graag, trema's en sommige andere tekens worden namelijk niet goed weergegeven op het moment.
Had ik al geprobeerd, dit lost het probleem helaas niet op.quote:
Het probleem is dat bijv. wél wordt weergegeven als: wél
Heeft dat niet met UTF-8 te maken?quote:Op dinsdag 22 april 2008 18:10 schreef The_Terminator het volgende:
[..]
Had ik al geprobeerd, dit lost het probleem helaas niet op.
Het probleem is dat bijv. wél wordt weergegeven als: wél
foei T_T
Parse error: parse error, unexpected ',' in /srv/www/htdocs/foksearch/searchcore/search.php on line 42
Parse error: parse error, unexpected ',' in /srv/www/htdocs/foksearch/searchcore/search.php on line 42
Idd, ik was net ff aan het experimenteren (vandaar ook die foutquote:
) en kwam erachter dat utf8_decode het oplost Thanks voor de hulp.
Experimenteren op een live omgevingquote:Op dinsdag 22 april 2008 18:26 schreef The_Terminator het volgende:
[..]
Idd, ik was net ff aan het experimenteren (vandaar ook die fout
Thanks voor de hulp.
Ah, mooi. Het zelf testen is altijd wat moeilijk, dus ben ik afhankelijk van de ervaringen van anderenquote:
Zo, even de OP geupdate, weg met die lange lappen tekst. Sowieso was de OP ook al behoorlijk outdated.
Goed werkquote:Op dinsdag 22 april 2008 19:31 schreef The_Terminator het volgende:
Zo, even de OP geupdate, weg met die lange lappen tekst. Sowieso was de OP ook al behoorlijk outdated.
Zijn er nog bepaalde zaken welk je van plan bent in te bouwen?
Ik ga proberen het aantal reacties en laatste post in te bouwen, echter heeft dit wel als nadeel dat die informatie na verloop van tijd niet meer up-to-date is. Als ik dit in ga bouwen dan zou ik elke avond de laatste 10000 topics op moeten halen en daarvan de status updaten, opzich wel te doen, echter is het nooit 100% synchroon te krijgen omdat ik geen directe DB toegang heb.quote:Op dinsdag 22 april 2008 19:42 schreef JortK het volgende:
[..]
Goed werk
Zijn er nog bepaalde zaken welk je van plan bent in te bouwen?
Is het niet mogelijk om bijvoorbeeld elke 5 minuten deze pagina op te halen en dan alleen de topics die daarin voorkomen te updaten?
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
Inderdaad,m et Active en New topics moet je een aardig eind komen denk ikquote:Op woensdag 23 april 2008 03:31 schreef Jegorex het volgende:
Is het niet mogelijk om bijvoorbeeld elke 5 minuten deze pagina op te halen en dan alleen de topics die daarin voorkomen te updaten?
Het ophalen van de laatste 10000 topics is, los van de belasting, niet genoeg.quote:Op dinsdag 22 april 2008 20:31 schreef The_Terminator het volgende:
[..]
Ik ga proberen het aantal reacties en laatste post in te bouwen, echter heeft dit wel als nadeel dat die informatie na verloop van tijd niet meer up-to-date is. Als ik dit in ga bouwen dan zou ik elke avond de laatste 10000 topics op moeten halen en daarvan de status updaten, opzich wel te doen, echter is het nooit 100% synchroon te krijgen omdat ik geen directe DB toegang heb.
Op die manier zou je posts in oudere topics missen.
Je zou dit, zoals reeds aangegeven, met de Active Topics kunnen doen, maar dan moet je elk halfuur een update draaien om niets te missen. Ook de index van elk subforum kan je helpen, maar dan moet je weer alle subforums aflopen.
"Directe" DB toegang zou ik ook wel willen voor het maken van stats.
Sport is de belangrijkste bijzaak in het leven.
Ik ben op dit moment bezig met het indexeren zodat ik stats kan brengen zoals JeRa dat deed, maar ik heb de frequentie behoorlijk laag staan, zodat ik het forum bijna niet belastquote:Op woensdag 23 april 2008 09:13 schreef Bruce117 het volgende:
[..]
Het ophalen van de laatste 10000 topics is, los van de belasting, niet genoeg.
Op die manier zou je posts in oudere topics missen.
Je zou dit, zoals reeds aangegeven, met de Active Topics kunnen doen, maar dan moet je elk halfuur een update draaien om niets te missen. Ook de index van elk subforum kan je helpen, maar dan moet je weer alle subforums aflopen.
"Directe" DB toegang zou ik ook wel willen voor het maken van stats.
ik heb al een aantal jaar redelijk wat gegevens voor het maken van stats.quote:Op woensdag 23 april 2008 09:15 schreef JortK het volgende:
[..]
Ik ben op dit moment bezig met het indexeren zodat ik stats kan brengen zoals JeRa dat deed, maar ik heb de frequentie behoorlijk laag staan, zodat ik het forum bijna niet belast
Maar met een ietwat directere toegang zou het er iets makkelijker op worden.
[ Bericht 0% gewijzigd door Bruce117 op 23-04-2008 09:46:57 ]
Sport is de belangrijkste bijzaak in het leven.
Bij mij ging het ophalen van de data ook niet heel snel, dat was ook de reden dat het zo lang duurde voordat ik eindelijk alles had. En dat met die AT zou een optie kunnen zijn, elk half uur die ophalen zou geen extra belasting vormen voor FOK!, en kan gewoon gedaan worden door even een simpele cronjob in te stellen.quote:Op woensdag 23 april 2008 09:15 schreef JortK het volgende:
[..]
Ik ben op dit moment bezig met het indexeren zodat ik stats kan brengen zoals JeRa dat deed, maar ik heb de frequentie behoorlijk laag staan, zodat ik het forum bijna niet belast
Even een kleine aanpassing gedaan, de geselecteerde fora blijven nu ook daadwerkelijk geselecteerd na het verzenden van de zoekopdracht of het klikken op een andere pagina met resultaten.
Het valt me nog mee dat niemand dit heeft opgemerkt:
Stond in de bron verstopt, ik zag het omdat ik toevallig even in de bron keek. Het probleem is nu in iedergeval verholpen.
| 1 |
Stond in de bron verstopt, ik zag het omdat ik toevallig even in de bron keek. Het probleem is nu in iedergeval verholpen.
quote:Op woensdag 19 maart 2008 23:46 schreef The_Terminator het volgende:
Ja, je leest de TT goed, ik ben namelijk al een tijdje bezig om een werkende search voor FOK! te maken. Dit is een geheel eigen project, ik heb alleen wat hulp gehad van Breuls om het inloggen op FOK! goed te laten verlopen, ik had nogal wat problemen met het wegschrijven van de benodigde cookies en het beheren van de sessies voor mijn indexeer script.
Deze search zoekt in meer dan een miljoen topics, om de 2 dagen zorg ik ervoor dat de index weer up-to-date wordt gemaakt. Om de snelheid op orde te houden indexeer ik alleen de OP van een topic, reacties veroorzaken alleen maar ruis en dat komt de zoekresultaten niet ten goede, ook zou ik als ik de reacties meeindexeer gigantisch veel data in mijn database weg moeten schrijven. Ook belast dit FOK! minder aangezien ik het topic inlaad met alleen de OP zichtbaar, 1 post per pagina.
Op het moment heb ik het forum volledig geindexeerd (met uitzondering van besloten fora natuurlijk). Verder maakt deze zoekfunctie gebruik van Lucene, een zoekengine geschreven in Java die zonder enig probleem miljoenen topics zou moeten kunnen doorzoeken in een zeer korte tijd.
Nu moet de search natuurlijk wel getest worden, dit is de URL: http://www.thuisserver.net/foksearch/
Mocht je rare dingen tegenkomen of als de search uitzonderlijk traag gaat kun je dat hier vermelden, ben benieuwd wat jullie er van vinden. Mochten er problemen zijn met betrekking tot beveiligingfouten dan ontvang ik dat het liefst per PM.
Aan degene die dit zocht:
Zoals je ziet check ik ze inderdaad goedquote:hey tt, check je je statistieken wel goed?
quote:Op vrijdag 25 april 2008 22:43 schreef The_Terminator het volgende:
[..]
Wou je verder nog een reactie geven?
Misschien moet je hem ff een PM sturenquote:Op zondag 27 april 2008 21:43 schreef The_Terminator het volgende:
Schop!
Dat was ikquote:Op maandag 28 april 2008 01:37 schreef The_Terminator het volgende:
Aan degene die dit zocht:
[..]
Zoals je ziet check ik ze inderdaad goed
_ word niet meegenomen in een zoekopdracht?
Ik dacht dat ik "T_T" had ingevoerd ipv "tt"
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
Jup, een underscore wordt idd niet meegenomen aangezien dat bij het indexeren ook al verwijderd is, als de underscore dan wel wordt meegenomen in de zoekopdracht wordt er niets gevonden.quote:Op maandag 28 april 2008 09:06 schreef Jegorex het volgende:
[..]
Dat was ik
_ word niet meegenomen in een zoekopdracht?
Ik dacht dat ik "T_T" had ingevoerd ipv "tt"
Ik heb trouwens denk ik een bug gevonden.
Ik was op zoek naar een topic waarvan ik wist dat die door tuvai.net geopend is.
Ik zoek op topicstarter 'tuvai.net', no results.
Voer ik hem gewoon in het zoekopdrachtscherm in dan krijg ik wel results, met als topicstarter... tuvai.net !
Ik was op zoek naar een topic waarvan ik wist dat die door tuvai.net geopend is.
Ik zoek op topicstarter 'tuvai.net', no results.
Voer ik hem gewoon in het zoekopdrachtscherm in dan krijg ik wel results, met als topicstarter... tuvai.net !
Bedankt voor het melden, opgelost.quote:Op maandag 28 april 2008 16:35 schreef JortK het volgende:
Ik heb trouwens denk ik een bug gevonden.
Ik was op zoek naar een topic waarvan ik wist dat die door tuvai.net geopend is.
Ik zoek op topicstarter 'tuvai.net', no results.
Voer ik hem gewoon in het zoekopdrachtscherm in dan krijg ik wel results, met als topicstarter... tuvai.net !
Het is een enorme vooruitgang t.o.v. Fok's eigen zoekfunctie! De grootste beperking is natuurlijk dat alleen in openingsposts wordt gezocht, maar Fok's eigen search geeft alleen resultaten op topicniveau in plaats van berichtniveau, wat erg onpraktisch is en veel onzinresultaten geeft. Dus wat dat betreft geen klachten en alle lof. Maar heb je op dat punt nog plannen - wil je je ooit aan een volledige index wagen, met alle berichten en op berichtniveau, gesteld dat je de hoeveelheid data aankunt? Het zou natuurlijk het mooist zijn als een searchsysteem lokaal kon draaien en rechtstreeks toegang tot Fok's eigen database had (via ODBC) om de indexen 's nachts bij te werken met de nieuwe berichten..quote:Op dinsdag 22 april 2008 17:26 schreef The_Terminator het volgende:
En, wat vinden jullie van de search in de huidige staat?
Het is me nog niet helemaal duidelijk wat er qua syntax mogelijk is in jouw search. Aanhalingstekens voor strings van meerdere woorden lijken te werken, maar haakjes () en operators als AND en NOT niet. Klopt dat?
nb: de eenvoudigste en meest veelzijdige vind ik die van eBay, waar je bijvoorbeeld dit soort phrases kunt ingeven: CD +(funk,rock,jazz,punk) -(disco, "new age") (waarbij de komma's als OR worden geinterpreteerd).
Ik weet niet of het "zonder topicstarter" veld erg handig is.. zou het niet beter zijn als je gewoon "-Tong80" (bv
) kon ingeven in het topicstarter veld? Scheelt weer een regel in de interface.Wat ik verder praktisch zou vinden is de mogelijkheid om een datum range mee te geven. Als je een topic terugzoekt dat je ooit gezien hebt, heb je vaak wel een idee van wanneer die ongeveer was. Je kunt per maand zoeken ("december 2007"), maar iets als "tussen juli 2006 en januari 2007" is nog niet mogelijk. Een aparte dropdown met Laatste "dag, week, maand, kwartaal, halfjaar, jaar, twee jaar" zou trouwens ook handig zijn.
Bedankt voor de feedbackquote:
Standaard wordt er naar alle woorden gezocht, dus OR. Een + of een - voor een woord betekend dat het sowieso voor moet komen of niet voor mag komen. Uiteraard kun je ook tussen aanhalingstekens zoeken en kun je een gedeelte zoeken dmv. het plaatsten van een * achter een woord. Als je bijv. alle woorden met topic wil zoeken doe je als zoekopdracht: 'topi*', dan wordt er gezocht op woorden als topicstarter, topics, topique etc.
Zonder topicstarter is gewoon een extra toevoeging zodat het ook meteen opvalt dat het mogelijk is om een TS uit te sluiten, sommige mensen weten niet dat een - inhoudt dat het woord niet voor mag komen
En dat met die datum ben ik een oplossing voor aan het zoeken. Ik moet even iets maken dat automatisch de tijd berekend tussen 2 opgegeven data, hier ben ik al mee bezig overigens en komt voor de volgende release beschikbaar.
Ik heb even een nieuwe functie toegevoegd, namelijk het zogenaamde 'proximity search', dit betekend dat je kunt zoeken op nabijgelegen woorden. Als je bijv. zoekt op 'bier' en 'tieten' en deze woorden mogen maximaal 2 woorden van elkaar afliggen kun je als zoekopdracht het volgende opgeven: "bier tieten"~2 (waar de 2 aangeeft dat de woorden maximaal 2 woorden van elkaar mogen liggen).
Overigens heb ik plannen om het 'zonder topicstarter' veld te verwijderen aangezien dit niet veel toegevoegde waarde heeft (zoals hierboven al vermeld). Mochten er mensen zijn die toch heil in deze functie zien graag hier even vermelden, mocht ik hier weinig respons op krijgen gaat het veld richting dev/null.
Overigens heb ik plannen om het 'zonder topicstarter' veld te verwijderen aangezien dit niet veel toegevoegde waarde heeft (zoals hierboven al vermeld). Mochten er mensen zijn die toch heil in deze functie zien graag hier even vermelden, mocht ik hier weinig respons op krijgen gaat het veld richting dev/null.
Er werkt iets niet goed bij u:quote:Op maandag 28 april 2008 21:21 schreef The_Terminator het volgende:
Ik heb even een nieuwe functie toegevoegd, namelijk het zogenaamde 'proximity search', dit betekend dat je kunt zoeken op nabijgelegen woorden. Als je bijv. zoekt op 'bier' en 'tieten' en deze woorden mogen maximaal 2 woorden van elkaar afliggen kun je als zoekopdracht het volgende opgeven: "bier tieten"~2 (waar de 2 aangeeft dat de woorden maximaal 2 woorden van elkaar mogen liggen).
Overigens heb ik plannen om het 'zonder topicstarter' veld te verwijderen aangezien dit niet veel toegevoegde waarde heeft (zoals hierboven al vermeld). Mochten er mensen zijn die toch heil in deze functie zien graag hier even vermelden, mocht ik hier weinig respons op krijgen gaat het veld richting dev/null.
quote:Warning: fsockopen(): unable to connect to 192.168.0.11:8080 in /srv/www/htdocs/foksearch/searchcore/luceneparser.php on line 262
Klopt, ik weet dat. De voeding van de zoekserver is kapot, en dit kan ik niet zo even 123 repareren. Overigens vraag ik mij af of het überhaupt de moeite, laat staan het geld waard is om te doen, ik ontvang verder geen respons meer in dit topic, zelfs niet als ik vraag of ik iets zonder problemen weg zou kunnen halen. Ook is de search in 2 dagen tijd maar 1x gebruikt en wordt her en der door mensen die weten dat deze search bestaat gewoon Google aanbevolen. Opzich geen probleem, maar het is een beetje een signaal naar mij dat mijn search eigenlijk maar overbodig is en dat de lite search en Google het stukken beter doen. Ik vind het dan een beetje jammer om er dag en nacht een extra pc voor te moeten laten draaien of geld aan te spenderen.quote:
Daar heb jij gelijk in, maar ik vind het zonde dat er idd niet meer mee gedaan wordt. Google vind echt twee maal niets vergeleken met jouw Search.quote:Op vrijdag 2 mei 2008 00:42 schreef The_Terminator het volgende:
[..]
Klopt, ik weet dat. De voeding van de zoekserver is kapot, en dit kan ik niet zo even 123 repareren. Overigens vraag ik mij af of het überhaupt de moeite, laat staan het geld waard is om te doen, ik ontvang verder geen respons meer in dit topic, zelfs niet als ik vraag of ik iets zonder problemen weg zou kunnen halen. Ook is de search in 2 dagen tijd maar 1x gebruikt en wordt her en der door mensen die weten dat deze search bestaat gewoon Google aanbevolen. Opzich geen probleem, maar het is een beetje een signaal naar mij dat mijn search eigenlijk maar overbodig is en dat de lite search en Google het stukken beter doen. Ik vind het dan een beetje jammer om er dag en nacht een extra pc voor te moeten laten draaien of geld aan te spenderen.
De beste stuurlui staan aan wal is een gezegde, en dat geldt voor veel users die denken het licht gezien te hebben mbt Google.
Google zuigt enorm, en jouw Search is perfect. Zou standaard op Fok! moeten worden.
Ik kan begrijpen dat jij er geen moeite meer in wilt steken op deze manier, en dat is toch jammer gezien de tijd en moeite die jij er al in hebt gestoken.
Dat dus.quote:Op vrijdag 2 mei 2008 00:43 schreef Piles het volgende:
Beetje jammer dat FOK! hier niet meer mee doet
Klopt, maar van de stats wordt ik ook niet echt blij. Mensen zitten altijd te zeuren dat er geen search is (ja, hier zijn al tig topics over geopend), echter zie je die mensen nooit terug als er een search beschikbaar komt. Dit topic is een beetje incrowd geworden, met een paar betatesters (wat ik uiteraard erg waardeer) die zo nu en dan een bug submitten. Echter wordt het ook met de vaste groep mensen steeds minder (de search is uiteraard ook bijna klaar), en zie je geen nieuwe mensen in het topic posten. In het begin zag ik ook echt een piek in het aantal zoekopdrachten, maar dat neemt steeds verder af als er niet in het topic gereageerd wordt (en ik ga het zelf niet elke dag kicken), het houdt zichzelf niet zo in stand op deze manier en na een tijd gebruikt helemaal niemand het meer. Dit zag ik nu ook gebeuren en ik had er eigenlijk wel een beetje genoeg van, zeker als je ziet dat mensen (als ze de kans krijgen mijn search wat bekender te maken) toch gewoon Google of de lite search aanbevelen.quote:Op vrijdag 2 mei 2008 01:03 schreef Juup© het volgende:
[..]
Ik kan begrijpen dat jij er geen moeite meer in wilt steken op deze manier, en dat is toch jammer gezien de tijd en moeite die jij er al in hebt gestoken.
Als er dan vervolgens iets kapot gaat dan heb ik ook geen zin meer om er geld aan te spenderen. Een beetje fatsoenlijke voeding kost al snel 40 euro, en dan te bedenken dat ik ook nog 2x een gig aan geheugen in de server heb gezet en een extra HDD. Dat was allemaal om de search zo goed mogelijk te laten lopen, echter met dit gebruik kun je het zelfs nog op een p2 draaien.
De search doet het weer, voeding uit een andere kast gesloopt en de boel draait weer.
Het is gewoon zonde om zoveel werk verloren te laten gaan, en waar problemen opgelost kunnen worden moet je elke kans grijpen.
Het is gewoon zonde om zoveel werk verloren te laten gaan, en waar problemen opgelost kunnen worden moet je elke kans grijpen.
Laat je niet ontmoedigen - jouw search is beter dan de andere, en als mensen die aan Fok verbonden zijn hem negeren, lijden die waarschijnlijk aan het "not invented here" syndroom.
Wat kunnen wij doen - zullen we hem allemaal in onze signatures opnemen? Hem in alle recente topics over de search ter sprake brengen?
Wat kunnen wij doen - zullen we hem allemaal in onze signatures opnemen? Hem in alle recente topics over de search ter sprake brengen?
Ik zoek vrijwel nooit, maar jouw search is op dit moment wel de beste op fok
Op zondag 8 maart 2009 21:38 schreef Danny het volgende:
fuck de policy. posten die hap!
fuck de policy. posten die hap!
