Utvikle søkemotor

[Gaasehud]

Hei!

Sikkert noen som allerede sitter og ler av tittelen og tenker jeg er en dust som ikke vet hva jeg spør om. Og det stemmer sikkert.

Men jeg lurte på om noen kan gi noen hint om hvordan man kan utvikle en søkemotor. Jeg skal IKKE bli en konkurrent av Google eller noe i den dur, men hadde vært gøy å lært meg å lage en side som har mulighet for å søke gjennom andre sider, uten bruk av f.eks. Google CSE.

Kan noen hjelpe meg? Regner med at det er mye arbeid om man skal ha mange sider, men tenker mer å bare prøve ut et par stykker? Er det noen veiledning for dette? Det kan vel ikke være så enkelt som en pakke scripts? Takk!

 

[vidarlo]

Sphinx - Free open-source SQL full-text search engine

Gi den en database å jobbe med så har du mykje av det du trenger. Databasen kan du bygge ved hjelp av curl og en del python som parser. Sett den i gang på ei vilkårlig nettside, vent et halvt år til den har laga seg en passelig index...

 

[Gaasehud]

Takk for tipset, har faktisk prøvd sphinx før en gang, men det endte opp med at jeg ga opp fordi jeg ikke forsto hvordan jeg skulle bruke det. Vet du om en tutorial eller en annen måte å gjøre det på?

 

[Magne Thyrhaug]

Ta en titt på Lucene og solr. Gratis og et supert Java-API å jobbe mot (takk til solr for det, ja). En veldig god erstatter for mye av det Fast tilbyr.

Kanskje litt overkill, men likevel!

 

[Muttok]

Lucene porten til .NET fungerer også veldig bra

 

[Thomas Pedersen]

sphinx er veldig bra. raskt som faen.

 

[Gaasehud]

Takk for tipsene. Men sphinx og solr; det ser ut til å være et ganske stort prosjekt å prøve seg fram med disse? Fant ikke noen gode tutorials på de heller, finnes ikke noe litt enklere alternativ som fortsatt funker?

 

[Magne Thyrhaug]

Det er godt mulig mySQL sin fulltext search-sak gjør nytta. Ta en titt på Getting Started With MySQL's Full-Text Search Capabilities

 

[Gaasehud]

Unnskyld, maser fælt i denne tråden gitt. Kikket på forslaget ditt, Magne. Det blir kanskje litt komplisert for meg, er rimelig grønn på MySQL.

Kan noen klare å komme med enda et forslag? Eller en (link til) veileding for sphinx eller solr. Takk for hjelpen!

 

[Pyoocnm]

Hei,

Å utvikle sin egen søkemotor kan være en kompleks oppgave men langt ifra umulig. Begynn i det små, tilegn deg kunnskap og bygg videre på den. Hvis du eget nettsted forsøk å lag en søk funksjon for det.

Amazon.com: Introduction to Data Mining: Pang-Ning Tan, Michael Steinbach, Vipin Kumar: Books
Amazon.com: Understanding Search Engines: Mathematical Modeling and Text Retrieval (Software, Environments, Tools), Second Edition: Michael W. Berry and Murray Browne: Books
Amazon.com: Mining the Web: Discovering Knowledge from Hypertext Data: Soumen Chakrabarti: Books
Amazon.com: Information Retrieval: Algorithms and Heuristics (The Information Retrieval Series)(2nd Edition): David A. Grossman, Ophir Frieder: Books
Amazon.com: Web Data Mining: Exploring Hyperlinks, Contents, and Usage Data (Data-Centric Systems and Applications): Bing Liu: Books
Amazon.com: Practical Text Mining with Perl (Wiley Series on Methods and Applications in Data Mining): Roger Bilisoly: Books
Amazon.com: The Text Mining Handbook: Advanced Approaches in Analyzing Unstructured Data: Ronen Feldman, James Sanger: Books

 

[kongen]

Gjør det raskt, enkelt og billig--> RentACoder.com

 

[Pyoocnm]

^ Da forsvinner gevinsten ved å løse problemet selv.

Har noen øyeblikk da jeg forsøker å gi inspirasjon til individer med en gjør-det-selv mentalitet.

 

[kongen]

^ Da forsvinner gevinsten ved å løse problemet selv.

Det er større gevinst å outsource det du ikke kan selv. Bare spør Bill Gates...

 

[Thomas Pedersen]

Hvis du er grønn på mysql, kan du gjerne begynne med å lære deg det. du trenger forståelse for databaser, gjerne mysql for å lage en søkemotor. spesielt hvis du skal bruke sphinx.

 

[Pyoocnm]

Det er større gevinst å outsource det du ikke kan selv. Bare spør Bill Gates...

Stemmer ikke helt. Du har nok rett i at en økonomisk gevinst vil være større ved å outsource. Dersom en ønsker en hurtig implementasjon og umiddelbare resultater er nok det veien å gå. Men du er ganske ensidig hvis du mener at økonomisk vinning er den eneste gevinsten som fins.