YaCy: Open Source Distributed Search Engine
Posted: Wed Dec 09, 2009 5:08 pm
http://www.yacy.net
Το YaCy είναι μία open source GPLv2 μηχανή αναζήτησης του παγκόσμιου ιστού που λειτουργεί κατανεμημένα μέσω ενός peer-to-peer δικτύου. Στόχος του project είναι η δημιουργία μιας ελεύθερης και μη κεντρικοποιημένης (για προφανείς λόγους) search engine που να ανήκει στους χρήστες του διαδικτύου και όχι σε εταιρίες.
Μερικά χρήσιμα στοιχεία:
1) Το πρόγραμμα είναι πανέυκολο στην εγκατάσταση απλά unzip και τρέχεις ένα executable και ξεκινά - δε χρειάζεται καθόλου configuration για να ξεκινήσει να παίζει.
2) Είναι γραμμένο σε java οπότε τρέχει σε πολλά λειτουργικά
3) Μπορεί να ρυθμιστεί να λειτουργεί σαν proxy server ώστε να χρησιμοποιεί τα URLs που γίνονται access σαν seed για το crawl (με ρυθμιζόμενο crawl depth φυσικά)
4) Ανοίγει στο localhost:8080 ένα web interface με την μπάρα αναζήτησης (από εκεί μπαίνεις και στο menu με τις ρυθμίσεις)
5) Το update σε τελευταίες εκδόσεις γίνεται πανέυκολα με 2-3 click από το web interface
6) Τα αποτελέμσατα του search είναι πλήρως ρυθμιζόμενα - ρυθμίζοντας τα αντίστοιχα βάρη μέσα από το web interface
7) Έχει και mode να τρέχει σε κλειστό intranet (robinson mode)
Το ωραίο με το yacy είναι ότι "μαθαίνει" νέα sites πολύ εύκολα: είτε χειροκίνητα (κάνοντας start crawl σε συγκεκριμένο url) είτε αυτόματα μέσω χρήσης του web proxy.
Προς το παρόν έχει πολύ λίγους ενεργούς χρήστες (γύρω στους 50 - 3 από τους οποίους απο PWMN) οπότε δεν έχει crawlάρει μεγάλο μέρος του ίντερνετ, αλλά με κάθε χρήστη το search γίνεται όλο και καλύτερο. Το project αυτό μπορεί να το ενισχύσουν πάρα πολύ κοινότητες όπως το pwmn μιας και είναι πολλοί από εμάς που έτσι και αλλιώς τρέχουν τα μηχανήματά τους 24/7.
*Η έκδοση που κατεβάζεις από το site δεν είναι 100% σταθερή (η εφαρμογή μπορεί να κρεμάσει μετά από μερικές ημέρες) οπότε καλό είναι να κάνετε update μετά την πρώτη εγκατάσταση ( μέσα απο το web interface φυσικά - 3 click υπόθεση)
Το YaCy είναι μία open source GPLv2 μηχανή αναζήτησης του παγκόσμιου ιστού που λειτουργεί κατανεμημένα μέσω ενός peer-to-peer δικτύου. Στόχος του project είναι η δημιουργία μιας ελεύθερης και μη κεντρικοποιημένης (για προφανείς λόγους) search engine που να ανήκει στους χρήστες του διαδικτύου και όχι σε εταιρίες.
Μερικά χρήσιμα στοιχεία:
1) Το πρόγραμμα είναι πανέυκολο στην εγκατάσταση απλά unzip και τρέχεις ένα executable και ξεκινά - δε χρειάζεται καθόλου configuration για να ξεκινήσει να παίζει.
2) Είναι γραμμένο σε java οπότε τρέχει σε πολλά λειτουργικά
3) Μπορεί να ρυθμιστεί να λειτουργεί σαν proxy server ώστε να χρησιμοποιεί τα URLs που γίνονται access σαν seed για το crawl (με ρυθμιζόμενο crawl depth φυσικά)
4) Ανοίγει στο localhost:8080 ένα web interface με την μπάρα αναζήτησης (από εκεί μπαίνεις και στο menu με τις ρυθμίσεις)
5) Το update σε τελευταίες εκδόσεις γίνεται πανέυκολα με 2-3 click από το web interface
6) Τα αποτελέμσατα του search είναι πλήρως ρυθμιζόμενα - ρυθμίζοντας τα αντίστοιχα βάρη μέσα από το web interface
7) Έχει και mode να τρέχει σε κλειστό intranet (robinson mode)
Το ωραίο με το yacy είναι ότι "μαθαίνει" νέα sites πολύ εύκολα: είτε χειροκίνητα (κάνοντας start crawl σε συγκεκριμένο url) είτε αυτόματα μέσω χρήσης του web proxy.
Προς το παρόν έχει πολύ λίγους ενεργούς χρήστες (γύρω στους 50 - 3 από τους οποίους απο PWMN) οπότε δεν έχει crawlάρει μεγάλο μέρος του ίντερνετ, αλλά με κάθε χρήστη το search γίνεται όλο και καλύτερο. Το project αυτό μπορεί να το ενισχύσουν πάρα πολύ κοινότητες όπως το pwmn μιας και είναι πολλοί από εμάς που έτσι και αλλιώς τρέχουν τα μηχανήματά τους 24/7.
*Η έκδοση που κατεβάζεις από το site δεν είναι 100% σταθερή (η εφαρμογή μπορεί να κρεμάσει μετά από μερικές ημέρες) οπότε καλό είναι να κάνετε update μετά την πρώτη εγκατάσταση ( μέσα απο το web interface φυσικά - 3 click υπόθεση)
