#mojeek — Public Fediverse posts

Pook-Emu Bee: Links For 05-22-26

https://social.emucafe.org/naferrell/pook-emu-bee-links-for-05-22-26/

What are all global web #search engines with own #index?

I don't mean country specific ones like #Yandex , #Baidu, #Naver or #Seznam

But global like #Google , #Bing , #Brave search, #Mojeek , PriEco , mwmbl

https://social.emucafe.org/naferrell/blocking-independent-search-crawlers-07-17-25/

I read an interesting Hacker News comment by user dumbfounder (great username!) on Hacker News today. I excerpt the pertinent part below:

I created a search engine that crawled the web way back in 2003. I used a proper user agent that included my email address. I got SO many angry emails about my crawler, which played as nice as I was able to make it play. Which was pretty nice I believe. If it’s not Google people didn’t want it. That’s a good way to prevent anyone from ever competing with Google.

dumbfounder

I have had problems with bad crawlers (especially bad AI cralwers) on my sites. At the same time, dumbfounder highlights the reverse side of the coin. Many sites block good crawlers such as robots.txt-respecting crawlers for indepdent search engines. While all webmasters are free to control access to their sites as they see fit, allowing Google and other select big tech search crawlers while excluding small and independent search crawlers both limits search diversity and prevents people who may rely on small or niche search engines such as Mojeek, Marginalia, or Seznam from discovering potentially interesting writing. I previously published an article on this issue advocating for webmasters who want to support an open web and search engine diversity to ensure that good crawlers from independent search engines and directories can access their sites.

#bots #googleSearch #marginaliaSearch #mojeek #searchEngines #seznam

Moteurs de recherche : Pourrait-on se passer de Google et Bing ?

Bonjour,

Lorsque que l’on navigue sur internet, on utilise tous un moteur de cherche. Pour beaucoup, il s’agit de celui de Google :

En effet, d’après Statcounter, il est utilisé par près de 88% des personnes en France :

Bing de Microsoft arrive en seconde position avec 5,64%, autant dire que l’écart est énorme.

Il y a une certaine logique à ce que Google soit bien positionné :

1. Il a été lancé en 1998 et fait partie des plus vieux moteurs de recherche, même si ce n’est pas le premier : AltaVista (fermé en 2013) & Lycos ayant démarré en 1994.
2. Il a rapidement montré son efficacité au début écrasant toute la concurrence.
3. Il est le moteur de recherche par défaut de plusieurs navigateurs (Chrome, Safari ou Firefox par exemple).
4. Il est mis en avant au travers d’Android depuis plusieurs années.
5. Il a sa propre indexation, ce qui le rend indépendant.

Ce dernier point est important car bon nombre de moteurs de recherche s’appuient aujourd’hui sur un autre. En réalité, les services faisant cela ne sont pas des moteurs de de recherche à proprement parlé mais plutôt des métamoteurs. Cela veut dire que si le ou les moteurs sur lesquels ils s’appuient tombent, alors les métamoteurs ne sont plus fonctionnels. Un autre danger pourrait venir du fait que les moteurs ayant leur index décident de ne plus afficher les résultats et de les remplacer par du contenu généré via IA.

Dans les métamoteurs, on peut citer Lilo ou Qwant par exemple. Pour ces deux cas, c’est Bing qui fournit les résultats. Pour Qwant, cela est censé changer cette année avec le projet European Search Perspective lancé en association avec Ecosia (un autre métamoteur) pour créer un index Européen.

D’autres comme DuckduckGo sont à mi-chemin entre ces deux modèles et utilisent leur propre Index complété d’un ou plusieurs autres moteurs.

En attendant la concrétisation de ce nouvel index « Européen », quels sont les moteurs de recherches indépendants en dehors de Google et Bing ?

A ma connaissance, il n’y en a que deux si on prend en compte la disponibilité en Français :

1. Mojeek basé au Royaume-Uni et créé en 2004 :

1. Brave Search lancé par Brave Software aux États-Unis en 2021 et indépendant depuis 2023 :

Il y a bien d’autres moteurs de recherche ayant leur propre index comme Yandex (créé en Russie en 1997), Baidu (créé en Chine en 2000) ou encore Naver (créé en Corée du Sud en 1999) mais ils ne proposent pas d’interface en Français, sans parler d’éventuelles autres critiques que l’on pourrait faire à ce sujet.

De ce fait, on peut dire oui sans Google et Bing, on pourrait encore avoir accès à des moteurs de recherche. Maintenant, si on se limite à l’Europe (et non l’UE), il n’y a donc que Mojeek.

Pour finir, vous pouvez regarder la vidéo de Gwên qui m’a inspiré pour creuser également la question et mettre cela par écrit. Elle y rajoute un critère supplémentaire, celui concernant la vie privée ainsi qu’une intervention surprise de Joshua Long (connu comme Josh) pour parler plus en détails de Mojeek :

Bonne recherche 🙂

Autres sources non citées :

• Google — Wikipédia
• AltaVista — Wikipédia
• Mojeek — Wikipédia
• European Search Perspective : Qwant et Ecosia unis pour « un index de recherche européen » – Next
• Naver — Wikipédia
• Yandex — Wikipédia
• Baidu — Wikipédia
• Annonce sur le site de Brave de l’indépendance de leur moteur de recherche (anglais uniquement)

Image de Gerd Altmann from Pixabay

#AltaVista #Bing #Brave #Ecosia #EuropeanSearchPerspective #Google #Lycos #Mojeek #Qwant