Unzensierbarkeit, Selbstbestimmung, Erweiterte Möglichkeiten
Total Page:16
File Type:pdf, Size:1020Kb
Freie Suchmaschinen für freie Daten: Unzensierbarkeit, SearchEngine Selbstbestimmung, erweiterte Möglichkeiten Michael Christen, [email protected] Summit Of New Thinking, 16.11.2012 Station Berlin, Berlin Abstract SearchEngine Suchmaschinen sind durch ihre Ergebnisauswahl meinungsbildend, sie führen uns durch das Ergebnisranking selektiv zu Informationen und beeinflussen letztendlich Normen und Werte von Gemeinschaften. Die Nutzer sind es gewohnt, dass Suchportale für sie bereitgestellt werden, aber welche Vorteile kann es haben, wenn die Nutzer selbst die Suchmaschine für sich und andere bereitstellen? Zwischen Open Data und dem Nutzer sollte eine eine freie Suche existieren und der Vortrag zeigt, u.a. in live-Demos, wie dies jede(r) leicht selbst machen kann. So manche mögliche Anwendungen von Suchmaschinentechnik wird von den Suchportalen nicht angeboten und das hat ggf. wirtschaftliche und politische Gründe: eigene Relevanz-Regeln, Suchergebnisse mit themenorientierter Ergebnisnavigation, Datei-Suche im Internet und im Intranet mit integriertem Massen-Downloader, virtuelles Browsen auf Webservern wie auf Fileservern und der persönliche Nachrichtendienst ist einfach zu realisieren. Der Vortrag macht die Zuhörer mit der freien Software Solr und YaCy sowie mit Suchmaschinentechnik im allgemeinen vertraut. YaCy ermöglicht außerdem die Peer-to-Peer Vernetzung der Suchmaschinennutzer und erzeugt damit ein dezentrales, unzensierbares Suchmaschinennetz. Es werden Wissensmanagement-Methoden mit Hilfe von Suchmaschinen und alternative Visualisierungen von Suchergebnissen gezeigt. Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Bürgerrechte für eine nachhaltige Wissensgesellschaft: UNO Weltgipfel zur Informationsgesellschaft 2003 Beitrag der Heinrich-Böll-Stiftung (a) Wissen ist Erbe und Besitz der Menschheit und damit frei. (b) Der Zugriff auf Wissen muss frei sein. (c) Alle Menschen haben das Recht auf Kommunikation und Informationsfreiheit. (d) Das Recht auf Achtung der Privatheit ist ein Menschenrecht und ist unabdingbar für die freie und selbstbestimmte Entfaltung von Menschen in der Wissensgesellschaft. aus: http://www.worldsummit2003.de/de/web/52.htm Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net (zentrale) Suchportale ... können Verhaltensprofile der Benutzer anlegen ... Zensur, Verschleierung, Verschmutzung möglich ... besitzen (genau wie ,Clouds‘) Personendaten Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Zugriff auf Wissen Brücke zwischen Daten und Nutzer freie Daten können nur dann wirklich frei sein wenn sie mit freier Software gefunden werden können freie Daten Suche Nutzer u.a.: Suchmaschinenmonopol: Der Nutzer ist auf die Existenz und korrekte freie Software proprietäre und Funktion proprietärer, zentralisierte Technik, zentralisierter und Daten unter Creative Aufzeichnung aller kontrollierter Suchportale Commons Lizenz Datenspuren, Zensur, angewiesen, um freie Open Access Archive Filterung, Löschung, Inhalte finden zu können Verschmutzung durch Werbung Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Zugriff auf Wissen Brücke zwischen Daten und Nutzer freie Daten können nur dann wirklich frei sein wenn sie mit freier Software gefunden werden können freie Daten Suche Nutzer Ordnung Ranking Relevanz Gemeinschaft In einer geschlossenen Gemeinschaft existieren bestimmte Relevanz- kriterien. Ranking beeinflusst Normen und Werte einer Gemeinschaft! Suchmaschinen haben einen kulturellen Einfluss auf Gemeinschaften! Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Die eigene Suchmaschine Unabhängigkeit ...von zentralen Suchportalen: den eigenen Suchindex erstellen und die Suchfunktionen den eigenen Anforderungen anpassen. Privatsphäre ...Du bist der Suchmaschinenbetreiber: niemand sonst beobachtet die Nutzung! Informationsfreiheit keine Zugriffsgrenzen, keine Zensur, keine Filter, keine Beobachtung durch andere Betreiber, keine ,Verschmutzung‘ (Werbung) und die eigene Relevanz Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Wissen wie Suchmaschinen funktionieren search server web interface I crawler search index api robots balancer queues schema facets opensearch gsa solr network interfaces ranking moderation monitoring file http ftp smb oai-pmh I/O requests Disk/RAM document cache doc parser pdf administration/ xls html rss zip eml steering Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Web-Suche Projekt- und Unternehmensdaten Peer-to-Peer- Suche für Intranet- und Suche Web-Portal Filesuche den Suchindex geteiltes Wissen Konsolidierung mit anderen für verteilte der Datenablage teilen Systeme (ftp/smb-Suche) Zuflucht für Nachrichten- SEO & Web- gefährdete dienste Admin Tools Daten automatisches fremde Server z.B. torrents Suchen ohne durchstöbern Suchananfrage und Strukturen analysieren Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Peer-to-Peer- A Search Engine Cluster consist of Suche independent search engines in the form of a search matrix. den Suchindex mit anderen teilen Search Engine Cluster Search Search Search Search Search Engine Engine Engine Engine Engine Search Search Search Search Search Engine Engine Engine Engine Engine Search Search Search Search Search Engine Engine Engine Engine Engine verticalscaling: moreperformance horizontal scaling: more documents Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Peer-to-Peer- We want to take the search Suche matrix out of the data center to your home. den Suchindex mit anderen teilen Search Search Search Search Search EnginePeer EnginePeer EnginePeer EnginePeer EnginePeer Search Search Search Search Search EnginePeer EnginePeer EnginePeer EnginePeer EnginePeer Search Search Search Search Search EnginePeer EnginePeer EnginePeer EnginePeer EnginePeer Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Peer-to-Peer- The YaCy Search Engine Cluster Suche consist of independent search engines, but they are connected den Suchindex in an efficient way using a mit anderen distributed hash table. teilen Peer Peer Peer Peer Peer Peer Peer Crawl the web, create a DHT Search in a web index, distribute Peer Distributed Hash Table Peer Distributed Hash Table the index Peer Peer Peer Peer DHT-Store DHT-Read Peer Peer Peer Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Peer-to-Peer- Everyone can join the network. Suche Eveyone can contribute to the search index. Nobody can censor the global index. den Suchindex mit anderen teilen Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net Web-Suche Projekt- und Unternehmensdaten Peer-to-Peer- Suche für Intranet- und Suche Web-Portal Filesuche den Suchindex geteiltes Wissen Konsolidierung mit anderen für verteilte der Datenablage teilen Systeme (ftp/smb-Suche) Zuflucht für Nachrichten- SEO & Web- gefährdete dienste Admin Tools Daten automatisches fremde Server z.B. torrents Suchen ohne durchstöbern Suchananfrage und Strukturen analysieren Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net - Vernetzung von Wissen Suche für - Vernetzung von Menschen Web-Portal SearchEngine geteiltes Wissen für verteilte Systeme Suchmaschine technologische Ebene (,wie setze ich Technik ein‘) soziotechnische Ebene (,wie gehe ich mit Technik um‘) Create and Share Produktion Dokumente Projektsteuerung Versionskontrolle (micro)Blogging Vernetzung von Wissen Vernetzung von Vernetzung von Menschen Vernetzung Discussion Bugtracker Freie Suchmaschinen für freie Daten: Unzensierbarkeit, Selbstbestimmung, erweiterte Möglichkeiten Michael Christen Summit Of New Thinking, Berlin, 16.11.2012 [email protected], http://yacy.net YaCy als Suchappliance mit vielfältiger Datenerfassung Viele Datenerfassungsfunktionen - Crawler für http(s), ftp, smb, robots.txt-compliant, Web Cache - Netzwerkscanner für Intranet, viele Parser! - RSS Feed Importer, OAI-PMH Importer, Import von Dublin Core Freie Suchmaschinen für freie Daten: