Top Banner
Recherchieren im Internet: Wie funktionieren Suchmaschinen? Steffen-Peter Ballstaedt Vortrag vor dem Genealogischen Arbeitskreis Tübingen am 17.2.2016
47

Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Sep 01, 2019

Download

Documents

dariahiddleston
Welcome message from author
This document is posted to help you gain knowledge. Please leave a comment to let me know what you think about it! Share it to your friends and learn new things together.
Transcript
Page 1: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

RecherchierenimInternet:WiefunktionierenSuchmaschinen?Steffen-PeterBallstaedt

Vortrag vordemGenealogischen Arbeitskreis Tübingenam17.2.2016

Page 2: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

ZahlenundFakten

▶82%derComputernutzersuchen,79%mailen.▶DiehäufigsteAktivitätimInternetistMailen,gleichdanachkommtSuchen.

▶Über50.000AnfrageninderSekundebeiGoogle!

Page 3: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

PlatzhirschGoogle

Page 4: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

BeziehungsgeflechtderSuchmaschinen

Page 5: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

ZahlenundFakten

▶DieAusdehnungdesInternetkannnurgrobgeschätztwerden!

▶Weltweit:über1MilliardeWebsites▶BRD:etwa15MillionenWebsites▶DasInternetverdoppeltsichalle5,32Jahre

Page 6: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶WiefindeteineSuchmaschineInhaltebzw.DokumenteimWWW?

▶WaskanneineSuchmaschinenichtfinden?▶WiekommtdieTrefferlistezustande(Ranking)?▶WelcheAlternativenzuGooglegibtes?▶WiekannmanpersonenbezogeneDatenimWebsuchen?

AntwortenauffolgendeFragen:

Page 7: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WiefindeteineSuchmaschineInhalteimWWW?

Page 8: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

AufbaueineSuchmaschine

WWW

DatenbankWeb-Repräsentation

IndexerCrawler Searcher

Dokumentenspeicher

Page 9: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Crawling

▶ AusgehendvonbekanntenWebsiteswerdendieLinksverfolgt.

▶ DieText-Dokumentewerdenerfasstundgespeichert(Dokumentenspeicher).

▶Crawling findetkontinuierlichstatt,nachAktualität undPopularität.

Page 10: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Indexierung

▶ ErstellteineRepräsentationdesDokumentsaussprachstatistischenDaten:Worthäufigkeit,Wortposition,WortinTiteloderÜberschrift.

▶ DerIndexalseineriesigeDatenbankistdasHerzeinerSuchmaschine.

▶ BeieinerSuchanfragewirdnichtaufdieDokumenteimWeb,sondernaufdieseRepräsentationdesWebzugegriffen.

Page 11: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Beispiel:IndexierungvonText-Dokumenten

D1 GenealogieuntersuchtverwandtschaftlicheBeziehungenzwischenMenschen.

D2 HeimatgeschichteistengmitGenealogieverbunden.

D3 EineQuellesindKirchenbücher,eineandereQuellesindPersonenstandsbücher.

D4 MitdemWWWhatdieGenealogieeinenAufschwungerfahren.

Page 12: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

IndexderDokumente

Wort Dokument Häufigkeit Position

andere D3 D3,6

Aufschwung D4 D4,8

Beziehungen D1 D1,6

dem D4 D4,2

die D4 D4,4

eine D3 D3:2 D3,1,D3,5

einen D4 D4,7

eng D2 D2,3

erfahren D4 D4,9

Genealogie D1,D2,D4 D1:1D2:1D4:1 D1,1D2,5D4,6

hat D4 D4,4

Heimatgeschichte D2 D2,1

ist D2 D2,2

Kirchenbücher D3 D3,4

Menschen D1 D1,8

mit D2,D4 D2:1D4:1 D2,4D4,1

Personenstandsbücher D3 D3,9

Quelle D3 D3:2 D3,2D3,7

sind D3 D3:2 D3,3D3,8

untersucht D1 D1:1 D1,2

verbunden D2 D2,6

verwandtschaftliche D1 D1,5

WWW D4 D4,3

zwischen D1 D1,7

Suchanfragen,Stichworte

Genealogie D1,D2,D4

Genealogie WWW D4

Genealogie ORWWW D1,D2,D4

„VerwandtschaftlicheBeziehungen“ D1

Page 13: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Searcher

▶ InterpretationderSuchanfrage(dereingegebenStichwörter):– SuchanfrageinderjeweiligenSession– SuchhistoriedesNutzers– angeklickteDokumente– VerweildaueraufeinemTreffer– SuchverhaltenvergleichbarerNutzer

Page 14: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WaskanneineSuchmaschinenichtfinden?

Page 15: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

GrenzenfürdieSuchmaschine

▶ BeschränkungdurchdieStrukturdesWWW:nichtalleWebsitessinderreichbar.

▶ BeschränkungdurchdieStrukturderWebsite:nichtalleDokumentesinderreichbar.

Page 16: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

StrukturdesWWW

Page 17: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

unerreichbareDokumente

▶durchPasswortgeschützteBereiche– Beispiel:Intranets

▶ durchSuchformularenutzbareDatenbanken– BeispielTelefonbuch

▶ Social-Media-Dienste– Beispiel:Facebook,Twitter

▶ Inhalte,diefürCrawlergesperrtsind– gewollterAusschluss(robots exclusion)– Filterung:ZensuroderrechtlichunzulässigeInhalte

▶Echtzeitinhalte,diesichständigverändern– Beispiele:Börsenkurse,Wetterdaten

Page 18: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

SurfaceWebundDeep Web

Page 19: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WiekommtdieTrefferlistezustande(Ranking)?

Page 20: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Ranking

▶DieTreffersindnachabsteigenderRelevanzaufgelistet.

▶DieBerechnungdesRankingistbeijederSuchmaschineandersundeinGeheimnis(Algorithmus)!

▶DasRankingwirdalsKombinationundGewichtungverschiedenerFaktorenberechnet(200beiGoogle)

Page 21: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

ErzeugungderTrefferliste

Textstatistik

PopularitätPageRank Aktualität Lokalität Persona-

lisierungTechnischeFaktoren

Anfrage

Ranking

Page 22: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Ranking-Kriterien

▶ IndasRankinggehenkeinequalitativen,sondernnurquantitativeGrößenein:– link-statistischeVariablen– nutzer-statistischeVariablen

▶GesponserteLinksmüssengekennzeichnetsein.▶DasRankingkanndurchSuchmaschinen-optimierungbeeinflusstwerden.

▶UmdaspersonalisierteRankingzuerzeugen,speichertdieSuchmaschineDatenüberdenBenutzer,erstellteinBenutzerprofil.

Page 23: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

DieseDatenspeichertGoogle

▶dieIP-AdressedesComputers▶dieSuchanfragen(Suchwörter)▶denZeitpunktderSuche▶dieangesteuertenTreffer(auchWerbung)▶VerweildaueraufdenTreffern

Page 24: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

- Geschäftsmodell

▶KontextbezogeneWerbungzudenSuchwörtern

▶PersonenbezogeneWerbungüberangelegteBenutzerprofile

▶VerkaufvonpersönlichenDatenundNutzerprofilenanFirmenfürihrepersonenbezogeneWerbung

Page 25: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

BewertungderTreffer

▶ ImpressumundKontaktmöglichkeitvorhanden▶ seriöseInstitution,z.B.Hochschule,Verlag,

WissenschaftlicheGesellschaft,Qualitätspresse▶ Autoren/AutorinnenderTextesindbenannt▶ AngabevonQuellen,BelegefürBehauptungen▶ VerlinkungaufseriöseSites▶ PublikationsdatumundletzteÄnderung(last

update)▶ Vorsichtbeikommerziellenundgesponserten

Sites!

Page 26: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WelcheAlternativenzuGooglegibtes?

Page 27: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

UniverselleSuchmaschinen

▶ Startpage:AnfragenwerdenanonymisiertanGoogleweitergeleitet.

▶ Qwant:französischeSuchmaschinemitdeutscherVersion

▶ DuckDuckGo:„DieSuchmaschine,dieSienichtverfolgt.“

Page 28: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Meta-Suchmaschinen

▶HabenkeineneigenenIndexüberCrawlerangelegt.

▶SuchanfragenwerdenanmehrereandereSuchmaschinenweitergeleitet.

▶TrefferausmehrerenTrefferlistenwerdenneugerankt.

▶Meta-SuchmaschinenergebenmehrTreffer,abernichtunbedingtrelevantereTreffer!

Page 29: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Meta-Suchmaschinen

▶ Ixquik:keinepersonenbezogeneDatengespeichert

▶Metager:deutscheSuchmaschinederUniHannover

Page 30: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Spezialsuchmaschinen▶EsgibtCrawlerundSuchmaschinenfürspezielleInhalte:Nachrichten,Jobs,Reise,Personen,Bilder,Videos

▶WissenschaftlicheSuchmaschinenwertennurwissenschaftlicheDokumenteaus:– https://scholar.google.de– http://www.base-search.net

▶Portale/Verzeichnisse fürSpezialsuchmaschinen– www.suchmaschinen-datenbank.dewww.suchlexikon.de

Page 31: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WasmachtgeschicktesundprofessionellesSuchenaus?

Page 32: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Anfragetypen

▶GezielteSuchenacheinembestimmtenFaktumoderDokumentmitklardefiniertemErgebnis.Optimal:DerersteTrefferistrichtig

▶RecherchezueinemThemanachbisherunbekanntenInformationenohneklaresEnde.Optimal:VielerelevanteTreffer

Page 33: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

FormulierenvonSuchanfragen

▶PassendeSuchwörter– nichtzubreiteBedeutung– verschiedeneSchreibweisenbeachten– Synonymebeachten– PhrasensucheinAnführungszeichenbeiZitaten

▶EinengungderSuchanfrage– BoolescheOperatorenkombinierenSuchwörter– ErweiterteSuchemitBefehlen:Filetyp,Sprache

Page 34: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Suchwort-VerknüpfungenmitBooleschenOperatoren

AORB HundORKatze 122.000.000TrefferAANDB Hund(AND)Katze 5.800.000TrefferANOTB HundNOTKatze 90.300.000Treffer

(KarotteORMöhre)(SalatNüsse)-Koriander

Page 35: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

Such-Tipps

▶InausländischenVersioneneineruniversalenSuchmaschinesuchen.

▶ GleicheineausländischeSuchmaschineverwenden,z.B.Bing

▶PortaleundVerzeichnissesindLinksammlungenzueinemspeziellenThema.– QualitätsprüfungdurcheinRedakteursteam– nurthemenrelevanteTreffer– VerzeichnisderVerzeichnisse:www.suchlexikon.de

Page 36: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

WiefindetmanpersonenbezogeneDatenimWWW?

FriedrichAdolfBallstaedt*4.4.1884inSchrimm✝ 13.11.1941inStettin

Page 37: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶PhrasensuchemitVornameundNameineineruniversellenSuchmaschine,ev.mitzusätzlichenStichworten– www.google.com

▶PhrasensuchemitandererLänderversion– www.google.fr

▶PhrasensuchemitausländischerSuchmaschine– https://www.yandex.ru

▶PhrasensuchemitandererSpracheinstellung– www.google.de →Einstellungen→ erweiterteSuche→Sprache

direktePersonensuche

Page 38: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

direktePersonensuche

▶NamenseingabenineinespeziellePersonensuchmaschine– ListevonsozialenNetzwerken:http://www.yourtraces.com/

▶SammlungvonInformationenüberlebendePersonenistwegenDatenschutz illegal.

Page 39: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

direktePersonensuche▶SucheinDatenbanken,indereinePersonvermutetwird(teilweiseregistrier- und/oderkostenpflichtig)

▶GenealogischeDatenbanken– https://familysearch.org/family-trees– http://gav.azurewebsites.net

▶Verzeichnisse/PortalevonDatenbanken– https://de.wikipedia.org/wiki/Genealogie-Datenbank– http://wiki-de.genealogy.net/Genealogische_Datenbank/Linkliste

– http://www.heimatarchiv.de/genealogie/webseiten.html▶Telefonbücher;Branchenverzeichnisseetc.

Page 40: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶GenealogischeMeta-Suchmaschine– http://beuss.spdns.de/Crawl/

direktePersonensuche

Page 41: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

indirektePersonensuche▶SuchenachDokumenten,indenendiePersonvermutetwird.– Kirchenbuchportale:– www.archion.de– http://search.ancestry.de/search/db.aspx?dbid=2116– Online-Archive:– https://archive.org/details/genealogy&tab=about– https://archivalia.hypotheses.org/category/genealogie

▶ IndenmeisteingescanntenDokumentenistkeineVolltextsuchemöglich.

Page 42: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

FazitDiegenealogischeForschungverlegtsichimmermehrinsWeb:▶Erschließung:PrimärquellenwerdendigitalisiertundimWebzurVerfügunggestellt.

▶BearbeitungderDatenerfolgtmitGenealogie-Programmen,z.B.Gen_Plus.

▶DieZusammenführungderDatenfindetweltweitüberdasWebstatt.Standard:meistGEDCOM.

Page 43: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶ForschungsergebnissewerdenimmerhäufigerimWebpräsentiert,daeinePrint-Veröffentlichungteuerist.

▶DieVisualisierungderBefundez.B.inStammbäumenerfolgtdurchspezielleProgramme,z.B.GRAMPS.

SchwerdurchschaubarerWildwuchsanAngeboten:DieGrenzezwischenlaienhafterAufarbeitungundwissenschaftlicherForschungverwischen.

Fazit

Page 44: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

VisualisierungdurchGRAMPS

Page 45: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶EinedeutscheOrganisationzurComputergenealogiewurde1989gegründet.

Organisationen

▶EinZiel:dieEDV-gestütztestandardisierteErschließung,BearbeitungundVeröffentlichunggenealogischerQuellen.

Page 46: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

▶FamilyHistory InformationStandardsOrganization,seit2013.

▶„organisation established for the purpose ofdeveloping genealogy and family historyinformation standards onamodernplatform“

Organisationen

Page 47: Recherchieren im Internet: Wie funktionieren Suchmaschinen? · Zahlen und Fakten 82% der Computernutzer suchen, 79% mailen. Die häufigste Aktivität im Internet ist Mailen, gleich

VielenDankfürIhrInteresse!

www.ballstaedt-kommunikation.de ▶ Downloads