школа открытых данны. открытые базы знаний и...

Открытые базы знаний и

семантические викиКатков Юрий, WikiVote!

Содержание

• Linked Open Data и Semantic Web• Стандарты LOD• Основные базы знаний и примеры использования• Dbpedia• Мастер-класс по Dbpedia

Semantic web и Linked DataОсновные стандарты

Linked Open Data и Semantic Web

• Открытые базы знаний являются частью направления Semantic Web

• Ядром Semantic Web являются стандарты• Объект стандартизации – способ представления и обмена

данными• Linked Data использует только часть стандартов Semantic Web

оен

рог

оен

рог

URIUniform Resource Identifier

служит для однозначного именования

сущностей

основное правило: не существует двух объектов с одинаковыми URI

URL – частный случай URI

оен

рог

позволяет представлять данные в виде троек, формируя граф данных

( subject , predicate , object )

URI URI URI или литерал

Леонардо место_рождения ВинчиЛеонардо дата_рождения 15.04.1452

Леонардо да Винчи родился в городе Винчи 15 апреля 1452 года

<http://ex.org/Leo> <http://ex.org/birthDate>

<http://ex.org/Vinci>

"1452-04-15"^^xsd:date

<http://ex.org/Leo> <http://ex.org/birthPlace>

вершина ребро вершина

Графовая модель удобна и гибка

RDF имеет несколько способов записи

Turtle

N-triplesN3

@prefix xsd: <http://www.w3.org/2001/XMLSchema#> . @prefix ex: <http://ex.org/> .

ex:Leo ex:birthDate "1452-04-15"^^xsd:date . ex:Leo ex:birthPlace ex:Vinci .

RDF имеет несколько способов записи

Turtle

N-triplesN3

XMLJSON

<?xml version="1.0"?> <rdf:RDF

xmlns:xsd="http://www.w3.org/2001/XMLSchema#" xmlns:ex="http://ex.org/" xmlns:rdf="http://www.w3.org/1999/02/22-rdf-syntax-ns#">

<rdf:Description rdf:about="http://ex.org/Leo"> <ex:birthDate rdf:datatype = "http://www.w3.org/2001/XMLSchema#date">1452-04-15 </ex:birthDate>

<ex:birthPlace rdf:resource="http://ex.org/Vinci" /> </rdf:Description>

</rdf:RDF>

оен

рог

RDFS и OWLСтандарты для создания структурированных словарей

КРАТКО

RDFS и OWLСтандарты для создания структурированных словарей

RDFS и OWLСтандарты для создания

структурированных словарей

классификаций

глоссариев

классификацийтезаурусов

тематических карт

тезаурусов

таксономий

семантических сетей

схем данных

онтологий

глоссариевсемантических сетей

ЗАЧЕМ НУЖНЫ

Структурированные словари

онтологии

схемы данных

глоссариисемантические сети

таксономии

классификации

тематические карты

тезаурусы

Онтологии нужны для

стандартизациитерминологии

Предложение: связь национальностьБудем всегда называть терминомhttp://dbpedia.org/property/nationality« »

стандартизациитерминологии

автоматического обогащения данных

Предложение: связь национальностьБудем всегда называть терминомhttp://dbpedia.org/property/nationality« »

Любой, кто имеет свойствонациональность, является

человеком, а его национальностьявляется страной. А страна – это

частный случай населенного места« »

Давайте, если говорим о Леонардо даВинчи, будем всегда пользоваться его идентификатором в Dbpedia« »

Автоматическое обогащение данных

оен

рог

SPARQLЗапросы к RDF-данным

SPARQLSPARQL Protocol and RDF Query Language

PREFIX rdf: <http://www.w3.org/1999/02/22-rdf-syntax-ns#> PREFIX dbpedia-owl: <http://dbpedia.org/ontology/>

SELECT * WHERE { ?a rdf:type dbpedia-owl:Company . } LIMIT 100OFFSET 300

Выполняем на dbpedia.org/sparql

?a rdf:type dbpedia-owl:Company

Запрос:

?a rdf:type dbpedia-owl:Company

Запрос:

Открытые базы знанийОбзор состава данных Linked dataПрименение в реальных приложениях

Откуда берутся дети?данные

Их специально

создают

научные группы

создают

Их публикуюткоммерческиефирмы

создают

Их публикуюткоммерческиефирмы

они генерируютсяпо требованию

RDFizers

exporters

Linked Data consumption

Для чего нужны данные

Их можноанализировать

На их основе можно строить

приложения для конечного

пользователя

приложения не для конечногопользователя

Они могут быть частью

логики системы

(базой знаний в смысле ЭС)

Открытые гос. данные

Данные о фильмахЭнциклопедические данные

Данные о музыке

Усиление алгоритмов мат.лингвистики

Рекомендационные системы

Data journalism

Eurostat

Открытые гос.данные

Pubmed

SNOMED-CT

Как искать данные

Общаться

Смотреть каталоги Смотреть визуализации

Искать как текст

Mailing lists

Q&Aфорумы

Swoogle

Sig.ma Sindice

Как знакомиться с данными

Пробные

SPARQL-запросы Смотреть визуализации

Погулять по датасетуCKAN descriptions Sig.ma

Посмотреть метаданные

MarblesVoiD

Semantic Sitemap

LinksailorПосмотреть статистику

http://freebase.com/

http://mappings.dbpedia.org/server/statistics/ru/

Пробные SPARQL-запросыSELECT DISTINCT ?p WHERE { ?s ?p ?o .} LIMIT 1000

Прагматическое введение в Linked Data 82

Пробные SPARQL-запросы

16.03.2012

SELECT ?p (COUNT ?p as ?countPredicate) WHERE { ?s ?p ?o}GROUP BY ?pORDER BY DESC (?countPredicate)LIMIT 100

Повсеместно используемые термины

rdf:typeskos:Concept

rdfs:Class

rdfs:subClassOf

owl:Class

rdfs:label

owl:sameAs

Очень частые термины

foaf:name dc:subject

rdfs:domain

rdfs:rangeskos:related

http://dbpedia.org/sparql

SELECT * WHERE { ?a <http://www.w3.org/1999/02/22-rdf-syntax-ns#type> <http://dbpedia.org/ontology/Company> . } LIMIT 100

PREFIX rdf: <http://www.w3.org/1999/02/22-rdf-syntax-ns#>PREFIX dbpedia-owl: <http://dbpedia.org/ontology/>

SELECT * WHERE { ?a rdf:type dbpedia-owl:Company . } LIMIT 100

SELECT * WHERE{ ?a rdf:type dbpedia-owl:Company . ?a dbpprop:companyName ?corporation .}LIMIT 100

SELECT * WHERE{

?a rdf:type dbpedia-owl:Company ; dbpprop:companyName ?corporation .}LIMIT 100

SELECT * WHERE{ ?companyURL rdf:type dbpedia-owl:Company ; dbpprop:companyName ?corporation ; dbpedia-owl:foundedBy ?founderURL . }LIMIT 100

SELECT * WHERE{ ?companyURL rdf:type dbpedia-owl:Company; dbpprop:companyName ?corporation ; dbpedia-owl:foundedBy ?founderURL . ?founderURL rdf:type dbpedia-owl:Artist .}LIMIT 100

SELECT * WHERE{ ?companyURL rdf:type dbpedia-owl:Company ; dbpprop:companyName ?corporation ; dbpedia-owl:foundedBy ?founderURL . { ?founderURL rdf:type dbpedia-owl:Artist. } UNION { ?founderURL rdf:type dbpedia-owl:Actor. } UNION { ?founderURL rdf:type dbpedia-owl:MartialArtist. } UNION { ?founderURL dbpedia-owl:occupation dbpedia:Martial_arts.} }LIMIT 100

SELECT * WHERE{ ?companyURL rdf:type dbpedia-owl:Company ; dbpprop:companyName ?corporation ; dbpedia-owl:foundedBy ?founderURL . ?founderURL rdf:type dbpedia-owl:Artist ; rdf:type dbpedia-owl:Actor ; rdf:type dbpedia-owl:MartialArtist ; dbpedia-owl:occupation dbpedia:Martial_arts .}LIMIT 100

SELECT * WHERE{ ?companyURL rdf:type dbpedia-owl:Company ; dbpprop:companyName ?corporation ; dbpedia-owl:foundedBy ?founderURL . ?founderURL dbpedia-owl:birthDate ?founderBirth . FILTER (?founderBirth > "1940-03-10"^^xsd:date ) . { ?founderURL rdf:type dbpedia-owl:Artist. } UNION { ?founderURL rdf:type dbpedia-owl:Actor. } UNION { ?founderURL rdf:type dbpedia-owl:MartialArtist. } UNION { ?founderURL dbpedia-owl:occupation dbpedia:Martial_arts.}}LIMIT 100

школа открытых данны. открытые базы знаний и...

Documents

как работать в вики

ГОСТ 11230-95 Семена вики. Сортовые и...

Вики конференция 2017 Первый день...

баба марта вики и жана

Управление знаниями в...

Открытые вопросы №13

конкурсы вики

Открытые вопросы №12

Открытые образовательные...

презентация для вики сибириада

Конкурс «Открытые данные...

Открытые вопросы №14

Вики-будущее на ОК 2009

вежбицкая семантические...

Семантические сети для...

Открытые вопросы №1

Использование вики-методик в...

Открытые вопросы №4

Открытые вопросы 18

Вики в библиотеке