Развитие электронных библиотек – путь к Открытой...

Развитие электронных библиотек – путь к Открытой Науке

Сергей Паринов,Центральный экономико-

математический институт РАН

Структура презентации1. Десять перспективных направлений

развития ЭБ для поддержки научных исследований

2. Международные инициативы за открытый доступ к результатам исследований как движущая сила развития ЭБ

3. Новая модель научно-исследовательской деятельности под названием «Открытая Наука» как результат действия движущих сил и реализации ключевых направлений развития ЭБ

ДЕСЯТЬ ПЕРСПЕКТИВНЫХ НАПРАВЛЕНИЙ РАЗВИТИЯ ЭБ

1. Трансформация ЭБ в CRIS• Current Research Information Systems (CRIS) –

современная модель комплексной научно-организационной информационной системы, см. www.eurocris.org

• Распространение технологий ЭБ вширь и вглубь:– Расширение использования технологий ЭБ на случаи

управления нетрадиционными информационными объектами (люди, проекты, имущество и т.п.)

– Подключение ЭБ к системам управления научными CRISами

• Как результат ЭБ начинают управлять комплексом информационных объектов, достаточно полно представляющих действующих лиц науки и результаты их деятельности

©euroCRIS/Keith G Jeffery CRIS: Stakeholders, Benefits, History, Process, Architecture

20081009 5

The R&D Process: Recording

Workprogramme

Proposal

Project

Results

Exploitation

WealthCreation

CRISDATABASE

©euroCRIS/Keith G Jeffery CRIS: Stakeholders, Benefits, History, Process, Architecture

20081009 6

CERIF-CRIS at One Organisation

Publicationrepository

DatasetSoftwarerepository

Finance system

HumanResources

system

Project Management

system

CERIF-CRIS

Web pages DirectoryServices

This is fine for one organisation but research is international, so…

Пример от Соционет• Начиналось в 1997 г. с архива эл. публикаций (тип paper),

сейчас в ЭБ Соционет 16 типов данных• Дисциплина «экономика»,всего материалов 124973

Главы и разделы в книгах (chapter) 12212Данные об организациях (institution) 119Диссертации и авторефераты (thesis) 160Каталоги библиотек и издательств (book) 39475Научные новости (news) 813Научные рецензии и комментарии (comment)18 Персональные данные авторов (person) 7396Подборки публикаций (secondary) 14 Программное обеспечение (software) 4 Публикации в журналах (article) 55951Рабочие документы (paper) 8804Результаты научно-тех. деят. (РНТД) (result) 7

2. Интеграция локальных ЭБ• Интеграция метаданных локальных ЭБ на принципах

федерации, право собственности хозяина на контент• Признак - создание в ЭБ технических входов для

харвестинга данных, по протоколу OAI-PMH• Примеры:

– Соционет (http://socionet.ru/), – ЕНИП РАН (http://enip.ras.ru/), – OAIster (http://oaister.org/), – DRIVER (http://www.driver-repository.eu/), – OpenDOAR (http://www.opendoar.org/) и др

• Как результат – переход от изолированных ЭБ к сети взаимосвязанных ЭБ

Кол-во ЭБ с техническим входом на основе OAI-PMH, в мире

• Archives In Celestial Records• US 289 224 9019902• UK 149 134 704009• Germ. 108 88 920932• Japan 70 64 906284• Brazil 70 48 428646• Spain 55 42 731025• Canada 49 43 150658• France 49 42 361023• Austral. 47 36 1101874• India 45 24 53847

• Archives In Celestial Records• Italy 45 35 76049• Sweden 34 33 158583• Nether 27 24 635942• Russia 27 24 26472• Portugal 25 18 34194• Taiwan 24 15 347078• Belgium 18 16 170526• Greece 16 13 270138• Colomb 15 8 4059• Malaysia 15 8 35856• S.Africa 15 9 20950

Всего архивов 1447 из них с технич. входом 1108 общее кол-во записей 18,961,658

Источник: Registry of Open Access Repositorieshttp://roar.eprints.org/index.php?action=browse

… и в России (всего 24)Университеты: Уральский, Красноярский, Белгородский, Тверской

-----Институты РАН:Вологодский научно-координационный центр ЦЭМИ РАН

Центр египтологических исследований РАН

Институт экономики и организации промышленного производства СО РАН

Отделение международных экономических и политических исследований

Институт Европы РАН

Институт философии Российской Академии Наук

Институт государства и права РАН

Институт мировой экономики и международных отношений

Институт проблем региональной экономики

Институт социально-экономических исследований Уфимского НЦ РАН

Сочинский научно-исследовательский центр Российской академии наук

Институт народнохозяйственного прогнозирования

Институт экономики Российской Академии наук

Институт аграрных проблем Российской академии наук

Институт экономических проблем Кольского Научного Центра РАН

Санкт-Петербургский экономико-математический институт РАН

Социологический институт Российской академии наук

Институт США и Канады Российской Академии Наук

Центральный экономико-математический институт РАН

Институт проблем рынка РАН

3. Появление информационных хабов

• Потребовалась специализированная информационная система для харвестинга открытого контента из множества разнородных ЭБ по структуре и их принадлежности– предложена модель информационного хаба

• Нужна развитая модель структуры научных данных – есть рекомендованная ЕС модель научных данных CERIF

• Нужны гибкие подходы для харвестинга и экспорта данных– есть OAI-PMH, RSS, программные конвертеры на заказ

• Выбор эффективной схемы обновления и синхронизации– есть модель RePEc.org – ежедневная синхронизация массивов

метаданных между ЭБ и центральной базой• Как результат – операционализация /стандартизация

входных и выходных потоков метаданных

Модель научных данных CERIF2008• Представлены основные информационные

объекты научно-организационной деятельности, возможно расширение

• Модульность для повторно используемых объектов и предусмотрена многоязыковость

• Выделены специальные связующие объекты, имеющие семантические атрибуты

• Реализована «машина времени» и многое другое, см. http://www.eurocris.org/cerif/

• CERIF рекомендован Европейской Комиссией как единая модель для конструирования CRISов и организации интероперабельности (обмена данными) между ними

Equipment

ProjectProjectOrganisationOrganisation

Service

FundingProgramme

Patent

Skills

CV

Product

Event

PersonPerson

Classification(Semantics)

Classification(Semantics)

Publication

CERIF: Common European Research Information Format

CERIF 2nd Level Entities

Citation

CV

Prize

Qualification

ExpertiseAndSkills

Equipment Facility

Funding

Service

ElectronicAddresse

PostalAddress

Country

Currency

LanguageEventMetrics

ResultProduct

ResultPublication

ResultPatent ResultProduct

ResultPublicationResultPublication

ResultPatent

Person OrganisationUnit

Project

PersonPerson OrganisationUnitOrganisationUnit

ProjectProject

Some CERIF Multiple Language Features


Project

ResultProduct

ResultPublication

ResultPatent

Title Subtitle Abstract Keywords

Keywords

Keywords

Keywords

KeywordsKeywords

Title

NameResearchActivity

ResearchInterest

Name

Descr

Abstract

TitleAbstract


Project

PersonPerson OrganisationUnitOrganisationUnit

ProjectProject

ResultProduct

ResultPublication

ResultPatent ResultProduct


ResultPatent

Title Subtitle Abstract Keywords

Keywords

Keywords

Keywords

KeywordsKeywords

Title

NameResearchActivity

ResearchInterest

Name

Descr

Abstract

TitleAbstract

Some CERIF Semantic Features

Person

OrganisationUnit

Project

ResultPublication

Person_ResultPublication

Person_Project

OrganisationUnit_ResultPublication

Project_ResultPublication

Project_OrganisationUnit

Person_OrganisationUnitPersonPerson

OrganisationUnitOrganisationUnit

ProjectProject



Person_Project




Person_OrganisationUnit

role=author

role=coordinator

role=CEO

role=deliverable1.2

role=author1 institute

role=funder

Semantic Features are associated with Link Entities

(2)

Соционет информационны

й хаб

ОРМ (1.1)

RSS (1.2)

OAI (1.3)

OAI-PMH архивы

(2.1)

RSS каналы

(2.2)

OAI каталог

(3.2)

Eprints реестр (3.3)

Службы новостей

(3.4)

Личный RSS

импорт (3.5)

IST-WORLD (3.6)

BirchBob (3.7)

1. Поставщики данных:

3. Получатели данных:

Другое (1.4)

ЕНИП РАН (3.1)

Информационный хаб Соционет

Статьи и коллекциииз онлайновыхрабочих мест

ПрепринтыГУ-ВШЭ

СодержаниеОткрытых Архивов

Журналы и коллекции

Каталог Open Archives Initiative

Реестр Open Access to Research

Различные новостные агентства

Пользователи Интернет через браузеры и гаджеты

4. Создание информационных пространств (ИП)

• ИП предназначены для визуализации текущей структуры и содержания стандартизованных информационных ресурсов, собранных с ЭБ

• Работают на федеративных принципах: нельзя менять чужие объекты, можно создавать из них производные и связи между ними

• Минимальная функциональность ИП – навигация и поиск

• Как результат - упрощается многократное и многоплановое использование информационных объектов для создания новых информационных продуктов и сервисов

Пример ИП ЕНИП РАН

• Единое научное информационное пространство РАН

• Главный исполнитель ВЦ РАН

• http://enip.ras.ru/• Только поиск,

навигации по каталогу нет

http://enip.ras.ru/

Пример ИП Соционет

• Визуализирует все данные на socionet.ru, собираемые и обновляемые ежедневно информационным хабом Соционет: более 1000 архивов, 2500 коллекций, 900 тыс. материалов по 13 дисциплинам и 16 типам данных

• Имеет навигацию по: а)иерархическому каталогу «архив:коллекция:материал»; б)структуре данных «дисциплина-раздел-коллекция-материал»

• Имеет сквозной структурированный по полям текстовый поиск, включая тематические рубрикаторы по всем дисциплинам, а также многое другое

Международные инициативы в области научных ИП

• Появился новый термин «DIS» - Data and Information Spaces

• В ERCIM создана рабочая группа DIS: «…to develop methods and tools to make digital, cultural and scientific content available, searchable and accessible for all kinds of users. Interoperability should be achieved on schema levels, repository levels as well as system levels.”, http://wiki.ercim.org/wg/DIS/

5. Формирование онлайновой научной инфраструктуры

• Информационный хаб + ИП = платформа для децентрализованного создания информационных продуктов и услуг для научного сообщества, SOA

• Используются подходы и технологии ЭБ, но результат в данном случае имеет вид онлайновой инфраструктуры

• Как результат – появились условия для децентрализованного развития и обогащения метаданных и объектов ИП, создания новых информационных продуктов и сервисов в интересах научного сообщества

Программы Европейской Комиссии по теме research e-infrastructure

• FW7 Work Program 2010– “The e-Infrastructures activity supports a number

of interrelated topics designed to foster the emergence of a new research environment in which 'virtual communities' of scientists and engineers are empowered to share and exploit the collective power of the European ecosystem of scientific and engineering facilities”

• Бюджет –с 2007 г. уже потрачено 211 млн. евро, на 2010 г. - 115 млн. евро

European Strategy Forum on Research Infrastructures (ESFRI)

• ESFRI is a strategic instrument to develop the scientific integration of Europe …

• ESFRI разработал документ "European Roadmap for Research Infrastructures – Roadmap 2008"

• Источник - http://cordis.europa.eu/esfri/

Проект BELIEF

• BELIEF - Bringing Europe’s e-Infrastructures to Expanding Frontiers

• BELIEF-II will coordinate the efforts of many e-Infrastructure projects to further enlarge the e-Infrastructure Community.

• Источник - http://www.beliefproject.org/

Соционет как сегмент национальной онлайновой инфраструктуры

• Предлагает интерфейсы для свободного включения новых архивов/коллекций научных материалов, визуализируемые в ИП

• Через интерфейсы ИП (RSS) и созданные в Соционет OAI-PMH репозитории позволяет харвестить стандартизованные метаданные

• Предлагает набор собственных сервисов для развития и использования метаданных

• Открыт для присоединения к нему внешних сервисов, использующих его ИП

6. Формирование сетей связей между объектами ИП

• Принципы федерации метаданных ЭБ допускают развитие разнокачественных сетей связей между информационными объектами в ИП

• Связи являются информационными объектами ИП, несут семантическую информацию и могут свободно создаваться пользователями ИП

• Для пользователей это означает возможность формирования профессиональных социальных сетей и другого использования объектов ИП

• Как результат – ученые могут создавать семантические связи над полным пространством информационных объектов, включая и уже созданные связи

Пример CERIF Link Entities

Person

OrganisationUnit

Project

ResultPublication


Person_Project




Person_OrganisationUnitPersonPerson

OrganisationUnitOrganisationUnit

ProjectProject



Person_Project




Person_OrganisationUnit

Пример CERIF Semantics [Person-Publication Roles]

is author (numbered)

of

is author

of

isreviewer

of

is author (percentage)

of

is editor (numbered)

of

is editor

of

is subject

of

is translator

of

is publisher

of

Person_PublicationScheme

Пример CERIF Semantics

number ofauthors

number ofincomingcitations

number of requests

number ofexternal institutes

number ofdownloads

number ofaccess

is ofpublication type

ISIImpact Factor

claimsIPRof

Publication_MetricsRoles

receivedBest Paper

Award

number ofself

citations

area/typeof research

number ofcitations

Пример типов связей для статьи в Соционет

Пример типов связей для профиля ученого в Соционет

Пример типов связей для профиля института в Соционет

Пример графа связей персонального профиля в Соционет

7. Развитие связей цитирования

• Возможность создания связей типа «цитирование» означает появление новой сущности «электронное цитирование»

• Электронное цитирование в отличие от бумажного может быть усовершенствовано

• Как результат – оно позволяет автору электронной статьи уточнить в каком именно качестве он использовал чужие результаты исследований

Цитирование в модели CERIF2008

number ofauthors

number ofincomingcitations

number of requests

number ofexternal institutes

number ofdownloads

number ofaccess

is ofpublication type

ISIImpact Factor

claimsIPRof

Publication_MetricsRoles

receivedBest Paper

Award

number ofself

citations

area/typeof research

number ofcitations

Электронное цитирование с качественными атрибутами

• Предлагается оформлять цитаты как:– самостоятельные информационные объекты,– создавать семантические связи между документом и

цитатой• Связи цитирования могут иметь в т.ч. следующие

атрибуты:– цитируемый результат является основанием для

получения моего результата»; – мой результат подтверждает или подтверждается

цитируемым результатом; – цитируемый результат является иллюстрацией моего

результата или имеет с ним логическую связь; – мой результат опровергает цитируемый результат

Оформление цитат и связей цитирования в Соционет (проект)

Создаются коллекции цитат.Выше – структура полей цитаты.Цитаты создаются как авторами,так и другими лицами.

При написании статьиавтор создает связь свыбранной цитатой,указывает атрибуты связии включает ее в свой текст

International Repositories Infrastructure

• Проект Citation Service– In collaboration with Microsoft Research, to develop

author support tools to improve and assist the deposit of material in repositories, including reference lists from articles

– To develop an API that can be connected to repository software programs which will enable the recognition and analysis of items cited by articles in repositories

– To enable the extension of the capabilities of the Citebase software

– This will be an international effort involving a team of collaborators in Europe, North America and Asia.

• Источник - http://repinf.pbworks.com/

8. Необходимость нового типа связей "оценки проф. влияния"

• Электронное цитирование нарушает баланс сил в потенциальном конфликте интересов между учеными в пользу автора статьи

• Требуется средство для публичной профессиональной оценки субъективных мнений автора

• Предлагается создание семантических связей типа «оценка влияния» между профилем ученого и заданным материалом

• Как результат – ученые будут иметь равные права в процессе «борьбы» мнений, определяющей научную истину

Пример реализации в Соционет «оценок влияния» (проект)

Заполняя форму, ученый создает связь между своим профилем и выбранным объектом. Объекты могутбыть любые: цитата, связь цитирования, статья, комментарий, оценкавлияния и т.п.

Эта связь и ее атрибуты видна читателям при просмотре, как профиля автора связи, так и объекта,к которому она сделана.

9. Мониторинг и поддержка сетей связей в ИП

• Неконтролируемые и децентрализованные изменения в объектах ИП нарушают созданные пользователями сети связей между этими объектами

• Создаются средства мониторинга за изменениями в объектах, если с ними установлены связи

• Разрабатываются сервисы для информирования владельцев объектов и связей о важных для них изменениях в ИП

• Как результат – возникает более высокий уровень связанности и согласованности деятельностей членов научного сообщества

Реализация поддержки «живых» документов в Соционет (проект)

• Связи цитирования нарушаются, если меняются цитируемые документы

• В Соционет создается система мониторинга связей цитирования и оповещения заинтересованных лиц:– авторов статей о создании/уничтожении связей

цитирования с их статьями– авторов цитат об изменениях в цитируемых статьях– читателей статей о статусе цитат в них, если они не

были пересмотрены после изменения статей-источников

10. Мониторинг развития ИП и активности действующих лиц

• Сбор всей доступной статистики о развитии ИП, результатах работы ученых и исследовательских организаций, включая учет всех видов связей и их семантики

• Как результат – формирование– открытой онлайновой наукометрии, включая

индикаторы результативности ученых и организаций

– профессиональной сигнальной системы – информационной модели научного сообщества

Пример статистики для профиля организации в ИП Соционет

Статистические портреты ученого и организации в Соционет (проект)

• Персональные сведения об ученом, и история их изменений;• Динамика роста количественных показателей активности ученого, в

т.ч. числа статей, результатов исследований, материалов других типов и т.п.;

• Динамика количеств и структуры цитирования результатов данного ученого, а также цитирований чужих результатов, сделанные данным ученым;

• Параметры распределения качественных характеристик для цитирований, выполненных данным ученым, а также для результатов данного ученого, выполненных другими учеными;

• Динамика количеств, структуры и распределение качественных характеристик оценок профессионального влияния работ данного ученого, сделанных научным сообществом, а также чужих работ, сделанных данным ученым;

• Распределение цитирования и оценок влияния между различными результатами данного ученого.

Проект мониторинга использования результатов исследований в Соционет• На основе обработки семантики связей

цитирования предполагается получить статистику характера использования научных результатов:– какие результаты кем используются как основа

научного вывода;– какие результаты подтверждают или подтверждаются

другими результатами; – какие результаты повторяют уже известные; – упоминание результатов в качестве общих

иллюстраций; – какие результаты кем критикуются и имела ли данная

критика позитивные для науки последствия.

Проект MESUR – карта науки

Источник - http://www.mesur.org/services/

Информационная модель научного сообщества

• При определенных условиях собираемая онлайновая статистика будет: – содержать репрезентативные статистические портреты

всех действующих лиц (ученых, проектов, организаций и т.п.) научного сообщества

– фиксировать все значимые для научного сообщества процессы и их результаты

• Открытый доступ к этим ежедневно обновляемым данным позволит получить картину текущего состояния и развития научного сообщества, объединенного соответствующим ИП

ДВИЖУЩАЯ СИЛА РАЗВИТИЯ ЭЛЕКТРОННЫХ БИБЛИОТЕК

Открытый доступ к результатам исследований

• В последние десять лет растет популярность международной инициативы открытого доступа к результатам исследований

• Инициатива призывает все исследовательские организации создать электронные репозитории, библиотеки или архивы для размещения в публичном доступе самими учеными всех законченных результатов открытых исследований

• Большое количество ведущих мировых научных центров и фондов обязали своих ученых выполнять рекомендации этой инициативы

• Источник: http://www.eprints.org/

ЭБ с техническим входом на основе OAI-PMH, в мире

• Archives In Celestial Records• US 289 224 9019902• UK 149 134 704009• Germ. 108 88 920932• Japan 70 64 906284• Brazil 70 48 428646• Spain 55 42 731025• Canada 49 43 150658• France 49 42 361023• Austral. 47 36 1101874• India 45 24 53847

• Archives In Celestial Records• Italy 45 35 76049• Sweden 34 33 158583• Nether 27 24 635942• Russia 27 24 26472• Portugal 25 18 34194• Taiwan 24 15 347078• Belgium 18 16 170526• Greece 16 13 270138• Colomb 15 8 4059• Malaysia 15 8 35856• S.Africa 15 9 20950

Всего архивов 1447 из них с технич. входом 1108 общее кол-во записей 18,961,658

Источник: Registry of Open Access Repositorieshttp://roar.eprints.org/index.php?action=browse

Инициатива открытого доступа и электронные библиотеки

• Реализация этой инициативы создает необходимые организационные предпосылки и мотивации, чтобы:– технологии ЭБ лучше соответствовали новому

пониманию открытости результатов науки– использование ЭБ и основанной на них новой

виртуальной среды для исследований стало общедоступным и повсеместным

Возникающие виды открытости виртуальной научной среды

• Открытость для добавления в ИП метаданных новых научных материалов и коллекций

• Открытость для добавления полных текстов статей и, как следствие, открытость корпуса результатов науки

• Открытость для повторного многопланового использования всех информационных объектов ИП, в т.ч. через RSS и OAI-PMH

• Открытость для включения в ИП новых информационных продуктов и сервисов

• Открытость статистики использования/развития ИП• Открытость информационной модели научного сообщества

«ОТКРЫТАЯ НАУКА» КАК РЕЗУЛЬТАТ РАЗВИТИЯ ЭЛЕКТРОННЫХ БИБЛИОТЕК

Развитие ЭБ позволяет изменить систему функционирования науки

• Перспективные направления развития методов и технологий ЭБ в сочетании с движущими силами инициативы по открытому доступу к результатам науки позволяют сформировать новую высокоэффективную модель научной деятельности под названием «Открытая Наука»

где «Открытая Наука» это - …

– новая виртуальная среда для научной деятельности, создаваемая описанными инновациями в ЭБ

– новые правила фиксации научных результатов и их использования

– новая профессиональная сигнальная система – новые правила и механизмы материального

стимулирования исследователей

Признаки Открытой Науки• полный корпус современных результатов публичной науки в

открытом онлайновом доступе, т.к. все результаты исследований, для которых нет ограничений доступа, своевременно помещаются в ЭБ, открытые архивы и репозитории исследовательских организаций;

• лучшие условия для доступа к научному знанию, и использования научных результатов, как следствие - ускорение научного кругооборота и повышение эффективности научной деятельности;

• лучшие условия для мониторинга результативности научной деятельности для отдельных ученых и исследовательских организаций;

• возможность создания прозрачной и проверяемой системы публичных индикаторов результативности ученых и исследовательских организаций, а также выявление и визуализация тенденций развития науки;

• работающие мотивации для ученых выкладывать все свои результаты в ЭБ, т.к. их персональные надбавки за научную деятельность зависят от соответствующих показателей.

Надлежащее информационное представление ученых

• Реализован повсеместный свободный доступ к результатам исследований через электронное депонирование учеными (или их представителями) всех результатов открытых исследований в ЭБ.

• Модель организации ЭБ приближается к CRIS• Все вместе, это обеспечивает надлежащее

информационное представление в ЭБ исследователей, организаций и других информационных объектов

Созданы условия для использования результатов исследований

• ИП и сервисы онлайновой научной инфраструктуры сконструированы так, чтобы обеспечивать максимально широкое и полное использование научным сообществом результатов исследований ученых

Есть качественная статистика об использовании результатов

исследований

• Реакция научного сообщества на результаты исследований в виде их электронного цитирования или оценки их профессионального влияния выполняется по усовершенствованной схеме, включающей спецификацию качественных характеристик использования/влияния

Существует контентная и функциональная открытость

• Действует онлайновая научная инфраструктура, которая собирает содержание ЭБ, научных архивов и репозиториев отдельных организаций в единое научное информационное пространство

Действует система создания связей

• Действуют правила по создания связей и поддержанию их в актуальном виде, а также формированию на их основе профессиональных социальных сетей

• Действует система контроля правильности установленных связей с учетом превращения научных материалов в "живые" документы

Мониторинг изменений и формирование статистики

• В составе онлайновой научной инфраструктуры созданы средства электронного автоматизированного мониторинга за изменением качественных и количественных параметров научных архивов и информационных образов действующих лиц, обеспечено формирование на этой основе открытой наукометрической базы данных с ежедневным обновлением

Профессиональная сигнальная система

• Реализован автоматизированный расчет на основе наукометрической статистики индикаторов и показателей функционирования науки, включая комплекс показателей результативности работы ученых и научных организаций, размещение этих ежедневно обновляемых показателей в открытом доступе

Оценка результативности ученых и исследователей на основе

онлайновой статистики

• Обеспечено использование этих показателей в принятии решений о финансировании научной деятельности, включая определение персональных надбавок ученых.

Конференция CRIS2010• Название - Connecting Science with Society:

The Role of Research Information in a Knowledge-Based Society, 10th international Conference on Current Research Information Systems

• Дата-место: June 2nd - 5th 2010 in Aalborg, Denmark, Organised by Aalborg University and euroCRIS

• Deadline for submission is November 15th, 2009• Сайт www.cris2010.org

Приглашение к сотрудничеству

Развитие электронных библиотек – путь к Открытой...

Documents