Семантическая разметка. Инструменты. Микроформаты в жизни.

Яндекс.Вебмастер представил валидатор микроразметки

2010-12-20 12:27

Яндекс.Вебмастер сообщил о появлении нового инструмента – валидатора микроразметки, предназначенного для того, чтобы облегчить владельцам сайтов работу с разметкой страниц микроформатами. С помощью нового инструмента можно проверить, как поисковый робот Яндекса видит и обрабатывает семантическую разметку той или иной страницы, а также выяснить, есть ли в коде разметки ошибки, которые могут помешать корректной обработке данных.

Микроформаты – это стандарт семантической разметки, разработанный специально для структурирования информации на странице для программ-обработчиков. Микроформаты позволяют указать поисковому роботу на смысловое значение отдельных фрагментов страницы и используются для передачи сведений об организации, товарах, отзывах, рецептах.

Сейчас Яндекс поддерживает четыре вида микроформатов:

•  hCard - формат разметки контактной информации (адресов, телефонов и т.д. Довольно старый и хорошо зарекомендовавший себя стандарт. Входит в состав рекомендованных к использованию консорциумом W3C для Semantic Web. Полезен для указания на странице контактной информации о фирме и т.п.

•  hRecipe - формат для описания кулинарных рецептов. Стандарт довольно новый. Используется очень редко (по моим наблюдениям ИМХО). В состав рекомендованных к использованию консорциумом W3C для Semantic Web не входит, хотя стандарты, пополняющие список рекомендаций консорциума, становятся стандартами "де факто". Поэтому при определенной популярности он таковым может стать. Гугл его поддерживает, но для рецептов он также поддерживает еще ряд стандартов.

• • hReview - формат разметки отзывов. Также входит в состав рекомендованных к использованию консорциумом W3C для Semantic Web. Индексатором Google используется наравне с микроданными и RDFa.

• • hProduct - формат разметки товаров. Также входит в состав рекомендованных к использованию консорциумом W3C для Semantic Web. Очень полезен для интернет-магазинов. Давно активно используется такими гигантами, как Amazon и т.п. Google поддерживает наравне с более расширенными возможностями.

Также поддерживается microdata – международный стандарт семантической разметки, позволяющий с помощью атрибутов описать смысл информации, содержащейся в HTML-коде страниц. Такие атрибуты позволяют роботам-обработчикам находить и извлекать нужные данные. Про этот стандарт слышу впервые...Погуглив немного выясняем - микроданные как стандарт де-юре еще не приняты - на сайте консорциума W3C есть документ от 19 октября 2010 года - Рабочий проект HTML Microdata, поэтому мной ранее не рассматривались. Будет принят по всей видимости "де-факто".

(Подробнее про микроданные для Google-Yahoo!-Bing июнь 2011.)

В настоящий момент в Яндексе микроданные используются для разметки словарных и энциклопедических статей, терминов и определений.

Подробнее узнать о том, какие данные можно передать Яндексу, можно на странице «Передача данных о содержимом сайта». А о микроформатах и микроданных можно прочесть в разделе Помощи.

Ссылка про все микроформаты (eng).

По этому поводу следует заметить, что Google уже давно поддерживает микроформаты, а также семантическую разметку RDFa, и по своему движению более приближен к общей тенденции Semantic Web. Рано или поздно Яндекс перейдет на поддержку и RDFa. Подробнее об использовании микроформатов для индексатора Гугл можно прочитать в его справке, а проверить страницы можно при помощи Google Web Master Tools. Список микроформатов, используемых роботами Google несколько отличается от Яндекса и более широк.

Проблема же заключается в том, что когда сайт создается "ручками", внедрить микроформаты просто, однако очень трудоемко. На сегодняшний день пока нет инструментария для автоматизированного добавления микроформатов в текст html-кода. Вторая проблема - большинство веб-разработчиков пользуется CMS, что естественно облегчает работу, однако не позволяет работать с html-кодом, либо внедрение микроформатов еще более усложняется. Поэтому большинство разработчиков с микроформатами "не заморачивается".

О пользе использования микроформатов и RDF говорить не приходится - используя их уже лет семь-восемь, могу сказать, что сайт и раскручивается быстрее, и повышается релевантность поиска, позиционирование его в результатах.

Стоит также дополнить список микроформатов, которые следует использовать веб-мастерам для улучшения позиционирования и распознавания поисковыми роботами своего сайта (в свете движения к Semantic Web):

• - основа основ - стандарт Dublin Core
• - очень широко используемый стандарт Topic Maps (XMT) – стандарт ISO (ISO/IEC 13250:2003) для представления и обмена знаниями с точки зрения поиска информации
• vCard - аналог hCard
• - формат FOAF - информация о людях и их "дружественных отношениях".
• - ну и главный формат описания ресурсов - RDF - RDFa. Надо добавить, что поддержка RDFa включена в стандарт HTML5

Подробнее про общий принцип построения Semantic Web и увидеть более полный перечень микроформатов можно в разделе 5. Метаданные в статье "SEMANTIC WEB КАК НОВАЯ МОДЕЛЬ ИНФОРМАЦИОННОГО ПРОСТРАНСТВА ИНТЕРНЕТ" (см. в Разделе "Публикации" блога за 2008 г.).

За саму новость спасибо сайту searchengines.ru   Дополнения-размышлизмы мои :).

Даешь RDF в массы! Автоматизацию семантической разметки - в каждый компьютер! Все дружно на построение светлого Semantic Web будущего! :))

    

Регистрация кириллических доменов!

Сегодня, 21 декабря 2010 года, началась свободная регистрация кириллических доменов com.ua/kiev.ua. Это значит, что такие домены могут зарегистрировать все желающие, а процесс регистрации ничем не будет отличаться от процесса регистрации обычных латинских доменов com.ua и kiev.ua.

Читать дальше

    

Новый вид фильтрации у Google

И снова вспоминается классика - идеи летают в воздухе, их надо только быстро подхватить...

Идея и алгоритм, которую так долго обговаривали и прорабатывали у нас - гугл взял да и реализовал... Правда частично, но они на правильном пути. Им, естественно это проще...


Google фильтрует результаты по уровню читаемости


2010-12-14 12:37


Google добавил новый фильтр для поисковых результатов, который может помочь расположить результаты в соответствии с уровнем сложности текста. По словам представителя Google, этот фильтр может быть полезен различным категориям пользователей, в частности, учителям, которые хотят найти материалы различного уровня сложности.

(Про  уровни читабельности-сложности текстов написано в статье Рогушиной Ю.В. "ИСПОЛЬЗОВАНИЕ КРИТЕРИЕВ ОЦЕНКИ УДОБОЧИТАЕМОСТИ ТЕКСТА ДЛЯ ПОИСКА ИНФОРМАЦИИ, СООТВЕТСТВУЮЩЕЙ РЕАЛЬНЫМ ПОТРЕБНОСТЯМ ПОЛЬЗОВАТЕЛЯ", источник eprints.isofts.kiev.ua/235/1/Рогушина_1.doc, и поскольку я принимала участие в тестировании этих критериев, могу сказать, что гугл поленился - их решение слишком упрощенное... А идея очень хорошая и дает неплохие результаты. Статья 2-х или даже 3-х годичной давности.)

Кроме фильтрации сайтов, инструмент позволяет пользователям сравнить уровень читаемости различных документов, выбрав опцию «указать уровень читаемости» ("annotate results with reading levels") и введя имя домена в форму.

Технология, позволяющая делить весь контент на три категории: от «базовой» до «продвинутой», была разработана при участии педагогов, которые разделили тексты на три категории и создали определенную базу, на основании которой была выведена статистическая модель и алгоритм определения сложности текста.

По материалам CNet News

Жаль, что у нашей науки средств на это нету... :(

Обучение программированию

В области образования хорошие 2 статьи:

Do We Need A New Teaching Programming Language

Four Key Concepts of Computer Programming

Особенно стоит прочитать комментарии, где более полно охвачены вопросы важных аспектов в программировании, ну и узнать про опыт других....

 

chrome-os-and-Android-news

Технологические новости:

1. Про Google Chrome OS, новый ноут от гугла, Андроид. Вопрос про работу Chrome OS без интернета - продемонстрировали работу Google Docs в оф-лайне. Также часть ПО с Chrome Web Store работает без интернет-соединения. "Chrome OS & Android: what next? Chrome OS and Android: Questions, Questions, and More Questions" Читать оригинал (анг.)

2.Android vs iOS: A Developer’s Perspective

Антивирусная защита

После последней недавней борьбы с вирусом продолжаю уделять внимание антивирусной защите. Нашла еще один антивирус: eScan Antivirus (AV). Есть куча продаваемых версий (кстати, цена не очень высокая в сравнении с Нортон-антивирусом). Замечательно, что есть бесплатная утилита, которую можно загрузить и проверить компьютер в случае необходимости.

По рейтингу антивирусного ПО этот производитель занимает неплохие позиции, уровень доверия к нему велик.
Free eScan AntiVirus Toolkit Utility (MWAV) производит сканирование на предмет наличия вирусов, шпионского ПО и чистки. Не требует инсталляции на комп, запускается с USB Drive или CD ROM, не зависит от установленного уже на компе антивирусного ПО. Поддерживает Windows Vista, Windows 7 & Windows 2008 (32 & 64 bit OS compatible), Microsoft Windows 2000, XP.

------------------------------------
К сожалению, не существует глобальной системы оповещения пользователей об опасности тех или иных сайтов, хотя есть много систем, которые ведут рейтинги безопасности сайтов. Их "аудитория" - в основном пользователи специальных плагинов для браузеров (например, siteadvisor или mywot) и пользователи некоторых браузеров (наиболее полноценную защиту обеспечивают firefox и chrome, поскольку используют технологию google safebrowsing, проверяющую сайты и на вирусы с эксплоитами и на фишинг, остальные браузеры в основном проверяют лишь на фишинг). Плагины более практичны поскольку дают больше информации, хотя пользование вышеупомянутыми браузерами тоже очень повышает уровень безопасности. В общем очень полезно пользоваться чем-нибудь из вышеупомянутого и соответственно туда сообщить об найденных вами опасных сайтах.

Также, сообщить о противоправном содержании сайтов можно в Центр Безопасного Рунета http://www.saferunet.ru/hotline/content.php

Бороться со спамом в е-мейлах тоже можно. Хорошую рекомендацию дают тут: Куда посылать жалобу на спам?

Кстати, недавно плагин mywot спас и меня от посещения одного сайта, распространяющего вирусы. На сайт зайти - зашла, он был "новенький" - т.е. с незапятнанной репутацией, поэтому броузер меня пустил. А закрыть окно броузера я уже не смогла - вываливались скрипты, любая попытка закрыть броузер сопровождалась джаваскриптовыми "предупреждениями" о том, что покидать этот сайт нельзя - "у Вас вирусы". Выкрутилась - поставила сайту "красный" рейтинг при помощи плагина mywot, и он меня спас - дал возможность закрыть окно броузера с этим сайтом.

------------------------------------
И еще про безопасность можно почитать тут

SEO-analysis

Совершенно случайно попала на несколько ресурсов по раскрутке и анализу сайтов.
Времени изучать пока нету, оригиналы на анг. языке:
http://www.aboutus.org/Learn/Search-Engine-Optimization
на сайте есть он-лайн Online Visibility Audit, море рекомендаций, можно посмотреть Site Metrics. Дан набор Free SEO Tools

Статьи:
Will your sales page convert?
Find out if your sales page converts as it should or if it should be improved drastically - see 5 basic questions to guide you on this matter.

Design your website for conversion
If you consciously design your site to turn these visitors into customers, you can dramatically increase the number of visitors who 'convert' – that is, make a purchase or perform some other action you desire.

OSTIS-2011

Открытые семантические технологии проектирования интеллектуальных систем – OSTIS-2011

Источник: http://shcherbak.net/2010/11/otkrytye-semanticheskie-texnologii-proektirovaniya-intellektualnyx-sistem-ostis-2011/

10-12 февраля 2011 года пройдет международная научно-техническая конференция "Open Semantic Technologies for Intelligent Systems – OSTIS-2011" в Минске, Республика Белорусь.

ВАЖНО - до 1 декабря подача тезисов!!! Участие бесплатное


Организаторы мероприятия довольно лояльны, так что в принципе, еще можно успеть зарегистрироваться.

По организационным вопросам можно обращаться к  Щербаку Сергею по почте: ontolog[@]gmail.com, так и непосредственно к организаторам на сайте OSTIS.

Тема конференции

Разработка комплекса согласованных технологий, ориентированных на проектирование различных компонентов и различных классов практически полезных интеллектуальных систем, имеющих как можно более длительный жизненный цикл и большее количество пользователей. При этом указанный комплекс технологий должен обеспечивать:

• совместимость и интегрируемость проектируемых интеллектуальных систем и их компонентов;
• сокращение сроков проектирования интеллектуальных систем на основе библиотек типовых совместимых компонентов;
• ориентацию на семантическое представление знаний;
• независимость технологий от функциональности интеллектуальных систем и областей их применения;
• независимость технологий от многообразия платформ реализации проектируемых интеллектуальных систем;
• открытый характер и доступность технологий для широкого круга разработчиков, что должно обеспечить возможность быстрого прототипирования интеллектуальных систем силами экспертов без участия специалистов в области искусственного интеллекта;
• совместимость и интегрируемость самих технологий, входящих в состав комплекса;
• открытый характер не только использования технологий, но и их развития в рамках открытого проекта.

Вопросы, выносимые на обсуждение

• Проблема интеграции интеллектуальных систем и их компонентов, решение которой лежит в основе создания технологии компонентного (модульного) проектирования интеллектуальных систем. Семантические сети как формальная основа решения проблемы интеграции интеллектуальных систем.
• Проблема независимости технологий проектирования интеллектуальных систем от различных платформ и вариантов их реализации, включая использование специальных компьютеров. Абстрактные модели интеллектуальных систем, являющиеся инвариантами различных способов их реализации.
• Состав комплекса совместимых технологий компонентного проектирования интеллектуальных систем.
• Технология компонентного проектирования баз знаний на основе семантических сетей.
• Технология компонентного проектирования программ различных языков программирования, ориентированных на обработку семантических сетей.
• Технология компонентного проектирования нейронных сетей, ориентированных на обработку баз знаний, представленных семантическими сетями.
• Программная и аппаратная реализация языков программирования, ориентированных на обработку семантических сетей на разных платформах.
• Технология компонентного проектирования средств навигации и интеллектуального поиска в семантическом пространстве.
• Технология компонентного проектирования интеллектуальных решателей задач, построенных на основе семантических сетей.
• Технология компонентного проектирования гипермедийных пользовательских интерфейсов интеллектуальных систем, основанных на семантических сетях.
• Проблема совместимости и интеграции самих технологий, ориентированных на проектирование различных компонентов или различных классов интеллектуальных систем.
• Прикладные интеллектуальные системы, построенные на основе семантических сетей.
• Инфраструктура и менеджмент открытого проекта по созданию комплексной массовой технологии компонентного проектирования интеллектуальных систем, основанных на семантических сетях.

Цель конференции

Организовать конструктивное сотрудничество, направленное на создание комплекса согласованных технологий, ориентированных на проектирование интеллектуальных систем, не зависящих от функциональности и областей применения проектируемых систем и позволяющих в ближайшей, а не в далекой перспективе быстро создавать не только прототипы практически полезных интеллектуальных систем, но и сами эти системы, имеющие как можно более длительный жизненный цикл и как можно большее количество пользователей.

Формат и организация проведения конференции

В соответствии с указанной целью конференция будет проводиться следующим образом.

• Конференция не разбивается на секции. Предполагаются пленарные и стендовые доклады;
• Конференция будет проходить в стиле круглого стола. В основе программы конференции лежит последовательность принятых к обсуждению вопросов, по некоторым из которых планируется заслушивание пленарных докладов;
• Конференция начинается с обсуждения уточнения программы конференции, и заканчивается обсуждением перспектив и направлений сотрудничества;
• Труды конференции будут розданы во время регистрации, но авторы опубликованных докладов дополнительно получат электронные варианты трудов за 2 недели до начала конференции для того, чтобы подготовиться к обсуждению опубликованных докладов;
• Участие в конференции бесплатное;
• Объем принимаемых к публикации докладов не ограничивается;
• Рабочие языки конференции русский и английский.

Регистрация участников конференции
осуществляется на сайте по ссылке.

Требования к оформлению и представлению докладов
смотрите на сайте конференции по ссылке.

Основные даты

• Прием докладов до 1 декабря 2010
• Отбор докладов до 1 января 2011
• Рассылка приглашений на конференцию до 15 января 2011
• Формирование программы конференции до 1 февраля 2011
• Публикация трудов конференции до 10 февраля 2011

Зима іде - свята веде

Як завжди, перед святами, ми згадуємо про наш найулюбленіший сімейний відпочинок - у музеї українського народного декоративного мистецтва, а там вже і розклад на сайті є:

Національний музей українського народного декоративного мистецтва запрошує на
щосуботні майстер-класи за програмою:

"Зима іде - свята веде"

План-графік майстер-класів на грудень 2010 року:

4.12.10	-	«Бісерні фантазії зими»
			Проводить Оксана Садіоглу.
5.12.10	-	«Бісерні фантазії зими»
			Проводить Оксана Садіоглу.
11.12.10	-	«Святий Миколайчик». Витинанка.
			Проводить Валерія Скок.
18.12.10	-	«Зірочка». Соломка.
			Проводить Мирослава Татарчук.
25.12.10	-	«Зимові візерунки на склі».
			Проводить Мирослава Татарчук.

           Обов’язковий попередній запис за телефоном: 280-36-93.

---

Наші координати: 01015, Київ, вул. Лаврська, 5, корпус 29
(У приміщенні Національного музею українського народного декоративного мистецтва);
e-mail: novmuz@ukr.net
Їхати від ст.м. “Арсенальна” трол. №38, авт №24 до зупинки “Києво-Печерський заповідник”


Музей працює з 10-00 до 18-00
Вихідний день – вівторок
Перший понеділок місяця – день відкритих дверей



Джерело: http://mundm.kiev.ua/MISCELL/MCSHEDL.HTM

Час готуватися до новорічних свят!

Выставка бонсай в Киеве

Кто бы мог подумать - совершенно тихо, без какой-бы то ни было рекламы и суеты, у меня под носом я чуть не пропустила Выставку бонсай в музее Природы!
В маленьком зале, под приятную музыку, совершенно безлюдно выставлены произведения искусства...


Выставка авторских работ Игоря Кравченко.

На выставке представлены бонсаи, а также бонкэи, бонсэки и сюисэки.
 Адрес - Киев, ул. Рогнединская, Дом природы (в глубине скверика с памятником Шолом Алейхема).
Режим: Вторник - Воскресенье с 11-00 до 18-00
Стоимость билетов взрослый - 10 грн., детский - 5 грн.
Выставка будет работать до 5-го декабря. Стоит поспешить.

Фото и видео отчет с выставки можно посмотреть тут и тут -фото

Новое! Февраль 2011
Сейчас эта выставка, в более расширеном варианте проходит в Палеонтологическом музее на Б.Хмельницкого, 15 (Киев). Билетов надо брать 2 - за вход в музей и на выставку.

В апреле 2011 г. планируется обширная выставка этого автора на ВДНХ (Киев).

Он-лайн игры
Шарики, бродилки, стрелялки, бегалки
Куча приколов

Синхронизация Google Docs с Microsoft Office

Google синхронизирует файлы Microsoft Office и Google Docs

2010-11-25 16:23
Google назначил команду разработчиков приобретенной ранее компании DocVerse, ответственной за развитие нового сервиса, позволяющего соединить возможности офлайнового редактора Microsoft Word и виртуального редактора собственного производства - Google Docs. DocVerse разместила свое программное обеспечение на серверах Google и готова приступить к начальной фазе тестирования нового плагина. В результате работы технологии, владельцы аккаунта Google Apps смогут синхронизировать документы Microsoft Office с веб-базой Google, не работая с интерфейсом Google Docs напрямую.

Несмотря на активные попытки Google продвигать свои сервисы в бизнес-секторе, редактор Microsoft Office остается предпочтительным для огромного количества компаний. Приложение DocVerse позволит этой части пользователей получить как преимущества знакомого и привычного интерфейса Office, так и возможность Интернет-синхронизации. В планах компании развивать поддержку Office 2003, 2007 и 2010.

Источник новости (рус.): searchengines.ru

Он-лайн игры
Шарики, бродилки, стрелялки, бегалки
Куча приколов

Новый релиз Mathematica 8 и Wolfram Alpha

Технологии Wolphram Alpha стали частью математической программы

2010-11-19 19:21
Создатели поисковика Wolphram Alpha - Wolfram Research выпустили новый проект Mathematica 8, объединивший возможности распознавания запросов на «человеческом» языке с возможностями математического программного обеспечения.

Mathematica, частично основанная на технологиях поисковой системы Wolphram Alpha, может обрабатывать массивы данных и строить по ним графики, используя мощности и интерфейс графических процессоров Nvidia CUDA или OpenCL, разработанный Apple и Khronos Group.
Лингвистическая часть системы может распознавать некоторые простые команды и переводить их в язык запросов. К примеру, Mathematica понимает команду «пи 200 знаков» ("pi 200 digits") и автоматически переформулирует ее в выражение "N[Pi, 200]."

Mathematica позиционируется как программное обеспечение для студентов и ученых. Областями применения являются различные отрасли математики, инжиниринга и прикладных вычислений – статистика и вероятности, обработка изображений, теория групп, гармонический анализ и подсчет финансовых производных.

Источник (рус): searchengines.ru

По материалам CNet News

Читать больше про Wolfram Alpha

Для релакса:
Он-лайн игры
Шарики, бродилки, стрелялки, бегалки
Куча приколов

Началась регистрация IDN-доменов!

В кириллическом интернете большое событие - начинается второй этап регистрации кириллических доменов com.ua/kiev.ua. Отныне можно будет иметь домен с нормальным именем - например "семантика.com.ua" :).

17 ноября 2010 года закончился первый этап приоритетной регистрации кириллических доменов в com.ua/kiev.ua. Второй этап регистрации начался 19 ноября и продлится месяц. В течение этого времени пользователи могут зарегистрировать IDN-домены (интернациональные) сроком на 10 лет.

Зарегистрировать свой домен смогут все желающие, наличие торговой марки при этом не требуется. Единственным условием является регистрация таких доменов на 10 лет. Стоимость IDN-доменов в этот период будет обычной, и, кроме того, у зарегистрировавших домены в этот период не будет необходимости ежегодно их продлевать в течение 10 лет.

Читать дальше: http://info.nic.ua/?section=news&cat=1&p=3488

Он-лайн игры
Шарики, бродилки, стрелялки, бегалки
Куча приколов

Автоматическая генерация текста

Прочитала заметку "Как написать книгу за 20 минут?" про автора Филиппа М. Паркера, написавшего за 5 (ПЯТЬ) лет он написал 85000 книг (85 ТЫСЯЧ КНИГ)!

Естественно, что ни один живой человек не успел бы написать такое количество материала, поэтому мистер Паркер использует компьютер, для которого написал программу, пишущую книги! На одну такую книгу уходит около 20 минут времени, а метод защищен американским патентом за номером 7266767.

На первый взгляд, идея довольно бредовая, но книги печатаются и продаются, и недешево, при этом еще и приносят пользу, судя по отзывам на том же Амазоне.

... Интересно, а может так и диссертацию можно сгенерировать?...

KMSW-2010

Всероссийская молодежная конференция «Управление знаниями и технологии Semantic Web» (KMSW-2010) 

4-5 декабря 2010 года в городе Санкт-Петербурге состоится Всероссийская молодежная конференция «Управление знаниями и технологии семантического веба» (KMSW-2010). Во время конференции предполагается проведение пленарного заседания, а также заседаний и семинаров по тематики секций конференции. Конференция проводится Санкт-Петербургским государственным университетом информационных технологий, механики и оптики (СПбГУ ИТМО) при участии Российской ассоциации искусственного интеллекта (РАИИ).
Тематика конференции:

• Инженерия знаний и онтологическое моделирование
• Рассуждения и Формальная логика
• Интеллектуальные агенты
• Компьютерная лингвистика
• Информационная безопасность и интеллектуальные технологии
• Ubiquitous computing и smart spaces
• Приложения Semantic Web.

 Срок представление докладов для рецензирования: 15 ноября

Регистрация и подробности на сайте

--------------------

SW-applications-5

РАЗРАБОТКА РАСПРЕДЕЛЕННЫХ СЕМАНТИЧЕСКИХ ПРИЛОЖЕНИЙ КАК СТРАТЕГИЯ РАЗВИТИЯ СОВРЕМЕННОГО WEB (Продолжение)

---

Начало

---

Выводы

Подводя итоги, отметим, что увеличение количества семантических приложений позволит увеличить объемы создаваемой семантически размеченной информации и будет повышать интеллектуальные способности  программных систем. Кроме того, применение компонентов предлагаемого шаблона позволит создать предопределенный набор действий, который позволит семнатическому приложению эффективно решать задачу пользователя.

Список литературы

1.      Barnell A. Building Blocks for Semantic Web Applications. // Доступно на www.w3c.rl.ac.uk/Euroweb/slides/rdfobjects3.ppt

2.      Krötzsch M., Vrande¡ci D., Völkel M. Semantic MediaWiki //The 5th International Semantic Web Conference.- Athens(USA). Доступно на http://korrekt.org/papers/KroetzschVrandecicVoelkel_ISWC2006.pdf

3.      Völkel, M., Krötzsch, M., Vrande¡ci´c, D., Haller, H., Studer, R. Semantic Wikipedia // Proc. of the 15th International WWW Conference. -  Edinburgh(Scotland). -2006.

4.      Krötzsch, M., Vrande¡ci´c, D., Völkel, M. Wikipedia and the Semantic Web, Part II. // Proc. of the 2nd International Wikimedia Conference, Wikimania. - Cambridge (USA). – 2006

Андон Ф.И., Гришанова И.Ю., Резниченко В.А. "Semantic Web как новая модель инормационного пространства интернет", Проблеми програмування. 2008. № 2-3, 417-430.

SW-applications-4

РАЗРАБОТКА РАСПРЕДЕЛЕННЫХ СЕМАНТИЧЕСКИХ ПРИЛОЖЕНИЙ КАК СТРАТЕГИЯ РАЗВИТИЯ СОВРЕМЕННОГО WEB (Продолжение)

---

Начало    -- 2 --     -- 3 --     4      -- 5 --

---

Унифицированный шаблон семантического приложения Web

 Web, в отличие от понятия Интернет, представляет собой сеть html-документов, связанных между собой гиперссылками. Семантический веб (Semantic Web) на данный момент представляет собой RDF-документы и базы данных, машинно-обрабатываемые данные, онтологии и подсистемы логического вывода [5]. Вопросы доказательства и доверия пока остаются открытыми.

Semantic Web представляет собой уровень открытой базы данных, надстроенный над вебом (см. Рисунок 1) [4].

Рисунок 1. Semantic Web как уровень открытой базы данных в Web.

Базовые открытые стандарты Semantic Web следующие:

•      RDF - обеспечивает хранение данных в виде троек;
•      OWL - определяет системы концептов, называемые онтологиями;
•      SPARQL - язык запросов к RDF;
•      SWRL - определяет правила;
•      GRDDL - предназначен для преобразования данных в формат RDF.

В данном контексте определим понятие "семантическое приложение Web".

Семантическое приложение Web - это приложение, которое работает в соответствии со стандартами Semantic Web, создает и использует "машинно-читаемые" данные и обладает конструктивными особенностями веба, например, работает с распределенными онтологиями и/или данными.

Кроме того, необходимо отметить, что семантическое приложение должно воспринимать открытый мир; это значит, что оно должно знать, что информация никогда не бывает полной.
Во-вторых, приложение должно использовать некоторое формальное описание семантики данных. 

В-третьих, семантическое приложение должно использовать информационные источники, которые:

•      географически распределены;
•      имеют разных собственников, и, следовательно, отсутствует контроль за развитием данного источника;
•      являются гетерогенными (синтаксически, структурно и семантически);
•      содержат данные реального мира, т.е. источники должны быть относительно большими.

Согласно концепции Semantic Web на самом нижнем уровне семантическому приложению необходимо работать с  наборами RDF-троек, представляющих собой реализацию модели "объект-атрибут-значение" (см. Рисунок 2). Это позволяет обеспечить универсальный промежуточный слой между реальными источниками данных, которые представлены в различных форматах и структурах.

Рисунок 2. Архитектура семантических приложений Semantic Web

Таким образом, семантическое приложение обязано уметь обрабатывать RDF-тройки и обеспечивать соответствующие шаблоны GRDDL для отображения существующих источников данных в RDF. Кроме того, необходимо иметь возможность в приемлимые сроки получать доступ к RDF-тройкам через веб-сервисы, сервлеты или другое программное обеспечение с открытым  для использования API. И последняя компонента, одна из наиболее сложных, - интерфейс пользователя, который должен поддерживать доступ с различных устройств, различные протоколы и типы доступа. Все компоненты семантического приложения должны поддерживать стандарты Semantic Web, утвержденные консорциумом W3C, для обеспечения способности к взаимодействию с различными системами на разных уровнях.

Таким образом, для реализации семантического приложения необходима реализация следующего минимального набора компонент:

1.    Хранилища RDF-триплетов.
2.    Средства обработки RDF-триплетов.
3.    Средства визуализации RDF-триплетов.
4.    Интерфейс пользователя.
5.    Средства интеграции со сторонними сервисами.
 
На сегодняшний день эффективные компоненты 1,2  уже реализованы и могут быть подобраны с учетом специфики семантического приложения. Компоненты 3-5 должны быть реализованы с учетом специфики задачи, которую необходимо решить. Несмотря на широкий круг задач, которые можно решать с помошью Semantic Web, предложим унифицированный набор компонентов (шаблон), которые можно применить в любом семантическом приложении: 

1)    Набор предопределенных Sparql-запросов, которые позволят  дать базовую функциональность приложению и типовой интерфейс пользователя.
 
2)    Система рейтингования выводимой информации (предопределенный набор фильтров).
 
3)    Ассистент запросов - средство для упрощения создания произвольных запросов к приложению.  Это необходимо прежде всего для оценки сложности запроса, вводимого пользователем, и предотвращения возможности выполнения заведомо невыполнимых запросов.
 
4)    Аггрегатор  RSS/Atom новостных лент для обеспечения возможности пополнения приложения новой информацией.
 
Как можно заметить, все предложенные компоненты направлены на ограничение возможностей пользователя в доступе к данным, которые можно было получить через открытую среду Semantic Web. Это связано, прежде всего, с необходимостью учитывать вопросы производительности приложения при подключении большого числа пользователей и возможностью создания запросов в Semantic Web, которые не могут быть выполнены за конечное время. Это может привести к тому, что пользователь не дождется конца выполнения запроса и вынужден будет поменять провайдера приложений.


Дальше

---

Начало    -- 2 --     -- 3 --     4      -- 5 --

---

SW-applications-3

РАЗРАБОТКА РАСПРЕДЕЛЕННЫХ СЕМАНТИЧЕСКИХ ПРИЛОЖЕНИЙ КАК СТРАТЕГИЯ РАЗВИТИЯ СОВРЕМЕННОГО WEB (Продолжение)

---

Начало    -- 2 --     3      -- 4 --      -- 5 --

---

Язык запросов становится более мощным за счет разрешения запросов, включающих знаки подстановки (wild cards), диапазоны (ranges) и подзапросы. Например, запрос

[[Category:Conference]] [[start date:=>May 18 2010]] [[program chair::[[member of::НАНУ]]]]

означает выбрать все конференции, которые начались после 18 мая 2010 года и которые находятся под руководством организаций-членов Национальной Академии Наук Украины. Нужно также отметить, что запросы категории членства (category membership) дадут ограниченную (но не полную) форму аргументации для учета отношений подкласса (subclass relationships). 

Возможности SMW в построении запросов могут использоваться для встраивания в страницы динамического контента, что является основным преимуществом по сравнению с традиционными вики-системами. Для того, чтобы это сделать, достаточно поместить в теги изапрос, написанный как вики-текст. В статье (на странице), которая содержит запрос, теги будут заменены на результаты выполнения данного запроса. Более того, синтаксис запросов предполагает утверждения для отображения дальнейших свойств полученных результатов и для изменения формы выдачи внутри страницы. 

Например, главная страница ontoworld.org отображает предстоящие события, их даты и места проведения. Эти результаты генерируются динамически: производится поиск конференций, дата начала которых больше текущей, результаты упорядочиваются в соответствии с датами и выводятся первые пять результатов [3].

Как указывалось выше, каждая статья представляет собой онтологический элемент, т.е. элемент одного из RDF-классов - Thing, Class, ObjectProperty, DatatypeProperty, AnnotationProperty. Кроме того, каждой статье нужен URI, который во избежание путаницы между понятиями и HTML-страницами отличается от своего URL. Каждый URL в SMW инъективно отображается в URI, который при запросе броузера перенаправляется к первоначальному URL. URL не может использоваться, поскольку OWL/RDF требует использования в качестве идентификаторов XML URI, которые, в свою очередь, не могут использовать все символы, разрешенные в URL.

Тип элементов для большинства видов аннотаций является фиксированным. Обычно статьи являются только OWL-экземплярами, категории становятся классами, а отношения становятся OWL-отношениями (object properties) между статьями. Атрибуты, в зависимости от своего типа в вики-системе, могут иметь свойства типа данных (datatype), свойство аннотации, или объекта (object properties).

Исходя из этого отображения, для любой страницы SMW по запросу генерирует OWL/RDF. Простейший способ получить этот RDF - использовать ссылку "Просмотреть как RDF" ("View as RDF"), находящуюся в нижней части каждой проаннотированной страницы. Более подробную информацию о настройках экспорта, который также позволяет осуществлять черновой экспорт основной части (bulk), включение обратных ссылок и рекурсивный экспорт, можно найти на специальной странице [2]. Эта страница также выступает в качестве конечной точки (endpoint) для внешних сервисов (внешней точки доступа), которые хотят получить доступ к семантическим данным вики.

Поскольку SMW совместима с моделью знаний OWL DL, то существует возможность использования в вики-проектах существующих онтологий. Это возможно двумя путями: 

• импорт онтологии (ontology import), который позволяет создавать и модифицировать страницы в вики-системе для представления отношений, заданных в некотором существующем OWL DL-документе;
• повторное использование словаря (vocabulary reuse) - позволяет пользователям отображать (задавать соответствия) вики-страницы на элементы существующих онтологий.

Функция импорта онтологии для чтения RDF-документов использует инструментарий RAP toolkit [3]. Он извлекает RDF-утверждения, которые могут быть представлены в вики-системе. Наименования статей импортируемых элементов извлекаются из их меток (labels) или, в случае отсутствия метки, из идентификатора раздела их URI. Основной целью импорта является инициализация (автоматическая загрузка) основы-шаблона для заполнения контента вики-проекта. Кроме того, импорт онтологии вставляет специальные аннотации, которые генерируют эквивалентные утверждения в OWL (т.е.. owl:sameAs, owl:equivalentClass, или owl:equivalentProperty). Импорт онтологий разрешен только для администраторов сайта, поскольку это может быть использовано для спама вики-проекта тысячами новых статей.

Импорт словаря позволяет пользователям идентифицировать элементы вики-системы, указав связь с элементами существующих онтологий. Например, Category:Person напрямую экспортируется в класс foaf:Person словаря Friend-Of-A-Friend. Вики-пользователи могут решать, какие вики-страницы должны иметь внешнюю семантику, однако набор имеющихся внешних элементов управляется только администраторами. Вводя в словарь вики-проекта некоторый новый элемент, они должны удостовериться в том, что повторное использование словаря соотносится с типами ограничений OWL DL. Например, внешние классы, такие как foaf:Person, не могут быть импортированы в Отношения.

Экспорт в OWL/RDF является средством обеспечения внешнего повторного использования данных вики-систем, но только практическое приложение этой функции может показать качество генерируемого RDF. С этой целью для выдачи RDF разработчики системы использовали ряд инструментов Semantic Web. SMW хорошо сотрудничало с наиболее оттестированными приложениями, такими, как FOAF Explorer, Tabulator RDF browser или расширением броузера Piggy Bank RDF. Подробная информация об испытанных инструментариях, включая их основные функции и URL, приведены в [4].

Кроме того, SMW предоставляет сервис SPARQL-запросов. Система базируется на автономном (stand-alone) RDF-сервере Joseki, который синхронизирован с семантически размеченным содержимым вики-системы. Синхронизация заключается в том, что генерируется RSS-фид с отчетом о последних изменениях в вики-проекте, для того, чтобы быстро перезагрузить измененные статьи. Таким образом, SPARQL-точка (endpoint) демонстрирует возможность зеркально отобразить (to mirror) RDF-контент вики-проекта при помощи небольших пошаговых обновлений, и предлагает точку доступа для семантических проектов, повторно использующих данные.

Необходимо также упомянуть и другие функции Semantic MediaWiki, такие как использование семантических шаблонов или поддержка единиц измерения[4]. 

Несмотря на множество вышеперечисленных достоинств, Semantic MediaWiki является специализированным решением для конкретных типов информационных ресурсов, которые строятся на базе вики-систем. В то же время необходимо отметить стремительный рост количества программных средств низкоуровнего управления триплетами RDF. Эти средства получили название хранилища триплетов (triple store) и представляют собой функциональный аналог традиционных реляционных СУБД.

Рассмотрим вариант создания семантического приложения на базе хранилищ триплетов.

Дальше

---

Начало    -- 2 --     3      -- 4 --      -- 5 --

---

SW-applications-2

РАЗРАБОТКА РАСПРЕДЕЛЕННЫХ СЕМАНТИЧЕСКИХ ПРИЛОЖЕНИЙ КАК СТРАТЕГИЯ РАЗВИТИЯ СОВРЕМЕННОГО WEB (Продолжение)

---

Начало     2     ---  3 ---      -- 4 --         -- 5 --

---

Анализ технологических решений семантических приложений Web

Semantic MediaWiki (SMW) является развитием MediaWiki - широко используемой системы управления вики-системой, которая используется в Википедии, и представляет собой приложение, позволяющее пользователям аннотировать содержимое вики путем ввода явно опеределенной, машинночитаемой семантической информации. 

SMW основывается на простом и ненавязчивом механизме семантической аннотации. Пользователям для использования на страницах вики-текста предоставляется специальная разметка, а SMW отображает эти аннотации с помощью языка онтологий OWL DL в формальное представление. Для использования семантических данных SMW поддерживает простой, но мощный язык запросов. При помощи встраивания запросов в вики-текст, пользователи могут создавать динамические страницы, включающие результаты запроса.

SMW также предоставляет различные интерфейсы к данным и инструментам Semantic Web. Формальные описания в OWL/RDF-формате для одной или более статей (статья - содержимое  веб-страницы вики-системы) могут быть получены из веб-интерфейса, что предоставляет возможность внешнего использования. Можно также импортировать данные из существующих онтологий OWL, и отображать вики-аннотации на существующие словари, такие, как FOAF. 

Поскольку SMW строго придерживается стандарта OWL DL, экспортируемая информация может быть повторно использована в различных приложениях. Каждая статья вики соответствует только одному онтологическому элементу (в том числе классам и свойствам), и каждая аннотация в статье делает утверждения об этом одном элементе. Такое ограничение имеет решающее значение для эксплуатации: поскольку знания повторно используются в различных местах, пользователи должны по-прежнему иметь возможность понимать, откуда первоначально поступила информация. Кроме того, все аннотации ссылаются на (абстрактный) концепт, представленный страницей. Формально это осуществляется путем выбора для статей соответствующих URI [2].

Большинство аннотаций, которые встречаются в SMW, соответствуют простым утверждениям ABox (ABox statements - «assertion component») на языке OWL DL, например, они описывают определенных людей, задавая отношения между ними, аннотируя их значениями данных, или классифицируя их. Схематическая информация (TBox - «terminological component» - словарь, с которым ассоциирован набор фактов ABox), представимая в SMW, умышленно неглубока. Редактор онтологий в вики в качестве основной цели не был предусмотрен, поскольку инженерия распределенных онтологий и крупномасштабные логические выводы в настоящее время пока еще проблематичны. Однако SMW была использована в сочетании с более выразительными базовыми онтологиями, которые затем обрабатывались внешними OWL подсистемами логического вывода [1].

Рассмотрим основные понятия онтологии, используемые в SMW и, называемые в дальнейшем аннотациями – категории, отношения и атрибуты.

Категории являются простой формой аннотации, которая позволяет пользователям классифицировать страницы. Категории уже были возможны в MediaWiki, а SMW лишь наделило их формальной интерпретацией в качестве классов OWL. Для того, чтобы указать, что статья «ИАИ2010» принадлежит категории «Конференции», надо просто вставить внутри статьи о ИАИ2010 соответствующее указание: [[Category:Conference]].

Отношения описывают связи между двумя статьями при помощи присвоения имени отношения существующим на веб-странице ссылкам. Например, необходимо указать связь между программой ИАИ-2010 и кафедрой НТУ КПИ. Для того, чтобы выразить это, пользователю надо просто отредактировать страницу «ИАИ-2010», изменив нормальную ссылку [[НТУ КПИ]] на [[program chair:: НТУ КПИ]].

Атрибуты позволяют пользователям определить взаимоотношения статей к сущностям, которые не являются статьями. Например, можно сообщить, что датой начала ИАИ-2010 является 18 мая 2010, указав в документе [[start date:=May 18 2010]]. В большинстве случаев, указания отношения к новой странице «May 18 2010» не требуется. Кроме того, система должна понимать смысл определенной даты, и распознавать эквивалентные значения, такие как 2010-05-18.

Аннотации (категории, отношения и атрибуты), как правило, в том месте, где они вставлены, не отображаются. Ссылки на категории появляются только в нижней части страницы, отношения отображаются как обычные ссылки, а атрибуты показывают только заданное значение. Внизу каждой страницы находится область для быстрого перемещения - factbox, она позволяет пользователям просматривать все полученные аннотации, сохраняя при этом основной текст нетронутым.

Очевидно, что обработка атрибутов требует некоторой дополнительной информации о типе (Type) аннотации. Целые числа, строки, даты – все они требуют разной обработки, и необходимо, чтобы кто-либо задавал этот тип. Как указано выше, каждый онтологический элемент - категория, отношение и атрибут - представлен в виде статьи. Это также дает преимущество в том, что пользовательская документация может быть написана для каждого элемента словаря, что имеет решающее значение для согласованности при использовании аннотации.

Типы, которые возможны для атрибутов, также имеют выделенные статьи. Чтобы определить тип в приведенном выше примере, просто нужно указать отношение между атрибутом Attribute:start date и типом Type:Date. Это отношение называется «has type», и оно имеет специальный встроенный смысл. Кроме того, в OWL DL оно рассматривается как owl:AnnotationProperty. SMW имеет ряд аналогичных специальных свойств, которые используются для спецификации некоторых технических аспектов системы, но большинство пользователей может свободно повторно использовать существующие аннотации без всякого беспокойства об основных определениях.

Как уже упоминалось выше, внизу каждой статьи отображается область для быстрой навигации - factbox, которая предоставляет функции быстрых ссылок – quicklinks, используемых для просмотра и поиска. Например, атрибуты, которые обозначают географические координаты, дают ссылки на сервисы интерактивной карты. Однако главным преимуществом для пользователей вики-систем является возможность задавать SMW-запросы.

Пользователи могут искать статьи, используя простой язык запросов, разработанный на основе известного синтаксиса вики-систем. Более того, запрос для поиска всех статей, которые содержат «НТУ КПИ» в качестве месторасположения руководящего органа программы, выглядит просто: [[program chair:: НТУ КПИ]]. Иными словами, синтаксис для определения аннотации идентичен синтаксису для ее поиска. Множество таких запросов интерпретируются конъюнктивно.

Дальше

---

Начало     2     ---  3 ---      -- 4 --         -- 5 --

---

SW-applications-1

РАЗРАБОТКА РАСПРЕДЕЛЕННЫХ СЕМАНТИЧЕСКИХ ПРИЛОЖЕНИЙ КАК СТРАТЕГИЯ РАЗВИТИЯ СОВРЕМЕННОГО WEB

И.Ю.Гришанова¹, С.С. Щербак²

¹Институт программных систем НАН Украины

²Харьковский национальный университет радиоэлектроники

Рассмотрены технологические аспекты применения программных средств в гипертекстовом Web и проведен анализ существующих реализаций семантических приложений. Представлено интенсиональное определение приложения Semantic Web, принятое на данный момент, его архитектура, определен перечень обязательных к реализации функций семантических приложений Web, а также их спецификация. Предложен унифицированный шаблон семантического приложения и приведены рекомендации по его применению. 

Ключевые слова: OWL, RDF store, онтологии, триплеты, семантика, интеллектуальный поиск

Введение. Роль парадигмы Semantic Web в развитии современного WWW

Последние несколько лет  характеризуются повышенным вниманием к перспективной концепции Semantic Web, которая позволяет применить интеллектуальные мультиагентные системы для решения практических задач на основе данных, распределенных по WWW.

Основные исследования, проводимые в рамках Semantic Web, направлены на представление информации в машинно-обрабатываемой форме, а именно – в виде связанных данных, структура и семантика которых явно определена с помощью онтологий. О подобном машинно-понятном представлении говорят, что оно  семантически размечено.

На сегодняшний день в Web накоплено большое количество семантически размеченной информации. Причем наблюдается постоянный рост объемов подобной информации, что отчасти стимулируется внедрением поддержки технологий Semantic Web современными машинами поиска, такими как Google и Yandex. В то же время наблюдается отсутствие четкой стратегии и рекомендаций по использованию такой информации в программных приложениях, что затрудняет их создание и использование. В качестве решения этой задачи авторы предлагают ряд рекомендаций и шаблон семантического приложения. 

Необходимо также отметить, что данная работа направлена на поддержку в актуальном состоянии интенсионального определения семантического приложения Web, а также позволяет более точно определить характеристики современных семантических приложений.

Интероперабельные семантические приложения современного Web

Современный Web представляет собой огромный часто обновляемый источник информации, но зачастую этой информацией просто невозможно воспользоваться, поскольку ее объемы даже на узкоспециализированные запросы могут быть очень большими. Пусть нас интересует информация о некотором событии в нашем городе, но в результате поиска мы получим сотни различных ссылок на документы, которые могут весьма косвенно относиться к нашему запросу.

Естественно, заниматься перебором всех документов не имеет смысла, так как это приведет к большим затратам времени. Например, даже при поиске в вики-системах, подобных Википедии, содержащих тысячи страниц, поиск подобной информации может сильно затянуться. 

Для решения подобных проблем и была предложена концепция Semantic Web, в рамках которой каждый документ размечается или аннотируется с помощью одного из языков семантической разметки. Например, с помощью RDF или RDFa. Это позволяет проводить машинам поиска не полнотекстовый поиск по документам, а выполнять специализированные запросы на языке Sparql к источникам семантически размеченной информации или семантическим хранилищам. 

Необходимо отметить, что количество подобных источников меньше, чем количество тематических информационных ресурсов, но их число постоянно растет.  В то же время, запрос, составленный на Sparql  дает более точный результат, и мы можем надеятся получить факт или набор фактов, которые дадут нам точный ответ о всех потенциальных событиях, которые должны произойти в городе. 

Подобные технологии открывают широкие возможности по организации использования информации в различных прикладных задачах. С другой стороны, процедура семантической разметки документов весьма трудоемка и требует специализированных знаний, что служило долгое время препятствием для ее повсеместного внедрения.  В настоящее время большинство пользователей для управления своим информационным ресурсом пользуется либо автономной системой управления контентом (CMS), либо использует один из множества сервисов по ведению бесплатных блогов, сайтов или сообществ, что позволяет централированно внедрять поддержку интерфейсов по автоматической или автоматизированной семантической разметке публикуемых в блоге или на сайте документов. Рассмотрим в качестве примера расширение популярной вики-системы Semantic MediaWiki.

Дальше

---

1   -- 2 --    ---  3 ---      -- 4 --        -- 5 --

---