Дальше – на двух языках!

API электронной торговли Amazon-открытый доступ к Amazon каталог

Здесь написано, что у Амазона в WebOS дальновидные стратегии. Сиэтл Интернет является разработчиком элегантного API. Одним из первых веб-сервисов, которые открываются в Amazon был Электронная коммерческая службы. Эта услуга открывает доступ к большинству товаров в Amazon’овском каталоге продукции. API очень хорошая, она позволяют пользователям манипулировать собственным акккаунтом, в том числе и покупкой.доставкой. Однако суть ее заключается в возможности поиска Amazon продуктов.

Почему Amazon предложили эту услугу абсолютно бесплатно? Иными словами, с электронной торговлей службы Amazon возможно строить другие способы доступа к Amazon. В результате многие компании разрабатывают новые пути мобилизации информации в Amazon.

Рост API культуры

Del.icio.us, известная как одна из первых компаний открытого сообщества, обеспечила функциональность веб-сайта через API. Многие последовали этому примеру, что привело к подлинной культуре API. Джон Муссер работал над programmableweb, результате чего был разработан Mashups API, которые используют их. Эта страница показывает почти 400 ИСП по категориям. Однако лишь часть этих API, которые открывают информации – наиболее сосредоточиться на манипулировании самих услуг. Это важное различие понять, в контексте данной статьи.

The del.icio.us API offering today is different from Amazon’s one, because it does not open the del.icio.us database to the world. Del.icio.us API предлагает сегодня отличается от Amazon тем, не расшариваетбазу данных del.icio.us. What it does do is allow authorized mashups to manipulate the user information stored in del.icio.us. Что он позволяет делать, так это разрешить манипулировать пользователю информацией, которая хранится в del.icio.us. For example, an application may add a post, or update a tag, programmatically. Например, заявка может добавить сообщение, или изменить тег, программно. However, there is no way to ask del.icio.us, via API, what URLs have been posted to it or what has been tagged with the tag web 2.0 across the entire del.icio.us database. Однако, нет способа задать del.icio.us через API, какие адреса были опубликованы в это или то, что помечены тегом Интернете 2,0 всей базе данных del.icio.us . These questions are easy to answer via the web site, but not via current API. Эти вопросы легко ответить через веб-сайт, но не через нынешний API.

Standardized URLs – the API without an API URL – Стандартный API без API

Despite the fact that there is no direct API (into the database), many companies have managed to leverage the information stored in del.icio.us. Несмотря на то, что нет API с прямой записью в базу данных, многие компании сумели получить информацию, которая хранится в del.icio.us. Here are some examples… Вот несколько примеров …

Delexa is an interesting and useful mashup that uses del.icio.us to categorize Alexa sites. Delexa является интересным и полезным mashup, который использует del.icio.us для классификации Алекса сайтов. For example, here are the popular sites tagged with the word book : Например, здесь популярные сайты помечены словом книги:

Another web site called similicio.us uses del.icio.us to recommend similar sites. Другой веб-сайт называется similicio.us использует del.icio.us, чтобы рекомендовать подобные сайты. For example, here are the sites that it thinks are related to Read/WriteWeb. Например, здесь сайты, которые считает связаны с Read / Write Web.

So how do these services get around the fact that there is no API? Так как эти услуги обойти тот факт, что нет API? The answer is that they leverage standardized URLs and a technique called Web scraping . Ответ заключается в том, что они стандартные рычаги URL, и метод называется Web соскабливания. Let’s understand how this works. Давайте разберемся, как это работает. In del.icio.us, for example, all URLs that have the tag book can be found under the URL http://del.icio.us/tag/book ; all URLs tagged with the tag movie are at http://del.icio.us/tag/movie ; and so on. В del.icio.us, например, все адреса, которые тегом книги можно найти на URL http://del.icio.us/tag/book; Все адреса помечены тегом фильма находятся на http:// del.icio.us / тег / кино; и так далее. The structure of this URL is always the same: http://del.icio.us/tag [TAG]. Структура этот всегда один и тот же: http://del.icio.us/tag [TAG]. So given any tag, a computer program can fetch the page that contains the list of sites tagged with it. Поэтому какого-либо тега, компьютерная программа может загрузить страницу, которая содержит список сайтов помечены он. Once the page is fetched, the program can now perform the scraping – the extraction of the necessary information from the page. После получения страницы, программа может выполнять извлечения необходимой информации из страницы.

How Web Scraping Works Как работает Web соскабливания

Web Scraping is essentially reverse engineering of HTML pages. Web соскабливания в основном копирование из HTML страниц. It can also be thought of as parsing out chunks of information from a page. Она также может рассматриваться как разборе из кусков информации из страницы. Web pages are coded in HTML, which uses a tree-like structure to represent the information. Веб-страницы кодируются в HTML, которая использует древовидную структуру для представления информации. The actual data is mingled with layout and rendering information and is not readily available to a computer. Фактические данные, смешанной с формой и делает информацию и не является легкодоступной для компьютера. Scrapers are the programs that «know» how to get the data back from a given HTML page. Скреперы являются программы, которые «знают» как получить данные обратно из заданного HTML страницы. They work by learning the details of the particular markup and figuring out where the actual data is. Они работают на обучение детали частности разметки и разбираться, где фактические данные. For example, in the illustration below the scraper extracts URLs from the del.icio.us page. Например, в иллюстрации ниже скребка выдержки адреса из del.icio.us страницы. By applying such a scraper, it is possible to discover what URLs are tagged with any given tag. Применяя такие скребки, то можно обнаружить, какие адреса помечены любыми тегами.

Dapper, Teqlo, Yahoo! Pipes – the upcoming scraping technologies

We recently covered Yahoo! Недавно мы были охвачены Yahoo! Pipes , a new app from Yahoo! Pipes – новое приложение от Yahoo! focused on remixing RSS feeds. сосредоточены на remixing каналов. Another similar technology, Teqlo , has recently launched. Другой аналогичной технологии, Teqlo, недавно запущен. It focuses on letting people create mashups and widgets from web services and rss. Основное внимание в нем уделяется настройке, давая возможность создавать украшений из веб-сервисов и rss. Dapper is an interesting technology that facilitates the scraping of the web pages, using a visual interface. Даппер является интересной технологии, что облегчает запросы о веб-страницах, с помощью визуального интерфейса.

It works by letting the developer define a few sample pages and then helping her denote similar information using a marker. Это делается посредством предоставления разработчику возможности определить несколько тестовых страниц, а затем помочь ее обозначить аналогичную информацию с помощью маркера. This looks simple, but behind the scenes Dapper uses a non-trivial tree-matching algorithm to accomplish this task. Это выглядит просто, но за кулисами Даппер использует не тривиальное дерева соответствия для решения этой задачи. Once the user defines similar pieces of information on the page, Dapper allows the user to make it into a field. Когда пользователь определяет аналогичну информация нюа странице, Даппер позволяет внести его в поле. By repeating the process with other information on the page, the developer is able to effectively define a query that turns an unstructured page into a set of structured records. Повторяя процесс с другой информацией на странице, разработчик может эффективно определить, что запрос обращается к неструктурированным страницам в наборе структурированных записей.

The net effect – Web Sites become Web Services

Here is an illustration of the net effect of apps like Dapper and Teqlo: Вот иллюстрация – чистый эффект приложениям, как Даппер и Teqlo:

So bringing together Open APIs (like the Amazon E-Commerce service) and scraping/mashup technologies, gives us a way to treat any web site as a web service that exposes its information . До объединения открытого API, (например, Amazon электронной торговли службы) и скребковые / mashup технологий, дает нам способ лечения любой веб-сайт в веб-сервис, который обнажает свою информацию. The information, or to be more exact the data , becomes open. Информации, или более точные данные, становится открытой. In turn, this enables software to take advantage of this information collectively. В свою очередь, это программное обеспечение позволяет воспользоваться этой информацией коллективно. With that, the Web truly becomes a database that can be queried and remixed. В том, что Интернет действительно становится данных, которые могут быть сомнения и remixed.

This sounds great, but is this legal? Это звучит большое, но это юридическое?

Scraping technologies are actually fairly questionable. Соскабливания технологий действительно весьма сомнительны. In a way, they can be perceived as stealing the information owned by a web site. В образом, они могут восприниматься как кража информации, которая принадлежит веб-сайту. The whole issue is complicated because it is unclear where copy/paste ends and scraping begins. Весь вопрос усложняется, поскольку неясно, где copy/paste заканчивается и начинается соскабливания. It is okay for people to copy and save the information from web pages, but it might not be legal to have software do this automatically. Для людей копирование информацию с веб-страниц может быть легальным, но не может быть законным таже операциия с программным обеспечением. But scraping of the page and then offering a service that leverages the information without crediting the original source, is unlikely to be legal.

But it does not seem that scraping is going to stop. Но это не кажется, что скребковые собирается остановиться. Just like legal issues with Napster did not stop people from writing peer-to-peer sharing software, or the more recent YouTube lawsuit is not likely to stop people from posting copyrighted videos. Как и правовым вопросам, Napster не остановить людей от написания ровесники обмен программного обеспечения, или более поздние YouTube иск не может остановить людей размещать защищенные авторским правом видеоклипы. Information that seems to be free is perceived as being free. Информация о том, что, по-видимому, свободных воспринимается как свободный.

The opportunities that will come after the web has been turned into a database are just too exciting to pass up. Возможности, которые придут после Интернете был превращен в базы данных, слишком волнительно упустить. So if conversion is going to take place anyway, would it not be better to rethink how to do this in a consistent way? Так что, если переход будет происходить в любом случае, не будет ли лучше переосмыслить как это сделать в соответствии образом?

Why Web Sites should offer Web Services Почему веб-сайты должны предложить Web Services

There are several good reasons why Web Sites (online retailers in particular), should think about offering an API. Есть несколько веских причин, почему веб-сайтов в сети (в частности, розничной торговли), должны думать о предлагая API. The most important reason is control. Наиболее важной причиной является контроль. Having an API will make scrapers unnecessary, but it will also allow tracking of who is using the data – as well as how and why. Наличие API сделает ненужным скреперы, но также позволит отслеживать, кто использует данные, а также, как и почему. Like Amazon, sites can do this in a way that fosters affiliates and drives the traffic back to their sites. Как Amazon, сайты могут сделать это таким образом, который способствует филиалов и диски трафик на свои сайты.

The old perception is that closed data is a competitive advantage. Старые впечатление, что закрытые данные конкурентные преимущества. The new reality is that open data is a competitive advantage . Новая реальность состоит в том, что открытые данные конкурентные преимущества. The likely solution then is to stop worrying about protecting information and instead start charging for it, by offering an API. Вероятно, решение этого – прекратить беспокоиться о защите информации, и вместо этого начала зарядки для него, предложив API. Having a small fee per API call (think Amazon Web Services) is likely to be acceptable, since the cost for any given subscriber of the service is not going to be high. Имея небольшую плату за API телефону (думаю, Amazon Web Services) может быть приемлемым, поскольку стоимость любой абонент этой службы не будет высоким. But there is a big opportunity to make money on volume. Но есть большая возможность зарабатывать деньги на том. This is what Amazon is betting on with their Web Services strategy and it is probably a good bet. Это то, что Амазонка является ставку на своих Web Services стратегии и было бы хорошей ставкой.

Conclusion Заключение

As more and more of the Web is becoming remixable, the entire system is turning into both a platform and the database. Поскольку все больше и больше в Интернет становится remixable, вся система превращается в обе платформы и базы данных. Yet, such transformations are never smooth. Однако такие изменения никогда не гладко. For one, scalability is a big issue. Во-первых, масштабируемость – это большая проблема. And of course legal aspects are never simple. И, конечно, правовые аспекты никогда не простой.

digg_url = ‘http://digg.com/tech_news/Web_3_0_When_Web_Sites_Become_Web_Services’; But it is not a question of if web sites become web services, but when and how . Но это не вопрос, если веб-сайты становятся веб-сервисов, но, когда и каким образом. APIs are a more controlled, cleaner and altogether preferred way of becoming a web service. ИСП являются более контролируемой, чистых и вообще наилучший способ стать веб-служб. However, when APIs are not avaliable or sufficient, scraping is bound to continue and expand. Однако, когда API, отсутствуют или достаточно, скребковые обязан продолжать и расширять. As always, time will be best judge; but in the meanwhile we turn to you for feedback and stories about how your businesses are preparing for ‘web 3.0′. Как всегда, время будет лучше судьи; , Но тем временем мы обращаемся к Вам за отзывы и рассказы о своих предприятий готовятся к «веб 3,0″.

На вопросы посетителей сайта отвечали: генеральный директор Finam.ru Сергей Михеев, руководитель отдела по связям с общественностью Ru-Center Андрей Воробьев, директор по исследованиям Mail.Ru Федор Вирин, генеральный директор компании «Бегун» Алексей Басов, генеральный директор ООО «Регистратор доменов» (.mastername) Светлана Прозорова, журналист, популярный блогер, шеф-редактор газеты «Живой журнал» Максим Александров и главный редактор TelNews.ru Федор Смирнов.

Значительная часть вопросов имела непосредственное отношение к доменным именам. В частности, посетителей интересовало, будут все-таки в Рунете кириллические домены или эта идея так и останется нереализованной. Поскольку данный вопрос все еще остается спорным, мнения экспертов разделились. «Судя по всему, кириллические домены в Рунете все-таки появятся. И раньше всего – если верить обещаниям – в зоне SU: возможно, уже к ноябрю этого года», – считает Федор Смирнов. С ним соглашается Светлана Прозорова, а вот Федор Вирин придерживается другого мнения: «Думаю, что кириллических доменов в ближайшей перспективе не будет. Во-первых, уже было несколько попыток, во-вторых, ни в одной стране это не прижилось пока. И, кроме того, на мой взгляд, кириллические домены не принесут ничего, кроме отделения России от всего мирового Интернета, что, в конечном итоге, вовсе не хорошо».

Несколько интересных вопросов прозвучало и по теме «вебдванольности» Рунета. «Сама идея «потребители создают контент» грешит тем же, чем и любая «демократия» – вкусы подавляющего большинства людей таковы, что «на коне» будет оказываться всякого рода низкопробная вульгарщина, – убежден Максим Александров. – Но, как и в случае с «ужасным государственным строем – демократией», ничего лучше не придумано. Можно сколько угодно ругать, скажем, «Википедию» за кучу ошибок, но плюсы все равно перевешивают». Федор Смирнов также без особенного восторга относится к Веб 2.0: «Это обычный buzzword, от которого начинаешь уставать. Когда-то в центре была идея, люди действительно рассуждали о ее достоинствах и недостатках, но постепенно «Веб 2.0» настолько продвинули, что «user generated content» стал просто модой. Безотносительно того, где и в каких формах это уместно. Что же до глубины идеи – она лежит на поверхности. Есть издатели, есть потребители контента, вот почему бы потребителям самим не создавать контент?».

Учитывая название конференции, вполне закономерно возник вопрос о значимости такого события, как появление миллионного домена в зоне RU. «Миллион доменов совсем не означает миллион интересных и качественных интернет-проектов, – поясняет Федор Смирнов. – Много доменов (кстати, и сам миллионный в зоне RU) регистрируется киберсквоттерами. По данным исследования Алексея Тутубалина, сейчас «простаивает» только около 2% доменов. Дело в том, что просто «мариновать» домены стало невыгодно, поэтому домейнеры массово их паркуют, размещают рекламу и т.п. То есть сайты «реально работающие», но заходить на них особого смысла нет».

Алексей Басов рассказал по просьбе посетителей об инвестировании в отечественный интернет-бизнес: «Я видел много ситуаций, когда инвестор, не обладающий необходимой квалификацией в области интернет-бизнеса, получал негативный опыт инвестиций в этот сектор. Даже в том случае, если его партнеры и бизнес-идея обладали всеми нужными для успеха качествами. Инвесторам, не являющимся специалистами в данной области, можно порекомендовать покупку бумаг высокотехнологичных компаний на фондовом рынке, либо фонды, специализирующиеся на компаниях IT-сектора. Например, у нас есть ЗПИФ «Финам – Информационные технологии», в которую входит целый пулл интернет-бизнесов. Думаю, что через год фондов, оперирующих такого рода активами, будет уже несколько. Интернет – быстрорастущий рынок, чрезвычайно привлекательный для инвесторов. Поэтому в линейке продуктов инвестиционных компаний будут появляться высокотехнологичные фонды – так же, как когда-то стали появляться фонды городской недвижимости и земли».

Касаемо предполагаемого прихода на российский рынок западных игроков – эксперты сомневаются, что в ближайшее время они начнут активно захватывать Рунет. «В течение последних лет в Рунет регулярно приходит кто-нибудь с Запада, чтобы «всех убивать», – рассказывает Федор Смирнов. – Такие навязчивые мысли сопровождали приход Гугла, а он сидит себе молчком и не торопится тянуть руки к «Яндексу». Теперь появился eBay в образе Slando.ru – и все тоже сильно запереживали за судьбу «Из рук в руки». Приход западных игроков – дело неизбежное, но выдающихся, активных действий на рынке пока не наблюдается. Видимо, Запад продолжит еще некоторое время присматриваться, а потом и вовсе, может быть, откажется от мысли «убивать».

Интересное мнение высказал Федор Вирин, рассуждая о термине «Веб 3.0», который рано или поздно, несомненно, появится: «Ярлык Веб 3.0 навесят на персональный Веб, с персональным поиском, персональными настройками, удаленным хранением собственных файлов (то есть компьютер становится тонким клиентом), единой системой хранения и доступа к собственной информации. Собственно, это все уже делается. То есть отдельные части этого самого «вебтриноля» мы уже можем наблюдать». Похожего мнения придерживается Алексей Басов: «Я думаю, что следующими модными «фишками» может стать персонализация Интернета и конвергенция с другими медиа или устройствами».

Завершить обзор конференции хотелось бы рассуждениями о самой главной составляющей Рунета – его пользователях. По просьбе посетителей, эксперты попытались составить «портрет» среднестатистического пользователя Сети. «Самое интересное, что сейчас происходит – это рост в домашнем сегменте за счет покупки компьютеров домой (естественно). Причем компьютеры покупаются не просто домой, но они покупаются в семьи, где ни один из членов семьи не имел опыт регулярного использования компьютера ранее, – рассказывает Федор Вирин. – Таким образом, Интернет сейчас прирастает совершенно новой по своему составу аудиторией (в большинстве – это «синие воротнички»). Основной сдерживающий фактор – высокие тарифы на широкополосное соединение в регионах».

Федор Смирнов так отозвался об интернет-аудитории: «Былые интеллектуалы и «мыслящая молодежь» уступили место широким пользовательским массам. А ведь и сейчас существуют люди, которые верят, что Интернет – это такое элитарное пространство. Пользователь более массовый, поминать большую долю людей с высшим образованием тоже нет смысла, и само восприятие Сети – более будничное, что ли… Нет уже того волшебного медиума, есть просто такая штука, откуда можно мелодий для телефона накачать, где есть интересные картинки и еще одноклассники находятся. Возможно, я утрирую, но в недалеком будущем это будет более чем реальный портрет». Лишь Светлана Прозорова предпочла не разделять общество на сетевое и традиционное: «Лица пользователей Рунета будут идентичны лицам, которые можно увидеть, выйдя на улицу. Какие-то из них идут по тротуарам, другие едут на дорогих машинах, третьи – на машинах эконом-класса, а какие-то выбегают из школы, выходят из магазинов или спорят около входа в вуз».
Telnews.Ru

По словам директора BBC по перспективным средствам и технологиям массовой информации Эшли Хайфилда (Ashley Highfield), все современные технологии видеопоиска, к примеру YouTube, работают исключительно с мета-тэгами или ключевыми словами, сопровождающими непосредственно видеоматериал, но не с контентом как таковым. «В таких случаях поиск иногда чрезвычайно затруднен. Поиск от IBM же основан на выявлении соответствия внутреннего контента телепередачи с текстом поискового запроса», — заметил он. Технология IBM, по словам представителей компании-разработчика, позволяет осуществлять мультимедийный интерактивный поиск видеоизображений с целью сортировки контента по категориям и упрощения последующего поиска.

Как заметил эксперт «Рамблера» Михаил Чеканов, несколько российских компаний также ведут работы в области мультимедийного поиска. «И в ближайшем будущем поиск по видео- и аудиофайлам появится и в Рунете, — прогнозирует он. — Интерес и востребованность во многом будут зависеть от того, насколько универсальна будет эта технология, то есть насколько широким будет спектр поддерживаемых форматов. Полагаю, что могут возникнуть серьезные проблемы и с качеством мультимедийного поиска, особенно связанного с анализом музыкального контента. Отдельно стоит отметить, что такая технология должна быть оптимизирована под конкретный язык, даже более того — под конкретный жанр. Так что эта задача скорее из области прикладной лингвистики, а не поисковых технологий. Западным компаниям будет трудно работать на российском рынке без сотрудничества с российскими разработчиками».

Поиск видео не по тэгам, а по содержимому уже является очень востребованным сервисом, считает вице-президент и директор по маркетингу и PR Mail.Ru Анна Артамонова. «Рунет активно накапливает базу видеофайлов. На Видео@Mail.Ru, к примеру, их уже больше полумиллиона, и не все пользователи любят расставлять мета-тэги и добавлять описания сохраняемых файлов. Поиск по базе видеороликов, не требующий тэгов, мог бы существенно упростить жизнь как пользователям, так и владельцам видеосервисов, это также стало бы существенным шагом в организации контента в Сети», — подчеркнула г-жа Артамонова.

Стоит добавить, что совместными усилиями ВВС и IBM намерены создать электронный архив из приблизительно полутора миллионов часов передач британского телеканала, который будет включен в базу данных соответствующей поисковой системы.

«Для нас очень важно охватить весь наш архив, ибо большая часть нашего контента помечена простейшими тэгами, и иногда найти программы является весьма непростой задачей. Семантический поиск позволит справиться с такими трудностями», — считает г-н Хайфильд. Заметим, что ранее BBC использовала поисковую технологию Virage, произведенную компанией Autonomy, которая не позволяла в полной мере решить вышеозначенные проблемы.

Помимо этого, в планы «голубого гиганта» входит сотрудничество с компанией Siemens, официальным партнером ВВС, в рамках пробного развертывания технологии Media Hub, направленного на проверку новых бизнес-процессов и новых способов работы творческих коллективов ВВС. Этой инициативе предшествовало недавно осуществленное компанией Siemens развертывание ряда продуктов IBM WebSphere, которые играют ведущую роль в сервис-ориентированной инфраструктуре корпорации BBC.

CNews

Платформа Web 2.0 появилась не столько эволюционным, сколько революционным путем. Об этом шла речь в знаменитой статье Тима О’Рейли, который, как считается, и ввел термин Web 2.0 в понятийную базу Интернета. Еще в 2005 году, анализируя новое явление, Тим О’Рейли отметил: «Крах доткомов осенью 2001 года стал поворотным пунктом для Интернета. Многие решили, что само понятие веба было чрезмерно раздуто, но, на самом деле, такие «мыльные пузыри» и, как результат этого, падение акций – неизбежные спутники всех технологических революций».

Не успели мы еще осознать и привыкнуть к Web 2.0, как уже появились комментарии о грядущей эпохе Web 3.0. Если признать позицию революционной смены веб-платформ, то, вполне возможно, Web 2.0 ожидает неизбежный крах, который когда-то случился и с Web 1.0. Сейчас, как и несколько лет назад, идет постоянное инвестирование в новые сервисы, некоторые из которых покупаются за огромные деньги. Однако проблема в том, что, судя по всему, мало кто знает методы эффективной монетизации многих Web 2.0–ресурсов. В данный момент их преимущество перед другими заключается в привлекаемом трафике, однако «игры» с последним уже попахивают чем-то устаревшим и уходящим.

Впрочем, среди экспертов можно наблюдать и сторонников эволюционного развития Интернета. Как правило, это люди, тесно связавшие свой бизнес с Web 2.0 и не допускающие даже мысли о новом «мыльном пузыре».

Одним из таких оптимистов является директор Google Inc. Эрик Шмидт. Выступая недавно на Seoul Digital Forum, он попытался ответить на вопрос журналиста о том значении термина Web 3.0, который вкладывает в него корпорация Google. В ответ Эрик Шмидт пошутил по поводу Web 2.0, назвав его «маркетинговым термином». После этого он рассказал, что Web 3.0 станет платформой «приложений, собранных вместе». Они будут относительно малы и универсальны для запуска на любом устройстве, будь то компьютер или мобильный гаджет. Кроме того, эти приложения будут очень быстро работать и распространяться «вирусным» путем (через социальные сети, электронную почту и т.п.).

Таким образом, сегодня мы можем обозначить две возможные тенденции развития Интернета: «мягкий» переход к Web 3.0 через эволюцию веб-приложений с сохранением пользовательской активности и определенная смена акцентов в развитии веб-технологий. Каким образом может осуществиться последнее – пока неизвестно. Может быть, нас ожидает 3D-Интернет, а может – достижение единства регистрации пользователя в различных сервисах с целью обеспечения большей безопасности в Сети, как знать… В любом случае, если уж и топ-менеджеры Google заговорили о Web 3.0, значит, ждать осталось недолго.
Rublicon.Ru

The term Web 3.0 first appeared prominently in early 2006 in a blog article by Jeffrey Zeldman critical of Web 2.0 and associated technologies such as Ajax.

Web 3.0 technologies, such as intelligent software that utilize semantic data, have been implemented and used on a small scale by multiple companies for the purpose of more efficient data manipulation. In recent years, however, there has been an increasing focus on bringing semantic web technologies to the general public.

Transforming the Web into a database

The first step towards a «Web 3.0″ is the emergence of «The Data Web» as structured data records are published to the Web in reusable and remotely queryable formats, such as XML, RDF and microformats. The recent growth of SPARQL technology provides a standardized query language and API for searching across distributed RDF databases on the Web. The Data Web enables a new level of data integration and application interoperability, making data as openly accessible and linkable as Web pages. The Data Web is the first step on the path towards the full Semantic Web. In the Data Web phase, the focus is principally on making structured data available using RDF. The full Semantic Web stage will widen the scope such that both structured data and even what is traditionally thought of as unstructured or semi-structured content (such as Web pages, documents, etc.) will be widely available in RDF and OWL semantic formats.

An evolutionary path to artificial intelligence

Web 3.0 has also been used to describe an evolutionary path for the Web that leads to artificial intelligence that can reason about the Web in a quasi-human fashion. Some skeptics regard this as an unobtainable vision. However, companies such as IBM and Google are implementing new technologies that are yielding surprising information such as making predictions of hit songs from mining information on college music Web sites. There is also debate over whether the driving force behind Web 3.0 will be intelligent systems, or whether intelligence will emerge in a more organic fashion, from systems of intelligent people, such as via collaborative filtering services like del.icio.us, Flickr and Digg that extract meaning and order from the existing Web and how people interact with it.

The realization of the Semantic Web and SOA

Related to the artificial intelligence direction, Web 3.0 could be the realization and extension of the Semantic web concept. Academic research is being conducted to develop software for reasoning, based on description logic and intelligent agents. Such applications can perform logical reasoning operations using sets of rules that express logical relationships between concepts and data on the Web.

Sramana Mitra differs on the viewpoint that Semantic Web would be the essence of the next generation of the Internet and proposes a formula to encapsulate Web 3.0.

Web 3.0 has also been linked to a possible convergence of Service-oriented architecture and the Semantic web.

Evolution towards 3D

Another possible path for Web 3.0 is towards the 3 dimensional vision championed by the Web3D Consortium. This would involve the Web transforming into a series of 3D spaces, taking the concept realised by Second Life further.[9] This could open up new ways to connect and collaborate using 3D shared spaces.

Web 3.0 as an «Executable» Web Abstraction Layer

Where Web 1.0 was a «read-only» web, with content being produced by in large by the organizations backing any given site, and Web 2.0 was an extension into the «read-write» web that engaged users in an active role, Web 3.0 could extend this one step further by allowing people to modify the site itself. [citation needed]To a degree Facebook has taken a step towards this by introducing their API and allowing external applications to be embedded within their platform. With the still exponential growth of computer power, it is not inconceivable that the next generation of sites will be equipped with the resources to run user-contributed code on them.

Proposed expanded definition

Nova Spivack defines Web 3.0 as the third-decade of the Web (2010 – 2020) during which he suggests several major complementary technology trends will reaching new levels of maturity simultaneously including:
Ubiquitous Connectivity, broadband adoption, mobile Internet access and mobile devices
Network computing, software-as-a-service business models, Web services interoperability, distributed computing, grid computing and cloud computing
Open technologies, Open APIs and protocols, open data formats, open-source software platforms and open data (e.g. Creative Commons, Open Data License)
Open identity, OpenID, open reputation, roaming portable identity and personal data
The intelligent web, Semantic web technologies such as RDF, OWL, SWRL, SPARQL, GRDDL, semantic application platforms, and statement-based datastores
Distributed databases, the «World Wide Database» (enabled by Semantic Web technologies)
Intelligent applications, natural language processing, machine learning, machine reasoning, autonomous agents.
Wiki

Сервисы без контента

Хотя у концепции Web 2.0 нет четкого определения, можно выделить некоторые общие черты. Данная концепция является ответом на проблемы «классического» Веба, или Web 1.0, который представлял собой нечто вроде «супер-библиотеки» — статичные сайты со специально подготовленным, вручную структурированным контентом, который, однако, производился «немногими для многих», с большим недостатком обратной связи; пользователи являлись лишь пассивными потребителями.

Адепты следующего поколения — Web 2.0 — ушли в другую крайность. Обычно под Web 2.0 понимают массовые сервисы, дающие возможность пользователями самостоятельно производить контент (дневники, статьи, фотоальбломы, сборники ссылок), а также манипулировать связями между своими и чужими материалами в Сети (настраивать собственные ленты для чтения избранных веблогов или новостей, встраивать собственные материалы в коллективные блоги и википедии, и т.д.) Очевидно, что само по себе производство контента было доступно и раньше, так что основная черта Web 2.0 — это именно сервисы веб-связи.

Таким образом, вместо «супер-библиотеки» получился «супер-телеграф» — создатели Web 2.0 дистанциировались от работы с контентом. Зачастую они просто не знают, что происходит внутри их сервиса, не могут влиять на этот «народный» контент или использовать его. Самый забавный пример — основателю Wikipedia пришлось 18 раз исправлять собственную биографию на данном сайте, потому что другие люди тоже переписывали ее много раз. Сейчас вокруг Wikipedia затеяно несколько судебных процессов, а в прошлом году ее основатели были вынуждены запретить незарегистрированным пользователям редактировать страницы Википедии. Однако ясно, что данная «одномерная» мера не решит проблему.

Еще более заметны эти недостатки, когда на сервисах Web 2.0 пытаются строить какой-то «содержательный» (т.е. связанный с контентом) бизнес — например, контекстную рекламу. Для работы с контентом применяются примитивные поисковые роботы, которые даже в случае Web 1.0 едва ли могли похвастаться «осмысленными» результатами. Что же говорить о Web 2.0, где вместо статичных сайтов мы имеем тонны ежедневного «потока сознания» от миллионов пользователей!

Неудивительно, что каждый пятый веблог на сегодня является спаммерским, причем спаммеры легко обманывают автоматические системы ранжирования. С другой стороны, в прошлом году администрация LiveJournal.com использовала роботов в цензуре: ряд популярных аккаунтов были закрыты на основании ключевой фразы «Убей НАТОвца» — причем под раздачу попали не только участники флеш-моба, но и те, кто лишь упомянул об этой акции. Таким образом, «роботизированный» подход запросто делает «популярными» спаммеров, зато действительно интересный контент может быть проигнорирован или даже уничтожен.

Решения Web 3.0: эксперты против роботов

Термин Web 3.0 начали активно использовать в конце прошлого года. Но при ближайшем рассмотрении почти все предлагаемые на Западе концепции являются лишь эскалацией проблем Web 2.0. Обычно речь идет о новых поколениях роботов для более персональной организации контента — примерно как если бы речь шла о замене черно-белого телевизора с шестью каналами на цветной и стоканальный. Ясно, что концептуальных отличий в работе с информацией здесь не будет: мы получим лишь новую версию «пространства заданных альтернатив», причем альтернативы эти задаются очень примитивными машинными форматами.

Отдельной критики в этом смысле заслуживают проекты, которые продвигаются под пафосным названием «социальный поиск» — например, MyWeb 2.0 от Yahoo. В таком подходе действительно есть некоторый «социальный элемент»: предполагается, что пользователи будут давать оценки найденным в Интернете сайтам, а другие члены сообщества при последующем поиске смогут получать результаты с этой разметкой «одобрения» или «неодобрения». Но оценка в данном случае все равно получается не человеческая. Весь набор ваших впечатлений о сайте предлагается сократить до примитивного, одноразового машинного ярлыка типа «хорошо/плохо». Это язык, специально созданный для удобства роботов, но не людей. На выходе мы получаем лишь очередную систему автоматической сортировки — разве что с парой новых параметров. Ответом станут новые формы автоматизированного спама, просто учитывающие эти параметры.

Решить указанные проблемы можно лишь в том случае, если признать, что лучшим передатчиком знаний для человека (не просто «интересной информации», а именно актуальных знаний) является другой человек, а не робот. При условии, что этот человек не идиот, а специалист в заданной области знаний.

Таким образом, в нашем понимании Web 3.0 — это в первую очередь новая профессия людей, и новые инструменты для работы этих людей. Данная профессия — «менеджер знаний» — и должна стать связующим звеном между шизофренически разделенными Web 1.0 (контент) и Web 2.0 (народные сервисы связи).

Web 1.0 ======> Web 3.0 <======= Web 2.0
контент ==> менеджеры знаний <== сообщества

Что представляют собой данные «посредники»? Это, к примеру, веблоггер, который собирает интересные ссылки на новости и делится ими с сообществом своих читателей (у них тоже могут быть сетевые дневники, но они не настолько хороши в поиске новостей). Кстати, изначально термином «веблог» обозначалось именно собрание интересных ссылок, на не просто «сетевой дневник». Культура таких веблогов появилась в Рунете еще в 1996 году, но затем она растворилась в массовой культуре обычных дневников скучающих офисных работников — как говорилось выше, стандартные одномерные сервисы типа LiveJournal зачастую просто не позволяют найти хороший веблог среди моря спаммеров и графоманов.

Другой пример — более жизненный. Недавно автор данного доклада искал себе квартиру в Москве. Метод Web 1.0 означал бы размещение своего объявления на сайтах по квартирам, либо самостоятельный поиск чужих объявлений. Способ неудобен: параметров для поиска много, а через Интернет можно проверить лишь несколько самых простых (число комнат, близость к метро, цена и т.п.), причем самые главные параметры (состояние квартиры и вменяемость хозяев) проверить вообще невозможно. С другой стороны, можно воспользоваться методом Web 2.0, то есть опросить знакомых через сообщества или социальные сети. Здесь картина обратная — множество сочувствующих и проверенных людей, но никто из них, увы, не сдает квартиры.

Тот метод, которым воспользовался я, можно вполне характеризовать как «Web 3.0». Я связался с человеком, которого мне рекомендовали, и передал ему свои пожелания. Он, в свою очередь, передал мой заказ группе агентов по квартирам. Данную профессию можно считать достаточно молодой: я имею в виду ее современный вариант. У этих агентов имеются оперативные электронные базы свободных квартир, с одной стороны, и базы заявок с другой. Так что работа агента состоит в чистом виде из человеческих стратегий «менеджера знаний», который и связывает меня с нужной мне квартирой.

Стоит отметить одну любопытную мета-стратегию — уже не первый раз «победителем» при поиске квартиры для меня стала агент-женщина. Что вполне логично с точки зрения биологии. Целевая установка мужской особи в природе, как правило, более примитивна: найти подходящую партнершу для передачи генов. Женщины тоже выбирают партнеров, но у них есть и другая цель — дети. В результате такой более сложной организации женщины зачастую лучше работают с информацией, когда дело касается многофакторного и многоходового поиска. Они умеют «выращивать» информацию, а не только «ловить» ее одним чемпионским прыжком, как мужчины или роботы. В частности, по данным аналитиков из Jupiter MMXI, во время поиска в интернете женщины обычно лучше мужчин знают, что ищут, и тратят на поиск меньше времени. В этом свете даже возникает подозрение, что разработки в духе Semantic Web (куда относится и MyWeb 2.0) являются лишь жалкой попыткой мужской мести за данное преимущество женщин в работе с информацией.

Технологии Web 3.0: социальная CMS

Поскольку агенты системы Web 3.0 работают «между» Web 1.0 и Web 2.0, то и технологии для их работы, очевидно, представляют собой нечто промежуточное.

От классического Web 1.0 нам достались системы управления контентом (CMS), которые позволяют хорошо структурировать информацию, но не очень пригодны для использования сообществами. Управление в них обычно построено по простой и заранее определенной схеме — администрация и «все остальные». Скандалы вокруг Wikipedia связаны именно с попыткой передать такую классическую CMS в массы «как есть», в полностью анархическом режиме управления.

В то же время Web 2.0 предлагает сервисы для «сообществ» и «социальных сетей», в которых возможны различные «роли» и «статусы». Однако такие проекты не имеют надстройки в виде CMS, которая позволяла бы участникам сообщества создавать разнообразный общественно-значимый контент (помимо общения в «одномерных» группах и форумах).

Таким образом, основная технология Web 3.0 — это социальная CMS, то есть CMS с добавленной к ней системой управления сообществом, которая позволяла бы сообществу «выращивать» своих «менеджеров знаний» и давать им дополнительные возможности и права при работе с контентом (модерация форумов, редактирование и публикация статей, проведение консультаций и подготовка офлайновых мероприятий, дизайн и программные доработки сайта, и т.д.).

Бизнес-модель Web 3.0: экологичная реклама

С учетом сказанного о женских преимуществах в работе с информацией, нам посчастливилось работать в проекте, где сконцентрирован самый стратегический ресурс страны — это крупнейшее женское сообщество Рунета Eva.Ru. Рекламные модели, которые реализуются в данном проекте, повторяют примеры работы «менеджеров знаний», которые приводились выше. С одной стороны, у нас имеются производители контента (клиенты, производящие рекламную информацию о своих товарах и продуктах). С другой стороны, есть крупное потребительское сообщество со своими запросами. В качестве агентов, которые налаживают связь между сторонами, выступают эксперты сообщества.

Конечно, про обычные рекламные агентства тоже можно сказать, что они работают «между» производителем и потребителем. Однако на практике они ориентированы только на обслуживание клиентов, а о потребителях в лучшем случае знают лишь общую статистическую информацию. В нашей же версии эксперт — это человек, который действительно работает «внутри» сообщества, знает его реальные запросы и настроения, а также участвует в прямой коммуникации с обратной связью.

Откуда берутся такие эксперты? Поскольку они занимают промежуточное положение между производителем услуг/товаров и сообществом, то и вариантов, естественно, два.

Первый: эксперты могут «вырастать» в самом сообществе — при наличии механизмов социальной CMS, позволяющей их выявлять и привлекать к интересной для них деятельности, включающей и рекламные акции. Примером таких акций на Eva.Ru могут служить спонсорские фотоконкурсы. При этом речь идет не об одноразовых акциях (что само по себе не ноу-хау), а о постоянно идущих мероприятиях, которые не теряют популярности ни у сообщества, ни у клиентов (Procter&Gamble и др.) Темы конкурсов никогда не повторяются; помимо темы, эксперты сообщества каждый раз разрабатывают новые правила с учетом пожеланий клиентов и интересов сообщества; правила должны быть такими, чтобы число фотографий получилось не маленьким, но и не очень большим; задействуются механизмы идентификации, чтобы на конкурс не попали чужие фотографии; и т.д. Ясно, что наладить такую деятельность как постоянный процесс не сможет обычное рекламное агентство, живущее про отстраненному принципу «разместила и забыла».

Другой вариант появления экспертов — со стороны клиента, как в случае онлайновых консультаций. Но и здесь можно говорить о «выращивании» экспертов, поскольку им необходимо найти общий язык с сообществом. В случае слишком навязчивой и грубой рекламы сообщество просто «отторгает инородное тело».

Очевидным недостатком такой рекламной модели является трудность работы с туповатыми клиентами, живущими в прошлом веке и неспособными внятно рассказать о своем товаре. Причем проблема обычно не в самом производителе товаров/услуг, а в безграмотности его рекламного отдела, который и является «бутылочным горлышком» при коммуникации с потребителем. С другой стороны, в случае вменяемого клиента он получает хорошую возможность представить свой товар более дружественным, экологичным способом. Более того, часто оказывается, что в сообществе уже сформирован определенный тренд в сторону данного товара — так что многие рекламные акции «самоподдерживаются» за счет сообщества.

Перспективы: Вавилон должен быть разрушен

В 2002 году, когда возник проект Eva.ru, его доход на 100% составляла обычная медийная реклама (баннеры). Новые рекламные модели, о которых говорилось выше, развивались как дополнительные — но на сегодня они дают примерно столько же, сколько и медийная реклама (т.е. 50/50 в общем доходе проекта).

Важно отметить, что развитие этих форм рекламы не потребовало технических доработок проекта — даже простые, изначально заложенные механизмы «социальной CMS» оказались вполне достаточными. Конечно, за годы накопилось много замечаний, которые будут учтены в следующей версии данного сервиса. Однако даже те возможности, которые есть сейчас, еще не реализованы полностью.

В частности, в прошлом году мы задумались о поисковой рекламе, и вероятно, воспользуемся одной из предлагаемых партнерских программ (Google, Yandex, «Бегун» и т.п.) Но уже сейчас ясно, что наши возможности позволяют делать более интересную поисковую рекламу, чем то, что предлагают данные компании.

Дело в том, что помимо замечательных технологий анализа данных, поисковые системы должны еще получать где-то эти самые данные. Но многие данные в Интернете им не даются, либо они не умеют их взять. К примеру, довольно простой внутренний поисковик на Eva.Ru позволяет анализировать «социальный контекст» найденных материалов. Получив два текста по заданной теме, можно узнать, что один из них написан человеком с высоким статусом в сообществе (напр., Общественный Редактор), а его «профессия», то есть место наибольшей активности на сайте, соответствует тематике текста (напр., «Медицина»). Другой же текст написан человеком, которого многократно штрафовали, а его профессия довольно далека от темы статьи (напр., «Политика»).

Получить такую полезную «социальную» информацию в обычном массовом поисковике едва ли возможно. В связи с этим в ближайшем будущем мы можем прийти к ситуации, когда пользователи в первую очередь будут применять локальные поисковики по сообществам. Причем наиболее популярными будут такие, которые находят онлайнового эксперта-человека, а не только его «мертвый» текст (возможный прототип — каталог сообщества Ezhe.Ru). И лишь во вторую очередь будут использоваться глобальные поисковики с их абстрактными, не социализированными результатами.

В ответ на это глобальные поисковики наверняка попытаются навязать нам некий общий стандарт представления социальных данных. Но стандарт этот будет, как обычно, очень неполным, а его массовое применение будет также означать и массовую уязвимость. Так что в конце концов Вавилонская башня единой семантики все равно распадется на отдельные языки — то есть опять-таки все вернется к специализированным сервисам для сообществ.