В пятницу промелькнула очередная идиотская новость в российских СМИ о том, что планируется создать национальную поисковую систему за 100 млн у.е. Многие прочитав ее, опять начали стонать об очередном распиле денег и т.п. Но я более чем уверен, что промелькнувшая цифра является всего-лишь ошибкой журналистов. Ведь если подумать, то сколько стоит сейчас поиск? Не семантический поиск с неизобретенными еще технологиями, а тот херовый, которым мы ежедневно пользуемся? Помню 2 года назад я разговаривал с "диллерами" IMB об их поисковых технологиях - они готовы были поставить корпоративную поисковую систему за 100тыс у.е с поддержкой (вроде) около 5 лет. Надо заметить, что поисковые технологии IMB весьма продвинутые и имеют много клиентов в корпоративном секторе. Также надо учесть, что технологии которые есть у многих со временем быстро дешевеют! Даже для того же поиска есть опен-сорсные продукты, на базе которых даже я смог настроить приемлемый поиск по десятку миллионов документов. Да и вообще поиск - это всего лиши задача инвертирования матрицы размерности континуум на континуум с разной степенью точности, так что ничего сложного нет. В пользу того, что в проекте называлась меньшая цифра говорит и то, что сам google в момент своего становления получал начальные инвестиции не миллионами, а в 100тыс.

Но есть и обратная с сторона, если предположить, что поиск производится будет по информации, которая закрыта и хранится в многочисленных ведомствах, то придется их нанимать их в субподрядчики. А при такой практике я уже знаю примеры как пропадали суммы сравнимые со 100 миллионами у.е.

И в заключение, ко мне тут обратились с вопросом, что вот у нас в интернете и в ведомствах твориться бардак, но иногда встречаются и умные люди. (Под бардаком в интернете понимается прежде всего твиттер и социальные сети, которые я ненавижу). Так может пора объединить умных людей вместе и создать что-то такое что поставит все как надо? (Под "все как надо" - понимается удобная доступность информации). Ответ, увы, следующий, не смотря на то, что мнение большинства чаще всего ошибочное, с этим мнение нельзя не считаться. Если большинство решило, что ему удобно пользоваться твиттером, то приходится создавать системы взаимодействия с народом через твиттер. Появится другая популярная система - взаимодействовать будем через другую, какой бы тупой и неудобной она не была. Объединение умных людей по сути ничего не дает, они лишь начнут учить друг друга вместо того, чтобы учить дураков. Последнее и постигает различные сообщества, посвященные семантическому интернету и т.п. Люди вроде умные, о чем-то спорят, а толку для остальных ноль, так как все сидят в твиттере.
но я знаю выход из этого тупика - надо изучать материалы OIX проекта

В начале этой недели многие могли наблюдать нарушения в работе топа. Визуально - в топ попадала всякая ерунда. В частности, я выделил 2 провала, которые, можно сказать, "epic fail" для текущего алгоритма:

1) В топ попал пост с фоткой женских генеталий. Не смотря на то, что пост не являлся спамерским, а содержал вполне осмысленный текст и читатели его действительно обсуждали, можно сказать, что это была первая "пизда, пришедшая топу".
2) Вторая ошибка заключалась в том, что 2 почти идентичных поста, с одинаковыми фотками и разницей лишь в 10% и одной ссылкой - попали в топ и висели друг за другом. Одно лишь утешение, что попали по времени не подряд.

Объяснения этим проблемам простое. Я все еще пытаюсь играться с "ожидаемым" количеством записей, которые должны прокручиваться через ТОП в течении суток. Меня все еще настораживает популярность, которая есть у всяких там топ100 и топ50, по сравнению с моим топ30, и которая вызвана лишь тем, что в те топы попадает почти все. Кроме того эксперименты подтвердили, что чем больше записей в день проходит через топ, тем больше людей его читает. К сожалению, людям все равно что читать, так как многие приходят через поисковики.
В итоге, в ближайшее время хочу программно гарантировать, чтобы в топ в дневное время суток попадало больше постов, нежели ночью, ибо записи нужно писать тогда, когда люди их готовы читать, а читают больше днем.

------
И в завершение поста, я завтра выступаю на Icommunity2010, видимо я буду единственным, кто идет рекламировать не свои продукты, а свое хобби. Более того, большинство посетителей конференции наверняка придут ради твиттер секции, чтобы посмотреть на "местных клоунов", не скрою, что и я с удовольствием послушаю то, что там будет происходить.

Прошло уже немало времени с того момента как mail.ru отказался от поисковой системы Яндекса, однако до сих пор не перешел на Гугловый, а тестирует свою систему поиска. Результатом такого эксперимента от mail.ru стал приток посетителей моего уютного бложика по достаточно интересной фразе - как попасть в топ livejournal. С одной стороны, круто, ведь действительно, я имею отношение к топу, но с другой стороны весьма не очевидна связь фраз искомой и найденной. А также страшно, неужели кто-то на mail.ru узнал о существовании альтернативных систем ведения блогов? А если они все ломанутся в ЖЖ =) ?

Также тут обнаружился твиттер от mail.ru - http://twitter.com/mailru . Как было замечено, когда мэйрушники сделают возможность слать сообщения из своего агента в твиитер, вот тогда и наступит конец счастливого развития русскоязычного твиттера...

В пятницу прошла первая в России твипати (туса пользователей твиттера), под организацией Пименова. Можно теперь говорить, что обывательский твиттер показал свое лицо. Судя по фоткам получился неплохой пятничный поблядушничек.
Проведение совместных мероприятий для лиц по платформенному признаку пошел еще с ЖЖ. Вот например 7го февраля числа планируется очередной боулинг для блогеров. А в остальном, хочу чтобы потеплело, тогда можт тоже куда схожу.

Являясь анти-евангелистом твиттера я не могу пройти мимо распиаренной на днях темы слештэгов, которые предлагается использовать наравне со хэштегами. Во-первых, анти-евангелистом твиттера я себя считаю потому, что не рекомендую пользоваться твиттером, однако, из-за моей активности уже многие завели себе твиттер аккаунт, вероятно из интереса проверить на собственной шкуре.

Итак, слэштэги - это '/'(слэш) и какое-то слово. Пиарщики предлагают использовать /via, /tnx, /by. Но очевидно, что при построении фраз типа "This is history /via @Obama", можно вообще не пользоваться слешем, оставляя просто "This is history via @Obama". Кроме того не понятно почему выбраны только эти три слова для слештэгов.

А теперь вспомним историю онлайновых игр(mmorpg), которая насчитывает более 5 лет чатинга. Там давно используются "новомодные слэштэги" для того, чтобы обозначить действие или эмоцию. Чаще всего слештэгами выступают слова типа "/wave" , "/dance", "/spit", "/drink". Таким образом, становится понятно, что в чатах и в микроблогинге приставка в виде собачки (@) - для выделения сущности, с которой можно взаимодействовать, типа @vasya или @whitehouse; в виде решеточки (#) - сущности, имеющие одинаковый смысл для локальной группы, типа #msu2009 или #moscow. А "новомодные слэштэги" (/) - выступают для обозначения эмоций и действий между сущностями, типа "/wave @everyone" или "lets /drink some beer".

И в заключение отмечу, что аудитория онлайновых игр была и остается куда больше вымирающего и кишащего роботами твиттера, однако печально видеть, что последний претендует на какие-то нововведения в языковом общении.

Главные новости, о которых сегодня порассуждаю я, целиком и полностью завязаны на твиттере.
Самое веселое произошло вчера, когда Канделаки на молодежном форму "Прорыв" сообщила, что списывалась с президентом Медведевым в твиттере, на что Медведев в ответном слове говорит, что дескать да, был занят, переписывался с Тиной.
Не уверен про нашего президента на твиттере, но самый популярный президент на твиттере - Барак Обама - уже не раз заявлял, что сам лично не ведет микроблог на твиттере. Даже если Медведев и имеет доступ к аккаунту, то врядли стал бы стал активно вести свой твиттер. Тем более, что в Иране уже были случаи, когда по прямому указанию правительства США твиттер переносил профилактические работы, чтобы не мешать развитию революции в Иране. Поэтому ставить правительственные коммуникации в зависимость от действий ЦРУ - не логично.
И Иранские хакеры не забыли о вмешательстве в свою внутренную политику и сегодня ночью устроили дефейс твиттера. Вот так и пользуйся зарубежными непроверенными сайтами.
Но есть и польза в твиттере - запушен новый сервис bitly.tv - позволяющий вычленять из твиттера наиболее цитируемое видео. Именно этот факт останавливает меня создать рейтинг самых цитируемых видео в блогосфере, ибо выборка будет слишком маленькая.

Ниже я перечислю некоторые обсуждаемые новости рунета, дополнив их комментариями:

• Сергей брин, сооснователь Гугла, пожертвовал 1млн.баксов в компанию, которая помогла ему убежать из СССР. У Вас же есть более простая возможность уехать в США - выиграть грин-карту. Россия впервые за 5 лет в списке стран, которые могут подавать заявку. Шанс получить визу - примерно 1 из 100. Подать заявку можно до конца ноября. Лично я не рекомендую уезжать в эту дикую страну, где черные свободно покупают оружие за стремительно дешевеющие доллары.
• Газета F5 вынесла на первую полосу обсуждение перспектив паспортизации интернета, опубликовав серию негативных комментариев. Я же уверен, что интернет-паспортизация нам жизненно необходима на базе медицинских чипов, создав тем самым 5й инвариант семантического веба - Internet Identity Layer.
• На хабре выяснили, что большинство российских гиков негативно относится к твиттеру. Проблема в том, что журналюгам и быдлу - он нравится, что и является причиной его роста в России. Однако в мире, согласно Quantcast и AlexaGB, за октябрь твиттер впервые(!!!) потерял 3% посещений упав до 27млн в день. Также некоторое падение есть и в данных AlexaRUS. Возможно это связано с бета тестированием GoogleWave или рецессиями против спамеров, которые и являются самыми активными пользователями твиттера.

Добавил в библиотеку BlogsAPI(только в исходники, не в релиз) класс для работы с Bit.ly API. По умолчанию использует мой девелоперский ключ, но можно в конструкторе задать и свой. Позволяет получить сокращенную ссылку по длинной следующим кодом. Также есть возможность извлечения числа переходов по ссылке:

Copy Source | Copy HTML

1. [TestFixture]
2. public class Shorteners
3. {
4.     [Test]
5.     public void Bitly()
6.     {
7.         BitLy shortener = new BitLy();
8.         String sRet = shortener.ConvertDataTo("http://s-c.me", ItemType.FullUrl, ItemType.ShortUrl);
9.         Assert.AreEqual(false,String.IsNullOrEmpty(sRet));
10.     }
11. }

Изучил программу стартующего завтра RIW2009. Интересных докладов много, так как интересны сами докладчики. Скверно, что все это в рабочее время и за бабки. Отдельно отмечу бесплатную секцию в субботу по рекламированию твиттера. Называется Новый формат социальных сетей: продвижение в микроблогах. Уж не знаю о чем будут говорить докладчики, но формат продвижения своего бренда в микроблогах один - массфрендинг и только он эффективен. Массфрендинг пошел, как мы знаем, еще с социальных сетей, где вам предоставляется уникальная возможность отправить уведомление "счастья"(френдования) любому, кто зарегистрировался в сети. А это в свою очередь корнями уходит в массовые спам-рассылки со времен изобретения электронной почты. Время идет, а ссуть не меняется.

Отдельно упомяну про то, что разрабатывается альтернатива TCP/IP под эгидой DARPA и microsoft для закрытых военных и правоохранительных сетей. В частности, новая сеть должна решить проблему определения и локализации источника непреднамеренных сообщений. Возможно когда эти разработки станут открытыми, тогда и будет побежден спам в сети.

После некоторых раздумий выложил исходники BlogsAPI в опен сорс. Мне не жалко, если кто будет их использовать для своих проектов, ведь главное, что они будут написаны на .Net.
Большую часть Юнит-тестов я исключил из проекта, чтобы не палить пароли от реальных аккаунтов.

Отдельно обращаю внимание на то, как с помощью библиотеки парсить FOAF файлы:

Читать далее...

Правительство Британии (UK) выпустило очень хорошее 20-и страничное руководство пользователя по твиттеру для всех правительственных ведомств, которым рекомендуется вести твиттер аккаунт. Это пожалуй самое лаконичное описание того, что такое твиттер и для чего он нужен. Итак, сотрудники министерства Великобритании должны вести твиттер, чтобы:

Читать далее...

Все знают, что у твиттера есть API для разработчиков, но мало кто реально им пользуется. Обычно все находят программы уже созданные кем-то на западе. Если же у вас необходимость создать какое-то приложение для твиттера на .Net, то рекомендую достаточно молодой опен-сорс проект Twitterizer. Ниже много кода, демонстрирующие как просто я добавил возможности твиттера в библиотеку BlogsAPI (закрытый проект пока):

Читать далее...

Хорошее объединение привычных бизнес карточек и дополненной реальности продемонстрировал James Alliban на видео под катом. Это не прост опечать QR кода на листе, а создание полноченного 3д объекта своего образа. Однако, но мой взгляд кула более прикольным механизмом обмена визитками является приложение для iPhone, что для того, чтобы обменяться контантами пользователи просто легонько соударяют телефонами. Такая вот электронная аналогия для рукопожатий (название приложения влом искать).

Читать далее...

До сих пор вспоминаю момент из 2002 года, когда мой тогдашний начальник спросил у меня - "Чего интересного можно сделать бы в интернете?". Я ему тогда указал на малоизвестный сервис TinyURL.com . Естественно делать тогда мы ничего не стали, так как тогда, да и сейчас, неясна монетизация ссылочного трафика. И если на простом сайте пользователь чаще всего смотрит банеры, то тут пользователь проходит как бы "мимо сайта" кликая по ссылке.

Но вот прошло 6 лет, появился твиттер и многое изменилось. Главные достижения Твиттера для интернет сообщества, напомню, заключаются в следующем
1. Поиск реального времени. Даже гугл стал включат твиты в поисковую выдачу.
2. Отделение профиля пользователя от функционала. Пользователи микроблогов имеют профили на других сайтах!
3. Построение сети ссылочного обмена информации.

Последнее говорит о том, что передача ссылки на информацию такая же важная задача как и передача самой информации. С точки зрения математики, если данные - это пространство M, то ссылочное пространство - это подпространство всех линейных функционалов над пространством M без нуля. И эти функционалы распространяются по сети точно также как и сама информация, с разницей лишь в том, что искажение ссылочной информации более критично для получателя, чем лишняя точка в тексте.

Итак, откуда берется ссылочная информация? Ее нам генерят сайты по укорачиванию ссылок, число которых уже иммет счетную мощность. А это означает, что скоро нам понадобятся агрегаторы, на подобии reader.google.com, для обработки ссылок с нескольких источников в одном месте. Целью этой обработки будет не чтение информации, а прежде всего, исключение дублей. Чтобы разные ссылочные сервисы, скоординировавшись, не создавали кучу различных ссылок на один и тот же ресурс. И чтобы я, как получатель ссылки, знал, посещал ли(вызывал функционал) я скрытый под ссылкой ресурс или нет. Также весьма интересна идея аналога opendns для ссылок, чтобы оградить получателя от коротких ссылок, которые ведут на спамерские и порно ресурсы. Все мы помним последнее нововведение на digg.com - тулбар для браузера, который автоматически создает короткую ссылку вида "digg.com/FdFdF1" на просматриваемую страницу, в целью передачи ее другим и обсуждения новостей. Очевидно, что в одиночку digg.com не справится с формированием ссылок на все страницы интернета, даже если будет быстро удалять ссылки на старые новости. Решением может стать промежуточный ссылочный агрегатор, на подобии того, который счас разрабатывается Брэдом в Гугле и зовется pubsubhubbub и ориентирован на тех, кто размещает свои сообщения в интернете по RSS, то есть для всех блогеров. Первопроходцем был feedburner, а теперь создать такой сервис-агрегатор сможет каждый. Так вот, хотелось бы обратить внимание Брэда на то, что ему стоит продумать не только агрегирование RSS-данных, но и ссылочных, чтобы каждый, кто за день создал сервис по сокращению ссылок на своей странице мог указать один из pubsubhubbub'ов, отвечающих за формирование коротких ссылок в части интернета.

Существует несколько удачных попыток переноса информации, черпаемой в интернете, и личностей, которые становятся тут популярными, обратно в "ящик", в телевизор. Все наверное знают про еженедельный обзор Плющева на вести24, но вчера мне подкинули ссылку на более увлекательное зрелище - "Убить Интернет" на О2ТВ. Зрелище имеет светлые волосы, выглядит очень секси и стебется над гостями в течении всего эфира. Вышеперечисленного вполне достаточно, чтобы сделать передачу смотрибельной. Отмечу, что такой жанр целиком был позаимствован с западного проекта - colbertnation.com, вещаемого на телеканале ComedyCentral. Ссуть передачи - пригласить какую-нить знаменитость - и вместе посмеятся над всем. Лично мне запомнился сюжет, когда в студию был приглашен соучредитель Твиттера, рекомендую посомтреть.

Месяц Май ознаменовался серией событий по микроблогингу в рунете и вообще. Толчек обсуждению был задан публикациями в журнале f5.ru - печатное издание обо всем в блогосфере. Скачать и почитать их в онлайне тут. (Статейки хорошие, молодцы, даже ссылку на меня печатают. Денег правда на раскрутку тратят некисло, сразу видно, что "двухбуквенник"). В журнале перечислены все сервисы по микроблогингу, которые бы могли заинтересовать рускоговорящих пользователей.

Однако, списоу из 8ми сервисов оказался не полным и буквально на днях мы узнали о проекте ljchat.ru и обновленный ЖЖ-мессенжер от Микрософта ljtalk. Последний еще не доступен для всех, но то, что мелкомяйкие решили приложить руку к ЖЖ - уже странно.

Примечательно, что у микроблогинга нет монетизации, а на горизонте уже маячит, объявленный GoogleWave, который должен стать объединением всего лучшего от F*Connect+Jabber+HTML5 - и должен убить микроблогинг.

Чтобы закрыть эту тему приведу код, который я использую в проекте подсветки кода, для формирования коротких ссылок и дальнейшей вставки в микроблоги. Для сжатия я выбрал 64х базу, дополнив строчный и прописной английский алвафит двумя знаками "_" и "-". В итоге получаем такие вот короткие ссылки на код - s-c.me/wX.

Сегодня Яндекс сообщил о возможностях создания виджетов для своей главной страницы. Я даже создал виджет с "Самыми обсуждаемыми темами блогосферы" =). Теперь на главной странице яндекса можно будет читать топ30 =).
Но виджеты - это все детские игрушки. По настоящему Яндекс меня удивил когда я открыл Яндекс.Блоги
Как показано на скриншоте слева внизу маячит "Сервисы микроблогов", смысла от этого списка 0! Единственное, что эта таблица может нам сказать, что все мы все равно будет сосать у Mail.ru, в то время как в среде коротких сообщений mail.ru сосет у icq.com. Вообщем смысла выделять столько места под неинформативную информацию я не вижу:

Кроме того обнаружил сразу 2 ошибки на соседней страницы о чем написал в суппорт:

ЗЫ: "Волосатая сосиска" - это не ошибка.

Все написали и я напишу свое мнение про открытие официальной трансляции блога Медведена на ЖЖ.

• Трансляции блога медведева на ЖЖ не миновать, если не официально, то так троли бы сделали.
• Если Вам хочется обсуждать новости от президента в ЖЖ, то лучше зафрендить эту трансляцию, нежели официальную, которая модерируется.
• Если Вам важно не обсуждение, а просто узнавать о новых сообщениях от президента, то Вам стоит зафолоувить твиттер ru_medvedev, в который скоро тоже будут копироваться посты от президента.
• Почему выбран именно ЖЖ, а не чтолибо еще ? Ответ очевиден, во-первых так исторически сложилось, в во-вторых, благодаря стараниям газет, типа коммерсанта и ведомостей, которые позволяют комментировать свои публикации только пользователям ЖЖ - все политически активные интернетчики обитают в ЖЖ.

Всем известный Twitter принялся пропогандировать распределенную аутентификацию, так называемые кнопочки "Sign In With Twitter". Они позволяют вам взаимодействовать с другими сайтами при помощи Вашего твиттер аккаунта. Например, писать комментарии в виде "стены". Все это сделано при помощи OAuth, ориентированного просто на передачу прав от одного сайта к другому. Замечу, что у твиттера нет даже OpenID сервиса, что не удивительно, так как OpenID заточен на единоразовую передачу полей профиля, а у твиттера нет профилей пользователей.

Весь юмор в том, что Вам предлагается аутентификация с помощью того, что не имеет профиля. Весь профиль аккаунта твитера строится на персональной вере всех его пользователей, что аккаунт putin принадлежит Путину и т.п., что не всегда верно. Таким образом, можно ставить под вопрос саму целесообразность подобной аутентификации.

И второй момент, что такой выходкой Twitter начинает соперничать с гаджетами FacebookConnect and FriendsConnect(google), которые я называю F*Connect. Борьба эта негативно скажется на скорости развития интернета, так как борются по сути - Профили и Мобильность, как руки и ноги. И это еще раз подчеркиет, что у твиттера нет четкого плана развития и он пытается вклинится в известные идеи, непонимая из ссути. Конечно, это принесет ему определенный успех среди сайтов заточенных под мобильные устройства и ускорит смерть Facebook'a, как средства коммуникации, превратив в простое сборище профилей, но не будем пока занадывать...

Давно задавался вопросом, что же станет русским аналогом твиттера, и Яндекс подсказал мне ответ на этот вопрос.
Им стал не дурацкий http://tweets.ru/, который спамит рекламой, заявляя, что их уже миллион, а http://mblogi.qip.ru/:

Как видно самая популярная в России программа коротких сообщений, открыв миниблоггинг быстро набирает популярность. Интерфейс простой и легкий, как и у всех систем микроблоггинга, однако как часто бывает в русских аналогах доходит до абсурда. Сразу удивило, что пишется время отправки сообщения с точностью до секунды, на том же твиттере точность в 5 секунд и в большей уж точно нет смысла. Вторым моментом поразила постраничнаяя прокрутка. Хотелось бы знать сколько вычислительных мощьностей тратится на вывод ссылки на "17920" страницу на первой же. Хотя ее всеравно никто кликать не будет.
Перейдем к цифрам посещаемости. Ниже приведу сравнение посещаемости двух проектов - twitter'a и mblogi на основе открытых данных.
Twitter (уникальные посетители в день!):

Mblogi.qip.ru (просмотры в день!):

---

ЗЫ: Бонус для тех кто дочитал до конца - новый проект Flutter! - система коротких сообщений, состоящих из 26 сообщений, новый уровень микроблоггинга. Видео презентации