Hadoop для Windows

Проект с участием Hortonworks - Hadoop для Windows. Впрочем, Микрософт верен себе. Еще только будет. В последнем квартале 2013 года.

О веб-дизайне

Учебные курсы по веб-разработке

P.S. ну а для тех, кто решил заняться этим самостоятельно - вот еще один инструмент для создания веб-интерфейсов

Портируемый SQL

Справочник по переносимым командам SQL. Справочник по SQL для кросс-платформенной разработки

Секреты визуализации

Интересная статья о секретах визуализации данных.

Навигация с использованием QR-кодов

В работе представлена система позиционирования и навигации в помещениях, основанная на использовании QR-кодов. Рассматривается специализированная система управления контентом (CMS), позволяющая создавать мобильные сервисы по навигации и позиционированию в помещениях - статья в журнале Прикладная Информатика.

А. Абдрахманова, Д. Намиот "Использование двумерных штрихкодов для создания системы позиционирования и навигации в помещении", Прикладная Информатика N 1(43), 2013, стр. 31-39

Strata Conference

Мы продолжаем публиковать ссылки для отслеживания интересных событий в Twitter. На этот раз - Strata Conference, Santa Clara 2013



/via Geo Messages

P.S. и то же самое в Twi-газете:   StrataConf 2013

Cassandra

Полезная статья IBM DeveloperWorks по основам Apache Cassandra

QR-коды в медицине

Проекты с использованием QR-кодов в медицинских приложениях.

/via QR-code FAQ

Mobile World Congress 2013

Мы продолжаем публиковать ссылки для отслеживания интересных событий в Twitter. На этот раз - Mobile World Congress, Barselona 2013



/via Geo Messages

P.S. и то же самое в Twi-газете:   MWC 2013

Anti-Hive

Решение для обработки данных из Hadoop в реальном времени - CitusDB. Технически - это адаптер для PostgeSQL. Это же может использоваться и как замена для Hive.

Еще о веб-аудио

Еще одна JavaScript библиотека и плагин к jQuery для работы с аудио в веб.

P.S. см. здесь другие решения для web audio

Очки

Что видно в Google Glass:

А согласно этому патенту Google, отображать информацию предполагается, в том числе, и на глазах других людей

Респонзинатор

Инструмент, который позволяет проверить, как выглядит веб-страница на разных устройствах. А проверяется в этом примере как раз одна из free responsive HTML5 templates

Data Mining в Google

Коллекция публикаций от сотрудников Google по тематике Data Mining

Институты больших данных

Пара интересных ссылок на академические инициативы:

1. Institute for Quantitative Social Science (IQSS). Это Гарвард. Кстати, один из их проектов - это система, на которой их собственный сайт построен - OpenScholar. Это основанная на Друпал полнофункциональная CMS для академических институтов. Open Source.

2. Data Science Center. Это Университет Нью-Йорка.

Социальный интегратор

Crowy - интегратор для социальных сетей. На одном экране - Twitter, Facebook, LinkedIn. И это Open Source продукт.

Допрос Яндекса

Инвесторы с пристрастием допрашивают Яндекс. Довольно подробно приходится руководству объясняться.

Коротко: наличных долларов у Яндекса скоро будет миллиард, покупать некого, деньги вернут акционерам, компания надеется на прибыль от Яндекс.Маркет

Apache BigTop

Про проект Apache BigTop. Упрощение развертывания Hadoop инфраструктуры.

Коллекция мэшапов

Новые поступления в коллекции мэшапов. Набор разных приложений: Twitter, Google+, Google Maps, Foursquare, Facebook, LBS, QR-коды, мобильные HTML5 приложения, поиск, рекомендательные системы и т.п. Возможно, что это самый большой набор веб-мэшапов в зоне .ru

Из последних поступлений, например, мобильный веб-мэшап Where Are You Now

Facebook Graph Search

Появились технические детали об устройстве Facebook Graph Search. Интересные моменты в использовании КС-грамматики

Где ты?

Переработан мешап WAYN (Where Are You Now).

Это мобильный веб-мэшап, который позволяет делиться информацией о местоположении в виде подписи к сообщениям. Нет идентификации, нет сторонних серверов, которые хранят всю информацию о пользователях. Прямая отправка данных тому, кому они предназначены. Система не имеет данных об отправителе и получателе, а также никаким образом не влияет на процесс передачи данных.

Некоторые иллюстрации:

1. Простая отправка автоматически определенного (или заданного вручную) местоположения:

2. Адресат видит уже две точки (свое местоположение и местоположение отправителя):

Подробнее можно прочесть на справочной странице сервиса.

P.S. а на случай, когда нужно отслеживать местоположение по нескольким абонентам одновременно, есть сервис Где они. Идея там такая же - обмен информацией о позиционировании на основе peer to peer модели. Разные другие формы реализации представлены на сайте Geo Messages

Медицинские приложения

Хакатон в Media Lab (MIT), посвященный медицинским приложениям. Интересные работы. Вот здесь еще есть хороший обзор мероприятия

О метеорите

Вот для чего нужны местные сайты. Все видео о метеорите на сайте Челябинска

Абавазрение 18.02.2013

Некоторые интересные ссылки:

1. Проверь себя. Вопросы для интервью на позицию data scientist

2. Структуры данных в NoSQL. И, соответственно, какие структуры где будут эффективнее работать.

3. Некоторые публикации по теме Human Dynamics. Использование данных мобильных телефонов для анализа поведения.

4. Ретвиты. Попытка предсказать их распределение от Яндекса. Но все сложнее. Вот интересная статья о помощи шума в распространении информации.

5. Определение контекста для мобильных абонентов. Интересная статья с шаблонами для акселерометра, динамика, etc.

6. Конференции в России

7. На сайте inetique.ru обновлен раздел Новости

M2M приложения

Проекты-финалисты M2M Challenge 2012. Сенсоры наступают.

IT блоги - что почитать?

Обновлен Интегратор IT блогов. Техническая реализация - используется widget от Google, который позволяет загружать RSS фиды со сторонних сайтов. Ну и представление данных вне основной страницы (механизм из сервиса Желтые страницы)

На странице используется также CSE (custom search engine) по IT-блогам.

P.S. другая популярная CSE присутствует на inetique.ru - поиск по скидкам и купонам - 90+ сайтов. Код для поиска можно использовать на собственных сайтах. Вот пример: поиск по скидкам.

Wired Smart Home

Статья в сборнике ICUMT - 2012.

M. Schneps-Schneppe, A. Maximenko, D. Namiot, and D. Malov. Wired smart home: Energy metering, security, and emergency issues. In Ultra Modern Telecommunications and Control Systems and Workshops (ICUMT), 2012 4th International Congress on, pages 405–410. IEEE Conference Publications, 2012

Инфографика и визуализация

Полезная коллекция инструментов для инфографики и визуализации

Asterix

Интересная платформа для анализа тегированных данных

Audio в веб

Интересная библиотека JavaScript для работы с аудио в веб приложениях

Big Data education

Интересная идея - обучение по big data на базе реальных проектов. В основе - Data Science ebook

Е-издатель

Habitat - издательская система для электронных книг

Зарядка для телефона

Интересная идея зарядки для телефона в виде подставки под чашку.

Термогенератор? Что-то вроде модулей Пельтье?

Программирование в онлайне

10 веб-ресурсов для непосредственной проверки вашего кода (или CSS разметки)

Научный Linux

Толковый перевод на IBM DeveloperWorks: Использование Linux в научных вычислениях. В частности, Sage и Python.

Шторм

Big data в реальном времени. Twitter Storm.

P.S. вот здесь еще можно посмотреть другие публикации

Местные новости

OpenBlock - система для местных новостей. Open Source.

А здесь можно посмотреть автоматический подбор местных новостей.

Big Data журнал

Big Data Journal. Редактор: Edd Dumbill, O'Reilly Media.

jQuery Mobile

Обработка событий в jQuery Mobile

P.S. см. здесь другие публикации по jQuery

Абавазрение 09.02.2013

Некоторые интересные ссылки:

1. Low energy Bluetooth devices. Это реальный тренд.

2. На сайте inetique.ru обновлены новости.

3. MoSQL - зеркало для MongoDB в PostgreSQL.

4. Интересный трюк для предотвращения cross-site scripting

5. Предсказание погоды по анализу GSM сигналов. Еще одно использование концепции "телефон как сенсор". Другой пример см., например, здесь

6. WebRTC: видео-чат Chrome - Facebook

7. А все уже пользуются хостингом от Google?

Google Maps Mania.ru - 63

Появились новые записи, и пришло время выпустить очередное обновление для списка русскоязычных проектов (систем), выполненных на базе Google Maps.

Как обычно, символом * отмечены новые поступления со времени публикации предыдущей версии списка. Историю вопроса можно изучить здесь.

Ну а последняя версия доступна на странице Google Maps Mania.RU

In-memory data

Память дешевеет. Соответственно, обработка данных в памяти становится реальностью. Или необходимостью, если нужно реальное время. In memory data grid в системе Cubrid.

Вот еще один обзор по in-memory системам, применительно к задачам реального времени в big data. Кстати, к in-memory systems можно отнести и Spark

Местные новости. Кызыл.

Обновлен мэшап Городские новости. Все местное: видео, фото, новости, рекомендации, твиттеряне. YouTube + Twitter + Yandex + Flickr + Foursquare.

В частности, добавлена страница для города Кызыл. Виртуальный тур, практически. Когда еще будете в Туве ...

Новости вокруг нас

Сервис по печати новостей на кассовых чеках. А что - это ведь еще один носитель. И рекламное место в перспективе. Сейчас в реальном времени подкачивают данные из Associated Press.

О потоках

Конец поиска в сегодняшней форме. Структура веба будет заменена (по крайней мере, в пользовательском представлении) потоками данных. Компания автора - Lifestream похожа на то, что делает Facebook со своим поиском по социальному графу.

Электронные библиотеки

Большой список бесплатных электронных библиотек

Введение в Data Science

Интересный курс от Колумбийского университета Intoroduction to Data Science. Подробные сопутствующие материалы. Курс построен как набор лекций представителей индустрии. Как, например, устроена рекомендательная система в Hunch и т.д.

Wi-Fi спрей

Wi-Fi антенна из балончика со спреем. 7 идей, которые перевернут мир.

Книги по программированию

Полезная коллекция бесплатно доступных книг по программированию

Предсказатель

"Прошлое не повторяется, оно рифмуется" - Марк Твен. Интересная работа Microsoft Research по предсказанию событий на основе веб-источников

Богу - богово

Машинное обучение - это хорошо, но человек - лучше. Twitter будет использовать человеческий мозг для идентификации топиков, которые становятся популярными в поиске.

Глобальный мэшап

Попытка построить единую точку доступа для мэшапов: 100+ API в одной библиотеке.

P.S. Все-таки, Yahoo Pipes был сильно недооцененным продуктом.

Мобильные сенсоры

Еще один пример использования концепции phone as a sensor - сбор информации об атмосферном давлении с помощью телефонов. Получается такая распределенная сеть метео-станций.

Абавазрение 01.02.2013

Некоторые интересные ссылки (в первую очередь - big data и связанные проекты):

1. BigML - как может выглядеть автоматизация анализа на основе machine learning. Ясная схема. Включает программные интерфейсы и даже инструменты работы с системами машинного обучения из командной строки.

2. Сколько может стоить термостат? 800 млн. долларов. Умные приборы - это тренд.

3. MIT Web programming competition. Финалисты.

4. Raspberry PI рассматривается как интеграционный элемент для M2M. Полноценный компьютер с полным набором инструментов разработки. Вот здесь еще можно посмотреть список применений для Raspberry PI

5. Интересное выступление Max Levchin на форуме DLD 2013, посвященное направлениям развития (применения) big data. Цифровизация окружающего мира: "So to conclude: I believe that in the next decades we will see huge number of inherently analog processes captured digitally. Opportunities to build businesses that process this data and improve lives will abound" - отсюда. А мы в AbavaNet давно про это знали.