Жизненные индикаторы

В закладки на мобильном браузере: http://linkstore.ru/life.htm

Все проходит

Автор поменял свое мнение. E.Brewer о текущем состоянии дел с CAP-теоремой.

IoT от MIT

Интересный IoT Business Report от MIT

Облако высокой доступности

Архитектурные заметки IBM по проектированию систем с постоянной доступностью на основе облачных технологий

Советы по обработке данных

Data Scientist Handbook. Советы бывалых по обработке данных.

INJOIT - собираем статьи

Бесплатный рецензируемый научный журнал. The International Journal of Open Information Technologies (INJOIT). ISSN: 2307-8162. Индексируется в РИНЦ. Научные публикации для магистров и аспирантов. Статьи на русском или английском. Издатель: Лаборатория Открытых Информационных Технологий факультета ВМК МГУ им. М.В. Ломоносова.

Принимаем статьи в 1-й номер журнала на 2015 год (том 3). Здесь можно посмотреть архив журнала.

/via Лаборатория ОИТ

Гироскопическая подслушка

Гироскоп в смартфоне может быть использован для расшифровки разговора. Интересно :)

Вот еще нашлась дискуссия по этому поводу на YC

Тренды в Big Data

5 трендов в big data в 2014 году. Поддержка Hadoop становится обязательной для всех баз данных, основное внимание смещается на аналитику (обработку данных).

Предзагрузка контента в браузере

rel="prefetch" - интересная опция. Пока только в Chrome.

INJOIT vol. 2, no. 12

Вышел новый номер журнала INJOIT. Это последний номер в 2014 году.

Темы статей: архитектура предметно-ориентированной базы знаний интеллектуальной системы, оптимизация онлайн контента учебного курса с использованием автоматического куратора в скользящем режиме, информационная поддержка задач компьютерного моделирования высокоскоростного взаимодействия твердых тел, интеллектуальная система информационной поддержки развития перспективных бионических технологий: основные направления работ по созданию, a study on preprocessing techniques for the character recognition

Архив журнала находится здесь.

/via Лаборатория ОИТ

Домострой и автоматизация

Хорошая коллекция ссылок на продукты с открытым кодом для построения умного дома. Есть российские продукты из этой области?

Фильтр Калмана

Хорошо написанное объяснение принципов работы и моделей использования фильтра Калмана.

О микросервисах

Интересная статья Martin Fowler: Microservices and the First Law of Distributed Objects. Шаблон микросервисов вызывает большой интерес, особенно в связи с IoT и M2M программированием.

Еще по этой теме можно почитать статью в INJOIT: Namiot, D., & Sneps-Sneppe, M. (2014). On Micro-services Architecture. International Journal of Open Information Technologies, 2(9), 24-27.

P.S. Вот еще нашлась интересная дискуссия на YC о микросервисах.

HMM

Неплохое введение в Hidden Markov Models

Open Signal

Коллективный сбор информации от сенсоров. Интересно, что OpenSignal начинался как проект по оценке качества связи. Мобильные пользователи должны были поставлять такую информацию. И это трансформировалось в полноценную сенсорную платформу.

M2M 5G

M2M взаимодействие и 5G. По версии Эрикссон. В этой связи интересны работы по MobilityFirst. Полностью мобильная инфраструктура для сети. Вот, например, коммерческая инициатива в этой области - MaidSafe

3D танго

Tango - визуализатор пространства от Google. Специализированный акселерометр, который позволяет создавать трехмерные карты окружающего пространства.

Курсы Carnegie-Mellon

Сайт с учебными курсами университета Carnegie-Mellon

/via Поиск учебных курсов

Шаблоны панелей

Шаблоны для панелей мониторинга на базе Bootstrap

Запад и Восток в дизайне

Очень интересный материал - сравнительный анализ дизайна мобильных приложений на Западе и на Востоке. Автор, в первую очередь, анализирует дизайн китайских приложений.

25 000 евро

25 000 евро (страшно сказать - сколько это теперь в рублях) и другие призы в различных студенческих конкурсах. Детали - на сайте Лаборатории Открытых Информационных Технологий.

Что не так со статьями про QR-коды

Еще одна большая статья про то, что что-то не так с QR-кодами. Странно, но кажется что-то не так с авторами таких статей. QR-код есть абсолютно простая и абсолютно техническая вещь. Которая решает одну и только одну задачу - упрощает ввод информации для мобильного устройства. И все. Что здесь может быть "не так"? Кто хочет - пользуется, кто хочет - вводит данные вручную. Все остальные вопросы - они уже к самим данным. Не открывается URL, который был закодирован в коде? Плохо, но при чем здесь код? Такой URL не откроется и если его прямо набрать в браузере, и даже если нажать ссылку в SMS. И так далее. Попытки придумать какую-то злонамеренность (или наоборот :) для абсолютно технического трюка.

/via QR-code How to

INJOIT - call for papers

Бесплатный рецензируемый научный журнал. The International Journal of Open Information Technologies (INJOIT). ISSN: 2307-8162. Индексируется в РИНЦ. Научные публикации для магистров и аспирантов. Статьи на русском или английском. Издатель: Лаборатория Открытых Информационных Технологий факультета ВМК МГУ им. М.В. Ломоносова.

Принимаем статьи в 12-й номер журнала на 2014 год (том 2). Здесь можно посмотреть архив журнала.

/via Лаборатория ОИТ

Big Data Use Cases

Big Data Use Cases from Dell

Анализ трафика

Обзор инструментов для анализа беспроводного трафика.

Google-собиратель

Интересная идея от Google - пользователь может установить оплату в пользу сайта ($1-$3 в месяц), а Google таким посетителям на сайте не будет показывать свою рекламу. Google Contributor - еще один механизм финансирования сайтов.

Инфраструктура для iBeacon

Полная инфраструктурная система для iBeacons. CMS в таких проектах действительно нужна.

/via Bluetooth Data Points - теги на базе телефонов.

Тайный сервер

Стандарт на представление скрытых серверов - TCP Stealth. Ближайшая аналогия - точка доступа Wi-Fi без публичного анонсирования. Только ограниченный круг клиентов (знающих о ее существовании) может взаимодействовать с ней.

INJOIT vol. 2, no. 11

Вышел новый номер журнала INJOIT.

Темы статей: трехмерные и двумерные изображения: модели, алгоритмы и области анализа, “Многомерное метро” и символьные матрицы, о переходе к IP коммуникациям и задачах российских связистов, вопросы разработки математической модели информационной войны, micro-service Architecture for Emerging Telecom Applications

Архив журнала находится здесь.

/via Лаборатория ОИТ

Большие события

Пара интересный статей по publish-subscribe модели для больших данных: модели использования Kafka и обработка событий с помощью связки Kafka - Flume

См. также другие статьи по Kafka

Местный свет

Как замена iBeacons - умные лампы от Philips. Мерцание должно распознаваться камерой мобильного телефона. И по тому, какая это лампа - можно определеть местоположение в здании. Для телефона в кармане не работает по очевидным причинам. В целом - непонятно. Хотя конечная цель очевидна - избавиться от необходимости подготовки инфраструктуры (инсталляции тегов).

Источник случайности

Интересная идея - тег, который вырабатывает случайные данные. Аппаратный источник неопределенности.

Big Data Open Source

Подробное описание инфраструктуры StumbleUpon, построенной на Open Source Big Data продуктах (e.g. Kafka)

Скрипт как сервис

CGI-скрипт как сервис. Можно написать свой скрипт (PHP, Ruby) и получить URL для обращения к нему.

Архитектура веб-почты

Yahoo переводит свою почтовую систему (реализацию веб-доступа) на node.js

Yahoo Mail moving to React from Subramanyan Murali

In Proximity

Пара гео-сервисов, которые ориентированы на работу с пользователями в непосредственной близости к источнику (автору, владельцу) данных:

Closely

HelloWorld

Кажется, что будущее гео-позиционных сервисов именно в таком микро (в смысле расстояния) шаринге.

О размере данных

Согласно данным опросов инженеров, работающих с большими данными, размер - не имеет значения. Вариативность - вот где основная проблема. И это очень верно - нормализация и очистка данных стали занимать очень много времени.

Еще о местных данных

Floating content - модель распространения местных данных.

/via Bluetooth Data Points

Анализ походки

Интересная статья по определению походки (сравнению походок) человека по данным сенсорных измерений. Акселерометр на телефоне - как раз подходящее устройство.

Реклама в поисковой выдаче

Вероятностные модели размещения рекламы в поисковой выдаче. Видео-лекции и слайды презентации.

Мониторинг телефонов

Здесь в статье описывается, скорее, анти-мониторинг. Как распознать на Android-телефоне тот факт, что он присоединился к фальшивой базовой станции.

Хотя более интересно в этой схеме было бы как раз слежение за телефонами. Отслеживать перемещение (присутствие) телефона по "подобию" базовой станции было бы интересным способом пассивного мониторинга. Такая "станция" должна только регистрировать попытку соединения телефона, записывать этот факт и отказывать в соединении, направляя, тем самым, телефон уже к реальной базовой станции.

YC hacks

Интересные продукты из презентаций для YC конференции:

Анализ крови

Синхронизация данных через браузер

Расстановка мебели из ИКЕЯ

Повторитель для операций

Google патенты

Очень интересный свежий список патентов Google.

Мониторинг событий

Весьма удобно использовать twitter для "виртуального" присутствия на компьютерных конференциях. Обычно, участники (и организаторы) весьма подробно комментируют происходящее. Вот, например, на странице Coldbeans ведется обновляемый список событий.

Книги по ML

Еще одна подборка книг по машинному обучению:

Mining the Social Web

Understanding Machine Learning: From Theory to Algorithms

Bayesian Reasoning and Machine Learning

Machine Learning: a Probabilistic Perspective

Computer Vision: Models, Learning, and Inference

Data Mining and Analysis: Fundamental Concepts and Algorithms

The Elements of Statistical Learning

An Introduction to Statistical Learning

Reinforcement Learning: An Introduction

Regret Analysis of Stochastic and Nonstochastic Multi-armed Bandit Problems

Algorithms for Reinforcement Learning

/via Coldbeans.

Глубокие рекомендации

Deep Learning в рекомендательном сервисе Spotify.

См. здесь другие материалы по deep learning.

Темные места машинного обучения

Интересная заметка о забытых (пропущенных) областях машинного обучения. Замечание о временных рядах - очень верное.

Авто-API

Google опубликовал первую версию Auto API для Android. Пока - управление аудио устройствами и сообщения. Но понятно, что это только начало.

Кстати, вот здесь есть презентация Cars as Tags. Посвящена использованию Bluetooth Data Points для взаимодействия с автомобилями (пассажирами).

NFV

ETSI довольно значительно продвинулось по пути стандартизации NFV (Network Functions Virtualisation). Вот последние версии документов на портале ETSI.

Еще у них есть хорошие White Papers по NFV: часть 1, часть 2, часть 3.

Twitter Index

Твиттер теперь индексирует все сообщения. Вот здесь описана архитектура этого процесса. Из инструментов: Mesos для управления кластерами и надстройка над Lucene для information retrieval

Модели применения для BDP

К вопросу о моделях применения для Bluetooth Data Points. Пара интересных ссылок:

Personal merketplace. С помощью BDP можно распространять информацию среди находящихся рядом мобильных абонентов. Читай - продавать локально. Кстати, у этого магазина по ссылке - открытый код.

А другая система - это Path Talk. Прямое общение с местным (локальным) бизнесом. Идея о том, как это может выглядеть была реализована еще в Wi-Fi Chat.

О местных данных

Намиот Д. Доступ к локальным данным на основе информации о сетевой близости //Сборник избранных трудов IX Международной научно-практической конференции "Современные информационные технологии и ИТ-образование". — ИНТУИТ.РУ Москва, 2014. — С. 306–311.

В статье рассматриваются вопросы разработки мобильных сервисов с использованием беспроводных тегов. В работе рассматривается новая модель использования (применения) Core Bluetooth устройств. В этой модели Bluetooth устройства служат для определения контекстно-зависимых данных, доступных мобильным пользователям. Основным достижением этой модели является то, что она охватывает все этапы жизненного цикла мобильных сервисов – представление тега (тегов), привязку к ним информационного наполнения и создание прикладных приложений на основе имеющихся тегов. В качестве тегов могут выступать как мобильные телефоны, так и уже существующие устройства с поддержкой Bluetooth. Возможные области применения: приложения для торговых и сервисных организаций, навигация в помещениях, контекстно-зависимые приложения для Smart Cities.

Slush 2014

Мы продолжаем публиковать ссылки на интересные события, отражаемые в Twitter. Сегодня это Slush Conference, Helsinki 2014

Slush 2014

/via Bluetooth Data Points

P.S. много событий публикуется в блоге Coldbeans

Еще о Spark

Еще одно введение в Spark

P.S. См. здесь другие материалы по Spark.

Введение в YARN

Управление Hadoop кластером - YARN

Мобильный интернет

Магический квадрант. Чем заниматься, во что инвестировать:

Учебные приложения (и книги) выглядят привлекательно.

Сетевая медицина

Как устроены облачные системы медицинской диагностики. Весьма подробный обзор.

Архитектура IM

Интересное исследование о масштабируемой архитектуре для Instant Messaging

Анализ графов

Интересный инструмент анализа графов (в основном - для данных их социальных сред) - Discussion Graph Tool. Авторство - Microsoft Research.

Распределенные потоки

Модели обработки потоков в распределенных базах данных.

P.S. Еще про обработку поток можно почитать в хорошей статье от LinkedIn - The Log: What every software engineer should know about real-time data's unifying abstraction

NoSQL 2.0

Что будет в новом поколении NoSQL систем? Переосмысление CAP теоремы, множественные модели данных, глобальные транзакции.

Звуки большого города

Обработка звука есть сильно недооцененный информационный канал для смартфонов. Вот интересный проект по использованию акустических датчиков в умных городах: EAR-IT

Корейский бекон

Samsung опубликовал собственное решение для proximity applications: Samsung Placedge Platform. Идея в том, чтобы владельцы тегов не должны будут распространять какое-либо приложение. Поддержкой определения тегов будет заниматься непосредственно телефон, а рассылкой push-уведомлений - платформа от Samsung.

Вот здесь еще есть о Placedge SDK.

Магистратура в Финляндии

Самая большая магистратура по IT в Финляндии. Весьма впечатляющая программа. И бесплатное обучение ...

Большие потоки

Архитектурные решения для поддержки больших потоков данных. Автор предлагает использовать Kafka.

В этой связи вот еще интересная ссылка:

Kafka + Apache Storm контейнер

Биоинформатика

Курсы по биоинформатике на русском языке.

/via Поиск учебных курсов

Конференция «Современные информационные технологии и ИТ-образование»

Опубликована программа IX Международной конференции «Современные информационные технологии и ИТ-образование». Авторам отобранных докладов предлагаем подготовить расширенные версии для публикации в журнале INJOIT.

Бесплатная регистрация на конференцию - здесь.

Цепи Маркова

Цепи Маркова - визуальное представление. И написано еще весьма хорошим языком.

P.S. вот еще нашлась интересная дискуссия по этому материалу

См. другие публикации по теме визуализация

Моменты истории

Из патента этой леди вырос беспроводной интернет:

/ отсюда

Ericsson IoT

Интересный IoT framework от Ericsson. Код открыт.

Практика Android

Пара хороших статей с разобранным примером создания Android приложения: часть 1, часть 2.

Продвижение и успех в Google Play

Руководство от Google - как обеспечить продвижение своего приложения в Google Play (бывш. Android Market).

Если кажется, что "много букв" в документе, то вот здесь есть неплохая выжимка.

Поиск для IoT

Поисковая система для IoT. Вот, например, метеостанции в Москве.

Рекомендации от LinkedIn

Интересная статья с описанием технического устройства (алгоритмы, программная архитектура) рекомендательных сервисов в LinkedIn

О распределенных системах

Формальные подходы к описанию процессов в распределенных системах. Как, например, описать репликации. Рассматриваются следующие языки (Miscrosoft Research): TLA+ и PlusCal

P.S. вот еще интересная дискуссия по этой теме.

Веб-компоненты

Пара полезных ресурсов с коллекциями веб-компонент:

Component Kitchen (оцените домен !)

Custom Elements

Применение Hadoop

Хорошая презентация (150+ слайдов) по использованию Hadoop:

Strata NY 2014 - Architectural considerations for Hadoop applications tutorial from hadooparchbook

Более полно это рассматривается к книге авторов, посвященной применению Hadoop

О дизайне мобильных приложений

Хороший перевод статьи о современных подходах к организации мобильных приложений. PUSH-уведомления - наше все.

P.S. вот здесь еще можно почитать о push-notifications в информационных системах.

Больше SDN

Еще одна реализация SDN с открытым кодом. За спиной этой лаборатории (и за всем проектом) AT&T.

Обработка веб-логов

Практическая статья - прогнозирование запросов на основе обработки веб-логов.

HTTP/2

Хорошая презентация от Google по HTTP 2.0

Drupal Camp 2014

28 и 29 ноября на базе факультета ВМК МГУ состоится конференция DrupalCamp MSK 2014 — самое ожидаемое и значимое событие для Drupal-сообщества России.

Конференция соберет большое количество разработчиков, веб-мастеров, дизайнеров, менеджеров проектов, владельцев бизнеса и работодателей в сфере диджитал.

Участников ждут доклады от известных российских и зарубежных друпалистов, представителей Майкрософт и Яндекса, тренинги в рамках Drupal Global Training Days, рассказы об интересных моментах амстердамской конференции и о том, чего ждать от Drupal в будущем, а также общение на темы развития Drupal в России.

Студентам и докладчикам вход свободный. Журнал INJOIT предложил докладчикам публикацию их работ.

Все подробности на сайте http://2014.drupalcampmsk.ru/

/via Лаборатория ОИТ

Тихоновские чтения 2014

Конференция Тихоновские чтения 2014: программа и тезисы докладов. О нашем докладе можно почитать здесь: Bluetooth и местные данные.

INJOIT - публикации в области ИТ

Бесплатный рецензируемый научный журнал. The International Journal of Open Information Technologies (INJOIT). ISSN: 2307-8162. Индексируется в РИНЦ. Научные публикации для магистров и аспирантов. Статьи на русском или английском. Издатель: Лаборатория Открытых Информационных Технологий факультета ВМК МГУ им. М.В. Ломоносова.

Принимаем статьи в 11-й номер журнала на 2014 год (том 2). Здесь можно посмотреть архив журнала.

/via OIT Lab

Bluetooth и батареи

Сканирование BLE устройств и разряд батареи. Android 5.0 довольно много добавит для удобства фонового сканирования BLE устройств.

О языках программирования

Потрясающая визуализация - граф языков программирования.

К ним

Среда на базе Eclipse для анализа данных - KNIME. Есть GPL лицензия.

Мониторинг беспроводных сетей

Мобильное приложение для мониторинга сотовой связи (а также Wi-Fi сетей). Найдено в интересной статье по мониторингу городского Wi-Fi.

Купоны и скидки

Кто-то разоряется, кто-то приходит, но количество купонных сайтов продолжает расти. При кризисе - снова станет актуально. В поисковой системе по скидочным сайтам: поиск по купонам и скидкам уже 110 русскоязычных сайтов. Технически это сделано на базе Google CSE (custom search engine).

А здесь можно скопировать код поисковика по русским купонникам для добавления к своему сайту/блогу.

Безусловный фаворит поиска изменился. Это - летающая фея. Что это такое? Видимо, у всех уже есть желтые ботинки.

Прелести дизайна

Вот на странице авторизации - выберите поле с паролем.

HipHop

HipHop Virtual Machine - JIT компилятор для PHP от Facebook. Хорошая возможность "на ровном месте" ускорить свои PHP приложения (сайты).

О предиктивной аналитике

Как может выглядеть прогнозная программа в облаке. Похоже, что конкретно здесь разработка продвигается не очень быстро (если вообще еще двигается), но идея о том, как это выглядит - хорошая. От пользователя требуется только загрузка файла с данными и указание переменных.

А так - это весьма конкурентная область. Вот, например, Google Prediction API. И у него уже довольно много конкурентов.

MS ML

Машинное обучение на Azure. Введение.

Вот здесь можно прочитать про условия использования.

Поиск учебных курсов

Обновлена база мета-поиска учебных курсов. Устроен аналогично довольно популярному поиску по купонам и скидкам:

Искать онлайн-курсы. 125+ сайтов.
 

Сразу же добавлено взаимодействие на сайте от Mozilla. Ищите, обсуждайте, учитесь.

Bluetooth и локальные данные

Еще об использовании Bluetooth Data Points. Презентация на конференции Тихоновские чтения 2014 - "Как использовать Bluetooth для представления локальных (местных) данных":

Здесь можно прочесть тезисы доклада.

Большие Данные в национальной экономике

Материалы конференции. Не досидел до конца - многие доклады не имели ничего общего с big data. Названия докладов банально не соответствовали содержанию.

Учебник по JavaScript

Интересный проект - книги свободно публикуются на GitHub. Деньги собираются на Kickstarter.

Але, гараж

Выложенные для публики эксперименты с программами и сервисами от Микрософт: The Microsoft Garage.

Красный рассвет

Перепечатка сообщения от DZ Systems:

Дамы и господа.

Имею честь сообщить вам, что группа компаний DZ Systems, Высшая Школа Экономики и Институт Системного программирования РАН планируют провести в Москве 11-го Декабря конференцию, посвящённую разработке операционных систем в Российской Федерации.

Цель конференции, на данный момент - выявить тех, кто работает в области создания или развития ОС, гипервизоров и другого системного ПО, познакомить их между собой и обменяться информацией об уже идущих проектах.

У нас уже есть докладчики из Росы, ИСП РАН, Ксис Лабз (очень интересный проект, кстати - персистентный гипервизор).

Если вы работаете в этом направлении, если вы знаете кого-то, кто работает - приходите. Зовите. Пишите.

Конечно, докладчикам из СНГ мы тоже будем рады.

Конкретно, место и время: Четверг 11 декабря, актовый зал ВШЭ по адресу Б. Трёхсвятительский пер., д. 3 (бывшее здание МИЭМ) с 10:00 до 18:00

Чуть позже мы дадим более подробную информацию, расписание и тезисы.

Если вы знаете блог, сообщество или сайт, на котором этот анонс было бы полезно разместить - пожалуйста, разместите, или сообщите нам.

P.S. Хорошее дело. Со своей стороны готовы предоставить страницы журнала INJOIT авторам докладов.

Стать Кассандрой

Курсы по Cassandra от Datastax

/via Поиск учебных курсов