Инфраструктура анализа данных

Как выглядит современный ландшафт баз данных в data mining. Отсюда

Вещевой веб

Предложения по стандарту для Web of Things. HTTP, Web Sockets, JSON - вот это вот все.

Большие данные на практике

Интересная подборка об инструментах работы с данными, которые используются в конкретных компаниях. Вот здесь еще есть краткое изложение.

Питончики

Коллекция фрагментов кода на Python для задач анализа данных

INJOIT - call for papers

Бесплатный рецензируемый научный журнал. The International Journal of Open Information Technologies (INJOIT). ISSN: 2307-8162. Индексируется в РИНЦ. Научные публикации для магистров и аспирантов. Статьи на русском или английском. Издатель: Лаборатория Открытых Информационных Технологий факультета ВМК МГУ им. М.В. Ломоносова.

Принимаем статьи в 11-й номер журнала на 2015 год (том 3). Здесь можно посмотреть архив журнала INJOIT.

/via Лаборатория ОИТ

О контекстно-зависимых сервисах

DOI: 10.14489/vkit.2015.010.pp.018-022
Намиот Д. Е., Шнепс-Шнеппе М. А. "КОНТЕКСТНО-ЗАВИСИМЫЕ СЕРВИСЫ НА БАЗЕ БЕСПРОВОДНЫХ ТЕГОВ"

Рассмотрены вопросы разработки контекстно-зависимых сервисов, базирующихся на использовании беспроводных тегов. Предложена новая модель применения Core Bluetooth устройств, в которой одного мобильного приложения достаточно для поддержки всех этапов жизненного цикла контекстных сервисов. Приложение обеспечивает создание тега, привязку к нему информационного наполнения и просмотр данных, привязанных к другим тегам. Возможные области применения − приложения для информирования мобильных пользователей (посетителей) в помещениях.

Гео-поиск

Простой и полезный бизнес-инструмент от Google - гео-привязка товарного поиска. Владельцы магазинов могут видеть, что ищут в сети пользователи, находящиеся рядом с их торговыми точками.

Протоколы IoT

Интересная статья о протоколах, используемых в IoT

Из MySQL в Neo4J

В связи с ростом интереса к графовым базам (и проектам, которые у нас есть): перенос данных из MySQL в Neo4J

Задачи для собеседований

Пополняемый список задач для собеседований в программистских компаниях.

См. также другие публикации на тему собеседований

ML Python

Хорошее введение в машинное обучение с использованием Python

Большие данные и умные города

Обзор Big Data & Smart Cities. Есть интересные ссылки по таким программам в Азии.

Доступ к сетевым сенсорам из веб-страниц

Презентация для конференции DCCN 2015 - On hyper-local web pages.

On hyper-local web pages from Coldbeans Software

INJOIT том 3, номер 10

Вышел новый номер журнала INJOIT. Это десятый номер в 2015 году.

Темы статей: достоверная фильтрация в «Белом шуме», функциональные требования к современной системе конфигурирования приложений, управление памятью в JavaScript приложениях, конфигурационный фреймворк для Java приложений, основанный на аннотациях.

Архив журнала находится здесь.

/via OIT Lab

Медуслуги

Интересный анализ того, что Apple ResearchKit предлагает для медицинских приложений. По сути - набор компонент, из которых можно будет собирать диагностические системы.

Стек технологий

Впечатляющий стек технологий в компании, занимающейся мобильным маркетингом.

Анализ текстов

Простое введение в анализ текстов: классификация документов.

Язык параллельного программирования

X10 - эффективный язык для параллельного программирования.

Wi-Fi позиционирование

Сантиметровой точности позиционирование с использованием Wi-Fi. Идея заключается в фильтрации отраженных сигналов.

Тихоновские чтения 2015

Конференция Тихоновские чтения 2015 и тезисы доклада, посвященного управлению памятью в JavaScript.

Об одной модели данных для контекстно-зависимых сервисов

Презентация конференции DAMDID/RCDL 2015

On data model for context–aware services from Coldbeans Software

Сама статья: Намиот Д., Шнепс-Шнеппе М. О модели данных для контекстно-зависимых сервисов // Аналитика и управление данными в областях с интенсивным использованием данных. — НИЯУ МИФИ Обнинск, 2015. — С. 71–77

IFTTT

Интересная статья с описанием технической архитектуры сервиса IFTTT

Базы данных для временных рядов

Презентация конференции DAMDID/RCDL 2015:

On time-series databases from Coldbeans Software

Сама статья: Namiot D. Time series databases // Аналитика и управление данными в областях с интенсивным использованием данных. — НИЯУ МИФИ Обнинск, 2015. — P. 244–250.

Данные для обучения

Интересная презентация по построению исходных данных для машинного обучения:

Understanding Feature Space in Machine Learning - Data Science Pop-up Seattle from Domino Data Lab

PostgreSQL и MySQL

Вполне техническая дискуссия по сравнению PostgreSQL vs. MySQL. Без налета религиозных войн, просто коллективный поиск того, что есть в одной системе, но отсутствует в другой.

Язык программирования для Интернета Вещей

Презентация с конференции ICUMT-2015, где был представлен проблемно-ориентированный язык для IoT

Коммутация пакетов и коммутация каналов

Все ли потеряно для коммутации каналов? Дискуссионная презентация грядущей конференции DCCN-2015 - ON THE SYNERGY OF CIRCUITS AND PACKETS

Загрузка веб-страниц

Подробный анализ процессов во время загрузки веб-страниц. Используют Chrome Developer. Очень хороший учебный материал для веб-разработчиков.

Протоколы Internet of Things

Хороший сравнительный анализ беспроводных протоколов для IoT

Cовременные информационные технологии и ИТ-образование

Информация о X Юбилейной международной научно-практической конференции «Современные информационные технологии и ИТ-образование»

X Юбилейная международная научно-практическая конференция «Современные информационные технологии и ИТ-образование» пройдет 20-22 ноября 2015 года в МГУ имени М.В.Ломоносова. Соучредители конференции: Факультет Вычислительной математики и кибернетики Московского государственного университета имени М.В.Ломоносова (ВМК МГУ), Санкт-Петербургский государственный университет (СПбГУ), Нижегородский государственный университет имени Н.И. Лобачевского (ННГУ), Институт проблем информатики РАН (ИПИ РАН), ОАО «Институт электронных управляющих машин имени И.С. Брука» (ОАО «ИНЭУМ имени И.С. Брука»), НОУ «Сетевая Академия Ланит», Академия информатизации образования, Журнал «Прикладная информатика», Фонд «Лига интернет-медиа».

Цели и задачи:

• Способствовать развитию научно-исследовательской и инновационной деятельности в области информационных технологий (ИТ) и ее приложений.
• Способствовать развитию исследований и разработок, связанных с теоретической информатикой, прикладной математикой и компьютерными науками для формирования научных основ области ИТ.
• Способствовать развитию процессов и технологий информатизации образования, учебно-методического обеспечения национальной системы ИТ-образования, а также продвижению инновационных педагогических решений на основе использования ИТ.
• Способствовать исследованиям и обмену опытом в области открытого непрерывного и сетевого образования на основе использования методов и технологий электронного и мобильного обучения, инновационных образовательных и инструментальных технологий.

Планируемые секции и мероприятия:
Секция 1. ИТ-образование: методология, методическое обеспечение.
Секция 2. e-learning и ИТ в образовании.
Секция 3. Образовательные ресурсы и лучшая практика ИТ-образования.
Секция 4. Исследования и разработки в области новых ИТ и их приложений.
Секция 5. Теоретическая информатика и компьютерные науки.
Секция 6. Научное программное обеспечение в образовании и науке.
Секция 7. Школьное образование по информатике и ИТ.
Секция 8. Параллельное и распределенное программирование, грид-технологии, программирование на графических процессорах.
Секция 9. Инновационные информационные педагогические технологии.
Секция 10. Информационные технологии в системах управления.
Секция 11. Большие данные и их приложения.
Секция 12. Экономическая информатика.

Серия мастер-классов, тренингов, видео-конференций под общим названием «Современные учебные курсы и пособия». Круглые столы по актуальным проблемам ИТ-образования. Подведение итогов V Международной Интернет-конференции-конкурса «Инновационные информационно-педагогические технологии в системе ИТ-образования» – ИП-2015. Расширенное заседание методического совета по прикладной математике, информатике и информационным технологиям.

Участие в конференции бесплатное. Регистрация участников конференции обязательна и осуществляется через сайт конференции http://conf.it-edu.ru до 15 ноября 2015г. Места в гостинице МГУ для иногородних участников бронируются через сайт конференции до 12 ноября 2015 г.

На конференцию принимаются материалы в виде статей объемом от 6 до 11 страниц (тезисы не рассматриваются!). Прием статей производится до 1 ноября 2015г.

Требования к оформлению материалов, а также условия публикации представлены на сайте конференции. Сборник трудов издается к началу работы конференции. Сборник является научным изданием, индексируемым в информационной базе РИНЦ, с постатейной загрузкой статей сборника в Научную электронную библиотеку eLIBRARY.RU . Полную информацию о конференции и оперативные новости можно найти на сайте по адресу: http://conf.it-edu.ru/ .

Amazon IoT

Amazon сделал важный шаг в упрощении работы для IoT систем. Простая модель с понятным биллингом - сохранить сообщение и переслать сообщение. Протоколы HTTPS, MQTT.

29 секунд

Именно 29 секунд анализа потоков твитов достаточно, чтобы определить землетрясение

Спортивный анализ

Интересный очет - анализ данных в спорте

AWS Lambda

AWS Lambda – это сервис вычислений, запускающий ваш код при определенных событиях и автоматически управляющий вашими вычислительными ресурсами, что упрощает создание приложений, которые быстро реагируют на поступающую информацию. AWS Lambda запускает ваш код в течение миллисекунд после того как произошло событие (например, загрузка изображения, действие приложения, щелчок по ссылке на веб-сайте или получение данных от подключенного устройства). С помощью AWS Lambda можно также создать новые серверные сервисы, автоматически запускающие вычислительные ресурсы по пользовательским запросам.

А вот возможность поместить таким образом в облако произвольную функцию JavaScript

Мечта SMM-щика

Патент Фейсбука - расчет кредитного рейтинга по профилю в социальной сети.

Параллельное программирование

Курс по параллельному программированию (ВМК МГУ)

/via Поиск учебных курсов

Сенсорные приложения

Приложения на базе сенсоров от Libelium. Сгруппированы по областям применения.

MySensors

MySensors - проект с открытым кодом для построение IoT систем. Используется Arduino. Весьма простой и прагматичный API. А вот здесь описан пример реализации "умного дома" на основе MySensors.

P.S. См. также другие публикации по Arduino.

HTTP 2.0

Толковое описание того, в чем именно заключается возможное ускорение работы с HTTP 2.0

P.S. см. тккже другие публикации по HTTP/2

Разбор естественного языка

Очень хорошее, подробное и обновляемое описание того, как машинное обучение используется в анализе естественного языка.

Визуализация NN

Интересная визуализация нейронных сетей

Журналистика данных

Хороший учебник по Data Journalism с массой интересных инструментов.

Научный Python

Python и его пакеты для анализа данных - SciPy

Мобильные сообщения

Интересное предположение о подходе Google к mobile messaging. По мнению автора, компания заинтересована в поддержке бесплатного обмена сообщениями между Android устройствами на уровне телекомммуникационных операторов.

Открытые данные

Еще один из примеров, как выглядит работа с открытыми данными. На этот раз - Сингапур. Открытые данные, на самом деле, это и есть то, что должно быть государственной политикой в Интернете. Если и есть уж Институт Развития Интернета в России, то заниматься он должен двумя основными вещами - развитием и демократизацией доступа в этот самый Интернет и открытием данных.

Рынок больших данных

Подробный отчет о рынке big data от O'Reilly