Визуализация машинного обучения

Очень интересный материал - визуальное введение в методы машинного обучения.

См. другие публикации по теме визуализация

Микро-распространение

На самом деле, концепция Plague есть хорошая модель для распространения информации в сетях, основанных на network proximity.

Структуры данных для анализа данных

Примитивы данных в R и Python

Pandas и Spark Dataframes

Маленький JavaScript

Несколько реализаций JavaScript для IoT устройств:

JerryScript от Самсунг

Smart.js от Cesanta

Espruino

Магистратура ВМК МГУ

В конце августа планируется дополнительный набор на программы бакалавриата, магистратуры и второго высшего образования. Точные даты приема документов и вступительных испытаний будут объявлены после завершения основного приема. Следите за объявлениями.

/via Лаборатория ОИТ

Визуализация JavaScript кода

Визуализация программ на JavaScript.

P.S. На эту тему есть целая серия статей в INJOIT. Например: Визуализация внутренней структуры и зависимостей пакетов в программной системе.

Временные ряды в R и Python

Несколько полезных материалов по анализу временных рядов:

Using R for Time Series Analysis

Time Series Forecasting in Python and R

Forecasting: principles and practice

Масштабирование LinkedIn

Интересный практический материал о масштабировании LinkedIn. Они всегда отличались в инженерных решениях очень прагматическим подходом.

О голосованиях

Простой алгоритм выявления накруток в голосованиях

Проверки для соискателей

Тесты для программистов от mail.ru

С запашком

DustDino - Arduino-based проект по измерению качества воздуха

База событий

Интересный проект - глобальная база событий.

Зачистка дистрибуторов

Сначала КРОК, а теперь и ЛАНИТ отлучены от IBM

Экосистема Hadoop

Хорошая презентация с разъяснением экосистемы Hadoop.

Arduino IoT

Любопытный пример использования связки Arduino, Node.js и Plotly для IoT системы. Очень простая и интересная система для визуализации - Plot.ly

Узнать пароль Wi-Fi

Простой трюк по восстановлению забытого пароля Wi-Fi сети.

Backpropagation

Очень простое объяснение работы нейронных сетей - 11 строк кода на Python

Визуализация на JavaScript

Еще одна замечательная галлерея примеров использования D3

См. здесь другие примеры использования D3

E-SIM

Еще один удар по доходам телекома - идея использовать телефоны без SIM-карт живет и продвигается.

Прикладной анализ временных рядов

Как Netflix находит проблемы со своей инфраструктурой. Практическое применение алгоритма DBSCAN.

Визуализация структур

Полезный инструмент от Google - OrgChart

Управление памятью в JavaScript

Хотите узнать про утечки памяти в JavaScript и сборку мусора? Проголосуйте за нашу заявку на доклад на SECR 2015. Презентация и статья будут опубликованы.

Алгоритмы анализа данных

Есть хорошая статья с простым изложением популярных алгоритмов анализа данных. А вот появился ее перевод.

JavaScript машина

Языки и системы программирования, которые транслируются в JavaScript

Теги в автобусах

Еще одно применение iBeacons - теги установлены в лондонских автобусах. Информирование пассажиров, скидки и т.д.

Правильное A/B тестирование

Очень правильные заметки о статистике, используемой в A/B тестировании. Роль Бета-распределения, в частности.

Дорогая реальность

Микрософт предлагает гранты интересным проектам для своего AR решания Hololens. $100 000 и комплект для разработки.

О визуализации

Очень полезный список визуализаций (пакетов), основанных на D3. d3.js - это, видимо, лучшее, что есть для JavaScript.

См. другие публикации, посвященные d3

Вопросы для собеседования

Прием на работу: вопросы для собеседования. Собраны по разным компаниям. Прямо по ссылке - Google.

Веб-компоненты

Текущее состояние Web Components.

Если сравнивать с предыдущими анонсами (см., например, здесь и здесь) - то как-то все не очень быстро двигается.

Микро-Hadoop

Hadoop-кластер из Rapberry Pi. Феерично !

P.S. вот еще одна вариация на эту же тему: How to build a 7 node Raspberry Pi Hadoop Cluster

Введение в программирование

Учебный курс - Введение в программирование. Используют Python.

/via Поиск учебных курсов

USB бекон

USB iBeacon от Gimbal. Интересно, что просто Bluetooth флешка, наверное, дешевле будет. А смысл тот же самый - Bluetooth Data Points

Даже не в 5-м квартале

А только в 6-м квартале оживет рынок смартфонов, уверяет нас газета.ру:

BigData в телекоме

Статья от Ericsson Research об использовании больших данных в телекоме. HBase - как центральный элемент системы.

Тестирование распределенных систем

Хорошая статья о тестировании распределенных систем.

INJOIT - call for papers

Бесплатный рецензируемый научный журнал. The International Journal of Open Information Technologies (INJOIT). ISSN: 2307-8162. Индексируется в РИНЦ. Научные публикации для магистров и аспирантов. Статьи на русском или английском. Издатель: Лаборатория Открытых Информационных Технологий факультета ВМК МГУ им. М.В. Ломоносова.

Принимаем статьи в 8-й номер журнала на 2015 год (том 3). Здесь можно посмотреть архив журнала.

/via Лаборатория ОИТ

P2P sensors

Обычно, сенсорные данные сохраняют в облаке для последующей обработки. А вот здесь предлагается P2P модель для обмена сенсорной информацией.

SQL и Hadoop

Использование SQL для доступа к Hadoop

За структуры данных

Инициатива по поддержке структурированных данных в вебе - Schema. Среди основателей: Google, Yandex, Microsoft.

IoT облако

Интересное облачное решение для Internet of Things - Relayr.io

INJOIT vol. 3, no. 7

Вышел новый номер журнала INJOIT. Это седьмой номер в 2015 году.

Темы статей: Полиморфизм символьных троичных матриц и генетическое пространство кратчайших k-путей в n-кубе; Разложения типа Вольда и линейное оценивание для нестационарных процессов; Телекоммуникации на войне роботов; On JavaScript Memory Leaks; A study to Relate the Quality of Forum Messages with the FLOW Experience

Архив журнала находится здесь.

/via Лаборатория ОИТ

Атмосферное давление

Интересный патент - система indoor-позиционирования, которая использует базу данных атмосферного давления для определения этажа.

Мини-лекции по анализу данных

Короткие видео-лекции по анализу данных:

1. RapidMiner

2. Проект Звезды образования (рус).

/via Поиск учебных курсов

Выбор статистической модели

Алгоритмический подход - как (какую) выбрать статистическую модель

Hadoop кластер - бесплатно

Пошаговое руководство по использованию бесплатного предложения от Amazon - кластер Hadoop на 1 год.

16 книг

16 бесплатных книг по data science

Качество связи

Интересный патент от Apple, описывающий систему сбора информации от мобильных телефонах о проблемах со связью.

Azure ML

Толковый обзор Azure Machine Learning

Еще о Bluetooth-тегах

Новая статья: Намиот Д., Шнепс-Шнеппе М. О подвижных беспроводных тегах // Автоматика и вычислительная техника. — 2015. — Т. 49, № 3. — С. 49–59.

Тема статьи относится к услугам мобильной сети, связанным с контекстом. Мы рассматриваем вопросы разработки мобильных сервисов с использованием беспроводных тегов. При этом предлагается новая модель использования (применения) Core Bluetooth устройств. В нашей модели устройства с Bluetooth выступают в роли тегов и служат для задания (привязки) и последующего определения контекстно-зависимых данных, доступных мобильным пользователям. В качестве таких динамических тегов могут выступать как мобильные телефоны, так и уже существующие устройства с поддержкой Bluetooth. При этом единственного мобильного приложения достаточно для охвата всех этапов жизненного цикла контекстных сервисов. Приложение обеспечивает представление тега (тегов), привязку к ним информационного наполнения, а также просмотр данных, привязанных к другим тегам. Возможные области применения - это приложения для торговых и сервисных организаций и контекстно-зависимые сервисы для Smart Cities.

Байес для программистов

An introduction to Bayesian methods + probabilistic programming. Все на Python.

Вот здесь есть развернутое содержание

О языках программирования

Наиболее популярные языки программирования:

Студенческие проекты

Проекты для самостоятельной работы студентов на факультете Компьютерных наук ВШЭ. Интересно.

Машинное обучение и поиск аномалий

Книга издательства O'Reilly в открытом доступе Practical Machine Learning - A New Look At Anomaly Detection

Кластеризация документов

Пошаговые примеры кластеризации документов с использованием Python. Содержание:

Stopwords, stemming, and tokenization
Tf-idf and document similarity
K-means clustering
Multidimensional scaling
Visualizing document clusters
Hierarchical document clustering
Latent Dirichlet Allocation (LDA)

Facebook iBeacon

BLE теги от Facebook. Аппаратный аналог check-in. Опознав тег, FB откроет соответствующую страницу.

На самом деле, решается одна очень важная проблема. Чтобы работать с тегами, в любом случае, нужно заставить пользователя установить приложение. А тут таким приложением выступает FB. И приложение пользователь ставит вовсе не из-за тегов.

Веб-аналитика на практике

Интересное описания технического устроства веб-аналитики в фотохостинге 500px. Для загрузки (сбора) данных они используют систему Luigi

Книгоиздательство

Очень симпатичный российский проект по самостоятельному изданию книг - Ridero. И инвесторы его оценили.

LinkedIn OLAP

OLAP инструмент в LinkedIn - Pinot. Распределенная аналитика в реальном времени.

Python и дети

Симпатичный интерактивный учебник Python

/via Поиск учебных курсов

Память. Много.

Презентация на IDF по обработке данных в оперативной памяти. Аналитика в реальном времени.

Анализ данных в Python

Большая коллекция Data Science Notebooks

Как победить телеком

A&T ввел безлимитные планы, но по достижении некоторого порога снижал скорость. Знакомая картина :) Но это не Россия. Штраф 100 млн. долларов

Как новенький

Принята новая редакция JavaScript.

Временные ряды на JS

Очень полезная библиотека для визуализации временных рядов на JavaScript. Построена на базе d3.

Коробочки

Очень симпатичные корпуса для Raspberry Pi.

P.S. детство, радиолюбительство, приемник в мыльнице ...

Музыка и электроника

Создатели Умной розетки открыли сайт, посвященный новому джазу и новой классике.

Что порекомендовать?

Интересная статья о рекомендательном сервисе - какие продукты считать сопутствующими? Более интересный подход, чем традиционное "те кто купил это, покупают также и такие-то товары"

Что изучать в big data?

IBM вкладывает серьезные ресурсы в Apache Spark

См. другие материалы по Spark

На смерть мобильных приложений

Мобильные приложения должны мигрировать в контекстно-зависимые сервисы. Wired оценивает это движение как главное соревнование между Google и Apple.

О языках программирования

Большой текст о будущем языков программирования.

P.S. и интересное обсуждение текста на YC

Большой Питон

Anaconda - сборка Python для анализа больших данных.

Нет, ребята, все не так

Очень интересная презентация - What's Wrong with Deep Learning?

Программная инженерия

Большая коллекция блогов Software Engineering Blogs

Информатика на Python

Еще один хороший учебник Python

Визуализация данных

Учебный курс по визуализации данных.

/via Поиск учебных курсов

Статистика на Python

Курс статистики с использованием Python от университета Duke

/via Поиск учебных курсов

Популярность твитов

Интересная статья по моделям предсказания популярности твитов. Что делает твит популярным?

Модели машиного обучения

Книга в свободном доступе: Model-Based Machine Learning

Сенсоры в FI-WARE

Практический материал - работа с сенсорами в FI-WARE. Довольно редкий случай - практический материал о FI-WARE. Описана работа с контекстным брокером при сохранении сенсорных данных.

Hardware Startups

Хорошая подборка стартапов, связанных с железом

Lock-free программирование

Пара хороших книг по lock-free programming:

An Introduction to Lock-Free Programming

UNDERSTANDING and EXPRESSING SCALABLE CONCURRENCY

Абавазрение 10.06.2015

Подборка новых материалов по iBeacons, proximity и physical web:

1. Сложные теги. Продвинутые решения для беспроводных тегов: поддержка Bluetooth и Wi-Fi одновременно, обмен данными с тегом

2. Интересная идея: Bluetooth тег, который можно добавить к любой розетке

3. Indoor-позиционирование от мобильных операторов

4. iBeacons для службы спасения (911)

5. iBeacons - примеры использования

6. Обзор экосистемы iBeacons

LocalSocial O Reilly Webcast Slides - A Tour of the Beacosystem from Sean O'Sullivan

Другие материалы по теме см. здесь.

Мобильный веб

Программирование мобильных веб-приложений, учебники, тесты аппаратуры

Сетевая близость в веб-приложениях

Как использовать network proximity в веб-браузере

Экономика телефонных логов

Изучение эффекта массового увольнения работников на основе анализа телефонных логов.

SQL и Big Data

На самом деле, программистский мир не менее (а чаще даже - более) консервативен, чем любой другой. NoSQL теперь уже означает, скорее, Not Only SQL. А сам SQL - жив и будет жить: 10 способов работать с Hadoop с помощью SQL

iBeacons и Android

Проблемы iBeacons и что будет на Android. Третья публикация из серии O'Reilly

Статистический анализ данных

Замечательная коллекция лекций из CMU - Statistical Data Mining

Биоинформатика

Курс лекций по биоинформатике.

/via Поиск онлайн курсов

Анализ данных в Python и R

Быстрый анализ данных:

Data exploration in Python

Data exploration in R

О микрокомпьютерах

Black-Swift довольно интересно расписывает свою систему. Но из их сайта я так и не понял - началась уже поставка системы?

Архитектура ЭВМ

Русский перевод учебника Дэвида Харриса и Сары Харрис «Цифровая схемотехника и архитектура компьютера»
. Вот здесь есть содержание книги.

Рекомендации в Facebook

Интересная статья об устройстве рекомендательных систем в Facebook. Использование графовой базы Giraph

Задержки в распределенных системах

Хорошая статья о временных задержках в распределенных системах. Рассматривается пример доставки финансовой информации (котировок).

Push вместо SMS

Еще один гвоздь в бизнес операторов связи - отказ от SMS в пользу push-уведомлений. Вот дипломная работа 2015 года, в которой описывается модель информационной системы на базе push-уведомлений.

Магистерская диссертация А.Пустобаева была посвящена той же теме - организация рассылок с использованием push-уведомлений.

/via Лаборатория ОИТ

Хэмингуэй

Очень полезное приложение для авторов с неродным английским - оценка стиля текста.

Книги по Data Science

1. Статистика для Python-программистов. Учебник по математической статистике с примерами на Python.

2. 28 бесплатных книг по Data Science

Что же такое Smart Cities?

Очень полезный документ - систематическое изложение потоков данных в Smart Cities

Переосмысление HTTP

То, что было best practice для программирования HTTP, становится недостатком в HTTP/2. Хорошая презентация от Google.