Открытая наука том 7, номер 12

Очередной номер журнала INJOIT появился на сайте Киберленинка

Зеленая логистика

3rd International Conference "Green Cities – Green Logistics for Greener Cities", Szczecin, 13-14 September 2018

Рецензирование кода

Code review - как это делать

Стоп-сигнал

Мобильное приложение, которое определяет факт неожиданной остановки автомобиля. И его область применения - безопасность пассажиров такси.

Бактериальный ML

Машинное обучение и бактерии

С нищих не берут

Бесплатные ресурсы для разработчиков:

• Major Cloud Providers' Always-Free Limits
• Analytics, Events and Statistics
• APIs, Data and ML
• Artifact Repos
• Testing
• BaaS
• CDN and Protection
• CI and CD
• Code Quality
• Code Search and Browsing
• Crash and Exception Handling
• Data Visualization on Maps
• DBaaS
• Design and UI
• DNS
• Docker Related
• Email
• Forms
• IaaS
• IDE and Code Editing
• International Mobile Number Verification API and SDK
• Issue Tracking and Project Management
• Log Management
• Management Systems
• Messaging and Streaming
• Miscellaneous
• Monitoring
• Other Free Resources
• PaaS
• Package Build System
• Payment and Billing Integration
• Search
• Security and PKI
• Source Code Repos
• Storage and Media Processing
• STUN, WebRTC, Web Socket Servers and Other Routers
• Tools for Teams and Collaboration
• Translation Management
• Vagrant Related
• Visitor Session Recording
• Web Hosting
• Dev Blogging Sites

MR в телефоне

Интересная модель Mixed Reality в телефоне

Все о виртуализации

Очень хорошее описание на русском языке: Общая теория виртуализации x86

Аномальные траектории

Интересный подход к определению аномальных траекторий

Java книги

Книги по Java

См. также другие публикации, посвященные Java

Blockchain - зачем?

Хорошее аналитическое исследование по публикациям - для чего и как применяют blockchain

См. также другие публикации, посвященные блокчейн

AI 2019

Отчет из Стенфорда по развитию исследований и разработок в области искусственного интеллекта в 2019 году

Гауссовские процессы

Хороший учебный материал по гауссовским процессам

Kotlin vs Java

Как это будет на двух языках

Ну и религиозная война в комментариях на YC

О потоках

Анализ потоков перемещений в городе

Большие транспортные данные

Transport big data и умный город

Распределитель

Хороший путеводитель по статистическим распределениям

Городские аномалии

Интересная статья о поиске аномалий в данных о городской мобильности

АПСПИ 2019

Презентации конференции АПСПИ 2019

Как работает компилятор

Хороший учебный пример компиляции в JavaScript. И дискуссия по этому поводу на YC

Почта - людям

Открытые проекты mail.ru

Все об ML

Яркий каталог ресурсов для machine learing

См. также другие публикации по теме machine learning

Подумать о людях

3 основные структуры данных (3 таблицы) для анализа работы с пользователями (посетителями)

По трубе

Pipeline patterns для обработки данных

Статистика для дата-сайентистов

Статистические техники, которые нужно знать

Показуха

Каталог открытых инструментов визуализации

Excel R

Работа в R с Excel-файлами

Документация про документацию

Как документировать REST API

Математика розетки

Что измеряет вольтметр

Спонсор показа: Гарантированное и бесперебойное электропитание от компании Абсолютные технологии

INJOIT vol. 7, no. 12

Вышел новый номер журнала INJOIT. Это последний номер в 2019 году. Спасибо авторам за интересное содержание. Очень яркий был год для журнала.

Темы статей:

• Some more on the equivalent transformation of nondeterministic finite automata. Part III. The “adding” algorithm
• Использование метода опорных векторов для оценки полезности конфликтных дизъюнктов в CDCL-выводе
• Optimized Siting and Sizing of DG in a HESCO Feeder using Particle Swarm Optimization
• Компьютерные симуляции и численные методы в двухвидовой модели пространственных сообществ
• Algorithm for detecting illegal links using the association rule for improving the web attack detection accuracy of web application firewall
• On circuit switching revival: from General Shalikashvili and Bell Labs heritage (1998) to Intel’s 20.2 Tb/s network-on-chip (2014)
• GIS based Emergency Response System for Mandalay
• Системный Подход к Информационной Безопасности в Распределенных Бухгалтерских Книгах на Платформе Ситуационных Центров
• Использование данных телекоммуникационных операторов в транспортном планировании
• Using OwnCloud and LibreOffice in supporting the making of DAPODIC REPORT books
• Модель цифрового сельского хозяйства
• Redesign The Heavy Equipment Company’s Business Processes Based on EAP Using The Zachman Framework
• The Normalized Economic Mechanism in the Digital Environment
• Интеллектуальный анализ данных при проактивном управлении телекоммуникационными системами Умного города
• Цифровая модель города: принципы и подходы к реализации

Архив журнала находится здесь.

/via Лаборатория ОИТ

Google cloud

Языки и программные продукты Google Cloud

Переводные материалы по Python

Учебники Python:

1 2 3 4

5 6 7 8

См. также другие публикации, посвященные Python

Напой мне

Использование машинного обучения для анализа аудио-данных. Примеры сделаны с использованием Comet

eSIM

eSIM и их значение для Internet of Things

Дизасемблер

Руководство по Reverse Engineering

P.S. вот здесь еще интересная дискуссия на YC по этой книге и теме

ML модели в Python

Модели машинного обучения, реализованные в Numpy и Python. Вот здесь есть описание проекта

Дополненная реальность в медицине

AR и медицина в журнале INJOIT

Графовые базы данных - обучение

Учебные материалы от Neo4j

Вопросы на интервью

20 задач от Google

См. также другие публикации, посвященные интервью программистов

Позиционирование и навигация с помощью Bluetooth

Bluetooth location services

См. также другие публикации, посвященные Bluetooth

Python ML course

Учебные материалы к курсу Машинное обучение и Python

BLE outdoor

Один из примеров использования тегов BLE вне помещений. Отслеживание автотранспорта в лесу

Принятие решений

Наука о принятии решений. Статья от главного решальщика Google

Прогнозирование и временные ряды

Сравнение методов прогнозирования для временных рядов. С кодом на Python

Учиться в Стенфорде

И снова о курсах. На этот раз - Стенфорд:

CS 229 ― Machine Learning

CS 221 ― Artificial Intelligence

CS224n: Natural Language Processing with Deep Learning

См. также другие материалы из Стенфорда

Редактор потоков

Событийное программирование, включая инструмент редактирования потоков обработки - nodered

Kafka и RabbitMQ

Сравнение Kafka и RabbitMQ

P.S. см. также другие публикации, посвященные Kafka

Такси как сенсор

Интересный проект по размещению сенсоров оценки качества воздуха на такси. Постоянное (и автоматическое) обновление данных для всех районов города.

Городские телеграмы

Телеграм-каналы для урбанистов

Анализ продаж

Интересная статья об анализе данных для предсказания объема продаж. Весьма подробное объяснение выбора предсказывающих переменных (feature analysis).

P.S. журнал публикует очень интересные работы

Монополия

Apple пытается избавиться от веб-программирования на iPhone. Цель очевидна - все приложения должны проходить через магазин, где производитель заберет свои 30%.

Убили автопостинг

Google прекратил авто-постинг в Twitter через feedburner. Пробуем dlvr.it

Шаблоны веб-программирования

Современные модели веб-приложений

Пассивный мониторинг

Как отслеживать присутствие пользователей по их мобильным телефонам

IoT AI

Искусственный интеллект и Интернет вещей

Машинное обучение в Ярославской области

Красивый пример использования IoT и машинного обучения для агро-предприятия в Ярославской области.

См. также другие публикации, посвященные продуктам Libelium

INJOIT vol.7, no. 11

Вышел новый номер журнала INJOIT. Это одиннадцатый номер в 2019 году. Спасибо авторам за интересное содержание.

Темы статей:

• Исследование и разработка методов решения задач инженерной оптимизации роботов параллельной структуры
• Оптимизация для кластера с ускорителями Xeon Phi задачи фильтрационного течения жидкостей в трехмерных средах с двойной пористостью
• Методические подходы к информационной поддержке оценке качества экспорта российского образования
• Метод небионической стабилизации двуногих шагающих робототехнических систем
• Многоуровневые пирамиды
• Структурные и функциональные аспекты архитектурного описания управления многокомпонентным динамическим объектом
• Представление информации для обеспечения коммуникационных процессов многокомпонентного объекта
• Машинное обучение в SDN
• Using Students’ Data to Improve the Quality of the Education in Moroccan Institution
• Технология яркостного контрастирования, алгоритм и программа для её реализации
• Роль цифровых технологий в разведке, добыче и транспортировке нефтегазовых продуктов
• Audit the Implementation of Information Technology Governance in Financial Services Company Using COBIT 4.1 Framework
• Дополненная реальность в медицине

Архив журнала находится здесь.

/via Лаборатория ОИТ

Современный JavaScript

Некоторые новые возможности JavaScript

См. также другие публикации, посвященные JavaScript

Практики Умного города

Подборка приложений Smart City

Реалии AR

Технические дискуссии о дополненной реальности

DAMDID 2019

Материалы конференции DAMDID 2019

Мало - это плохо

Длительная работа дизельных электростанций (ДЭС) с нагрузкой менее 30% от номинальной активной мощности негативно сказывается на работе дизельного двигателя и его моторесурсе. Подробнее - в статье Негативные последствия работы дизельной электростанции с малой нагрузкой

Как строить большие информационные системы

Информационные системы и опыт американских военных

Рецепты Pandas

Pandas cookbook

См. также другие публикации, посвященные pandas

D2D

Модели использования D2D в 5G

Рекомендательные системы

Мир рекомендательных систем

См. также другие публикации по тегу рекомендательные системы

Инженер-программист

Non-technical signs:

You hate using the mouse (it’s true) and your keyboard makes louder noise than a guitar (it’s also true).
You don’t try to hide from your manager
You are not scared on your team members reviewing your code.
You know which links to click to find out the right answer after a Google search.
Within 30 sec you can tell which StackOverflow answer will not fix your issue.
You don’t worry about work all nights or all weekends.
You love your laptop more than your life-partner

Technical related signs:

In the technical meetings you often say- This will not work. Or there are better ways to solve this.
Most of the time, you can understand the logic by looking at anyone’s code.
You often can propose a better way to solve a problem.
You know every shortcut keys of everything you use. Sometimes you spend hours to set up your custom shortcut keys
You already know the breaking changes coming with the next version of the framework you are using.
People include you in meetings that you have no idea but they want to get your feedback on their architectural design.
You are not afraid to try out a newly released framework currently in beta.

Technical:

You are comfortable more than one programming language. You could be very good at one and decent in another
You are good at recursive function, dynamic programming, algorithm, design patterns, and tricky problems
You are aware of security, encryption, performance, unit tests, etc.
You have full-stack knowledge (dev ops, CI/CD, front-end, back-end, microservice, NoSQL, graphql, etc.) even though you might focus on one area.
You can propose a brand new framework name without blinking your eyes

You are Extreme:

Your everyday clothes are free conference t-shirt
Free meetup pizza is your favorite food.
Reading technical doc is your favorite way to learn other than watching videos or blogs.
Your manager doesn’t argue with you about your time estimation.
You can confidently say- “This won’t scale” even though you are not sure what you are talking about
You have your own open-source project that no-one else forks.
Finally, you have less than 3 friends outside of your work.

Отсюда

Где начало SQL оператора?

Простые, но полезные картинки по фактической работе оператора SELECT

Как начать?

Быстрый старт в машинном обучении с Python

Открытая наука: INJOIT том 7, номер 10

Очередной номер журнала INJOIT появился на сайте Киберленинка

По траектории

Комментатор на футбольном матче: "но удар у нападающего не получился, и мяч полетел по траектории". А вот здесь, можно прочесть очень интересный обзор - как определять похожие траектории

ТВ в файле

Вся теория вероятностей одним файлом

Дата-ссылки

Коллекция ссылок по анализу данных (книги, датасеты, применения и т.д.)

Оптимизация SQL запросов

Кросс-платформенная оптимизация SQL запросов

О достижениях Auto ML

Сравнение результатов применения Auto ML

См. также другие публикации, посвященные Auto ML

Тэги в аэропортах

Модели использования BLE-тегов в аэропортах. Хороший пример стандартизации решений по использованию proximity.

AR или VR?

Google ставит на AR

Предсказания на графах

Предсказание пропущенных дуг. Одна из самых интересных работ, касающихся knowledge graph.

Гео-исследования

Библиотека статей GISGeo

Ошибочка вышла

Из-за сбоя в Python-скрипте могли пострадать результаты 100 научных исследований в области химии. Информацию о недоработке выложили в журнале Organic Letters. Отсюда

См. также Маленькая поправка

Как устроены модели ML

Еще одна хорошая статья о моделях построения систем машинного обучения

R-R-R

Доступный курс по анализу данных в R

Модели ML

То, что нужно - анализ 150 моделей машинного обучения в booking.com

Типы нейронных сетей

Об архитектурах нейронных сетей

Отсюда. См. также предыдущие публикации по теме архитектуры нейронных сетей.

Стратегические планы в ИИ

Стратегия развития искусственного интеллекта в России

Экспертное мнение

Пришла рассылка от Сбербанка: "В этом выпуске расскажем, как обезопасить свое дело от недобросовестных партнеров и сотрудников ...". О да !

ML pipe

Симпатичный инструмент для сшивания Python-скриптов в одно приложение - Streamlit. Вот здесь про него подробнее рассказывается. P.S. и на ту же тему - предложения по организации хранения скриптов

Старый багаж

Программное обеспечение и его роль в переходе к пакетной коммутации

Выстрел Авроры

Как устроены облачные базы данных на примере Amazon Aurora

Российский рынок UPS

Что нового на рынке систем бесперебойного и гарантированного электропитания? Сейчас - модульные ИБП

Иллюстрации

Большая коллекция иллюстраций

5G в городе

Что, где и как с 5G в Москве

Машинное обучение в баскетболе

сеть, обученная на перемещениях игроков

См. другие публикации, посвященные GAN (Generative adversarial networks)

О компетенциях

1. Центр компетенций по информационной безопасности в АНО Цифровая экономика (читай - в РФ) возглавляет Сбербанк. Отсюда 2. В Сбербанке крупнейшая утечка: на черный рынок попали сведения о владельцах 60 млн. кредитных карт. Персональные данные клиентов Сбербанка оказались на черном рынке. Продавцы уверяют, что владеют данными о 60 млн. кредитных карт, как действующих, так и закрытых. Утечка могла произойти в конце августа. Эксперты, ознакомившиеся с данными, считают их подлинными и называют утечку самой крупной в российском банковском секторе. Подробнее. 3. И что? Никто неуиновный ...

Авто-Jupyter

Jupyter-notebooks как скрипты для автоматизации.

См. также другие публикации по теме Jupyter notebooks

RL и Марковские процессы

О реальных возможностях Reinforcement learning

См. также другие статьи, посвященные RL

INJOIT vol. 7, no. 10

Вышел новый номер журнала INJOIT. Это десятый номер в 2019 году. Спасибо авторам за интересное содержание.

Темы статей:

• Расширенный базисный конечный автомат. Часть I. Основные определения
• Модификация алгоритма Копперсмита умножения матриц над GF(2)
• Итеративный подход с использованием компилятора для синтеза и моделирования проблемно-ориентированного набора команд
• Построение на GPU в масштабе реального времени адаптивной модели рельефа Земли на основе эллипсоида вращения
• Использование контент-анализа при работе с большими качественными данными
• «Индустрия 4.0»: использование информационных технологий для снижения техногенного воздействия лесозаготовительных машин
• Тестирование уязвимостей межсайтового выполнения сценариев (XSS) в веб-приложении онлайн-платежей
• Тестирование уязвимостей во внешних сущностях XML веб-приложений
• Понятие «аналитика»
• К вопросу об онтологической доступности цифровых образовательных ресурсов и их стандартизации в EdTech
• Цифровые технологии, навыки, инженерное образование для транспортной отрасли и технологии образования

Архив журнала находится здесь

/via Лаборатория ОИТ

Великая компания

Или даже две: Dell EMC

Велик могучим русский языка ...

Шифрование запросов к DNS

Планы Google шифровать запросы к DNS встретили озабоченность провайдеров. Интересная статистика: "Because the majority of world-wide internet traffic… runs through the Chrome browser or the Android operating system, Google could become the overwhelmingly predominant DNS lookup provider". P.S. а как в случае шифрации DNS будет работать суверенный интернет Чебурашка?

Алгоритмы биоинформатики

Для ссылок по теме:

Лекции университета George Washington

Лекции по вычислительной биологии

О ездоках

OGС разрабатывает стандарт для Moving Features. Детали - здесь

Электропитание на железной дороге

Для технических средств, от работы которых напрямую зависит безопасность движения поездов, особое значение имеет стабильность их электропитания. В связи с широким внедрением микропроцессорных систем требования к системам электропитания в последнее время значительно возросли. В целях повышения надежности работы этих систем в их составе применяются устройства бесперебойного питания (УБП, также - источники бесперебойного питания или ИБП), обеспечивающие подачу напряжения в нагрузку при отключении внешних источников электроснабжения или выходе их параметров за допустимые пределы. Отсюда.

Настройка баз

Полезный материал с конкретным примером оптимизации работы реляционной базы данных

См. также другие материалы, посвященные настройке производительности

Цифровой двойник

Интересный материал от AnyLogic о цифровом двойнике для нефтяных скважин

См. также другие публикации, посвященные digital twins

Дизельные электростанции

Согласно Википедии, ди́зельная электроста́нция (дизель-генераторная установка, дизель-генератор) — это стационарная или подвижная энергетическая установка, оборудованная одним или несколькими электрическими генераторами с приводом от дизельного двигателя внутреннего сгорания.

Что такое дизельная электростанция и как работает дизель-генератор, а также где применяются дизельные электростанции

А поговорить?

Nvidia automatic speech recognition

Проектирование для Cassandra

Полезные заметки по использованию Apache Cassandra

См. также другие публикации, посвященные Cassandra

Реально большие данные

Архитектура системы аналитики для YouTube. SQL - непобедим.

Цифровая модель документа

Хороший обзор по document embedding

Открытая наука, том 7, номер 9

Очередной номер журнала INJOIT появился на сайте Киберленинка

Магистратура ВМК МГУ

Учебные планы наших программ:

1. Магистерская программа "Программное обеспечение вычислительных сетей" (новая, 2019г.):

2. Магистерская программа "Открытые информационные системы" (новая, 2019г.):

3. Магистерская программа "Большие данные"

4. Дополнительное образование: программа "Разработчик компьютерных технологий"

Отсюда

Что делать?

Весьма здравые идеи о том, как развивать ИТ в стране

Текстовые блоки

Как известно, в Java только дедушки. Тем не менее, жизнь там явно теплится. Вот, например, появились текстовые блоки.

Это появится в JDK 13

Дави его

Глубинное обучение и подавление шума в аудио-записях

См. также другие записи< посвященные deep learning

БД движений

Статья о базах данных для подвижных объектов

О регулярности

Головоломки для проверки знания RegExp

Можно, грузите

Автоматическая выгрузка (парсинг, например) данных с публичных веб-сайтов ничего не нарушает. Все законно.

Визуализация графов

Хорошая русскоязычная статья по визуализации графов. Одно из применений, например, визуализация Graph Embedding

См. также другие статьи, посвященные визуализации

Яндекс, деньги

Соревнование по программированию от Яндекс. Денежные призы.

Что такое мощность?

Тема с дизель-генераторами, в которую мы вовлечены последние несколько месяцев. Номинальная мощность дизельной электростанции определяется в соответствии с предполагаемым режимом работы дизель-генератора. Таким образом, для одного дизель-генератора заводом-изготовителем могут быть назначено несколько номинальных мощностей, зависящих от предполагаемых режимов эксплуатации - отсюда

Берегись автомобиля

Плохие новости для автомобилистов. Замена парковок вдоль тротуара на велосипедные дорожки серьезно увеличивает прибыль магазинов на улице.

Управление ДГУ

Управляющий контроллер DSE 7320 устанавливается в панели управления, на раме дизельной электростанции. Управляющий микропроцессорный контроллер резервной электростанции обеспечивает автоматический запуск электростанции в случае аварии основной сети (или по удаленному сигналу оператора) и подачу сигнала к контакторам панели автоматического ввода резерва (АВР) для переключения нагрузки на питание от генератора.

Отсюда

Кто использует Apache Pulsar?

Архитектура систем обработки данных с использованием Apache Pulsar

См. также другие публикации, посвященные Apache Pulsar

AI микроскоп

Диагностика рака в реальном времени. Дополненная реальность для изображений микроскопа.

Тоже деньги

Ваша скидка 1000 руб в Booking.com

Открытая наука том 7, номер 8

Очередной номер журнала INJOIT появился на сайте Киберленинка

GAN

Создание фото-реалистичных изображений. Generative adversarial networks (GAN) на практике.

Какой он - ваш дизель-генератор?

Дизельная электростанция (ДЭС) представляет собой генерирующее электроэнергию устройство, состоящее из дизельного двигателя и генератора переменного тока, сочлененных между собой и установленных на прочную металлическую раму. Внутри рамы ДЭС обычно располагается топливный бак на 6-8 часов работы дизельной электростанции. Электростанция обеспечивается локальной системой контроля и управления – панелью управления. Дизельная электростанция может быть одно- или многоагрегатной. Одноагрегатные дизельные электростанции часто называют дизель-генераторными установками (ДГУ) или дизель-генераторами (ДГ).

На сайте компании Абсолютные Технологии появился опросный лист для подбора дизель-генератора (дизельной электростанции)

Без веса

Нечувствительные к весам нейронные сети - WANN

INJOIT vol. 7, no. 9

Вышел новый номер журнала INJOIT. Это девятый номер в 2019 году. Спасибо авторам за интересное содержание.

Темы статей:

• Some more on the equivalent transformation of nondeterministic finite automata. Part II. The "deleting" algorithm
• Flattening of Data-Dependent Nested Loops for Compile-Time Optimization of GPU Programs
• Application of the repeated quantization method to the problem of making asymptotic solutions of equations with holomorphic coefficients
• Алгоритмы локального поиска
 в задаче исследования инвариантов графа
• Геометрический анализ при исследовании колебаний тела сложной конфигурации в потоке среды
• Методы силового управления манипуляционными роботами в системах виртуального окружения
• Анализ комфортности регионов мира для метеозависимых людей
• Разработка информационной системы для автоматизации деятельности администрации сельского совета
• Power Distance and Users Behavior Towards the Adoption of m-Government Services in Tanzania: A Web Analytics Study
• Новое поколение Интернета вещей - стандарты и спецификации онтологий ETSI
• К вопросу обратного инжиниринга - путь от бумаги до цифровых онтологических правил для образовательных технологий

Архив журнала находится здесь.

/via Лаборатория ОИТ

На графских развалинах

Основные алгоритмы на графах и их реализация на Python

Об имитационном моделировании

Хороший материал от AnyLogic об имитационных моделях

Ничего святого

RL модели для обучения футболу. Вот так это выглядит

См. другие публикации, посвященные Reinforcement Learning

Читая код

Автоматический анализ программ от Микрософт. Вот здесь еще можно прочесть об их подходе к автоматизации программирования

Суд да дело

Открытая книга: язык R в судебно-медицинской экспертизе

ML 5G

Стандарты ITU на машинное обучение

Новые достижения INJOIT

Довольно хорошие результаты у журнала INJOIT в 2018 году:

Отсюда

Чужие ошибки

Почему не сработал подход к реализации Федеральной архитектуры в США. А России как раз собрались это делать ...

Архитектура и дизайн

Полезная статья, объясняющая различия между архитектурой и дизайном программного обеспечения

Auto *

Auto Keras. То, что должно победить Auto ML

На-все-гда

Пароль можно поменять, лицо - нет. Одна из первых утечек биометрических данных. А то, что собирают в России (Сбербанк, например) - следует, наверное, сразу считать утечкой данных :(

И снова о шаблонах

Классическая книжка: Pattern Recognition and Machine Learning

Взять за образец

Sampling - как это делается

Современный JavaScript

Перевод учебника Современный JavaScript

См. также другие публикации, посвященные JavaScript

Круг замкнулся

Зарядка электромобиля от дизель-генератора

При поддержке компании Абсолютные технологии: гарантированное бесперебойное электропитание :)

Шаблоны перемещений

Интересная статья по визуализации шаблонов перемещений

О TensorFlow

Понятный онлайн учебник по TensorFlow

См. также другие публикации, посвященные TensorFlow

Вычислительная фотография

Прекрасный материал по обработке фотографий

Оптимизация SQL запросов

Полезный материал о плаформо-независимой оптимизации SQL запросов

при поддержке: системы бесперебойного и гарантированного электропитания

О выборе объясняющих переменных

Техники для feature selection

Что же будет?

Интересные заметки о будущем инженерии данных

Радиокарта

Сбор информации о Bluetooth устройствах

Шаблоны перемещений

Визуальный анализ перемещений в городе

PartiQL

Новый универсальный язык для работы с данными от Amazon

Переподготовка в МГУ

Объявляется прием на программы профессиональной переподготовки для получения дополнительной квалификации:

1. «Разработчик профессионально-ориентированных компьютерных технологий» (очно-заочная форма обучения, 1730 час.)

2. «Разработчик профессионально-ориентированных компьютерных технологий» (дистанционная форма обучения, 1552час.) Детали: здесь

О шаблонах во временных рядах

Полезная статья о поисках повторяющихся последовательностей во временных рядах

См. также другие публикации по теме временные ряды. А здесь можно посмотреть публикации о поиске шаблонов во временных рядах

Архитектура Web

Современная архитектура Web

Full Stack Developer

Что это в себя включает?

Анализатор качества электроэнергии

/via Системы бесперебойного гарантированного электропитания

Дописатель

Tabnine - инструментарий, который предлагает дописать код в редакторе, основываясь на своей deep learning модели. Поддерживает разные языки программирования. Это разработка с открытым кодом. Интересно, что, видимо, можно рассматривать эту задачу и с другой стороны. Не предлагать "дописать" код, а оценить (построчно, например), насколько код отличается от "стандартного" (предложенного моделью). Это может быть полезно для code review или автоматического поиска ошибок.

См. также предыдущие публикации по теме автоматизации программирования

INJOIT том 7, номер 8

Вышел новый номер журнала INJOIT. Это восьмой номер в 2019 году. Спасибо авторам за интересное содержание.

Темы статей:

• Математическое моделирование управления организацией по ценностным ориентирам: алгоритмы анализа иерархий на основе количественной значимости критериев
• Quasi-optimal quaternion genetic algorithm for reorientation of the spacecraft orbit
• Задача динамического перераспределения автомобилей каршеринг-сервиса
• Об одном точном решении линейного уравнения Шредингера, описывающего распространение фемтосекундных импульсов
• Сравнительный анализ климатических изменений в Антарктике и Арктике
• Low Cost Microwave Power Meter Device
• Rethinking the power of packet switching in the coming cyber threats era
• Исследование уравнения Риккати для одномерной системы Годунова-Султангазина
• K-фронтальный метод неравномерных покрытий
• Цифровые транспортные коридоры ЕС - 5G, платониг, ИТС и MaaS
• К вопросу о содержании понятия и особенностях онтологии энергетического интернета и его правового и технологического образов
• Обзор и анализ стандартов и протоколов в области Интернет вещей. Современные методы тестирования и проблемы информационной безопасности IoT
• Using LaTeX for chemical formulas

Архив журнала находится здесь.

/via Лаборатория ОИТ

Об обработке сигналов

Хорошие лекции по обработке сигналов

P.S. другие публикации по этой теме см. здесь или здесь

О распределенных системах

Практика распределенных систем от Uber. Очень конкретный и практический материал с массой ссылок.

Городские вычисления

Замечательная коллекция статей и датасетов по теме urban computing

Как оно будет?

Интересная модель предсказания спроса в car-sharing

Большая Берта

Хорошее описание использования модели BERT в NLP

Академия RapidMiner

Учебные программы от RapidMiner

См. также другие публикации, посвященные RapidMiner

опубликовано при поддержке: энциклопедия электропитания

INJOIT 2019

Google Scholar опубликовал очередной рейтинг журналов Scholar Metrics - 2019. Топ 20 по разным направлениям и Топ 100 по разным языкам.

Журнал INJOIT поднялся на 14 место в списке русскоязычных журналов. Вот самые цитируемые статьи журнала

Спасибо авторам и читателям. В 2018 году мы были на 48 месте.

Local Home SDK

Умный дом от Google

ML шпаргалки

Шпаргалки по фреймворкам машинного обучения

при поддержке: подбор ИБП и ДГУ

Нет времени объяснять

Краткое введение в Python

см. также другие публикации, посвященные Python

при поддержке: Kehua UPS

Осенний конгресс на факультете ВМК МГУ

21 ноября - 24 ноября 2019 года на факультете вычислительной математики и кибернетики Московского государственного университета имени М.В. Ломоносова состоится Международный конгресс «СОВРЕМЕННЫЕ ПРОБЛЕМЫ КОМПЬЮТЕРНЫХ И ИНФОРМАЦИОННЫХ НАУК».

В рамках Конгресса пройдут пленарные и секционные заседания и серия научных мероприятий по приоритетным направлениям развития науки и технологий в области компьютерных и информационных наук и их приложений, включая следующие научные мероприятия:

IV Международную научную конференцию «Конвергентные когнитивно-информационные технологии»;

XIV Международную научно-практическую конференцию «Современные информационные технологии и ИТ-образование»;

IX Международную конференцию-конкурс «Инновационные информационно-педагогические технологии в системе ИТ-образования» – ИП-2019.

Учредителями Конгресса являются ведущие российские университеты, институты Российской академии наук, организации ИКТ-отрасли, Российская Академия Транспорта.

Конгресс проводится в рамках программы деятельности ФЕДЕРАЛЬНОГО УЧЕБНО-МЕТОДИЧЕСКОГО ОБЪЕДИНЕНИЯ В СИСТЕМЕ ВЫСШЕГО ОБРАЗОВАНИЯ ПО УКРУПНЕННОЙ ГРУППЕ СПЕЦИАЛЬНОСТЕЙ И НАПРАВЛЕНИЙ ПОДГОТОВКИ 02.00.00 «КОМПЬЮТЕРНЫЕ И ИНФОРМАЦИОННЫЕ НАУКИ».

По результатам работы Конгресса научные доклады, рекомендованные программным комитетом, будут опубликованы в МЕЖДУНАРОДНОМ НАУЧНОМ ЖУРНАЛЕ «СОВРЕМЕННЫЕ ИНФОРМАЦИОННЫЕ ТЕХНОЛОГИИ И ИТ-ОБРАЗОВАНИЕ» (ISSN 2411-1473), который включён в Перечень ВАК Минобрнауки РФ, и проиндексированы в РИНЦ, DOAJ, Ulrichsweb Global Serials Directory, European Reference Index for the Humanities and the Social Sciences (ERIH PLUS), Index Copernicus International.

С целью повышения видимости публикаций конференций для международного научного сообщества избранные научные доклады Конгресса будут опубликованы в издательстве SPRINGER в виде отдельных книг (выпусков) в серии Communications in Computer and Information Science (CCIS) и проиндексированы в базах WEB OF SCIENCE и SCOPUS.

Материалы принимаются только в электронном виде через англоязычную или русскоязычную web-форму на сайте конференции до 10 августа 2019 года.

Возможно продление загрузки финальных версий научных докладов на сайт Конгресса до 10 сентября 2019 года, в случае гарантированной загрузки Ваших докладов до 10 августа 2019.

Официальный сайт научных мероприятий: http://it-edu.oit.cmc.msu.ru

/via Лаборатория ОИТ

Рождение программиста

Перечень ВАК

Новый перечень журналов ВАК. Номер 23 - INJOIT, 1932 - SITITO

IoT обучение

Еще одна интересная работа по IoT обучению

при поддержке: энциклопедия электропитания

Открытая наука

Новый номер журнала INJOIT на сайте Киберленинка

/via Лаборатория ОИТ

СОВРЕМЕННЫЕ ПРОБЛЕМЫ КОМПЬЮТЕРНЫХ И ИНФОРМАЦИОННЫХ НАУК

Конгресс «СОВРЕМЕННЫЕ ПРОБЛЕМЫ КОМПЬЮТЕРНЫХ И ИНФОРМАЦИОННЫХ НАУК»

в рамках которого проходят три конференции:

IV Международная научная конференция «Конвергентные когнитивно-информационные технологии»;
XIV Международная научно-практическая конференция «Современные информационные технологии и ИТ-образование»;
IX Международная конференция-конкурс «Инновационные информационно-педагогические технологии в системе ИТ-образования» - ИП-2019.

RPA на практике

Кейсы Robotic Process Automation

см. также другие публикации, посвященные RPA

Открытая наука

Новый номер журнала INJOIT на сайте Cyberleninka

О визуализации данных

Визуализация данных с помощью Kepler.gl и Python. Вот здесь есть пример использования Kepler.gl и Jupyter Notebook

см. также другие публикации, посвященные Kepler

P.S. опубликовано при поддержке: энциклопедия электропитания

NumPy

Симпатичное визуальное введение в NumPy

См. другие публикации по теме визуализация

Проекты для студентов

Весьма здравая и правильная идея от факультета компьютерных наук ВШЭ - сторонние компании могут предложить свои проекты для студентов. К потенциальным потребителям наших студентов: интересует работа студентов лаборатории ОИТ факультета ВМК МГУ над вашими проектами? Пишите.

Хостинг nic.ru - все?

унаследовали от пары проектов хостинг на nic.ru. Какое-то дно. Постоянно что-то не работает и совершенно неквалифицированные люди в поддержке. Так всегда было?

Wi-Fi 6

О новой версии (версиях) стандарта Wi-Fi

См. также другие публикации, посвященные Wi-Fi

поддержка публикации: энциклопедия электропитания

Что дальше?

Интересная статья о моделировании поведения пользователей в e-commerce

Аномалии для чайников

Поиск аномалий без предварительного обучения. Хорошее объяснение с кодами на Python.

См. другие публикации, посвященные поиску аномалий

P.S. поддержка публикаций: энциклопедия электропитания

Авто-Панда

Еще одна интересная работа по автоматической генерации программ - AutoPandas

См. также другие публикации на темы автоматизации программирования

при поддержке Kehua UPS

Google CSE

Некоторые созданные мета-поиски:

Поиск онлайн-курсов

Поиск купонов и скидок

Поисковая система для гарантированного бесперебойного электропитания

ML в примерах

Хороший набор примеров задач машинного обучения из книги "Machine Learning Refined" (Cambridge University Press)

DeepL

Довольно любопытный переводчик DeepL. Не хуже Google.

BE Mesh

Bluetooth Mesh - передача данных между Bluetooth устройствами без соединения. Видимо, мы были первыми, кто такое предложил. Вот одна из последних работ: Bluetooth и физический веб. Или Bluetooth Data Points

Jupyter

Простое руководство по Jupyter Notebooks

См. также другие публикации, посвященные Jupyter

Томографическое

Как на практике выглядит система бесперебойного гарантированного питания для медицинского оборудования. В данном случае - компьютерного томографа.

Обучение IoT

Европейский проект по построению учебной программы IoT & Data Science. Интересно, что мы практически такую же модель предлагали.

Пайплайн

Простой и вопроизводимый data pipeline. Все нужные шаги обработки данных присутствуют.

Каузалистика

Каузальные расчеты и их использование в Uber. Хорошая статья об определении связи явлений.

См. также другие публикации о причинности и вычислении causal impact

P.S. опубликовано при поддержке Инновационных решений в мире ИБП

Continuations в Java

Код, который может себя приостанавливать и запускать заново - зачем это Java. Кстати, вот здесь есть интересное сравнение с корутинами в Kotlin

ИБП для стадиона

Электроприемники спортивных сооружений - спортивных комплексов, стадионов и арен, спортивных трасс, информационных площадок - нуждаются в надежной подаче электроэнергии высокого качества.Нарушение электропитания спортивных сооружений могут привести к прекращению и отмене соревнований, отказам видеотрансляций, нарушению работы служб контроля доступа, панике, гибели людей. Для надежной работы спортивных центров, в том числе – безаварийного проведения спортивных мероприятий и сохранения жизней спортсменов и зрителей рекомендуется защищать электрооборудование спортивных сооружений с помощью систем бесперебойного гарантированного электроснабжения (СБГЭ).

/via Энциклопедия электроснабжения

Средства разработки для AI

Интересная статья о том, какие инструменты разработки нужны для AI. На самом деле, если суммировать все их ссылки, типа запроса на инструменты ML, то заключение вполне очевидно - нужен AutoML.

опубликовано при поддержке энциклопедии бесперебойного питания

Подписано сердцем

Не только удаленное определение пульса, но еще и идентификация человека по "почерку" работы его сердца. 200 метров дистанции. Пентагон так может делать системы свой-чужой.

опубликовано при поддержке Kehua Tech

Открытая наука

Журнал INJOIT на сайте Киберленинки Печально, но ни эта Киберленинка, ни elibrary не сделали ничего даже близко похожего по удобству на Google Scholar. В обоих системах похоже нет главного - масштабируемой платформы. И там и там похоже ручная загрузка. elibrary при этом даже не в состоянии PDF файлы читать - необходимо их содержание предоставить в специальном XML файле (который также нужно создавать вручную :)

Интеграция с Twitter

А видно ли это сообщение в Twitter? Остановка G+ одновременно убила и публикацию в Twitter. Эх, Google ...

Кодирую за вас

Еще один подход к автоматической генерации кода

Изучение сложности

Это реальный мировой лидер в изучении сложных систем - институт Santa Fe. Довольно интересные курсы

Проектирование Wi-Fi сети

Толковое описание проектирования Wi-Fi сети и расстановки точек доступа

См. также другие публикации, посвященные Wi-Fi

Дизельные электростанции MPMC

Гостевая публикация инжиниринговой компании Абсолютные технологии. Решения в области систем гарантированного электроснабжения.

Компания MPMC Powertech Corp. (МРМС) была основана в 2008 году. В настоящее время MPMC является крупным высокотехнологичным производителем дизельных электростанций (9-3300кВА) и осветительных установок с объемом выпускаемой продукции боле 12 000 единиц в год. Штаб-квартира МPMC находится в г. Шанхай (Китай), производственные площади, занимающие более 34 000 кв.м. и располагаются в провинции Цзянсу. MPMC имеет 47 патентов, из них - 11 патентов на изобретения и 36 патентов на полезную модель.

Численность работающих на производстве составляет несколько сотен человек, среди них – более 20 инженеров-специалистов по нестандартным решениям (Application Specialists) в области резервного электроснабжения. Производимая продукция экспортируется в 104 страны мира, в том числе – в Россию. Компания MPMC имеет сертификат, подтверждающий, что ее деятельность по проектированию, производству, продаже и послепродажному обслуживанию электростанций организована в соответствии с требованиями международного стандарта качества ISO 9001:2008.

Дизельные электростанции MPMC соответствуют требованиям Европейского Союза (CE) и имеют соответствующую маркировку. Дизельные электростанции MPMC имеют декларацию Таможенного Союза (Сертификат EAC) на соответствие требованиям технического регламента Таможенного Союза (ТР ТС 010/2011, ТР ТС 004/2011 и ТР ТС 020/2011), подтверждающую высокий уровень качества продукции, а также соответствие их характеристик и свойств утверждённым и действующим требованиям и нормам стандартов государств-членов союза. Компания MPMC стремится стать одним из мировых лидеров в производстве резервных электростанций и предлагать современные индивидуальные решения для обеспечения энергетической безопасности ответственных объектов.

Каталог дизель-генераторов MPMC

Машинное обучение на примерах

Отобранный список проектов машинного обучения. В первую очередь, это будет интересно для обучения - можно посмотреть "живые" примеры.

А что в ящике?

Interpretable Machine Learning - A Guide for Making Black Box Models Explainable. Хорошая книга по объяснению моделей машинного обучения.

А вот здесь есть полезный список ресурсов по объяснению моделей машинного обучения.

Промышленные ИБП

Промышленные ИБП – это отдельная категория устройств, которые изначально проектируются для работы на промышленных объектах и обеспечения электроснабжения различных нагрузок в технологических процессах. Такие ИБП должны соответствовать жестким требованиям в части надежности работы, в том числе в самых неблагоприятных внешних условиях. Используемые для их изготовления компоненты должны обеспечивать длительный срок службы в условиях воздействий негативных внешних факторов: ухудшения показателей качества электроэнергии, импульсных помех, изменения температуры, наличия пыли, влаги и т.д. При этом размеры, вес, КПД, внешний вид и другие показатели менее важны. Ссылки по теме:

О надежности промышленных ИБП

Архитектурные решения для систем бесперебойного гарантированного электропитания в промышленности

DaaS

Хорошее описание функционирования и бизнес-моделей Data as a Service компаний.

Мониторинг оборудования

Практическое использование веб-шлюзов. Это элементы сети, которые позволяют скрыть непосредственный доступ к аппаратуре, предоставив внешним пользователям простой веб-интерфейс. Пользователь общается с веб-сервером (то есть по HTTP), а веб-сервер с железом - уже по Modbus. Дальше - это уже вопрос сетевых технологий. Если веб-сервер на шлюзе сделать доступным извне, то вести мониторинг можно будет из любой точки, где есть Интернет. Для безопасности можно разрешить веб-шлюзу только читать данные ModBus. Вот пример: DSEWebNet Gateway. Устройство позволяет организовать web-мониторинг и управление дизель-генераторных установок через систему DSEWebNet из любой точки доступа в Internet. Получится веб-мониторинг для Modbus

См. также другие публикации, посвященные Modbus

Семинар по Умным Городам

Презентации семинара Subjectification of UK and Russian Smart Cities

INJOIT vol. 7, no. 7

Вышел новый номер журнала INJOIT. Это седьмой номер в 2019 году. Спасибо авторам за интересное содержание.

Темы статей:

• Об асимптотическом поведении резерва страховой компании
• Introduction to signal processing: sampled signals
• Визуальная аналитика в цифровой биомедицине на примере качества диагностики рака молочной железы
• Building annotated semantic model of software products towards integration of DBpedia with NVD vulnerability dataset
• Кластеризация изображений при использовании предобученных нейронных сетей
• Использование эстетического критерия при анализе сценариев эволюции телекоммуникационных систем
• О судьбе железнодорожной сигнализации GSM-R
• Оценка людского и транспортного трафика густонаселенных районов города Москвы с использованием видео со стационарных камер
• Анализ матриц корреспонденции метро
• Современные подходы к механизмам извлечения причинно-следственных связей из неструктурированных текстов на естественном языке
• Цифровая железная дорога Европы - от ERTMS до искусственного интеллекта
• Распределенная инфраструктура отраслевой экосистемы цифровой экономики региона
• Роль цифровых технологий в вопросе конкурентоспособности грузоперевозок железных дорог с морским видом транспорта

Архив журнала находится здесь.

/via Лаборатория ОИТ

Industry ML

Хорошая идея - подборки приложений AI по отраслям. Вот еще агрегатор AI новостей отмечает рост таких приложений для ЦОД.

См. также другие публикации, посвященные AI

Близость заменяет географию

In this paper, we propose the replacement of widely used models of geo-information systems with a new conception based on network proximity. Geo-information systems have attracted great attention and demonstrated big progress in recent times, especially for mobile services. We can point out many objective reasons for this. On the one hand, users require services, mainly at their location, and on the other hand, location determination has become easy, especially due to the proliferation of smartphones. But at the same time, the actual geo-calculation are not needed by most of these services. For the majority of geo-services, geo-coordinates are used only for searching and organizing data. And the meaning of the service is to search for information tied to the current location of the requesting party. In other words, in most cases, service refers to data near the current location. So, our idea is to build services directly on assessing to proximity and completely bypass geo-calculations. It also opens the way for completely new services that were impossible or difficult to implement with geo-computations. From On proximity versus geo-information systems

Geo R

Книга Geocomputation with R и сопутствующие материалы.

ИБП для томографа

Определение мощности источника бесперебойного питания (ИБП) для медицинского диагностического оборудования - весьма ответственная задача. В связи с динамическим характером потребляемого тока диагностическими системами (такими как магнитно-резонансная томография (МРТ), компьютеризованный томография (КТ), а также Рентгеновские установки), к бесперебойникам предъявляются дополнительные специфические требования. При выборе ИБП для защиты электроснабжения таких систем они должны быть корректным образом подобраны и проверены, чтобы обеспечивать специфические требования нагрузки. Не все UPS способны поддерживать данные типы нагрузки и простое завышение мощности не гарантирует правильную работу системы. Детали - в этой статье

А здесь можно посмотреть разные решения для бесперебойного гарантированного энергоснабжения медицинских учреждений.

/via Абсолютные технологии

Возрождение

Платформа машинного обучения в Uber - Michelangelo

см. другие публикации по теме machine learning

Электро-ЦОД

ЦОД: электроснабжение центров обработки данных.

Инженеру данных

Хорошая подборка ссылок для data engineering

О национальных стандартах

Проекты национальных стандартов от TK194. По-прежнему считаю, что для больших данных нужно просто взять материалы NIST

Как работает браузер

Обязательное знание для веб-разработчиков - что происходит при открытии URL в браузере. В интересной дискуссии на YC есть еще несколько ссылок на подобные материалы.

Бесперебойно и с гарантией

Системы бесперебойного и гарантированного электроснабжения. Энциклопедия. Бесперебойники, дизель-генераторы, щиты, АВР, контейнеры, мониторинг, SNMP и Modbus - и все остальное. Для ЦОД, медицинских учреждений, строительства и всех остальных.