Как мы предсказываем дату окончания и оценку проекта с помощью нейросети

[Tiendil]

Какая точность прогнозов получилась?
Какого рода проекты анализировались?
Сколько проектов попало в выборки?

Из обработки исключаются проекты, не имеющие достаточного объема данных или не подходящие для анализа по другим причинам.

Можете перечислить другие причины?

Далее идентифицируем задачи проектов, сопоставляя их со списком типовых задач.

Можете поделиться списком типов?

Без количественных данных сложно оцени проделанную работу :-)

[yurybaramykov]

Спасибо большое за вопросы :)
Ответы на некоторые из них являются темой для отдельного поста.

Анализировались ИТ проекты, более 100. Типовые задачи — подготовка документации, анализ, кодирование, формирование релиза, тестирование, внедрение и т.д.

[Sberbank]

Ждем следующий пост :)

[Kaiser]

Некоторые моменты звучат очень странно, хотелось бы получить ответы в комментах.
— Нет ничего о метрике качества и чего удалось добиться на отложенной выборке.
— Я правильно понял, что есть 25k фичей и обучающая выборка объемом 100 строк?

[yurybaramykov]

Спасибо за вопрос.
Качество данных очень важный вопрос, но о нем не получилось рассказать в этом посте. У нас есть много фильтров на разных этапах, если данных мало — проект не используется.

1 проект представляется в виде вектора (таблица 25к колонок — 700-800 строк)
Количество строк в векторе 1 проекта зависит от длительности проекта и частоты внесения данных. Строка — это все события за 1 день.

[Apatic]

Я не совсем понял, а что в итоге предсказывается то?
Было бы неплохо привести пример прогноза по какому-то проекту. С картинками, так сказать

[yurybaramykov]

По проектам предсказывается:
— оценка при закрытии
— дата закрытия проекта

Пример:
ID проекта — 123456
Название проекта — Проект
Прогноз оценки — C
Прогноз закрытия — 21.06.2018

[Apatic]

Про точность пока сложно говорить, насколько я понимаю?
Кому раскрываются/будут раскрываться (я так и не понял пошло это уже в продакшн или нет) данные прогноза?

[yurybaramykov]

Данные прогнозов доступны для ознакомления начальникам отделов Управления проектных менеджеров. Целевая аудитория — руководители проектов.
Про точность говорить, всегда сложно…
Во-первых, проекты закрываются не так часто, средний срок реализации 1 год.
Во-вторых, когда в прогнозе наблюдается отклонение от плана, проводятся корректирующие действия и прогноз меняется.

[Apatic]

Я просто так и не понял, какая цель этого предсказания?
Мы еще не поставили дату окончания проекту и хотим, чтоб машина за нас придумала эту дату? Или мы уже определили дату и теперь монитором, когда проект закончится по оценке машины, то есть следим за отклонением от плана?

Насчет оценки, тоже непонятно — известная ли спрогнозированная оценка оценивающим? Если да, то не будет ли это смещать из оценку.

[yurybaramykov]

Мы ищем дельту между плановой датой окончания проекта и прогнозной датой окончания проекта. Если дельта превышает несколько месяцев, то это повод проверить нет ли проблем в проекте и принять меры.
Прогнозная оценка не влияет на оценку проекта при закрытии. Это скорее ориентир для руководителя проекта.

[mad_nazgul]

Как не пытались менеджеры избавиться от программистов, но похоже программисты начинают избавляться от менеджеров. :-)

[ser0t0nin]

Каждая колонка в таблице — это нейрон, комбинация из трех элементов: задача проекта, события и значения события. Сейчас у нас насчитывается примерно 25 тысяч нейронов.

Вот совсем не понял, нейрон — функция логистической регрессии, а не колонка. Вообще можно ли на архитектуру сети взглянуть? или там просто персептрон?

[yurybaramykov]

Архитектура следующая: 25 тысяч во входном слое, всего 4 слоя, 2 скрытых.
Выше был описан принцип формирования данных для использования во входном слое, данные из колонок подаются в нейроны на вход.

[ser0t0nin]

Спасибо! Получается вы можете любой проект представить в виде вектора в пространстве размерности 25к? какой примерно объем обучающей выборки у вас?

[yurybaramykov]

Да, правильно. Обучающая выборка более 100 проектов.

[yurybaramykov]

Пока на очереди Ариадна. Другие системы представляют интерес в том случае, если есть связь с проектом. Например: Проект — АС — Релиз — фича. Такая связь есть не всегда.

[yurybaramykov]

Пока на очереди Ариадна. Другие системы представляют интерес в том случае, если есть связь с проектом. Например: Проект — АС — Релиз — фича. Такая связь есть не всегда.

[TEPM0C]

>Мы работаем над подключением новых источников данных — это различные учетные системы Сбербанка, связанные с проектным управлением.
Можете уточнить, какие именно системЫ имеются в виду, кроме Ариадна? Jira вроде бы не проектное управление, МУСС тем более.

[yurybaramykov]

Пока на очереди Ариадна. Другие системы представляют интерес в том случае, если есть связь с проектом. Например: Проект — АС — Релиз — фича. Такая связь есть не всегда.