SaaS «Calligraph: BI-OLAP-Reporting»

Лосев ВладимирE-mail: losev@calligraph.ru Тел.: +7 903 220 4082Skype: vzlosev

Суть услуги Calligraph и ее принципиальное отличие от всех конкурентов Режим «Self Service» и никаких посредников между Пользователем услуги и данными Таким образом, если у Пользователя есть право на доступ к каким-либо данным, то SaaS Calligraph автоматически предоставляет Пользователю возможность анализа доступных данных, необходимых ему для поддержки принятия решений и получения любой отчетности без посредников, «здесь и сейчас», автоматически адаптируясь к его языку, терминам его предметной области и используемым OS, ИС и СУБД.

Такому режиму работы агентство DARPA придумало название:

«Семантический компьютинг».

Продукт и области применения

План раздела:Проблемы, существующие на рынкеАналитические агентства о пяти трендах, меняющих облик средств бизнес-аналитики Новизна предлагаемого решения Преимущества для Пользователя

Проблемы, существующие на рынке Возрастание динамики изменений рыночных условий. Рост конкуренции и падение маржи, приводящие к необходимости учитывать множество ранее «малозначимых» факторов при решении вопросов поддержки принятия решений (DSS – Decision Support Systems) и немедленного реагирования на текущую ситуацию (EIS - Executive Information Systems). Беспрецедентный рост потоков данных, которые приходится учитывать в системах DSS & EIS, которые уже стали ключевым фактором успешной работы любого предприятия. Решить эти (и множество других проблем), не обеспечив работу Пользователя в режиме, при котором он сам формирует нужное ему «здесь и сейчас» информационное окружение, практически невозможно.

Традиционно рекомендуемые решения Деклараций о «панацеях», решающих описанные выше проблемы Пользователя, много: давно и хорошо «распиаренные» системы типа SAS, BO,

Cognos, MS BI, MicroStrategy, … etc., (~30+ т.н. «OLAP-систем»);

много «PR-шума» возникло вокруг BI-систем, использующих специфические свойства разных СУБД: «многомерность» (ADABAS); «поколоночное» хранение данных (SYBASE IQ); «объектное», «деревянное» и т.п. хранение (CACHE’); параллельно-массовая обработка данных (GreenPlum);

«сверхтехнологичные», очень дорогие, «заточенные», как правило, на решение узкого круга задач, аппаратно-программные комплексы (типа SAP HANA);

в последнее время в «квадратах Гартнера» на первые места стали выходить системы BI c обработкой в оперативной памяти (In-Memory Analytics) и даже «аналитике на чипе» (In-Chip Analytics). Это QlikView, Tableau, GoodData, Palantir. Особо стоит отметить великолепную графику, используемую в последних разработках.

Применимость «традиционного» подхода для решения задач DSS & EIS Традиционные решения имеют одно общее неустранимое, «генетическое» свойство – они требуют обязательной предварительной обработки и/или перемещения данных в ХД, СУБД, и т.п. специализированные структуры - Хранилищ Данных. Такие манипуляции, как правило, недоступны Пользователю. Приходится привлекать «консультантов», администраторов ИС, СУБД и OS, программистов и пр. «специалистов», что, как правило, очень дорого и недопустимо долго. В любом случае, эти технологии не есть «обработка On Line» и не средство для Конечного Пользователя, решающее его проблемы DSS & EIS.

Аналитические агентства о пяти трендах, меняющих облик средств бизнес-аналитики1. Упреждающий бизнес-анализ2. Оперативная разработка систем бизнес-

анализа3. Клиентоцентричная бизнес-аналитика4. Совершенствование средств

визуализации результатов бизнес-анализа

5. «Операционализация» средств бизнес-анализа

Предлагаемое решение, новизна SaaS «Calligraph: BI-OLAP-Reporting» предоставляет Пользователю возможность решать вопросы DSS & EIS без посредников, в режимах On Line, On Fly, On Demand, (т.е. в режиме WEB 2.0). Агентство DARPA ввело в оборот понятие, уточняющее, расширяющее и более точно описывающее режим WEB 2.0 - «Семантический компьютинг». «Семантический компьютинг» - инструмент Конечного Пользователя, который обеспечивает Пользователя возможностью задать вопрос Автомату на родном языке Пользователя, в терминах его предметной области, в строгом соответствии с его правами на доступ к данным, и получить адекватный ответ за минимально возможное время в заданном Пользователем виде. Для обеспечения режима «Семантического компьютинга», услуга Calligraph проводит автоматическую «локализацию» на язык и предметную область Пользователя, делая услугу интероперабельной, т.е. не зависящей от границ, «вертикальных» и «горизонтальных рынков», типов используемых ИС, СУБД и т.п. условий.

Основное отличительное свойство SaaS Calligraph Таблицы любой сложности и размеров, в любом теоретически возможном представлении, автоматически генерируются за один проход по информации, в варианте и виде, запрошенном самим Пользователем. Если сложность автоматически формируемого запроса превышает предел допустимой сложности запроса, обрабатываемого сервером, либо у Пользователя есть право обработки данных на многопроцессорном сервере (кластере), то запрос автоматически разбивается на ряд фрагментов, которые исполняются независимо друг от друга и автоматически собираются в формируемой таблице. Это критически важная характеристика, исключающая проблемы "информационного взрыва", что делает скорость обработки предсказуемой, рассчитываемой и линейно зависимой от объема обрабатываемой информации, не требуя какой-либо предварительной обработки данных.

Другие характеристики SaaS Calligraph По сути дела, в одном продукте удалось совместить

функции, которые традиционно разнесены в разные продукты:1.Выборка (фильтрация) нужных данных из БД или

динамичных OLTP-потоков. (Это функции элементов библиотек HADOOP.)

2.Планирование исполнения запроса Пользователя с учетом возможностей используемых HARD & SOFT. (Это функции этапа MAP.)

3.Организация обработки данных. (Это функции этапа REDUCE.)

Стоит отметить еще несколько крайне важных свойств SaaS Calligraph:4.Простота продукта для любого Конечного Пользователя,

имеющего опыт работы с MS Office.5.Доступность по цене обращения к услуге. Цена на порядки

меньше, чем услуги консультантов при «традиционном» подходе.

6.В связи с автоматической настройкой USL, автоматической «локализацией» на язык и предметную область Пользователя услуга доступна по всему миру, без языковых и отраслевых границ.

7.Тотальная минимизация в услуге «всего и вся» – скорости обработки, загрузки сетей, загрузки серверов, на которых размещена услуга, времени «освоения» услуги Пользователем.

Основные ТТХ «облачной» услуги Calligraph- Обеспечен теоретический предел возможностей представления одной и той же информации: (N+1)! основных способов, где N – количество измерений, задействованных в запросе.- Обеспечен теоретический предел скорости обработки данных – за один проход по любым данным, вплоть до OLTP-потоков, что делает предсказуемым время обработки за счет возможности любого распараллеливания хранения и/или обработки данных.- Услуга Calligraph разработана как кроссплатформенное универсальное решение для любых ИС и СУБД. - Обеспечена независимость от места размещения данных.- Минимизированы потоки на сетях и загрузка сервера услуги.- Обеспечена работы в режиме Zero Trust.- Автоматическая настройка на Семантический Слой Пользователя, (USL - User Semantic Layer в трактовке DARPA), на родном языке и в терминологии предметной области Пользователя, в строгом соответствии с его правами на доступ к данным. Услуга автоматически настраивается на новые задачи и/или новых Пользователей, выдавая им именно тот контент, запрос на который они способны самостоятельно сформулировать «здесь и сейчас».

Преимущества для Пользователя услуги- Сокращение на порядки расходов на ИТ-услуги.- Перевод затрат на ИТ-услуги из обязательных капитальных в операционные затраты «по требованию».- Исключение зависимости от «консультантов» по сложным узкоспециализированным продуктам.- Удобство и привычность интуитивно понятного всем интерфейса в стиле MS Office, исключающего необходимость длительного обучения Пользователей.- Возможность работы в любом месте, с любых гаджетов.- Возможность обработки секретных данных с помощью общедоступной «облачной» услуги с гарантированным не ухудшением ИБ (Инф. Безоп.) - Пользователю предоставлена возможность развивать услугу в нужном ему направлении и темпе, легко создавать новые «виртуальные» реквизиты, расчетные функции, моделировать ситуации «Что если … ?»

РынокПлан раздела:

Сегментирование рынкаУчастникиОбъёмы, по годам в мире и в РоссииПродукт на фоне конкурентов

Сегментирование рынка ИС, помимо обязательных учетных функций, выполняют много других действий, заложенных в нее разработчиками. «По крупному» функции можно разделить на два класса (или потока):- Фискальные функции, обеспечивающие информацией «внешних потребителей» – ФНС, Стат-Органы, вышестоящие организации и т.п.- Функции оперативного учета и управления (DSS & EIS), которые замыкают на себя, как правило, более 80% информационных потоков. «Calligraph: BI-OLAP-Reporting» изначально проектировался для решения задач DSS & EIS, т.е. для 80% Пользователей любых ИС. Однако, как показал опыт, такая услуга оказалась очень полезной и в фискальных органах. В ФНС, например, оказалась чрезвычайно востребованной возможность отслеживания и анализа причин «выбросов» показателей по ансамблям предприятий одинаковых отраслей и т.п. анализ. В Стат-Органах она оказалась востребованной для формирования всевозможных сводок, справок, распределений и др. «отчетов». Для медицинских систем оказалось удобным использования Calligraph для «диспансеризации» и «сегментирования» и анализа медицинских услуг и т.д.

Участники рынка Согласно последним данным «Магического квадрата» Gartner, в сегменте рынка, на который выйдет «облачный» сервис SaaS «Calligraph: BI-OLAP-Reporting», «вырвались вперед» следующие продукты:

- Tableau; - QlikView;- Tibco Software;- PinPoint (Cyscom, UK); - GoodData (компания GoodData, Чехия);- WebFOCUS.

Для богатых предприятий доступны и престижны «тяжелые», дорогие BI и хорошо и давно распиаренные системы, (BO, Cognos, SAS, MS BI и т.п.), равно как и «специализированные комплексы» (типа SAP HANA, IBM Netezza и им подобные). По данным ряда аналитических агентств, эти системы в последнее время ощутимо теряют рынок.

Calligraph на фоне конкурентов Все «облачные» решения конкурентов сводятся, как правило, к нескольким найденным ими «фишкам» и «бантикикам»:- Обработка данных в оперативной памяти;- Использование специальных СУБД (с «поколоночной» организацией, «сверхплотным» сжатием информации, СУБД с No SQL и т.п.);- Разработкой и использованием «широчайшего» набора графических «фишек» и т.п. Если забыть об ограничениях этих «систем (по объему обрабатываемых данных, необходимости предварительной обработки и «перекачки» данных и пр.), то стоит заметить , что любой из этих режимов (и даже их комбинации), легко организуются системой Calligraph как включаемые опции, не имеющие, при этом, их «генетических» недостатков. Относительно сравнения Calligraph с «большими» BI-OLAP-Reporting системами, легко заметить, что весь «базовый» функционал этих систем, (и даже с большим превышением), присутствует в Calligraph даже ранних версий. Более того, по скорости работы, по представлению информации, по простоте работы и многим другим характеристикам Calligraph их превосходит.

Объёмы BI по годам в мире Как было указано ранее, SaaS «Calligraph: BI-OLAP-Reporting» предназначена для решения задач DSS & EIS. Эти задачи универсальны. Они не привязаны к каким-либо типам ИС, не ограничены языковыми и отраслевыми границами, не имеют привязок к каким-либо «вертикальным» и «горизонтальным» рынкам. При этом, на решение задач DSS & EIS приходится более 80% потоков данных, которые требуют обработки и анализа.

Теперь к вопросу о прогнозе внедрения услуги Calligraph по годам и доле рынка, который эта услуга займет при решении задач DSS & EIS? Что выберет Пользователь при решении каждодневных задач DSS & EIS, имея альтернативу: каждый раз вызывать «специалиста по поддержке», платить ему от $80 до $500 в час и ожидать решения дни и / или недели, либо, обратившись к услуге, (например за $30 в месяц по подписке, или уплатив $1 за разовое обращение), получить решение «здесь и сейчас», не тратя время и нервы на объяснение возникшей задачи ИТ-специалисту и ожидая ее решения? Даже учитывая инерцию рынка, ответ очевиден – мы ждем «взрывного» роста объемов обращения к услуге Calligraph и захвате очень серьезного объема рынка из $17,1 млрд. услуг DSS & EIS, прогнозируемого Gartner на 2016 год.

Рынок BI в России По оценкам TAdviser, в 2013 году рынок BI в России, включая услуги по внедрению, составил 42 млрд рублей. Прогноз на 2014 год позитивный, но рост умеренный. Как будет развиваться рынок BI-систем далее в предположении, что первичный (и наиболее платежеспособный) спрос на такие решения уже удовлетворен? Рынок BI-платформ может быть подогрет с двух сторон. С одной стороны, все активнее продвигаются простые и функциональные решения типа data discovery, предназначенные для самостоятельного серфинга информации, понятные сотрудникам, недорогие и простые в настройке. Серьезной альтернативы Calligraph в этом сегменте найти трудно. С другой стороны, вендоры рекламируют «мощнейшие инструменты», в том числе аппаратно-программные комплексы, способные, якобы, «решать сложнейшие задачи по анализу, в том числе, больших массивов данных». При этом «скромно замалчиваются» ограничения, нужная квалификация персонала, затраты, сроки внедрении и т.п. «мелочи».

КонкурентыПлан раздела:

Прямые конкурентыСубституты и преимущества услугиПримеры работы прототипа услуги

Прямые конкуренты Принципиальное отличие SaaS «Calligraph: BI-OLAP-Reporting» от конкурирующих «облачных» и «тяжелых» систем, позиционирующих себя в BI и OLAP анализе данных, в том, что Calligraph исключает необходимость посредников между Пользователем и данными. Такой режим агентство DARPA называет «семантический компьютинг» и вкладывает в его разработку немеряные деньги. Европа тоже включилась в подобные разработки – проект NEPOMUK. «Семантический компьютинг» - ответ на вызовы, которые невозможно купировать используя традиционные технологии. Обеспечение такого режима требует предоставление Пользователю инструмента, позволяющего ему самому задавать «Автомату» вопросы на его языке, в терминах его предметной области и с жестким учетом прав на доступ к данным. Автомат должен понять, обработать запрос и предоставить Пользователю ответ в нужном ему виде за минимально возможное время. Прототип SaaS «Calligraph: BI-OLAP-Reporting» работает именно в таком режиме. Ни одна из известных систем BI-OLAP-Reporting о таких характеристиках не заявляла. Полагаю, что это не из скромности. Даже гораздо меньшие «достижения» становятся поводом для шумных PR-акций, форумов и т.п. мероприятий.

Субституты и преимущества услуги В силу того, что уже в работающем прототипе SaaS «Calligraph: BI-OLAP-Reporting» достигнуты сразу несколько теоретически предельных характеристик – по скорости работы, по вариантам представления отчетов, по загрузке сетей, нагрузке на сервер услуги, обеспечению информационной безопасности в режиме «Zero Trust» и целому ряду других, менее очевидных, но не менее важных характеристик, говорить о конкуренции с услугой Calligraph в течение ближайших лет не приходится. Это маловероятно. Допуская возможность повторения каких-то отдельных из этих характеристик, следует учесть, что: во-первых, ТТХ Calligraph можно только повторить. (В силу их теоретически предельных значений и то, только в лучшем случае); во-вторых, маловероятно повторить их все сразу; в-третьих, в силу указанных ранее причин, себестоимость услуги столь незначительна, что конкурировать с ней просто невозможно; в-четвертых, за время «погони конкурентов» брэнд Calligraph будет раскручен настолько, что его можно будет только купить, а не пытаться с ним конкурировать.

Взаимодействия SaaS Calligraph и ИС Заказчика

Пример автоматически созданного USL (User Semantic Layer) для ИС «1С»

Визуализации USL в графическом виде на примере тестовой БД MS NAV

Пример визуализации структуры XML-файла в системе Calligraph для Пользователя «1C»

Оценка Microsoft & IAMCP

Пример работы прототипа услуги c СУБД GreenPlum в ЦОД’е EMC (USA)

Примеры типов формируемых таблиц

Фрагмент документа в HTML формате

Сравнение решения «КАДРЫ» для ПО «АТОММАШ» с использованием SAP и Calligraph

Текущая ситуация в проекте

Развитие продуктаМаркетингАктивы, стадия, наличие прототипа, клиенты

Направления развитие продукта

SaaS Calligraph Разработка «голосового» интерфейса SaaS Calligraph.

Внутренний язык системы Calligraph разрабатывался с учетом такой возможности: предельно прост, однозначен, лаконичен, не избыточен. Голосовой ввод уже становится обязательной опцией.

Создание SOA варианта Calligraph, который может войти в библиотеки разных CASE-систем. Интересен подобный вариант и как объект для любой библиотеки Framework и/или интеграция с другими набирающими популярность, интересными и полезными инструментами (как пример - «облачный» сервис DOCKER).

Создание собственной «облачной» CASE-системы для генерации программных комплексов.

О выводе подобной системы на рынок « … через несколько месяцев» говорил глава фирмы SAP г-н Хеннинг Кагерман в интервью CNEWS (сент. 2007 года): «Какой будет революция на рынке ERP?». Проект, кстати, провалился из-за отсутствия блока с характеристиками подобными Calligraph.

Маркетинг Вопросы маркетинга мы хотели бы возложить на фирму-партнера. Опыт распространения предыдущих версий системы Calligraph, даже в деск стопном варианте, показал, что уже после первых продаж система начала рекламировать себя сама. «Облачный» вариант услуги Calligraph, с автоматической настройкой и «локализацией», и при минимальных маркетинговых усилиях и мероприятиях, обеспечит «взрывное» распространение услуги.

Активы системы Calligraph Многолетний (с 1979 г. по текущее время) опыт

разработки и продаж пяти предыдущих версий системы Calligraph и других программных систем;

Высококвалифицированная команда с опытом работы и администрирования самых разных OS, СУБД, систем разработки;

Наличие Свидетельства РОСПАТЕНТА на разработку Calligraph;

Опыт вывода на рынок нескольких вариантов системы Calligraph и продаж многих сотен экземпляров продукта;

Участие и победы в нескольких серьезных конкурсах программных продуктов BI-OLAP-Reporting, организованных такими уважаемыми фирмами, как Microsoft, IAMCP, CNEWS, VIMPELCOM.

Стадия, наличие прототипа Создан прототип SaaS «Calligraph: BI-OLAP-

Reporting», пока - c терминальным доступом к услуге;

Прототип SaaS Calligraph, с автоматической настройкой USL, «обкатан» на широко распространенной в России и СНГ системе «1С» разных версий и используемых СУБД (MS SQL, PostgreSQL, *.DBF);

Прототип SaaS Calligraph «обкатан» на демо-версии MS NAVISION;

Calligraph «обкатан» на СУБД всех доступных версий, в т.ч., ORACLE, ADABAS, CACHE’, SYBASE, SYBASE IQ, GreenPlum и других.

Клиенты Из многих сотен продаж можно выделить, как это сейчас принято, «знаковых» клиентов: В Башкирии: Статуправление, Обком КПСС, ряд

Министерств; ГАИ МВД СССР; Институт пульмонологии и множество других

медицинских учреждений; Целый ряд подразделений ФНС Ростовской области; В ряде банков, для анализа кредитных данных,

отчетности и других задач; Чернобыльская АЭС, (которая, кстати, к тому времени

уже давно взорвалась); Новороссийский порт; Севастопольский ГорИсполком; Одесский порт; ПО «АТОММАШ»; ГД РФ; Множество других больших и малых предприятий и

учреждений.

КомандаЛосев Владимир ЗахаровичАвтор и Правообладатель системы CalligraphОпыт работы в области разработок и управления разработками разных категорий SOFT ~ 40 летРабота в настоящее время – Главный инженер в группе компаний САНТЭЛ-ТЕЛЕКОМ E-mail: losev@calligraph.ru Моб.: +7 903 220 4082 Журович Максим АнатольевичОбразование – МФТИ, К.ф.-м.н.Опыт работы более 15 лет по администрированию сетей, СУБД, разработке SOFTВедущий специалист при разработке 4-й и 5-й версий CalligraphРабота в настоящее время – М.н.с. в НИИ АН и совладелец ООО Лосев Максим ВладимировичОбразование – МФТИОпыт работы более 15 лет по разработке SOFT, администрированию сетей, СУБД Ведущий специалист при разработке 4-й и 5-й версий CalligraphРабота в настоящее время – «РОСНЕФТЬ», Главный специалист в Департаменте Анализа и Отчетности

Контакты

Правообладатель и Автор системы Calligraph: Лосев Владимир

E-Mail: losev@calligraph.ruТелефон: +7 903 220 4082