Секретный проект из ИТ-лаборатории Инфостарта: приоткрываем завесу

Секретный проект из ИТ-лаборатории Инфостарта: приоткрываем завесу

06.05.2021      24629

Уже некоторое время команда ИТ-лаборатории Инфостарта в качестве одного из проектов занимается разработкой внутреннего стартапа под названием «Магазин решений». Если кратко, то это – маркетплейс решений для конфигураций на платформе 1С:Предприятие 8. Ближайшие его аналоги в мире мобильных приложений – всем знакомые Google Play и Apple AppStore.

Глобальная идея Магазина в том, чтобы позволить абонентам Инфостарта пользоваться опубликованными в каталоге решениями в один клик прямо в своей информационной базе. Для авторов Магазин позволит стать ближе к конечным пользователям, улучшить свои решения, получая более быструю и качественную обратную связь.

Маркетплейс, как инструмент распространения программных продуктов, существенно повышает требования к ним, и именно поэтому в первом анонсе Магазина мы расскажем о той части проекта, которая будет отвечать за проверку качества – о Системе тестирования решений.

Данная новость открывает серию рассказов о Магазине решений, которые мы будем делать по мере выпуска релизов различных его подсистем.

Обеспечение качества публикаций в Магазине решений

Инфостарт создавался и действует как площадка, где свою разработку может опубликовать каждый, независимо от своего текущего профессионального уровня.

Размещаемые в каталоге решения в обязательном порядке проходят модерацию: текст и оформление публикации проверяются на соответствие формальным правилам нашими внимательными и терпеливыми модераторами. Но качество самих конкретных разработок специально никак не проверяется. Некоторое исключение составляют платные решения, которые проходят простые ручные проверки.

 

 

Из-за такого подхода возникает проблема: разброс качества публикаций колоссальный, и модерация в общем случае не может гарантировать какой-то его минимальный уровень.

Я сам неоднократно, как пользователь Инфостарта, скачивал обработки, которые в конечном итоге не запускались в моей базе, потому что или были созданы под какой-то конкретный релиз конфигурации, а автор это не указал явно, или вообще содержали ошибки.

Поэтому одной из важных задач в рамках создания Магазина решений перед нами стоит задача повышения качества публикуемых на портале Инфостарт разработок.

Для этих целей в составе Магазина мы реализовали и развиваем систему проверки и тестирования публикаций. Она состоит из подсистемы автоматического тестирования и подсистемы, обеспечивающей ручную проверку решений.

Автоматическое тестирование решений

В каталоге Инфостарта невероятное количество совершенно разных по типу публикаций: от простых обработок и до полноценных конфигураций (а еще есть расширения, внешние компоненты, скрипты...). Из-за этого задача автоматического тестирования произвольно взятой из каталога Инфостарта публикации выглядит непосильной, тем более если решать ее только техническими средствами.

Тем не менее, тестирование – во многом рутинный процесс, и поэтому основой системы тестирования являются механизмы автоматической проверки решений.

Чтобы решить эту задачу, мы «моем слона частями»: на первом этапе ограничились самыми популярными видами публикаций. Ими оказались обработки, отчеты и печатные формы, которые поддерживают API дополнительных отчетов и обработок 1С:Библиотеки стандартных подсистем (1С:БСП). На текущий момент реализовано полностью автоматическое дымовое тестирование таких решений.

Как видно на скриншоте, автотесты берут на себя огромный объем работы, который вручную в адекватные сроки и с адекватными затратами выполнить не реально.

В планах реализовать и подключить дополнительные проверки:

  • статический анализ кода (проверку синтаксических ошибок и соответствие стандартам 1С);
  • проверки кода на безопасность (наличие опасных обращений, наличие закладок и т.п.);
  • запуск unit- и BDD-тестов, предоставляемых авторами решений;
  • поддержка проверки других типов решений (обработок не поддерживающих БСП, обработок для управляемых форм).

Бэкофис для процессов ручного тестирования

Было бы круто иметь возможность выполнять тестирование 100% автоматически, но в общем случае это практически неразрешимая задача, по крайней мере сегодня, поэтому автотестирование дополняется ручной проверкой.

 

 

Тем не менее мы стараемся минимизировать ручной труд везде, где только возможно и по максимуму освободить тестировщика от разных дополнительных операций. Для этого в Магазине решений разработаны механизмы, которые реализуют

  • управление базами, в которых выполняется тестирование: ротация демо баз (очистка/подготовка/публикация), создание в них пользователей и т.п.;
  • рабочее место тестировщика с интерфейсом, где он видит публикации, которые нужно проверить;
  • сбор данных о результатах ручного тестирования;
  • публикацию результатов тестирования на портале Инфостарт.

В совокупности эти механизмы образуют виртуальный бэкофис.

Все решения, которые успешно прошли автоматическое тестирование, попадают в бэкофис и проходят ручное тестирование силами наших доблестных коллег из отдела Сервисов.

Сервис-инженеры, выполняющие роль тестировщиков, для проверки запускают каждую обработку/печатную форму/отчет и выполняют в ней минимальные пользовательские действия: формируют отчет, выводят печатную форму, запускают основную команду обработки и т.п.. Таким образом они убеждаются, что решение не содержит очевидных проблем (отчет формируется и выводит данные, печатная форма выводится на экран, при запуске обработки не возникает ошибок). Результаты проверки фиксируются в системе:

И эти данные смогут увидеть модераторы и автор публикации, об этом расскажу далее.

Использование результатов тестирования

Результаты тестирования будут доступны всем зарегистрированным пользователям сайта, авторам публикаций и модераторам каталога.

Все решения, успешно прошедшие проверку, будут отмечаться специальным бейджиком:

По наличию бейджика видно, в какой конфигурации и на каком релизе это решение проверялось. Отсутствие бейджика означает, что либо решение пока не прошло проверку, либо были обнаружены ошибки.

Для пользователей Инфостарта наличие бейджика будет означать, что это решение в конкретной конфигурации (с точностью до релиза) может быть подключено в качестве дополнительной обработки, успешно запускается в этой конфигурации и не содержит явных, очевидных ошибок.

Модераторы и, главное, авторы будут иметь полный доступ к информации о выявленных при тестировании ошибках. На основе этих данных модераторы смогут принять решение о размещении публикации, а авторы – своевременно отреагировать и исправить выявленные проблемы.

Вот так сейчас выглядит полный отчет о тестировании конкретной публикации:

Очевидно, эта обработка почему-то сломалась в новых релизах. Автор публикации может кликнуть в красной ячейке и увидеть полную расшифровку ошибки.

В случае ошибки, обнаруженной при автоматической проверке, это будет текст возникшего программного исключения:

В дальнейшем сюда также добавятся отчеты по результатам статического анализа кода и результаты других проверок.

Если ошибка была выявлена в ходе проверки решения вручную, то в качестве текста ошибки будет выведен комментарий от тестировщика:

Безусловно, даже такая двухэтапная проверка не дают 100% гарантии работоспособности проверяемого решения. Но это только первый этап на пути повышения качества и систему тестирования решений мы будем в ближайшее время активно развивать.

Информация о поддерживаемых типовых релизах

Наша система тестирования на текущий момент выполняет проверку решений на актуальных типовых релизах.

При этом авторы публикаций и сейчас и раньше могли самостоятельно указать те конфигурации и номера релизов, на которых выполнялась разработка и проверка решения самим автором. Но до сегодняшнего дня эти данные указывались не формализованно - прямо в тексте публикации. Естественно, иногда в названия конфигураций и номера релизов закрадывались ошибки.

Чтобы исключить эти проблемы, мы внедрили на портале справочник типовых конфигураций, который регулярно обновляется по официальным данным 1С и теперь авторы публикаций для каждого файла могут указать название поддерживаемой конфигурации и номеров релиза, на которых автор проверял свое решение:

Эта информация будет выведена в конце текста публикации:

Что дальше

Магазин решений – очень сложный технически и организационно проект. Как я уже выше отметил, мы планируем сделать большой упор на развитие системы автоматической проверки решений, но это лишь та часть проекта, которую мы запустили в опытную эксплуатацию (автотестирование и бэкофис работают уже несколько месяцев, а публичная часть с результатами тестирования станет доступной после конференции).

Кроме этого, на этапе внутреннего тестирования и согласования юридических вопросов находится демо-площадка, которая будет дополнять Магазин решений. Она позволит пользователям портала Инфостарт до приобретения запустить и проверить в реальных условиях работоспособность обработки/печатной формы буквально одной кнопкой прямо со страницы публикации:

Во время реализации проекта мы сталкиваемся с интересными задачами, и о найденных решениях тоже постараемся рассказывать. Некоторые решения кристаллизуются в виде небольших самостоятельных продуктов, которыми мы делимся и продолжим делиться с сообществом дальше, в том числе в формате open source.

Следите за анонсами!



Источник: https://infostart.ru/journal/news/mir-1s/sekretnyy-proekt-iz-it-laboratorii-infostarta-priotkryvaem-zavesu_1436603/
Автор:
Александр Кунташов Ведущий 1С разработчик


Комментарии
В избранное Подписаться на ответы Сортировка: Рейтинг 1-го уровня
3. chist_i 06.05.21 19:52 Сейчас в теме
А потом этот маркетплейс будет вылезать у всех пользователей всех типовых решений. Пользователи начнут сравнивать цены за доработки и говорить обслуживающим франчам - зачем заказывать у вас, если можно в один клик поставить бог ведает кем написанную обработку и в два клика уничтожить базу.
Hammerboy; Waanneek; muskul; oldcopy; FeSTy; sys1c; nofear; Brawler; maXon777; +9 Ответить
1. sapervodichka 4645 06.05.21 14:04 Сейчас в теме
я не заинтересовался, для меня непонятное и возможно даже лишнее дублирование сайта на веб-клиенте 1С
Sergik_D; FeSTy; Evg-Lylyk; Cерый; asupsam; mark_oilbass; a_a_burlakov; +7 Ответить
5. 1c-intelligence 11669 07.05.21 08:54 Сейчас в теме
Тема крутая и своевременная, по сути - голубой океан. Тестирование конфигураций при разработке ещё как-то организовано, а массовое тестирование кучи барахла - нигде и никак. А потребность есть и она будет только возрастать.
Как вариант, потом ещё можно сделать онлайн-сервис для самостоятельной проверки клиентом или программистом какой-нибудь обработки - зашёл, добавил, подождал, получил отчёт. А потом этот сервис вставить бы в типовые конфигурации, как антивирус. Тогда, может, и качество работы программистов всех мастей повысилось бы.
Lapitskiy; kuntashov; Evg-Lylyk; info1i; user1578175; Brawler; +6 Ответить
21. RocKeR_13 973 27.05.21 15:56 Сейчас в теме
Ну раз пошла такая пляска... Было бы здорово еще увидеть сервис защиты коммерческих решений с REST API с оплатой за sm и реальные деньги)
support; kuntashov; +2 Ответить
4. info1i 153 06.05.21 22:53 Сейчас в теме
Отличный проект!
Скорее всего, я буду им пользоваться и как разработчик, и как заказчик.
kuntashov; artbear; +2 Ответить
16. Darklight 27 13.05.21 18:00 Сейчас в теме
Идея правильная - но , с реализацией, боюсь, как всегда будет лажа
Размещаемые в каталоге решения в обязательном порядке проходят модерацию: текст и оформление публикации проверяются на соответствие формальным правилам нашими внимательными и терпеливыми модераторами. Но качество самих конкретных разработок специально никак не проверяется.

Для этих целей в составе Магазина мы реализовали и развиваем систему проверки и тестирования публикаций. Она состоит из подсистемы автоматического тестирования и подсистемы, обеспечивающей ручную проверку решений.

Хаотичная разработка решений продолжится. Мусор и хаос - вот основная черта большинства "бесплатных" решений (да и многие платные этим активно грешат).
Если уж делать упор на качество - тогда нужно определиться со стандартом тестирования и требовать от публикуемых в маркете решений реализации этих стандартов и настроенных автотрестов. Это сразу отфильтрует большую часть мусора и поделок - такие авторы просто не сделают такие тесты и не будут публиковать эти решения в маркете (опубликуют как раньше - в общей помойке).

И это не говоря уже о том, что для 1С существует куча разных видов решений - которые имеют кучу разных условий применения и требований к среде выполнения - огромную часть которых попросту не запустить без кропотливого ручного создания таких условий. Тем более без готовых скриптов развёртывания и чётких инструкций. Да даже в ручную это выполнить для многих решений крайне затруднительно - всилу их специфики!

И это я ещё не начал обсуждать проблемы каталогизации решений - которые на Инфорстарт решаются скверно. Как и дальнейшая поддержка и сопровождение этих решений (особенно "бесплатных").

По-моему это будет провал...
8. ivanov660 2847 07.05.21 20:30 Сейчас в теме
Звучит интересно, только интересно представить себе мощности, которые будут гонять тесты на наборе версий платформ и море версий конфигураций.
На мой взгляд реально подключить (наверное это и подключено): статический анализатор, сонар, АПК, открыть формы для обработок и конфигураций - на этом пожалуй все.
2. Maystrenko_Ivan 06.05.21 17:55 Сейчас в теме
А какая практическая польза будет для обычных участников форума? Кроме того, что мы будем точно знать под какой конфигурацией работает обработка.
15. Lapitskiy 990 12.05.21 07:21 Сейчас в теме
7. Ibrogim 1210 07.05.21 15:16 Сейчас в теме
Прикольно. Хотел бы проверить свои творения )
Оставьте свое сообщение

См. также

INFOSTART EVENT 2021 Moscow Premiere: рассказываем о кофе-паузах и обедах

Новость Инфостарт infostartevent Мероприятия

В расписании конференции 101 доклад, мастер-класс и много других интерактивных форматов. Но доклады докладами, а перерывы и обеды будут по расписанию. Сегодня расскажем о том, где можно будет пообедать и перекусить в перерывах.

сегодня в 13:29    703    eselyanina    0       

В сервисе 1С:Фреш появилось универсальное распознавание документов

Новость БП3.0 1С:Фреш Искусственный интеллект Сервисы

Пользователи облачных конфигураций в сервисе 1С:Фреш смогут распознавать и обрабатывать не только документы регламентированного бухучета, но документы, формат которых системе еще не известен.

сегодня в 09:26    1689    ЕленаЧерепнева    1       

Компания abedyabka – «логичный» партнер конференции INFOSTART EVENT 2021 Moscow Premiere

Новость Инфостарт infostartevent Мероприятия

Мы продолжаем рассказывать о партнерах конференции, которые сделают досуг наших участников более разнообразным. Ребята из компании abedyabka организуют на мероприятии игровую зону, где участники смогут попробовать себя в конструировании марбл ранов.

вчера в 15:17    2415    AnastasiaKl    0       

COVID-free зона на INFOSTART EVENT: все, что вы хотели знать

Новость Инфостарт infostartevent Мероприятия

До INFOSTART EVENT 2021 Moscow Premiere осталось чуть больше двух недель, но новые постановления Правительства Москвы стали причиной холивара для обсуждений. Расскажем о мерах, которые мы предпринимаем, чтобы конференция состоялась.

22.10.2021    3697    irina_selezneva    27       

2 ноября стартует курс «1C:Предприятие для программистов: Бухгалтерские задачи»

Новость Обучение, бизнес-тренинг, курсы Инфостарт

С 2 по 18 ноября на Инфостарте пройдет онлайн-интенсив по изучению механизмов платформы «1С:Предприятие», предназначенных для решения задач бухгалтерского учета.

22.10.2021    2579    mgrinchenko    0       

Новый «1C:Документооборот 3.0.4»: трекер задач и улучшенная обработка документов

Новость ДО

В обновленный тестовый релиз вошли существенные изменения для работы с задачами, обновленный механизм просмотра связей документов и дополнительные инструменты администрирования.

21.10.2021    2594    ЕленаЧерепнева    0       

ТОП-10 самых продаваемых разработок за сентябрь

Новость Инфостарт Infostart Software Partners ИТ-новость Маркет

Подводим сентябрьские итоги рейтинга самых продаваемых разработок на базе платформы «1С:Предприятие» – данные топ-10 разработок основаны на аналитике продаж Инфостарта за прошедший месяц и запросах наших клиентов.

21.10.2021    2315    pvasiletc    2       

Apple iPhone 13 Pro 256Gb – главный приз для розыгрыша на конференции

Новость Инфостарт infostartevent Мероприятия

Стильно, престижно и кинематографично – так можно охарактеризовать главный приз INFOSTART EVENT 2021 Moscow Premiere. iPhone 13 Pro подходит к концепции конференции-кинофестиваля: позволит сделать прекрасные фото на память и снять небольшой фильм.

21.10.2021    2425    eselyanina    2       

C 30 октября в России начнется нерабочая неделя. Бизнесу обещана компенсация

Новость ИТ-новость

Владимир Путин поддержал инициативу об объявлении нерабочих дней с 30 октября по 7 ноября с сохранением заработной платы. Бизнесу будет полагаться компенсация в виде грантов.

21.10.2021    1751    VKuser24342747    13       

Hobby Games – игровой партнер конференции INFOSTART EVENT 2021 Moscow Premiere

Новость Инфостарт infostartevent Мероприятия

До начала конференции осталось совсем немного времени, и пришло время представить наших партнеров. На мероприятии в Москве наши участники смогут познакомиться с новым игровым партнером – компанией Hobby Games.

20.10.2021    6013    AnastasiaKl    0       

1С:ЗУП КОРП 3.1.19: кадровые планы, диаграмма отпусков и интеграция с Exchange

Новость ЗУП3.x Конфигурация

Фирма «1С» выпустила обновление для прикладного решения 1С:ЗУП КОРП. В новой версии появилось рабочее место для построения кадрового плана, диаграмма отпусков, электронное тестирование кандидатов и интеграция с MS Exchange.

18.10.2021    3225    ЕленаЧерепнева    0       

Фирма «1С» открыла доступ к технической документации по платформе для разработчиков

Новость Зазеркалье ИТ-новость

Получить доступ к документации по технологической платформе 1С:Предприятие теперь можно бесплатно в рамках нового тарифа ИТС – «Разработчик 1С».

18.10.2021    3468    ЕленаЧерепнева    0       

Вышла новая редакция «1С:ERP Горнодобывающая промышленность 2.5»

Новость ИТ-новость

Вышел обновленный релиз отраслевого решения «Горнодобывающая промышленность» на базе «1С:ERP» редакции 2.5. Сообщается о новых возможностях, изменении состава лицензий и сроках поддержки 2.4.

15.10.2021    3974    ЕленаЧерепнева    0       

С 15 ноября экзамен «1С:Специалист-консультант» по производству и ремонтам в 1С:ERP будет приниматься на редакции 2.5

Новость ERP2 ИТ-новость

Фирма «1С» обновила условия сдачи и методичку для подготовки к экзамену «1С:Специалист-консультант» по внедрению подсистем «Управление производством и организация ремонтов». С 15 ноября экзамен будет приниматься на 1С:ERP редакции 2.5.

14.10.2021    3734    ЕленаЧерепнева    0       

Прямо из 1С: действующие сертификаты ЭЦП для 1С-Отчетности можно бесплатно продлить на 15 месяцев

Новость Сервисы

До 31 декабря 2021 года пользователи 1С-Отчетности могут продлить сертификат электронной подписи, не затрачивая время на посещение ФНС. Такая подпись будет действительна для сдачи отчетности по организации в течение последующих 15 месяцев.

13.10.2021    5192    ekandyba    0       

Infostart Toolkit 2.1: автокомплит по методам общих модулей и новые возможности редактора Monaco

Новость v8::Запросы v8::СКД Автоматизация Инфостарт Infostart Software Partners Маркет Программист Инструменты и обработки

Появилась возможность настроить внешний вид редактора Monaco, входящего в состав Infostart Toolkit. При работе с редактором кода 1С теперь выводится подсказка по методам из выгруженных модулей. А для редактора объекта сохраняется история выбора.

13.10.2021    3468    vikad    0       

Для пользователей 1С: видеокурс, который научит настраивать формы списков

Новость Обучение, бизнес-тренинг, курсы

Виталий Черненко в своем видеокурсе расскажет про все возможности работы с формами списка в 1С. Освоив эти приемы, вы изучите основы пользовательского интерфейса управляемых форм и сможете уверенно работать со списками в любой программе 1С.

13.10.2021    3946    mgrinchenko    8       

Собери команду на INFOSTART EVENT 2021 Moscow Premiere и получи билет бесплатно

Новость Инфостарт infostartevent Мероприятия

Меньше месяца осталось до старта INFOSTART EVENT 2021 Moscow Premiere. Мы решили подготовить специальное предложение для команд и предоставляем 25% скидку при оформлении заказа на 5 и более офлайн-билетов.

12.10.2021    17174    eselyanina    10       

Фирма «1С» выпустила сборник задач для подготовки к экзамену «1С:Специалист» по УНФ

Новость УНФ ИТ-новость

Сборник задач для подготовки к экзамену «1С:Специалист» по конфигурированию и внедрению прикладного решения «1С:Управление нашей фирмой» уже поступил в продажу.

12.10.2021    7343    ЕленаЧерепнева    0       

Куда сходить в Москве участнику, который приехал на Infostart Event на месяц раньше

Новость Инфостарт infostartevent Мероприятия

Для программиста 1С Ивана Молокотина Infostart Event начался раньше всех: он перепутал даты и приехал на конференцию 11 октября. Мы обсудили курьез с Иваном и составили маршрут экскурсии по Москве тех, кто окажется в столице заранее.

11.10.2021    16806    vikad    34       

Станьте удаленным менеджером по продажам и частью команды Инфостарт

Новость Инфостарт Сервисы

Удаленный менеджер по продажам – это наш партнер, который не только привлекает потенциальных клиентов, но и принимает участие в продажах.

11.10.2021    8170    ekandyba    0       

INFOSTART PARTY: место встречи Stand Up Club #1

Новость Инфостарт infostartevent Мероприятия

Традиционно первый день конференции завершает зажигательная вечеринка INFOSTART PARTY. Премьерная конференция не исключение – 11 ноября приглашаем всех на INFOSTART PARTY.

11.10.2021    26943    eselyanina    8       

Инфостарт запускает демо-площадку протестированных решений в рамках проекта «Маркетплейс»

Новость Инфостарт ИТ-новость

Пользователи портала Инфостарт смогут прямо со страницы публикации запустить демо-базу, куда загружен выбранный файл отчета/ обработки/печатной формы, и в реальных условиях протестировать его перед покупкой.

11.10.2021    9670    kuntashov    21       

Выпущен рабочий релиз 1С:ERP Управление предприятием 2.5.7

Новость ERP2 Конфигурация

В финальную версию 2.5.7 включили новые возможности в подсистеме «Производство», перенесли поддержку системы прослеживаемости импортных товаров и реализовали ряд других требований российского законодательства.

08.10.2021    28673    ЕленаЧерепнева    11       

Стань супергероем в команде SM Lab. Представляем афишу партнера конференции Sportmaster Lab

Новость Инфостарт infostartevent Мероприятия

Команда Инфостарт представила 10 афиш для каждой тематической секции. Но на этом наши премьеры не заканчиваются. Партнер конференции Sportmaster Lab представляет афишу в стиле фильма «Люди Икс».

07.10.2021    9333    eselyanina    0