| Правила | Регистрация | Пользователи | Сообщения за день |  Справка по форуму | Файлообменник |

Вернуться   Форум DWG.RU > Программное обеспечение > Прочее. Программное обеспечение > Программно-информационный комплекс Архивариус. Обсуждение программы и предложения по улучшению

Программно-информационный комплекс Архивариус. Обсуждение программы и предложения по улучшению

Закрытая тема
Поиск в этой теме
Непрочитано 25.09.2013, 10:26 #1
Программно-информационный комплекс Архивариус. Обсуждение программы и предложения по улучшению
leprecon
 
Регистрация: 03.02.2009
Сообщений: 42

Программно-информационный комплекс «Архивариус» представляет собой решение для эффективной структуризации электронной литературы и организации полнотекстового поиска внутри электронной библиотеки.

Программа позволяет структурировать электронную литературу, добавить описание к каждой единице в созданной базе данных, по которому впоследствии легко можно найти необходимую книгу (серию, ГОСТ, расчет) поисковыми инструментами программы.

В программе предусмотрена возможность добавлять наиболее часто используемые документы в избранное, что делает доступ к документам более быстрым и удобным.

На данный момент база данных насчитывает порядка 5000 ед. документов (типовые серии, строительная литература, нормативные документы и т.д.)

Файлы документов в архив программного комплекса не входят, но в программу встроена возможность скачать отсутствующий файл онлайн и связать его с локальной базой комплекса буквально в два клика мыши. Как правило первый найденный документ соответствует документу в локальной базе комплекса.

Более подробное описание можно посмотреть по ссылке

Скачать программу можно по этой ссылке

Так как программа находится в стадии тестирования предлагаю в этой ветке высказывать свои пожелания, замечания и т.д.
Нужен вектор дальнейшего развития и конкретные предложения по улучшению программы

Последний раз редактировалось leprecon, 25.09.2013 в 10:33.
Просмотров: 17269
 
Непрочитано 25.09.2013, 11:37
#2
Кочетков Андрей

Java/Kotlin backend
 
Регистрация: 03.02.2006
Сообщений: 5,740


Для начала благодарю за интересную программу.
Теперь по предложениям:
предлагаю не ограничиваться загрузкой литературы только с сайта Зодчий.
Например к программе можно будет подключать дополнительные модули для поиска и скачивания с других библиотек.
Модули будут писаться другими пользователями в зависимости от движка конкретного сайта и в соответствии с синтаксисом, установленным вами.
Кочетков Андрей вне форума  
 
Автор темы   Непрочитано 25.09.2013, 11:59
#3
leprecon


 
Регистрация: 03.02.2009
Сообщений: 42


Цитата:
Сообщение от Кочетков Андрей Посмотреть сообщение
Для начала благодарю за интересную программу.
Теперь по предложениям:
предлагаю не ограничиваться загрузкой литературы только с сайта Зодчий.
Например к программе можно будет подключать дополнительные модули для поиска и скачивания с других библиотек.
Модули будут писаться другими пользователями в зависимости от движка конкретного сайта и в соответствии с синтаксисом, установленным вами.
Вопрос интересный - нужно прорабатывать. На данный момент реализована возможность пополнения базы с сайта Зодчий и вручную. Если программа видит, что конкретной единице в базе соответствует конкретный документ (например добавленный вручную) программа этот документ откроет. Если файл отсутствует - посылается поисковый запрос на сайт и программа выдаст в результатах поиска контент с сайта, наиболее соответствующий поисковому запросу. Пока этот сайт только один. Как привязать другие ресурсы - нужно думать...
leprecon вне форума  
 
Непрочитано 25.09.2013, 12:22
#4
Pavel_V

Снова в деле
 
Регистрация: 22.10.2010
Челябинск
Сообщений: 7,840


dnl.dwg.ru
Сайт минрегионразвития.
еще надо добавить что-нибудь полезное.
Pavel_V вне форума  
 
Автор темы   Непрочитано 25.09.2013, 12:39
#5
leprecon


 
Регистрация: 03.02.2009
Сообщений: 42


Цитата:
Сообщение от Pavel_V Посмотреть сообщение
dnl.dwg.ru
Сайт минрегионразвития.
еще надо добавить что-нибудь полезное.
Основная особенность программы состоит в возможности полнотекстового поиска по всей базе данных. Дистрибутив недаром весит почти 300 мб - в базу зашит текст всех документов, которые в ней хранятся (кроме типовых серий). Т.е. в программе есть возможность поиска конкретной фразы по 3000+ документов. Например по поисковому запросу "трехшарнирная арка" с функцией поиска "в тексте документа" программа выдаст 12 книг, в тексте которых эта фраза точно присутствует. Далее открываем нужный документ и ищем эту же фразу только в тексте документа (в каждой книге формата djvu есть текстовая подложка - OCR-слой). Таким образом поиск нужной фразы занимает 1-2 минуты. Для этого программа и создавалась.
Привязать другие ресурсы, конечно, возможно, но поиск на других ресурсах будет только по названию, а это существенно ограничивает функционал.
leprecon вне форума  
 
Непрочитано 25.09.2013, 12:48
#6
Engineer SV

инженер-конструктор
 
Регистрация: 16.10.2007
С-Пб
Сообщений: 673


Цитата:
Сообщение от leprecon Посмотреть сообщение
Так как программа находится в стадии тестирования предлагаю в этой ветке высказывать свои пожелания, замечания и т.д.
Добрый день! Может я не совсем разобрался.Но в архивариусе в базе нет файлов. Предлагаемая возможность в два клика скачать с Зодчего.ru непосредственно из Архивариуса не увенчалась успехом.
Скачивать получается только обычным путем,зайдя на сайт,как и раньше.Проясните,пожалуйста,в каком случае появляется список документов в Архивариусе,которые можно напрямую из проги скачать и пополнить базу. Или Архивариус, это просто перечень имеющихся документов?
Но 256 Мб в заархивированном виде только для перечня-многовато).

Последний раз редактировалось Engineer SV, 25.09.2013 в 13:10.
Engineer SV вне форума  
 
Непрочитано 25.09.2013, 12:58
#7
Pavel_V

Снова в деле
 
Регистрация: 22.10.2010
Челябинск
Сообщений: 7,840


Я тоже не смог загрузить найденный снип. Скачивать программа отказалась. Вин 7/64.
Pavel_V вне форума  
 
Автор темы   Непрочитано 25.09.2013, 13:04
#8
leprecon


 
Регистрация: 03.02.2009
Сообщений: 42


Цитата:
Сообщение от Pavel_V Посмотреть сообщение
Я тоже не смог загрузить найденный снип. Скачивать программа отказалась. Вин 7/64.
Напишите наименование документов - буду проверять.

Цитата:
Но 256 Мб в заархивированном виде только для перечня-многовато).
В том то и дело, что не просто список файлов, а полные тексты всех нормативных документов и книг

Последний раз редактировалось leprecon, 25.09.2013 в 13:17.
leprecon вне форума  
 
Непрочитано 25.09.2013, 14:24
#9
Pavel_V

Снова в деле
 
Регистрация: 22.10.2010
Челябинск
Сообщений: 7,840


Цитата:
Сообщение от leprecon Посмотреть сообщение
Напишите наименование документов - буду проверять.
Ни один документ не загружается. СНиП общественные здания и сооружения например от 89 года.
Выскакивает табличка с пустым полем, видимо там должно быть имя документа. И все.
Pavel_V вне форума  
 
Непрочитано 25.09.2013, 14:47
#10
zodchiiws

программист
 
Регистрация: 25.09.2013
Сообщений: 10


Цитата:
Сообщение от Pavel_V Посмотреть сообщение
Ни один документ не загружается. СНиП общественные здания и сооружения например от 89 года.
Выскакивает табличка с пустым полем, видимо там должно быть имя документа. И все.
Возможно на машине установлен антивирус либо файрвол, который рубит запрос к сайту zodchii.ws на поиск документов.
zodchiiws вне форума  
 
Непрочитано 25.09.2013, 15:12
#11
Engineer SV

инженер-конструктор
 
Регистрация: 16.10.2007
С-Пб
Сообщений: 673


Цитата:
Сообщение от Pavel_V Посмотреть сообщение
Ни один документ не загружается. СНиП общественные здания и сооружения например от 89 года.
Выскакивает табличка с пустым полем, видимо там должно быть имя документа. И все.
Та же ситуация. Интересно так у всех?

Цитата:
Сообщение от zodchiiws Посмотреть сообщение
Возможно на машине установлен антивирус либо файрвол, который рубит запрос к сайту zodchii.ws на поиск документов.
Если простым путем,без Архивариуса,попасть на сайт, то без проблем. Антивирус-Касперского. Стандартный.
Engineer SV вне форума  
 
Автор темы   Непрочитано 25.09.2013, 15:20
#12
leprecon


 
Регистрация: 03.02.2009
Сообщений: 42


Странно, вроде проверяли на 4 машинах (xp, win7-32bit, win7-64bit) - все работало. Может действительно попробовать отключить антивирь/фаервол и проверить?
leprecon вне форума  
 
Непрочитано 25.09.2013, 15:28
#13
LynxM


 
Регистрация: 17.08.2010
Kyiv
Сообщений: 688
<phrase 1= Отправить сообщение для LynxM с помощью Skype™


Жаль ДБН'ов нету
__________________
Лучше не обещать, чем обещать и не исполнять.
LynxM вне форума  
 
Непрочитано 25.09.2013, 15:31
#14
Engineer SV

инженер-конструктор
 
Регистрация: 16.10.2007
С-Пб
Сообщений: 673


Цитата:
Сообщение от leprecon Посмотреть сообщение
все работало. Может действительно попробовать отключить антивирь/фаервол и проверить?
Отключал антивирусник,результат тот же. Документы Архивариус не открывает.Окно там пустое. Все-таки интересно, чем заполнены 256 мб в закаченном файле?
Engineer SV вне форума  
 
Непрочитано 25.09.2013, 15:43
#15
zodchiiws

программист
 
Регистрация: 25.09.2013
Сообщений: 10


Цитата:
Сообщение от Engineer SV Посмотреть сообщение
Все-таки интересно, чем заполнены 256 мб в закаченном файле
256 мб - это сжатый индекс mysql для полнотекстового поиска, то есть в дистрибутиве находятся тексты примерно 3000 книг для индекса, с помощью которого возможно производить поиск по тексту djvu документа с ocr-слоем

Попробую объяснить как это и зачем сделана такая сложная схема со скачиванием документа с сайта. Как я уже сказал выше, для полнотекстового поиска необходим индекс, грубо говоря ключевые слова, по которым происходит поиск внутри текста. Для 3000 документов - это порядка 1.5 Гб занимает только индекс, сами же документы в общем весят около 15 Гб. Распространять дистрибутив в 16Гб накладно, да и мало кому нужны вот прямо все документы из базы. Поэтому было принято решение отделить собственно программу от файлов документов и распространять их по-отдельности. Вот в сжатом виде дистрибутив и получился около 280 Мб со всей базой, но без файлов.

Встроенный даунлоадер написан для удобства, чтобы не нужно было постоянно прыгать на сайт для скачивания отсутствующего файла документа. В программе формируется поисковый запрос и отправляется по специальному адресу на сервер zodchii.ws. Фразой для поиска является заголовок документа. В ответ приходят результаты поиска в специальном формате, они и отображаются в форме. Таким образом, если форма показывается пустая, то либо ничего не нашлось, либо ответ не получен, либо запрос просто не был отправлен. Отсюда и рекомендации посмотреть в сторону антивирусов/файрволов, которые очень любят перехватывать трафик и анализировать на предмет зловредности.

Последний раз редактировалось zodchiiws, 25.09.2013 в 16:09.
zodchiiws вне форума  
 
Непрочитано 25.09.2013, 16:44
#16
Кочетков Андрей

Java/Kotlin backend
 
Регистрация: 03.02.2006
Сообщений: 5,740


А обновление базы как планируется?
Кочетков Андрей вне форума  
 
Непрочитано 25.09.2013, 17:01
#17
zodchiiws

программист
 
Регистрация: 25.09.2013
Сообщений: 10


Цитата:
Сообщение от Кочетков Андрей Посмотреть сообщение
А обновление базы как планируется?
Обновления планируются. Нужно будет обновить исполняемый файл комплекса. Обновление будет реализовано прямо через интерфейс программы. Схема придумана, нужно немного времени на реализацию, но такой функционал точно будет.
zodchiiws вне форума  
 
Непрочитано 25.09.2013, 17:27
#18
Кочетков Андрей

Java/Kotlin backend
 
Регистрация: 03.02.2006
Сообщений: 5,740


Цитата:
Сообщение от leprecon Посмотреть сообщение
Пока этот сайт только один. Как привязать другие ресурсы - нужно думать...
Как направление для поиска могу предложить познакомиться с проектом JDownloader.
Кочетков Андрей вне форума  
 
Непрочитано 25.09.2013, 17:53
#19
tankist

ЭПБ, обследование стр. конструкций
 
Регистрация: 09.10.2009
Сибирь
Сообщений: 2,615


Цитата:
Сообщение от Engineer SV Посмотреть сообщение
Отключал антивирусник,результат тот же. Документы Архивариус не открывает.Окно там пустое
При работающем KIS 2012 документов 10 загрузил, посмотрел. Проблем нет. (ХР).
tankist вне форума  
 
Непрочитано 25.09.2013, 18:19
#20
forzik

Инженер-конструктор
 
Регистрация: 13.10.2012
КК
Сообщений: 16
Отправить сообщение для forzik с помощью Skype™


Получается, при поисковом запросе выдается несколько книг - чтобы их поочередно посмотреть надо поочередно скачать, так? На работе далеко не идеальный интернет да и ограничение по трафику - отсюда вопрос нет ли возможности скачать книги не по одной (на сайте не нашел), а по разделам, например, как они представлены в навигаторе(например дома скачать нужные разделы, а потом на работе скопировать)?
__________________
Не усматривайте злого умысла в том, что вполне объяснимо глупостью.
forzik вне форума  
Закрытая тема
Вернуться   Форум DWG.RU > Программное обеспечение > Прочее. Программное обеспечение > Программно-информационный комплекс Архивариус. Обсуждение программы и предложения по улучшению

Размещение рекламы