Сегодня обнаружилось, что в некоторых случаях после ввода лицензии программа ( версия 0.2а2 ) так и оставалась в демонстрационном режиме. Чтобы этого не происходило, вам нужно выполнить следующие действия:
Сегодня на нулледе я написал один пост, который понравился даже мне самому: емко, обстоятельно и почти без воды. Поэтому я решил привести его здесь, дабы не писать все это еще раз. Итак, вот он:
По поводу скорости работы: программа работает достаточно быстро - 30 слов в секунду с учетом того, что программа разбирает морфологию и приводит все синонимы в соответствие с родом, падежом и другими характеристиками исходного слова - это хороший показатель. Не думаю, что у вас стоит очередь из тысячи сайтов, на которые надо залить по тысяче страниц, каждая по тысяче слов. Кстати, только что подсчитал: если вы будете обрабатывать такое количество неповторяющихся слов (миллиард), то программе потребуется год непрерывной работы. Но на самом деле это не так. Долго обрабатывается только первое вхождение слова в массив текста. Это заметно уже по тому, что если обработать тот же текст еще раз, то программе требуется в 10-20 раз меньше времени на его обработку. К примеру, первая обработка текста из 282 неповторяющихся слов заняла 4.4 секунды, а повторная обработка этого же текста аж 0.43 секунды. В общем, кеш рулит однозначно! Кстати, в настоящий момент программа обрабатывает 60-80 неповторяющихся слов в секунду в зависимости от количества синонимов в системном словаре для каждого из обрабатываемых слов. А так как количество используемых слов в нашей речи не превышает 20 тысяч, то скорость обработки текстов будет возрастать по мере того, как вы будете их обрабатывать. В общем, что при удачном раскладе миллиард слов вы сможете получить не через год, а уже через 4-6 недель.
Continue reading »
Загрузка ...
Последние комментарии