Smart-Pages 4 (открыт для тестирования) - Страница 2

Арбайтен · 11.05.2010, 10:37

Синонимизация и марков это прошлый век и доры на них не живут.

zxy · 11.05.2010, 12:05

а на чем живут?

DenisDD · 29.05.2010, 15:23

насколько я понимаю, дорген не особо заморачивается с алгоритмом, в основе лежит микс предложений из рассказов,
есть предложения без изменений, есть с опечатками, слитное написание,
кейворд вставляется после знака препинания без заморочек с морфологией, после первой запятой в предложении к чему там такие системные требования не понятно

FLASH · 29.05.2010, 17:29

перемешка рулит это факт что бы там не пиздели =))))

Darth Wayer · 31.05.2010, 13:04

Цитата:

Сообщение от DenisDD Посмотреть сообщение

насколько я понимаю, дорген не особо заморачивается с алгоритмом, в основе лежит микс предложений из рассказов,
есть предложения без изменений, есть с опечатками, слитное написание,
кейворд вставляется после знака препинания без заморочек с морфологией, после первой запятой в предложении к чему там такие системные требования не понятно

Я так понял для синонимизации. Чёт руки не доходят его опробовать.

localhost · 31.05.2010, 14:34

вот допустим делается дорвей 100кб контента, 1000 кейвордов.
много ли надо памяти? не особо.
а если берется 3-5 мегов контента и 4-5 тысяч кейвордов? и особо замороченный шаблон с кучей макросов
и плюс предварительная синонимизация
не счита того, что в памяти надо хранить всю структуру линков сайта, кейворды, метаданные и кучу всего.
а если в очереди не один домен, а 5-6 штук и шаблонов больше одного?
сколько же тогда надо памяти, если учесть, что апач очень любит делать утечки памяти и раздувать пхпшные стеки до неприличия.
к примеру:
берем 1мегабайт текста, загружаем в массив по предложению на элемент.
по идее объем памяти будет мегабайт + сколько-то под служебные данные.
авотхуй, дорогие дети. занимаемая память будет раза в 3-4 больше.

это только так кажется что все просто.
на самом деле все куда сложнее, чем вообще кажется.

DenisDD · 31.05.2010, 19:53

localhost, по какому принципу внедряется кейворд в предложение?
учитывается ли морфологические особенности слов окружения?
актуален ли учет морфологии окружающих слов при внедрении кейворда в предложении, для яндекса?

localhost · 31.05.2010, 20:17

кейворд вставляется по простому алгоритму - высчитывается особым образом в куске текстового блока запятая , и после нее всталяется.
если запятой вдруг запятая не найдена, вставляется после пробела, начиная со 3-5 слова от начала поиска
если облом в попытке найти проблем, вставляется в первый же пробел

примерно так

localhost · 31.05.2010, 20:19

насчет актуальности морфологии (совместимости кейворда и окружающего текста) - это решается просто: парсится тематический текст.
только вот особого приоритета я не заметил

DenisDD · 01.06.2010, 11:48

Цитата:

Сообщение от localhost Посмотреть сообщение

берем 1мегабайт текста, загружаем в массив по предложению на элемент.
.

оптимизируйте алгортмы, моск та на что
а засунуть в массив, и рандомить, это моя бабушка может написать такое

11.05.2010, 10:37	#11
Арбайтен Бесмертный Регистрация: 04.07.2009 Сообщений: 3,269	Синонимизация и марков это прошлый век и доры на них не живут. __________________ Мой блог - палим темы тоннами

29.05.2010, 15:23	#13
DenisDD Нуб Регистрация: 28.04.2010 Сообщений: 17	насколько я понимаю, дорген не особо заморачивается с алгоритмом, в основе лежит микс предложений из рассказов, есть предложения без изменений, есть с опечатками, слитное написание, кейворд вставляется после знака препинания без заморочек с морфологией, после первой запятой в предложении к чему там такие системные требования не понятно Последний раз редактировалось DenisDD; 29.05.2010 в 15:25.

11.05.2010, 12:05	#12
zxy Полудорвейщик Регистрация: 15.12.2009 Сообщений: 29	а на чем живут?

29.05.2010, 17:29	#14
FLASH Banned Дорвейщик Регистрация: 12.11.2009 Сообщений: 296	перемешка рулит это факт что бы там не пиздели =))))

31.05.2010, 14:34	#16
localhost Полудорвейщик Регистрация: 07.10.2009 Сообщений: 21	вот допустим делается дорвей 100кб контента, 1000 кейвордов. много ли надо памяти? не особо. а если берется 3-5 мегов контента и 4-5 тысяч кейвордов? и особо замороченный шаблон с кучей макросов и плюс предварительная синонимизация не счита того, что в памяти надо хранить всю структуру линков сайта, кейворды, метаданные и кучу всего. а если в очереди не один домен, а 5-6 штук и шаблонов больше одного? сколько же тогда надо памяти, если учесть, что апач очень любит делать утечки памяти и раздувать пхпшные стеки до неприличия. к примеру: берем 1мегабайт текста, загружаем в массив по предложению на элемент. по идее объем памяти будет мегабайт + сколько-то под служебные данные. авотхуй, дорогие дети. занимаемая память будет раза в 3-4 больше. это только так кажется что все просто. на самом деле все куда сложнее, чем вообще кажется.

31.05.2010, 19:53	#17
DenisDD Нуб Регистрация: 28.04.2010 Сообщений: 17	localhost, по какому принципу внедряется кейворд в предложение? учитывается ли морфологические особенности слов окружения? актуален ли учет морфологии окружающих слов при внедрении кейворда в предложении, для яндекса?

31.05.2010, 20:17	#18
localhost Полудорвейщик Регистрация: 07.10.2009 Сообщений: 21	кейворд вставляется по простому алгоритму - высчитывается особым образом в куске текстового блока запятая , и после нее всталяется. если запятой вдруг запятая не найдена, вставляется после пробела, начиная со 3-5 слова от начала поиска если облом в попытке найти проблем, вставляется в первый же пробел примерно так

31.05.2010, 20:19	#19
localhost Полудорвейщик Регистрация: 07.10.2009 Сообщений: 21	насчет актуальности морфологии (совместимости кейворда и окружающего текста) - это решается просто: парсится тематический текст. только вот особого приоритета я не заметил

Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)

Опции темы
Версия для печати Отправить по электронной почте