КЛУБ СТОКОВЫХ ФОТОГРАФОВ, ИЛЛЮСТРАТОРОВ, ВИДЕОГРАФОВ и ИИ-ШНИКОВ

Против этого можно сделать элементарную защиту - если считанные вновь данные совпадают с предыдущими, то мы их игнорируем и не сохраняем. Можно, так же, сделать и более гибкую проверку - сравнивать не весь результат, а искать, скажем, 3 или 4 идущих подряд одинаковых запроса - это на случай, если за период обновления данных было слишком мало новых запросов и список обновился частично, что впрочем очень маловероятно...

Кроме того, при сборе данной статистики, мне кажется, не стоит особо париться, если какие-то запросы будут пропущены - гораздо "опаснее" если данные будут дублироваться. Поэтому, может, имеет смысл сделать более редкие запросы и добавить проверку на дубликат (как описано выше) - в этом случае мы за неделю или любой другой период накопим меньше данных, но со временем статистика всё равно обретёт репрезентативность.

В любом случае - предлагаю не зацикливаться на каком-то одном применении данных - мне кажется гораздо полезнее собрать массив данных, к-е можно будет потом анализировать и так и сяк...

А вот этим и отличается идея поиска слов "смежных" с основными словами указанными пользователем от обычных TOP-ов. Если вы не будете указывать основных слов соответствующей тематики, то скорее всего и в результатах они не будут преобладать (и уж практически точно не будут на топовых позициях по упоминаимости в словосочетаниях).

Учитывать продажи - было бы хорошо, но боюсь что ни один фотобанк не отдаёт статистики по связке поиск - покупка.

Кроме того, статистика продаж может сыграть и дурную шутку - если по большинству запросов были совершены покупки, значит что в фотобанке уже и так навалом хороших работ по данной тематике и не факт, что с ними будет легко конкурировать. А вот если после поиска покупки не было - кроме "дрочеров" и самих фотографов это ещё часто может говорить о том, что потенциальных покупатель просто не нашёл достойного изображения и пошёл искать elsewhere...




Это - да. Но изначально моя идея была в анализе спроса, а Вы уже говорите о сопоставлении спроса с предложением и анализом конкуренции, что уже следующий, гораздо более сложный этап. Давайте начнём с задачи-минимум



Мне лично кажется, что именно анализ словосочетаний - есть наиболее интересная часть данного проекта. Ибо по одному слову на любом стоке обычно вываливаются тысячи, если не десятки тысяч соответствий, но при увеличении количества слов в запросе, количество результатов уменьшается в геометрической прогрессии. Если мы сможем чаще попадать в результаты запросов по 3-4 словам - мне кажется это может существенно повысить продаваемость фото.




Главное, ИМХО, грамотно собрать информацию исходную (не затачивая её под конкретные нужды), а уж потом её можно будет резать и кроить как угодно.


Да, кстати, мне кажется даже наличие таких слов как girl, young, sexy, и т.д. в топах не является обязательно указанием на то, что их искали просто ради забавы. В наше время в сети столько гораздо более "легко доступных" ресурсов эротики и порно, причём совершенно бесплатных, что нет никакого резона лезть на фотостоки в поисках подобных фото и удовлетворяться на превьюшки. Разве что сами фотографы или покупатели, время от времени, хотят немного отвлечься от работы и немного поглазеть на "прекрасное". Но часто все же, ИМХО, по этим словам действительно ищатся изображения симпатичных и сексуальных для размещения их во всяких буклетах, каталогах и т.д. - ведь не секрет, что сексуальность - один из самых сильных рычагов притяжения внимания к рекламе, на которую порой иначе даже и не взглянешь

Полностью согласен с предыдущим оратором. Запустил загрузку базы. К сожалению страничка на Дримсе обновляется раз в 15 минут.

По поводу хостинга для скрипта - а что нельзя со своего компа запустить?
Мой комп выключается только для апгрейда , инет безлимитный

Хм, интересно. А с народом будете делиться или только для себя?

Вы только сбор данных реализовали или и обработку какую-нить?

Да мне не жалко , только в каком виде выдавать ? Обработки еще нет. Думаю. Мысль такая - взять из топов слова и на их основе построить гнезда. Для полного счастья хотелось бы и счетчик для каждого слова в гнезде. Но пока не придумал структуру такой базы. И еще вопрос где эти гнездовые слова брать ? У фотолии есть 150 тагов , но они там скрестили ужа с ежом, смешали запросы и описания . Можно и из Шаттера брать, в общем предлагайте ...

а у меня лимитный, причем быстрый, и жутко дорогой...
(первые 500 мб 16$ потом каждие 100 по 2$)

PS я так понял я не один пытаюсь чета написать?
если так, то хорошо... конкуренция всегда хорошо

а что если попробовать брать слова с дримса, потом брать слова из последних скачаных картинок с него же, потом сравнивать слова, и оставлять только те, которые упоминаются в обоих местах?

Выдавать предлагаю ввиде небольшой утилитки по работе с базой и периодически (напр.раз в неделю) выкладываемые обновления базы.

А что вы называете гнёздами?

Да хреново в городе Новополоцке
Да что там писать , накопление базы с датами полчаса работы , труднее всего себя заставить

Лично мне кажется, что всё же не стоит лимитировать статистику только тем, что искали и нашли и отбрасывать то, что искали, но не нашли подходящего...
Кроме того, уверен, что очень многие при поиске сначала отбирают несколько более-менее подходящих фотографий, а потом из них уже выбирают лучшие (возможно и с разных фотобанков). Иными словами, скачивание происходит (если вообще происходит) не сразу после запроса, а через какой-то промежуток времени.

Поэтому считаю, что лучше всё же мониторить просто спрос, а не спрос сиюминутно удовлетворённый конкретным фотобанком (вряд ли это частый случай...).

Да и потом, в конце концов какая разница какие слова были в скачанном изображении? Может в нём всего было несколько самых общих слов и оно просто удачно "подвернулось" в поиске. Или наоборот просто картинка очень хорошая и его выудили из дебрей глубоких страниц результатов поиска. Мне кажется, применяя такую логику мы не повышаем шансы подобрать наиболее востребованные ключевые слова, а наоборот даже понижаем.

Ведь, в конце концов, наша задача - заставить своё фото "проявиться" в как можно больших результатах поиска по теме и как можно ближе к началу, а уж потом это дело самого фото (его качества, сюжета и т.д.) продать себя...

А в каком формате база ? Можно , конечно, выдавать в тексте и а потом например в Эксель пихать. В принципе , можно раздать каждому такую утилитку , которая в конце каждого дня все результаты скидывала бы в файл . Или я могу куда-нить скидывать файлики.
А гнездо - топовое слово( woman, girl , business etc ) и к нему все слова , которые встречаются в сочетании с этим словом , хорошо бы с частотой .

не все так просто, даже если сохранять дату сеанса отдельно, то это будет отдельная колонка с кучей дат, а к словам, как ни крути, придется подписывать порядковые номера этих дат, но это не смертельно.

можно, но лично я не знаю как это сделать, точнее как сделать, что бы выкладывать каждый раз не всю базу, а тока новое.
Сервер и так используется и ему платят за хостинг, так что без разницы, скока "серверных мощьностей" будет исользоваться, этот параметр не лимитируется.
изначально это было основной задачей
чтобы потом не парится, надо в самом началепонять чего нам надо и разработать наиболее гибкую базу, причем так, что бы туда не попадали "лишнии" данные, хотя избыток информации лучше нехватки.

тогда надо просто при совпадении слов из картинки и поиск-ых запросов этим словам накидывать рейтинг,(причем отдельный по покупкам)
про словосочетания:
у вас желание видеть именно с какими словами употреьлялось данное слово(конкретные словосочетания) или достаточно сделать просто список слов за период времени?

и еще идейка, может из вывода результатов убирать топ-100 шатра(по желанию естественно), как мне кажется слова из топ-100 есть почти во всех картинках, и находятся картинки среди всего многообразия по другим словам, по более четким хар-кам?

на С++ я это так и сделал бы, причем было бы все равно, что и как, но с пхп не общался раньше, поэтому большую часть времени провожу за чтением, ведь везде есть свои особенности

а про и-нет, В нашей процветающей стране только в Минске есть конкуренция, а у нас, к примеру, 2мбит/с анлим стоит 500$, как говорится пользуйтесь на здоровье

Проще всего анализировать недельный топ на Шаттере и выцеплять слова из находящихся там картинок. Тем более , у меня такая прога есть , я по ней ключевые к своим картинкам подбираю . Но там одна проблема, разные результаты для вектора и фото.

Какая же это проблема? Наоборот -- это очень полезно.

Я вообще не понимаю, зачем стоки по умолчанию сваливают вектора и фотографии вперемешку. Мне трудно представить себе покупателя, которому все равно, что он найдет: вектор или фото.