Deep web очень огромен, поисковики поэтому и не хотят туда проникать, потому что если доберутся до него, вряд ли справятся с объемом индексации.

Открытый Р?нтернет будет расти такими темпами, Р·Р° которыми РјР°С?инные ресурсы РЅРµ угонятся. Р’ конце концов, придется удалять РёР· индекса документы старее, например, полугода или даже месяца. Будет развиваться собственный РїРѕРёСЃРє РЅР° порталах РІ РёС… архивах. Также будет развиваться локальный РїРѕРёСЃРє РЅР° компьютере пользователя – desktop search, который будет строить индивидуальные архивы документов для конкретного пользователя.

А глобальные поисковые системы будут еле-еле поспевать за индексацией появляющихся страниц на блогах, тредов на форумах и разделов на вики-подобных сервисах.

Кстати, очень часто думаю, что Яндексу как раз РЅРµ хватает desktop search приблуды. Р’РѕС‚ такую С?туку СЏ Р±С‹ точно поставил себе РЅР° РєРѕРјРї – очень СѓРґРѕР±РЅРѕ. Р? жду – РЅРµ дождусь персонального РїРѕРёСЃРєР° РІ Яндексе. Думается, что уже потихоньку начинает проявляться.