обсуждение машины времени

DlTA, так я и отвечаю по существу, вроде. Пункт 0 никоим образом не отменяет userscript и прочие плагины к браузеру.
Благо и определяется этот способ просто, по схождению $_SERVER["HTTP_HOST"] и хоста в конфиге.


Хороший вопрос. По крайней мере сперва - да, будет сохраняться.

-----
PostgreSQL DBA

Проект классный в плане юзабилити, он реально нужен. Только PHP тут будет мало. больше JS.
Даже не Js а userscript

(Отредактировано автором: 05 Декабря, 2011 - 13:57:22)

tuareg, для обычной, публично-доступной статьи:
страница сохраняется и генерируется единственный публично-доступный url на эту страницу и в это время. Страница и в оригинале была же доступна по единственному урле всем желающим.

Проблемы начинаются, если текст доступен только после регистрации - вот в этом случае только появляется необходимость явно разграничивать права. На странице ведь может быть какая-нибудь приватная информация и решение, должна ли быть эта страница публично доступной - ложится на пользователя.

-----
PostgreSQL DBA

Мысль: нам важен не функционал страницы, а то как она выглядит. Тогда получается нужен юзер-скрипт который потрошит ДОМ и генерит чистеньких хтмл.

А зачем его много? В конце концов, проект учебный и это было одно из моих собственных пожеланий - чтобы код можно было охватить взглядом.

-----
PostgreSQL DBA

А в чем проблема? Каждый сохраняющий страницу пользователь решает какой доступ она имеет. И как бы все. Если я зашел на страницу и не имею к ней доступа 404 ...
Хотя тут нужно продумать "ситуевину" чтобы авторизация включалась при запуске браузера
Поясню.
Я Пупкин (простите это с армии там все Пупкины и т.д ) зарегистрирован на сайте+включено приложение друг прислал URL страницы я на нее кликаю. И вот тут-то и надо чтобы если я приложение включено оно тоже отправляло куки(или что-то другое) чтобы я уже был авторизирован на сайте(сервис), что я имею допуск смотреть эту страницу. Иначе получится, что меня выкинут на страницу авторизации и уже только потом по ссылке, это не есть GOOD

Самогонщик, если есть знания юзер-скриптов (или желание в них разобраться) - милости просим, аргументация зачем и кому нужен API готова
К тому же, со стороны браузера будет сильно удобнее забирать закрытые страницы.
(Добавление)
tuareg, проблема в том, чтобы сделать непосредственно копию этой страницы.

-----
PostgreSQL DBA

Я ни разу не сталкивался с такой задачей. Поэтому глупые вопросы
Всю страницу считываем.
ищем css и js считываем их тоже и сохраняем.
Это только теоритически. Ты сталкивался с такой задачей?? В чем проблема?

tuareg, чтобы скачать страницу, доступную только авторизованным пользователям, надо авторизоваться. А краулер-то на сервере, откуда ему взять данные для авторизации? И ведь универсальный механизм авторизации написать не получится. А если получится - за нами приедет гугл.

-----
PostgreSQL DBA

Может еще раз, я наверное вообще дурак.
Итак
Я зарегистрирован на сайте А.
Я прочитал интересную статью.(url='A/page1'), причем эта статья была только для авторизированных пользователей
Решил сохранить копию статьи с этого сайта.
Я ее сохранил.
Но на сервере(нашем) я ее сохранил как отдельную страницу, не имеющую отношение к странице оригинала(url='nashSite1/user/pgde/№')
И дальше я дал ссылку на мою сохраненную страницу, т.е не на 'A/page1', а на 'nashSite1/user/pgde/№'
В чем проблема?

сохранение текста приемлемо
а что делать с изображениями (вопрос не в том как их скачать а в том где их хранить, они ведь весят)

Вот здесь и проблема. Штатный краулер-то на PHP и ему с сервера недоступна страница, пока он сам не авторизуется.
Решать, похоже, придётся методом userscript. Что это такое и на сколько задача решаема этим методом - не в курсе


Ну не сказал бы, что прям весят. HDD всё равно дешёвые, а процессорная мощь здесь не нужна.
+ всё равно будет делаться дедубликация хотя бы по URL + sha1

Одну копию в любом случае размещу у себя, сотню-другую гб под эту задачу выделить не проблема.

-----
PostgreSQL DBA

для не просветленных, что это?

DlTA, ммм, да. Перефразирую:


userscript тут может быть только опцией, должен быть в коробке свой робот, который будет обходить обычные задачи, публично-доступные ссылки.

-----
PostgreSQL DBA

Я так мыслю что придется сохранить именно всю страницу, т.е выкачать все полностью и <img>, js, css по любому это так.
Просто я хочу объяснить логику(после 2-литров пива она прям и лезет)
При сохранении страницы, ее нужно просто сохранять, т.е записывать на сервер все от картинок и заканчивая js
(Добавление)

Все наоборот