Alex Kapranoff » from archive
Архивтим качает Френдфид для того, чтобы его было видно на http://web.archive.org ‎- Alex Kapranoff
1) всё они не выкачают, поскольку поздно начали, не используют API, уже упёрлись в лимиты; 2) возможно их усилия могут влиять на производительность и стабильность в последние дни. ‎- Alex Kapranoff
а где-то есть описание того, что они делают с френдфидом? мне кажется, миллион профилей слитый через API мог бы им пригодиться. ‎- courant
чуваки в риалтайме пишут ещё один архиватор френдфида! :) ‎- Alex Kapranoff
@courant как работает АрхивТим чуть-чуть расскажу. есть проект "ФрендФид". в его рамках есть несколько фаз, самые основные: discovery и grab. Сейчас идёт фаза discovery. В её рамках вот этот код: https://github.com/ArchiveTeam/friendfeed-discovery собирает список аккаунтов. Скачивает из центра имя юзера, запрашивает его подписки и подписчиков, отправляет обратно. ‎- Alex Kapranoff
инфраструктура распределения задач по многим клиентам у АрхивТим общая есть, на её основе например вот этот трекер показывает результаты фазы discovery: http://tracker.archiveteam.org/friendfeeddisco/ ‎- Alex Kapranoff
как запихнуть в трекер ещё пачку аккаунтов со стороны, я не знаю, а чуваки в IRC не колются. ‎- Alex Kapranoff
фаза grab -- скачивание самих страничек без всякого API для размещения на web.archive.org видимо сегодня ближе к вечеру начнётся. ‎- Alex Kapranoff
надеюсь, что френдфидик они не завалят ‎- artreal
grab начался, в нем можно поучаствовать: https://github.com/ArchiveTeam/friendfeed-grab ‎- courant
френдфидик ощутимо подтормаживает :( ‎- artreal

2015-2016 Mokum.place