Аггрегатор форумов (тема отделена)

[Larin]

Сообщение от El Karabaso

Будет нужна помощь - вэлкам! PERL/PHP/DHTML/MySQL/JavaScript/Linux - ну и т.д.

мысль возникла. А сможешь сделать порталчик, объединяющий все эквадорские и окрестные форумы? Чтоб залогинился, и сразу видишь все непрочитанные сообщения, поиск общий и т.п.

[Пилигрим]

Сообщение от Larin

мысль возникла. А сможешь сделать порталчик, объединяющий все эквадорские и окрестные форумы? Чтоб залогинился, и сразу видишь все непрочитанные сообщения, поиск общий и т.п.

Мне мысль нравится - удобно. Согласятся ли админы?

[Andrew]

Сообщение от Пилигрим

Мне мысль нравится - удобно. Согласятся ли админы?

А кто их спрашивать будет, если забирать RSS?

[El Karabaso]

Сообщение от Larin

мысль возникла. А сможешь сделать порталчик, объединяющий все эквадорские и окрестные форумы? Чтоб залогинился, и сразу видишь все непрочитанные сообщения, поиск общий и т.п.

Эт можно, несколько моментов:
1. Хостинг на линуксе (и чтоб ssh/bash/perl/mysql/php/apache были), ибо частый скан породит траф
Хм, вроде пока навскидку, все... а так, не вопрос в общем. Остальное может по ходу возникнуть.
ЗЫ: Пока буду на своем серваке вас всех мучить

Добавлено через 1 минуту

Сообщение от Andrew

А кто их спрашивать будет, если забирать RSS?

Надо чтоб у них этот RSS был, в принципе.
Блин! Никаких сил не хватает, три патча ядра за день.... Блин!

[Larin]

Сообщение от El Karabaso

Надо чтоб у них этот RSS был, в принципе.
Блин! Никаких сил не хватает, три патча ядра за день.... Блин!

да и без рсс, заводишь по пользователю и раз в 10 минут вытаскиваешь все новые сообщения. или только заголовки.
Адимины против быть не должны, наоборот, просто обязаны радостно вывесить ссылки на

[El Karabaso]

Сообщение от Larin

да и без рсс, заводишь по пользователю и раз в 10 минут вытаскиваешь все новые сообщения. или только заголовки.
Адимины против быть не должны, наоборот, просто обязаны радостно вывесить ссылки на

Ларин! Я конечно слабаю эту штуку, только мне сдается это ты решил меня на состоятельность проверить. У админов, оплата по исходящему трафику, как я полагаю, так что не вижу причины для радости,.... вот.

[Пилигрим]

Сообщение от Andrew

А кто их спрашивать будет, если забирать RSS?

Извиняйте чайника - думал не возможно это без разрешения сделать

[Larin]

Сообщение от El Karabaso

Ларин! Я конечно слабаю эту штуку, только мне сдается это ты решил меня на состоятельность проверить. У админов, оплата по исходящему трафику, как я полагаю, так что не вижу причины для радости,.... вот.

Да что ты, никого я проверять не собирался. Экий я страшный, оказывается. Мне просто казалось, что участие в таком ресурсе - способ поднять посещаемость. Мне непонятен админ публичного сайта, который борется с лишними посетителями во имя экономии траффика.
Тем более, сколько там того траффика - это ж не фотки с музыкой, несколько строк текста, единицы килобайт за раз, сотни - в день. Никогда не слышал, чтоб достойный упоминания траффик измерялся в килобайтах. Все больше в гига- на малонагруженных сайтах, и в терра- - на серьезных.
К тому же, эта система должна приводить в итоге к экономии траффика
Правду говоря, о траффике я думал меньше всего. А больше обо всяких удобных фишках, типа извещениях о новых темах, просмотра в одном месте, кто где в онлайн, метафорума, а лучше чата, для обсуждения и сравнения всех форумув, и т.п., по поводу которых проще пинать одного тебя, чем всех владельцев форумов. Если действительно найдешь время и силы это все ваять, накидаю мыслей, может, что и пригодится.

[Andrew]

Сообщение от Larin

Мне непонятен админ публичного сайта, который борется с лишними посетителями во имя экономии траффика.

Как-то и в голову не приходило. Единственная проблема - отток уникальных хостов со счётчика, но меня и он не беспокоит, поскольку я никогда не рекламировал сайт и даже ссылками не менялся принципиально.

Главная беда - лень посетителей. Если всё будет собираться на одной полке без возможности с этой же полки и постить ответы, общение постепенно сдохнет. Все будут читать, и только два-три человека дадут себе труд зайти на форум и написать. А вот научить аггрегатор постить в три разных форума - дело уже нетривиальное.

[Larin]

Сообщение от Andrew

Главная беда - лень посетителей. Если всё будет собираться на одной полке без возможности с этой же полки и постить ответы, общение постепенно сдохнет. Все будут читать, и только два-три человека дадут себе труд зайти на форум и написать.

Значит, придется автоматизировать. Кнопочка Ответить, по ней автоматом логиниться и открывать соответствующую форму на нужном форуме.

Сообщение от Andrew

А вот научить аггрегатор постить в три разных форума - дело уже нетривиальное.

А кому счас легко.
Вроде, уже 5. А дальше еще веселее будет.
В целом согласен, идея не столь очевидна, надо еще продумывать детали.
Но раз уж есть энтузиаст, знающий столько всяких слов (PERL/PHP/DHTML/MySQL/JavaScript/Linux), грех не воспользоваться. Или хоть пообсуждать.

[El Karabaso]

Сообщение от Larin

Значит, придется автоматизировать. Кнопочка Ответить, по ней автоматом логиниться и открывать соответствующую форму на нужном форуме.

А кому счас легко.
Вроде, уже 5. А дальше еще веселее будет.
В целом согласен, идея не столь очевидна, надо еще продумывать детали.
Но раз уж есть энтузиаст, знающий столько всяких слов (PERL/PHP/DHTML/MySQL/JavaScript/Linux), грех не воспользоваться. Или хоть пообсуждать.

Вот уже прояснется кртина, пока я продумал как это забирать и показать, теперь надо думать как это отдать. А ты тоже юморист, Ларин! Это как в анекдоте да? "А я знаю карате, дзюдо, самбо и еще много других страшных слов"

Добавлено через 3 минуты

Сообщение от Andrew

А вот научить аггрегатор постить в три разных форума - дело уже нетривиальное.

На некоторые форумы не залогиниться, и следовательно запостить не получится, ибо стоит плагин защиты от ботов. Или он только на регистрацию?

[Andrew]

Сообщение от El Karabaso

На некоторые форумы не залогиниться, и следовательно запостить не получится, ибо стоит плагин защиты от ботов. Или он только на регистрацию?

Только на регистрацию. Но было бы неплохо и на аггрегаторе иметь защиту от ботов, иначе форумы загадят мгновенно.

[El Karabaso]

Сообщение от Andrew

Только на регистрацию. Но было бы неплохо и на аггрегаторе иметь защиту от ботов, иначе форумы загадят мгновенно.

Угу, это не проблема, я уже такую штуку писал на php.

Добавлено через 6 часов 32 минуты

Сообщение от El Karabaso

Угу, это не проблема, я уже такую штуку писал на php.

В общем парсер на этот движок слабал, фантастику не включил. Или надо?

[RED]

Ох и мудреными же словами изьясняетесь граждане
Когда эту штуковину посмотреть можно будет?
И где?

[Andrew]

Сообщение от El Karabaso

В общем парсер на этот движок слабал, фантастику не включил. Или надо?

Правильно, не нужно. Фантастика - отдельный раздел, к Эквадору не относится.

[El Karabaso]

Сообщение от RED

Ох и мудреными же словами изьясняетесь граждане
Когда эту штуковину посмотреть можно будет?
И где?

Пока смотреть не на что, могу тебе текстовый файл выложить с разобранной страницей. Насчет где, тоже пока вопрос.

[Larin]

Сообщение от El Karabaso

Насчет где, тоже пока вопрос.

если хочешь, могу выделить место. но без ssh. остальное, вроде, есть.

[El Karabaso]

В общем пока имеем материал в таком виде:
index
Topic: Разговоры об Эквадоре forumdisplay.php?f=7
Comment: Всё об Эквадоре. Темы, не связанные с иммиграцией, объявления от администрации и другая информация.
Subtopic: Mindo
From: Настоящий Индеец
Date: D:20 M:04 Y:2006 h:23 m:43
Topics: 711
Messages: 9,268
Topic: Иммиграция forumdisplay.php?f=8
Comment: Информация об иммиграции в Эквадор.
Subtopic: Страждущим о визах.
From: Dmitry
Date: D:21 M:04 Y:2006 h:02 m:22
Topics: 154
Messages: 3,519
Topic: Курилка forumdisplay.php?f=12
Comment: Просто место для общения. Можно болтать обо всём, общаться на любые темы. Создано для того, чтобы не засорять основные разделы.
Subtopic: С днем рождения!
From: Andrew
Date: D:21 M:04 Y:2006 h:02 m:57
Topics: 178
Messages: 3,401
Topic: Доска объявлений forumdisplay.php?f=6
Comment: Объявления и предложения, поиск жилья и работы в Эквадоре, покупка и продажа, обмен и т. п.
Subtopic: Русский Уругвай
From: amadora
Date: D:20 M:04 Y:2006 h:12 m:10
Topics: 105
Messages: 1,166

и топики:

opic: Mindo showthread.php?t=1423
Author: Larin
Date: D:20 M:04 Y:2006 h:23 m:43
Last poster: Настоящий Индеец
Answers: 10
Views: 188
Topic: Какой нынче S.M.V.G.? showthread.php?t=1420
Author: El Karabaso
Date: D:20 M:04 Y:2006 h:16 m:22
Last poster: Настоящий Индеец
Answers: 8
Views: 184
Topic: Доллар showthread.php?t=1430
Author: El Karabaso
Date: D:20 M:04 Y:2006 h:15 m:04
Last poster: Andrew
Answers: 8
Views: 98
Topic: О женах showthread.php?t=1424
Author: El Zorro
Date: D:20 M:04 Y:2006 h:12 m:31
Last poster: El Zorro
Answers: 8
Views: 193
Topic: Я хренею! До чего пугливый народ там у вас! showthread.php?t=1428
Author: El Karabaso
Date: D:20 M:04 Y:2006 h:12 m:16
Last poster: El Zorro
Answers: 8
Views: 137
Topic: Эквадор - это теплая страна, расположена в тропиках. showthread.php?t=1429
Author: Larin
Date: D:19 M:04 Y:2006 h:23 m:33
Last poster: Andrew
Answers: 1
Views: 47
Topic: Решил поставить поддержку испанского на комп showthread.php?t=1427
Author: El Karabaso
Date: -
Answers: -
Views: -
Topic: Денежные выкладки (тема отделена) showthread.php?t=1415
Author: Larin
Date: D:17 M:04 Y:2006 h:15 m:59
Last poster: killoy
Answers: 69
Views: 477
Topic: Рада познакомиться! showthread.php?t=1377
Author: zara
Date: D:16 M:04 Y:2006 h:15 m:13
Last poster: amadora
Answers: 27
Views: 594
Topic: О настроении showthread.php?t=1416
Author: killoy
Date: D:15 M:04 Y:2006 h:19 m:15
Last poster: Larin
Answers: 5
Views: 100
Topic: Оружейное законодательство Эквадора showthread.php?t=1155
Author: DAN
Date: D:15 M:04 Y:2006 h:05 m:13
Last poster: Ale Ale
Answers: 46
Views: 1,270
Topic: Пара фоток из заведения Настоящего Индейца showthread.php?t=1384
Author: Larin
Date: D:13 M:04 Y:2006 h:14 m:23
Last poster: Настоящий Индеец
Answers: 23
Views: 600
Topic: несколько практических вопросов по поездке showthread.php?t=1401
Author: Гектор
Date: D:13 M:04 Y:2006 h:07 m:57
Last poster: Ban
Answers: 31
Views: 518
Topic: Перу showthread.php?t=76
Author: Гость форума
Date: -
Answers: -
Views: -
Topic: Кто-нибудь Air France летал? showthread.php?t=1405
Author: El Karabaso
Date: D:11 M:04 Y:2006 h:00 m:44
Last poster: cерёга
Answers: 6
Views: 141
Topic: Где пожить в эквадоре? showthread.php?t=1396
Author: vip_x
Date: D:06 M:04 Y:2006 h:23 m:49
Last poster: Настоящий Индеец
Answers: 5
Views: 312
Topic: Маслята! showthread.php?t=1398
Author: Лёнушка
Date: D:05 M:04 Y:2006 h:20 m:19
Last poster: Лёнушка
Answers: 6
Views: 139
Topic: Из Кито в Питер showthread.php?t=1254
Author: sima
Date: D:05 M:04 Y:2006 h:19 m:09
Last poster: Larin
Answers: 4
Views: 285
Topic: Вопрос местным жителям showthread.php?t=1302
Author: Dedkoks
Date: D:05 M:04 Y:2006 h:16 m:06
Last poster: Ban
Answers: 56
Views: 1,159
Topic: Недвижимость и налоги showthread.php?t=1393
Author: El Karabaso
Date: D:05 M:04 Y:2006 h:06 m:02
Last poster: Ale Ale
Answers: 22
Views: 361
Topic: Что стоит посмотреть в Эквадоре. showthread.php?t=1128
Author: Konstantin
Date: D:04 M:04 Y:2006 h:07 m:16
Last poster: Vitaly
Answers: 32
Views: 1,570
Topic: Бузинес showthread.php?t=1395
Author: El Karabaso
Date: D:03 M:04 Y:2006 h:11 m:28
Last poster: Larin
Answers: 2
Views: 116
Topic: фотографии побережья (Манта, Крусита и т.д) showthread.php?t=1394
Author: Лёнушка
Date: D:03 M:04 Y:2006 h:09 m:11
Last poster: Лёнушка
Answers: 3
Views: 139
Topic: Про эквадорскую нефть пишут showthread.php?t=1392
Author: Dmitry
Date: D:02 M:04 Y:2006 h:21 m:21
Last poster: El Karabaso
Answers: 4
Views: 116
Topic: Железные дороги Эквадора showthread.php?t=1378
Author: diaset
Date: D:02 M:04 Y:2006 h:18 m:40
Last poster: Larin
Answers: 9
Views: 195

....
там хостеры не сильно обидятся, если мой бот всю базу заиндексирует?

[Andrew]

Хостер не обидится. База форума Русского Эквадора сейчас занимает около 80 мегабайт. Нормально?

[El Karabaso]

Сообщение от Andrew

Хостер не обидится. База форума Русского Эквадора сейчас занимает около 80 мегабайт. Нормально?

угу, намана. Трэды тож запарсил. Вроде теперь основная логика и дизайн.