На Хабре я недавно (чуть меньше месяца), до этого Хабр практически не читал. Пришёл, огляделся, походил по тематическим «хабам», почитал «Лучшее за всё время», просмотрел статьи отдельных, заинтересовавших меня персонажей и понял, что для того, чтобы получше понять, как живёт и чем дышит это замечательное сообщество, мне придётся Хабр распарсить и позадавать ему разные вопросы. К тому же, раз уж в своих статьях я писал в основном об автореферентности в разных её проявлениях, как не написать на Хабре статью о Хабре?
Посмотрю, интересно ли это всё кому-либо кроме меня. Если интересно, напишу ещё несколько постов, идей и материала для этого более чем достаточно.
Если я ничего не пропустил в интерфейсе сайта, единственные списки самых-самых, которые можно посмотреть — это общий рейтинг пользователей и список статей, т.н. «Лучшее за всё время». Оба списка отсортированы по рейтингу (пользователей и статей, соответственно). Между тем, существует ещё куча параметров, по которым было бы интересно всё отранжировать.
Самые «полезные» статьи. Статьи, которые максимальное кол-во читателей добавило в «избранное».
27+ ресурсов для онлайн-обучения / Хабрахабр
Памятка пользователям ssh / Хабрахабр
Жизнь разработчика (в картинках) / Хабрахабр
20 вещей, которые я должен был знать в 20 лет / Хабрахабр
Прекратите скручивать! / Хабрахабр
Подборка инструментов для фронт-энд разработки / Хабрахабр
Подборка полезного для любителей Twitter Bootstrap / Хабрахабр
Несколько полезных сервисов / Хабрахабр
Сети для самых маленьких. Часть нулевая. Планирование / Хабрахабр
Принцип цикады и почему он важен для веб-дизайнеров / Хабрахабр
Руководство по оформлению HTML/CSS кода от Google / Хабрахабр
Делаем приватный монитор из старого LCD монитора / Хабрахабр
Взломать Wi-Fi за 10 часов / Блог компании Журнал Хакер / Хабрахабр
Подборка инструментов для эффективной frontend разработки / Хабрахабр
Топ-5 самых впечатляющих книг, которые должен прочесть каждый разработчик ПО / Хабрахабр
Спать мало, но правильно? / Хабрахабр
Хочешь быть iOS разработчиком? Будь им! / Хабрахабр
Лекториум записал почти тысячу лекций за год / Хабрахабр
Онлайн-инструменты для кодеров / Хабрахабр
Ускорение загрузки Windows for fun and profit / Хабрахабр
Статьи, собравшие максимальное кол-во комментариев.
Как раздавать инвайты на Google+ / Хабрахабр
Hello, world! / Блог компании Тематические Медиа / Хабрахабр
Лучшие компьютерные игры всех времен и народов по версии хабрасообщества 2013 года / Хабрахабр
Раздача слонов или инвайты на Google+ / Хабрахабр
Ещё +2Гб для вашего DropBox аккаунта. На сей раз, промо-акция DropBox и Three.com.hk / Хабрахабр
Праздничная раздача инвайтов! / Хабрахабр
Первая версия Opera 15 для компьютеров / Блог компании Opera Software ASA / Хабрахабр
Инвайты на Google Wave / Хабрахабр
Зачем нужны попы в ВУЗе? / Хабрахабр
Чего вам не хватает для полного перехода с windows на linux? / Хабрахабр
Инвайты на Турбофильм! / Хабрахабр
Антивирус Бабушкина / Хабрахабр
Хабракамп / Хабрахабр
Demonoid.Com / Хабрахабр
О том, что сегодня произошло с «аськой» (часть 1-я) / Хабрахабр
Роскомнадзор признаёт хентай детским порно, призывает к подаче жалоб, обещает пополнение реестра запрещённых ресурсов в Интернете / Хабрахабр
300 миллионов пользователей и переход на WebKit / Блог компании Opera Software ASA / Хабрахабр
Какой язык программирования должен быть первым при изучении в школе? / Хабрахабр
Планируете ли вы навсегда уехать из России раньше 2017 года? / Хабрахабр
Апрельский фуршет / Хабрахабр
Антирейтинг. Худшее за всё время. Это тоже интересно. Это не скучные, неинтересные статьи, не получившие высокий рейтинг. Это статьи, нашедшие живейший отклик в умах и сердцах обитателей Хабра. Правда отрицательный.
Bolgenos — это не просто очередная сборка «Линукса» / Хабрахабр
Галерея безобразных скайп-аватар / Хабрахабр
Лебедев лежит! / Хабрахабр
Хочу спалить идею стартапа (1) / Хабрахабр
Lostfilm закрыт / Хабрахабр
10000$ на рейтинг вконтакте / Хабрахабр
Мой гвоздь в крышку гроба Windows / Хабрахабр
С Дыднём Йожа тащемта / Хабрахабр
Моя кошка / Хабрахабр
Счас меня заберут мусора / Хабрахабр
FreeLove / Хабрахабр
Я, как сознательный %username%, ставлю минусы за… / Хабрахабр
«ВКонтакте все украл у Facebook»: надоевший миф / Хабрахабр
Это сделало мой день. Смотреть до конца. Чувак в неадеквате / Хабрахабр
ДААААА / Хабрахабр
Изготовление мебели для кафе бара и ресторана / Хабрахабр
Люди-икс круче тебя, %username%. А сам %username% круче всех людей-игрек. %username%+x+y=все. / Хабрахабр
Оригинальный дизайн / Хабрахабр
Лого вконтакте / Хабрахабр
c:ls.bat / Хабрахабр
Интересно было, есть ли на Хабре статьи с высоким рейтингом без единого отрицательного голоса. Что надо написать, чтобы ни у одного, даже самого злобного, тролля не поднялась лапка нажать на минус? Предположил, что без фотографий котят тут не обойтись. Ошибся.
Физика радиационных эффектов, влияющих на электронику в космосе / Хабрахабр
DNS Amplification (DNS усиление) / Хабрахабр
Headtracking или как увидеть трехмерный чайник на двухмерном мониторе / Хабрахабр
Обзор мозгокомпьютерного интерфейса Emotiv Epoc / Хабрахабр
Электронный поводырь для слепых «Электросонар» / Хабрахабр
Первое мероприятие по 3D печати в Нидерландах / Хабрахабр
Неизбежность нодокалипсиса / Хабрахабр
Обнаружение устойчивых признаков изображения: метод SURF / Хабрахабр
Изображения: форматы и сжатие (2/3) / Блог компании TradingView / Хабрахабр
CSRF на vkontakte.ru / Хабрахабр
Хемилюминесценция люминола / что внутри «светящихся палочек»? / Хабрахабр
Pionen — Подземный дата центр / Хабрахабр
Взлом хеш-функций (2004-2006 гг.): как это было и что теперь делать? / Хабрахабр
Миникомпьютер из роутера с OpenWRT: пишем драйвер фреймбуфера / Хабрахабр
Применение процедурных генераторов в создании контента для real-time 3D приложений: Часть 2. Valley Benchmark / Блог компании UNIGINE / Хабрахабр
Как работает беспилотный автомобиль «Гугла» / Хабрахабр
ZX-Art: крупнейшая коллекция графики для ZX-Spectrum / Хабрахабр
“DVD-Йон” затеял социальную сеть на пиратском контенте / Хабрахабр
Видеохостинг своими руками / Хабрахабр
Возвращаемся на раздачу или как сделать невозможное / Хабрахабр
На относительно небольшом кол-ве статей мой написаный на коленке парсер упал, я решил, что вышеприведённые списки это не сильно изменит. Потом пройду отдельно эти статьи и выложу все результаты как таблицу в формате csv, для самостоятельных изысканий читателей.
Мысли и идеи
1) Ещё несколько рейтингов вроде вышеприведённых
2) Нормализация рейтинга. Рейтинг статьи в 2006ом году совсем не то же самое, что аналогичный рейтинг в 2013ом. К сожалению, параметр «кол-во просмотров» был на Хабре не всегда, тут придётся что-нибудь изобретать, например учитывать кол-во пользователей, зарегестрированных на момент написания статьи. Ну и пересмотреть топ после такой нормализации.
3) Частотный словарь Хабра и сравнение его с другими частотными словарями, например Википедии. А так же интересно сравнить лексику статей с лексикой комментариев.
4) Использовать Хабр как материал для генератора марковских цепочек, автоматическая генерация «статей» и «комментариев».
5) Попробовать поучить какой-нибудь байесовский спам-фильтр отличать «хорошие» статьи от «плохих». В успехе подобного мероприятия сильно сомневаюсь, т.к. надеюсь, что для оценки имеет значение смысл статьи, а не только слова её составляющие. Но мало ли.
6) Корелляции всякие поискать. между всем и всем.
7) Восемь троллей — вымысел или реальность?
8) Самые-самые — это замечательно, а как насчёт «самые средние», что такое типичный пост на ХабраХабр?
9) Наименее интересно, но тоже можно сделать. Для любителей… гхм… помедитировать на рейтинг и карму. Что из себя представляют эти цифры? Какой процент статей имеет более высокий рейтинг чем моя замечательная статья? У какого процента пользователей карма длинее и толще чем у меня? Графики красивые можно нарисовать, разумеется. Ещё из той же серии — как будет выглядеть общий рейтинг, если те, кто в нём не участвуют (сотрудники Хабра) вдруг решат участвовать? Как будет выглядеть рейтинг, если убрать пессимизацию и начать учитывать былые заслуги?
P.S. Не уверен, что поставил в правильный хаб, но ничего более подходящего не нашёл.
Автор: gromozeka1980
