Как я могу улучшить эту ленту новостей PHP/MySQL?

позвольте мне начать с самого начала, сказав, что я знаю, что это не лучшее решение. Я знаю, что это kludgy и Хак функции. но именно поэтому я здесь!

этот вопрос/работа строится обсуждение на Quora с Эндрю Босворт, создатель ленты новостей Facebook.

я создаю ленту новостей сортов. Он построен исключительно в PHP и MySQL.

Для MySQL

реляционная модель канала состоит из двух таблиц. Одна таблица функционирует как журнал действий; фактически, она называется activity_log. Другая таблица -newsfeed. эти таблицы почти идентичны.

на схема для журнала is activity_log(uid INT(11), activity ENUM, activity_id INT(11), title TEXT, date TIMESTAMP)

...и схема подачи is newsfeed(uid INT(11), poster_uid INT(11), activity ENUM, activity_id INT(11), title TEXT, date TIMESTAMP).

любой время пользователь делает что-то отношение к ленте новостей, например, задавая вопрос, он войдет в журнал активности немедленно.

создание ленты новостей

затем каждые X минут (5 минут на данный момент, изменится на 15-30 минут позже), я запускаю работу cron который выполняет сценарий ниже. Этот скрипт перебирает всех пользователей в базе данных, находит все действия для все друзья этого пользователя, а затем записывает эти действия в ленту новостей.

в данный момент SQL это отбраковывает активность (вызывается ActivityLog::getUsersActivity()), имеет LIMIT 100 наложено по соображениям производительности*. - Не то чтобы я знаю, о чем говорю.

<?php

$user = new User();
$activityLog = new ActivityLog();
$friend = new Friend();
$newsFeed = new NewsFeed();

// Get all the users
$usersArray = $user->getAllUsers();
foreach($usersArray as $userArray) {

  $uid = $userArray['uid'];

  // Get the user's friends
  $friendsJSON = $friend->getFriends($uid);
  $friendsArray = json_decode($friendsJSON, true);

  // Get the activity of each friend
  foreach($friendsArray as $friendArray) {
    $array = $activityLog->getUsersActivity($friendArray['fid2']);

    // Only write if the user has activity
    if(!empty($array)) {

      // Add each piece of activity to the news feed
      foreach($array as $news) {
        $newsFeed->addNews($uid, $friendArray['fid2'], $news['activity'], $news['activity_id'], $news['title'], $news['time']);
      }
    }
  }
}

отображение новостей

в клиентском коде при получении ленты новостей пользователя я делаю что-то вроде:

$feedArray = $newsFeed->getUsersFeedWithLimitAndOffset($uid, 25, 0);

foreach($feedArray as $feedItem) {

// Use a switch to determine the activity type here, and display based on type
// e.g. User Name asked A Question
// where "A Question" == $feedItem['title'];

}

улучшение новости кормить

теперь простите мое ограниченное понимание лучших практик для разработки ленты новостей, но я понимаю подход, который я использую, чтобы быть ограниченной версией того, что называется веер на запись, ограниченный в том смысле, что я запускаю задание cron в качестве промежуточного шага вместо того, чтобы напрямую писать в новостные ленты пользователей. Но это сильно отличается от модели pull в том смысле, что лента новостей пользователя компилируется не при загрузке, а на регулярной основе основа.

это большой вопрос, который, вероятно, заслуживает большого количества назад и вперед, но я думаю, что он может служить пробным камнем для многих важных разговоров, которые должны иметь новые разработчики, такие как я. Я просто пытаюсь понять, что я делаю неправильно, как я могу улучшить, или как мне, возможно, даже начать с нуля и попробовать другой подход.

еще одна вещь, которая меня беспокоит в этой модели, заключается в том, что она работает на основе недавности, а не релевантности. Если кто-то может предложить, как это можно улучшить, чтобы работать в релевантности, я бы все уши. Я использую API Directed Edge для генерации рекомендаций, но кажется, что для чего-то вроде ленты новостей рекомендатели не будут работать (поскольку ранее ничего не было!).