feedController.php 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380
  1. <?php
  2. class feedController extends ActionController {
  3. public function firstAction () {
  4. $token = $this->view->conf->token();
  5. $token_param = Request::param ('token', '');
  6. $token_is_ok = ($token != '' && $token == $token_param);
  7. $action = Request::actionName ();
  8. if (login_is_conf ($this->view->conf) &&
  9. !is_logged () &&
  10. !($token_is_ok && $action == 'actualize')) {
  11. Error::error (
  12. 403,
  13. array ('error' => array (Translate::t ('access_denied')))
  14. );
  15. }
  16. $this->catDAO = new CategoryDAO ();
  17. $this->catDAO->checkDefault ();
  18. }
  19. public function addAction () {
  20. if (Request::isPost ()) {
  21. $url = Request::param ('url_rss');
  22. $cat = Request::param ('category', false);
  23. if ($cat === false) {
  24. $def_cat = $this->catDAO->getDefault ();
  25. $cat = $def_cat->id ();
  26. }
  27. $user = Request::param ('username');
  28. $pass = Request::param ('password');
  29. $params = array ();
  30. $transactionStarted = false;
  31. try {
  32. $feed = new Feed ($url);
  33. $feed->_category ($cat);
  34. $httpAuth = '';
  35. if ($user != '' || $pass != '') {
  36. $httpAuth = $user . ':' . $pass;
  37. }
  38. $feed->_httpAuth ($httpAuth);
  39. $feed->load ();
  40. $feedDAO = new FeedDAO ();
  41. $values = array (
  42. 'id' => $feed->id (),
  43. 'url' => $feed->url (),
  44. 'category' => $feed->category (),
  45. 'name' => $feed->name (),
  46. 'website' => $feed->website (),
  47. 'description' => $feed->description (),
  48. 'lastUpdate' => time (),
  49. 'httpAuth' => $feed->httpAuth (),
  50. );
  51. if ($feedDAO->searchByUrl ($values['url'])) {
  52. // on est déjà abonné à ce flux
  53. $notif = array (
  54. 'type' => 'bad',
  55. 'content' => Translate::t ('already_subscribed', $feed->name ())
  56. );
  57. Session::_param ('notification', $notif);
  58. } elseif (!$feedDAO->addFeed ($values)) {
  59. // problème au niveau de la base de données
  60. $notif = array (
  61. 'type' => 'bad',
  62. 'content' => Translate::t ('feed_not_added', $feed->name ())
  63. );
  64. Session::_param ('notification', $notif);
  65. } else {
  66. $entryDAO = new EntryDAO ();
  67. $entries = $feed->entries ();
  68. // on calcule la date des articles les plus anciens qu'on accepte
  69. $nb_month_old = $this->view->conf->oldEntries ();
  70. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  71. $transactionStarted = true;
  72. $feedDAO->beginTransaction ();
  73. // on ajoute les articles en masse sans vérification
  74. foreach ($entries as $entry) {
  75. if ($entry->date (true) >= $date_min ||
  76. $feed->keepHistory ()) {
  77. $values = $entry->toArray ();
  78. $entryDAO->addEntry ($values);
  79. }
  80. }
  81. $feedDAO->updateLastUpdate ($feed->id ());
  82. $feedDAO->commit ();
  83. $transactionStarted = false;
  84. // ok, ajout terminé
  85. $notif = array (
  86. 'type' => 'good',
  87. 'content' => Translate::t ('feed_added', $feed->name ())
  88. );
  89. Session::_param ('notification', $notif);
  90. // permet de rediriger vers la page de conf du flux
  91. $params['id'] = $feed->id ();
  92. }
  93. } catch (BadUrlException $e) {
  94. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  95. $notif = array (
  96. 'type' => 'bad',
  97. 'content' => Translate::t ('invalid_url', $url)
  98. );
  99. Session::_param ('notification', $notif);
  100. } catch (FeedException $e) {
  101. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  102. $notif = array (
  103. 'type' => 'bad',
  104. 'content' => Translate::t ('internal_problem_feed')
  105. );
  106. Session::_param ('notification', $notif);
  107. } catch (FileNotExistException $e) {
  108. // Répertoire de cache n'existe pas
  109. Minz_Log::record ($e->getMessage (), Minz_Log::ERROR);
  110. $notif = array (
  111. 'type' => 'bad',
  112. 'content' => Translate::t ('internal_problem_feed')
  113. );
  114. Session::_param ('notification', $notif);
  115. }
  116. if ($transactionStarted) {
  117. $feedDAO->rollBack ();
  118. }
  119. Request::forward (array ('c' => 'configure', 'a' => 'feed', 'params' => $params), true);
  120. }
  121. }
  122. public function actualizeAction () {
  123. $feedDAO = new FeedDAO ();
  124. $entryDAO = new EntryDAO ();
  125. $id = Request::param ('id');
  126. $force = Request::param ('force', false);
  127. // on créé la liste des flux à mettre à actualiser
  128. // si on veut mettre un flux à jour spécifiquement, on le met
  129. // dans la liste, mais seul (permet d'automatiser le traitement)
  130. $feeds = array ();
  131. if ($id) {
  132. $feed = $feedDAO->searchById ($id);
  133. if ($feed) {
  134. $feeds = array ($feed);
  135. }
  136. } else {
  137. $feeds = $feedDAO->listFeedsOrderUpdate ();
  138. }
  139. // on calcule la date des articles les plus anciens qu'on accepte
  140. $nb_month_old = $this->view->conf->oldEntries ();
  141. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  142. if (rand(0, 30) === 1) {
  143. $nb= $entryDAO->cleanOldEntries ($date_min);
  144. Minz_Log::record ($nb . ' old entries cleaned.', Minz_Log::DEBUG);
  145. if ($nbOld > 0) {
  146. $nb = $feedDAO->updateCachedValues ();
  147. Minz_Log::record ($nb . ' cached values updated.', Minz_Log::DEBUG);
  148. }
  149. }
  150. $i = 0;
  151. $flux_update = 0;
  152. foreach ($feeds as $feed) {
  153. try {
  154. $feed->load ();
  155. $entries = $feed->entries ();
  156. //For this feed, check last n entry IDs already in database
  157. $existingIds = array_fill_keys ($entryDAO->listLastIdsByFeed ($feed->id (), count($entries) + 10), 1);
  158. // ajout des articles en masse sans se soucier des erreurs
  159. // On ne vérifie pas que l'article n'est pas déjà en BDD
  160. // car demanderait plus de ressources
  161. // La BDD refusera l'ajout de son côté car l'id doit être
  162. // unique
  163. $feedDAO->beginTransaction ();
  164. foreach ($entries as $entry) {
  165. if ((!isset ($existingIds[$entry->id ()])) &&
  166. ($entry->date (true) >= $date_min ||
  167. $feed->keepHistory ())) {
  168. $values = $entry->toArray ();
  169. $entryDAO->addEntry ($values);
  170. }
  171. }
  172. // on indique que le flux vient d'être mis à jour en BDD
  173. $feedDAO->updateLastUpdate ($feed->id ());
  174. $feedDAO->commit ();
  175. $flux_update++;
  176. } catch (FeedException $e) {
  177. Minz_Log::record ($e->getMessage (), Minz_Log::NOTICE);
  178. $feedDAO->updateLastUpdate ($feed->id (), 1);
  179. }
  180. // On arrête à 10 flux pour ne pas surcharger le serveur
  181. // sauf si le paramètre $force est à vrai
  182. $i++;
  183. if ($i >= 10 && !$force) {
  184. break;
  185. }
  186. }
  187. $url = array ();
  188. if ($flux_update === 1) {
  189. // on a mis un seul flux à jour
  190. $notif = array (
  191. 'type' => 'good',
  192. 'content' => Translate::t ('feed_actualized', $feed->name ())
  193. );
  194. } elseif ($flux_update > 1) {
  195. // plusieurs flux on été mis à jour
  196. $notif = array (
  197. 'type' => 'good',
  198. 'content' => Translate::t ('n_feeds_actualized', $flux_update)
  199. );
  200. } else {
  201. // aucun flux n'a été mis à jour, oups
  202. $notif = array (
  203. 'type' => 'bad',
  204. 'content' => Translate::t ('no_feed_actualized')
  205. );
  206. }
  207. if ($i === 1) {
  208. // Si on a voulu mettre à jour qu'un flux
  209. // on filtre l'affichage par ce flux
  210. $feed = reset ($feeds);
  211. $url['params'] = array ('get' => 'f_' . $feed->id ());
  212. }
  213. if (Request::param ('ajax', 0) === 0) {
  214. Session::_param ('notification', $notif);
  215. Request::forward ($url, true);
  216. } else {
  217. // Une requête Ajax met un seul flux à jour.
  218. // Comme en principe plusieurs requêtes ont lieu,
  219. // on indique que "plusieurs flux ont été mis à jour".
  220. // Cela permet d'avoir une notification plus proche du
  221. // ressenti utilisateur
  222. $notif = array (
  223. 'type' => 'good',
  224. 'content' => Translate::t ('feeds_actualized')
  225. );
  226. Session::_param ('notification', $notif);
  227. // et on désactive le layout car ne sert à rien
  228. $this->view->_useLayout (false);
  229. }
  230. }
  231. public function massiveImportAction () {
  232. $entryDAO = new EntryDAO ();
  233. $feedDAO = new FeedDAO ();
  234. $categories = Request::param ('categories', array (), true);
  235. $feeds = Request::param ('feeds', array (), true);
  236. // on ajoute les catégories en masse dans une fonction à part
  237. $this->addCategories ($categories);
  238. // on calcule la date des articles les plus anciens qu'on accepte
  239. $nb_month_old = $this->view->conf->oldEntries ();
  240. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  241. // la variable $error permet de savoir si une erreur est survenue
  242. // Le but est de ne pas arrêter l'import même en cas d'erreur
  243. // L'utilisateur sera mis au courant s'il y a eu des erreurs, mais
  244. // ne connaîtra pas les détails. Ceux-ci seront toutefois logguées
  245. $error = false;
  246. $i = 0;
  247. foreach ($feeds as $feed) {
  248. try {
  249. $feed->load ();
  250. $values = array (
  251. 'id' => $feed->id (),
  252. 'url' => $feed->url (),
  253. 'category' => $feed->category (),
  254. 'name' => $feed->name (),
  255. 'website' => $feed->website (),
  256. 'description' => $feed->description (),
  257. 'lastUpdate' => 0,
  258. 'httpAuth' => $feed->httpAuth ()
  259. );
  260. // ajout du flux que s'il n'est pas déjà en BDD
  261. if (!$feedDAO->searchByUrl ($values['url'])) {
  262. if (!$feedDAO->addFeed ($values)) {
  263. $error = true;
  264. }
  265. }
  266. } catch (FeedException $e) {
  267. $error = true;
  268. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  269. }
  270. }
  271. if ($error) {
  272. $res = Translate::t ('feeds_imported_with_errors');
  273. } else {
  274. $res = Translate::t ('feeds_imported');
  275. }
  276. $notif = array (
  277. 'type' => 'good',
  278. 'content' => $res
  279. );
  280. Session::_param ('notification', $notif);
  281. Session::_param ('actualize_feeds', true);
  282. // et on redirige vers la page import/export
  283. Request::forward (array (
  284. 'c' => 'configure',
  285. 'a' => 'importExport'
  286. ), true);
  287. }
  288. public function deleteAction () {
  289. $type = Request::param ('type', 'feed');
  290. $id = Request::param ('id');
  291. $feedDAO = new FeedDAO ();
  292. if ($type == 'category') {
  293. if ($feedDAO->deleteFeedByCategory ($id)) {
  294. $notif = array (
  295. 'type' => 'good',
  296. 'content' => Translate::t ('category_emptied')
  297. );
  298. } else {
  299. $notif = array (
  300. 'type' => 'bad',
  301. 'content' => Translate::t ('error_occured')
  302. );
  303. }
  304. } else {
  305. if ($feedDAO->deleteFeed ($id)) {
  306. $notif = array (
  307. 'type' => 'good',
  308. 'content' => Translate::t ('feed_deleted')
  309. );
  310. } else {
  311. $notif = array (
  312. 'type' => 'bad',
  313. 'content' => Translate::t ('error_occured')
  314. );
  315. }
  316. }
  317. Session::_param ('notification', $notif);
  318. if ($type == 'category') {
  319. Request::forward (array ('c' => 'configure', 'a' => 'categorize'), true);
  320. } else {
  321. Request::forward (array ('c' => 'configure', 'a' => 'feed'), true);
  322. }
  323. }
  324. private function addCategories ($categories) {
  325. $catDAO = new CategoryDAO ();
  326. foreach ($categories as $cat) {
  327. if (!$catDAO->searchByName ($cat->name ())) {
  328. $values = array (
  329. 'id' => $cat->id (),
  330. 'name' => $cat->name (),
  331. 'color' => $cat->color ()
  332. );
  333. $catDAO->addCategory ($values);
  334. }
  335. }
  336. }
  337. }