feedController.php 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388
  1. <?php
  2. class feedController extends ActionController {
  3. public function firstAction () {
  4. $token = $this->view->conf->token();
  5. $token_param = Request::param ('token', '');
  6. $token_is_ok = ($token != '' && $token == $token_param);
  7. $action = Request::actionName ();
  8. if (login_is_conf ($this->view->conf) &&
  9. !is_logged () &&
  10. !($token_is_ok && $action == 'actualize')) {
  11. Error::error (
  12. 403,
  13. array ('error' => array (Translate::t ('access_denied')))
  14. );
  15. }
  16. $this->catDAO = new CategoryDAO ();
  17. $this->catDAO->checkDefault ();
  18. }
  19. private static function entryDateComparer($e1, $e2) {
  20. $d1 = $e1->date(true);
  21. $d2 = $e2->date(true);
  22. if ($d1 === $d2) {
  23. return 0;
  24. }
  25. return ($d1 < $d2) ? -1 : 1;
  26. }
  27. public function addAction () {
  28. if (Request::isPost ()) {
  29. $url = Request::param ('url_rss');
  30. $cat = Request::param ('category', false);
  31. if ($cat === false) {
  32. $def_cat = $this->catDAO->getDefault ();
  33. $cat = $def_cat->id ();
  34. }
  35. $user = Request::param ('username');
  36. $pass = Request::param ('password');
  37. $params = array ();
  38. $transactionStarted = false;
  39. try {
  40. $feed = new Feed ($url);
  41. $feed->_category ($cat);
  42. $httpAuth = '';
  43. if ($user != '' || $pass != '') {
  44. $httpAuth = $user . ':' . $pass;
  45. }
  46. $feed->_httpAuth ($httpAuth);
  47. $feed->load ();
  48. $feedDAO = new FeedDAO ();
  49. $values = array (
  50. 'id' => $feed->id (),
  51. 'url' => $feed->url (),
  52. 'category' => $feed->category (),
  53. 'name' => $feed->name (),
  54. 'website' => $feed->website (),
  55. 'description' => $feed->description (),
  56. 'lastUpdate' => time (),
  57. 'httpAuth' => $feed->httpAuth (),
  58. );
  59. if ($feedDAO->searchByUrl ($values['url'])) {
  60. // on est déjà abonné à ce flux
  61. $notif = array (
  62. 'type' => 'bad',
  63. 'content' => Translate::t ('already_subscribed', $feed->name ())
  64. );
  65. Session::_param ('notification', $notif);
  66. } elseif (!$feedDAO->addFeed ($values)) {
  67. // problème au niveau de la base de données
  68. $notif = array (
  69. 'type' => 'bad',
  70. 'content' => Translate::t ('feed_not_added', $feed->name ())
  71. );
  72. Session::_param ('notification', $notif);
  73. } else {
  74. $entryDAO = new EntryDAO ();
  75. $entries = $feed->entries ();
  76. usort($entries, 'self::entryDateComparer');
  77. // on calcule la date des articles les plus anciens qu'on accepte
  78. $nb_month_old = $this->view->conf->oldEntries ();
  79. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  80. $transactionStarted = true;
  81. $feedDAO->beginTransaction ();
  82. // on ajoute les articles en masse sans vérification
  83. foreach ($entries as $entry) {
  84. if ($entry->date (true) >= $date_min ||
  85. $feed->keepHistory ()) {
  86. $values = $entry->toArray ();
  87. $entryDAO->addEntry ($values);
  88. }
  89. }
  90. $feedDAO->updateLastUpdate ($feed->id ());
  91. $feedDAO->commit ();
  92. $transactionStarted = false;
  93. // ok, ajout terminé
  94. $notif = array (
  95. 'type' => 'good',
  96. 'content' => Translate::t ('feed_added', $feed->name ())
  97. );
  98. Session::_param ('notification', $notif);
  99. // permet de rediriger vers la page de conf du flux
  100. $params['id'] = $feed->id ();
  101. }
  102. } catch (BadUrlException $e) {
  103. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  104. $notif = array (
  105. 'type' => 'bad',
  106. 'content' => Translate::t ('invalid_url', $url)
  107. );
  108. Session::_param ('notification', $notif);
  109. } catch (FeedException $e) {
  110. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  111. $notif = array (
  112. 'type' => 'bad',
  113. 'content' => Translate::t ('internal_problem_feed')
  114. );
  115. Session::_param ('notification', $notif);
  116. } catch (FileNotExistException $e) {
  117. // Répertoire de cache n'existe pas
  118. Minz_Log::record ($e->getMessage (), Minz_Log::ERROR);
  119. $notif = array (
  120. 'type' => 'bad',
  121. 'content' => Translate::t ('internal_problem_feed')
  122. );
  123. Session::_param ('notification', $notif);
  124. }
  125. if ($transactionStarted) {
  126. $feedDAO->rollBack ();
  127. }
  128. Request::forward (array ('c' => 'configure', 'a' => 'feed', 'params' => $params), true);
  129. }
  130. }
  131. public function actualizeAction () {
  132. $feedDAO = new FeedDAO ();
  133. $entryDAO = new EntryDAO ();
  134. $id = Request::param ('id');
  135. $force = Request::param ('force', false);
  136. // on créé la liste des flux à mettre à actualiser
  137. // si on veut mettre un flux à jour spécifiquement, on le met
  138. // dans la liste, mais seul (permet d'automatiser le traitement)
  139. $feeds = array ();
  140. if ($id) {
  141. $feed = $feedDAO->searchById ($id);
  142. if ($feed) {
  143. $feeds = array ($feed);
  144. }
  145. } else {
  146. $feeds = $feedDAO->listFeedsOrderUpdate ();
  147. }
  148. // on calcule la date des articles les plus anciens qu'on accepte
  149. $nb_month_old = $this->view->conf->oldEntries ();
  150. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  151. if (rand(0, 30) === 1) {
  152. $nb = $entryDAO->cleanOldEntries ($date_min);
  153. Minz_Log::record ($nb . ' old entries cleaned.', Minz_Log::DEBUG);
  154. if ($nb > 0) {
  155. $nb = $feedDAO->updateCachedValues ();
  156. Minz_Log::record ($nb . ' cached values updated.', Minz_Log::DEBUG);
  157. }
  158. }
  159. $i = 0;
  160. $flux_update = 0;
  161. foreach ($feeds as $feed) {
  162. try {
  163. $feed->load ();
  164. $entries = $feed->entries ();
  165. usort($entries, 'self::entryDateComparer');
  166. //For this feed, check last n entry GUIDs already in database
  167. $existingGuids = array_fill_keys ($entryDAO->listLastGuidsByFeed ($feed->id (), count($entries) + 10), 1);
  168. // On ne vérifie pas strictement que l'article n'est pas déjà en BDD
  169. // La BDD refusera l'ajout car (id_feed, guid) doit être unique
  170. $feedDAO->beginTransaction ();
  171. foreach ($entries as $entry) {
  172. if ((!isset ($existingGuids[$entry->guid ()])) &&
  173. ($entry->date (true) >= $date_min ||
  174. $feed->keepHistory ())) {
  175. $values = $entry->toArray ();
  176. $entryDAO->addEntry ($values);
  177. }
  178. }
  179. // on indique que le flux vient d'être mis à jour en BDD
  180. $feedDAO->updateLastUpdate ($feed->id ());
  181. $feedDAO->commit ();
  182. $flux_update++;
  183. } catch (FeedException $e) {
  184. Minz_Log::record ($e->getMessage (), Minz_Log::NOTICE);
  185. $feedDAO->updateLastUpdate ($feed->id (), 1);
  186. }
  187. // On arrête à 10 flux pour ne pas surcharger le serveur
  188. // sauf si le paramètre $force est à vrai
  189. $i++;
  190. if ($i >= 10 && !$force) {
  191. break;
  192. }
  193. }
  194. $url = array ();
  195. if ($flux_update === 1) {
  196. // on a mis un seul flux à jour
  197. $notif = array (
  198. 'type' => 'good',
  199. 'content' => Translate::t ('feed_actualized', $feed->name ())
  200. );
  201. } elseif ($flux_update > 1) {
  202. // plusieurs flux on été mis à jour
  203. $notif = array (
  204. 'type' => 'good',
  205. 'content' => Translate::t ('n_feeds_actualized', $flux_update)
  206. );
  207. } else {
  208. // aucun flux n'a été mis à jour, oups
  209. $notif = array (
  210. 'type' => 'bad',
  211. 'content' => Translate::t ('no_feed_actualized')
  212. );
  213. }
  214. if ($i === 1) {
  215. // Si on a voulu mettre à jour qu'un flux
  216. // on filtre l'affichage par ce flux
  217. $feed = reset ($feeds);
  218. $url['params'] = array ('get' => 'f_' . $feed->id ());
  219. }
  220. if (Request::param ('ajax', 0) === 0) {
  221. Session::_param ('notification', $notif);
  222. Request::forward ($url, true);
  223. } else {
  224. // Une requête Ajax met un seul flux à jour.
  225. // Comme en principe plusieurs requêtes ont lieu,
  226. // on indique que "plusieurs flux ont été mis à jour".
  227. // Cela permet d'avoir une notification plus proche du
  228. // ressenti utilisateur
  229. $notif = array (
  230. 'type' => 'good',
  231. 'content' => Translate::t ('feeds_actualized')
  232. );
  233. Session::_param ('notification', $notif);
  234. // et on désactive le layout car ne sert à rien
  235. $this->view->_useLayout (false);
  236. }
  237. }
  238. public function massiveImportAction () {
  239. $entryDAO = new EntryDAO ();
  240. $feedDAO = new FeedDAO ();
  241. $categories = Request::param ('categories', array (), true);
  242. $feeds = Request::param ('feeds', array (), true);
  243. // on ajoute les catégories en masse dans une fonction à part
  244. $this->addCategories ($categories);
  245. // on calcule la date des articles les plus anciens qu'on accepte
  246. $nb_month_old = $this->view->conf->oldEntries ();
  247. $date_min = time () - (60 * 60 * 24 * 30 * $nb_month_old);
  248. // la variable $error permet de savoir si une erreur est survenue
  249. // Le but est de ne pas arrêter l'import même en cas d'erreur
  250. // L'utilisateur sera mis au courant s'il y a eu des erreurs, mais
  251. // ne connaîtra pas les détails. Ceux-ci seront toutefois logguées
  252. $error = false;
  253. $i = 0;
  254. foreach ($feeds as $feed) {
  255. try {
  256. $feed->load ();
  257. $values = array (
  258. 'id' => $feed->id (),
  259. 'url' => $feed->url (),
  260. 'category' => $feed->category (),
  261. 'name' => $feed->name (),
  262. 'website' => $feed->website (),
  263. 'description' => $feed->description (),
  264. 'lastUpdate' => 0,
  265. 'httpAuth' => $feed->httpAuth ()
  266. );
  267. // ajout du flux que s'il n'est pas déjà en BDD
  268. if (!$feedDAO->searchByUrl ($values['url'])) {
  269. if (!$feedDAO->addFeed ($values)) {
  270. $error = true;
  271. }
  272. }
  273. } catch (FeedException $e) {
  274. $error = true;
  275. Minz_Log::record ($e->getMessage (), Minz_Log::WARNING);
  276. }
  277. }
  278. if ($error) {
  279. $res = Translate::t ('feeds_imported_with_errors');
  280. } else {
  281. $res = Translate::t ('feeds_imported');
  282. }
  283. $notif = array (
  284. 'type' => 'good',
  285. 'content' => $res
  286. );
  287. Session::_param ('notification', $notif);
  288. Session::_param ('actualize_feeds', true);
  289. // et on redirige vers la page import/export
  290. Request::forward (array (
  291. 'c' => 'configure',
  292. 'a' => 'importExport'
  293. ), true);
  294. }
  295. public function deleteAction () {
  296. $type = Request::param ('type', 'feed');
  297. $id = Request::param ('id');
  298. $feedDAO = new FeedDAO ();
  299. if ($type == 'category') {
  300. if ($feedDAO->deleteFeedByCategory ($id)) {
  301. $notif = array (
  302. 'type' => 'good',
  303. 'content' => Translate::t ('category_emptied')
  304. );
  305. } else {
  306. $notif = array (
  307. 'type' => 'bad',
  308. 'content' => Translate::t ('error_occured')
  309. );
  310. }
  311. } else {
  312. if ($feedDAO->deleteFeed ($id)) {
  313. $notif = array (
  314. 'type' => 'good',
  315. 'content' => Translate::t ('feed_deleted')
  316. );
  317. } else {
  318. $notif = array (
  319. 'type' => 'bad',
  320. 'content' => Translate::t ('error_occured')
  321. );
  322. }
  323. }
  324. Session::_param ('notification', $notif);
  325. if ($type == 'category') {
  326. Request::forward (array ('c' => 'configure', 'a' => 'categorize'), true);
  327. } else {
  328. Request::forward (array ('c' => 'configure', 'a' => 'feed'), true);
  329. }
  330. }
  331. private function addCategories ($categories) {
  332. $catDAO = new CategoryDAO ();
  333. foreach ($categories as $cat) {
  334. if (!$catDAO->searchByName ($cat->name ())) {
  335. $values = array (
  336. 'id' => $cat->id (),
  337. 'name' => $cat->name (),
  338. 'color' => $cat->color ()
  339. );
  340. $catDAO->addCategory ($values);
  341. }
  342. }
  343. }
  344. }