 Frédéric Guillot
|
311a133ab8
Refactor manual entry scraper
|
vor 7 Jahren |
|
Frédéric Guillot
|
3b6e44c331
Allow the scraper to parse XHTML documents
|
vor 7 Jahren |
|
Frédéric Guillot
|
5870f04260
Simplify feed parser and format detection
|
vor 7 Jahren |
 Patrick
|
2538eea177
Add the possibility to override default user agent for each feed
|
vor 7 Jahren |
|
Frédéric Guillot
|
dbcc5d8a97
Use canonical imports
|
vor 7 Jahren |
|
Frédéric Guillot
|
1eba1730d1
Move HTTP client to its own package
|
vor 8 Jahren |
 aniran
|
322b265d7a
Scrape parent element for iframe
|
vor 8 Jahren |
|
Frédéric Guillot
|
3c3f397bf5
Make sure the scraper parse only HTML documents
|
vor 8 Jahren |
|
Frédéric Guillot
|
1d8193b892
Add logger
|
vor 8 Jahren |
|
Frédéric Guillot
|
c6d9eb3614
Improve content scraper
|
vor 8 Jahren |
|
Frédéric Guillot
|
84d912c979
Rewrite imports
|
vor 8 Jahren |
|
Frédéric Guillot
|
ef097f02fe
Add the possibility to enable crawler for feeds
|
vor 8 Jahren |
|
Frédéric Guillot
|
87ccad5c7f
Add scraper rules
|
vor 8 Jahren |
|
Frédéric Guillot
|
7a35c58f53
Add readability package to fetch original content
|
vor 8 Jahren |
