Use self._download_webpage everywhere

Unused variable

Changes suggested by @phihag

Improvements

Merge remote-tracking branch 'upstream/master' into websurg

Extractor for websurg.com

[hotnewhiphop] Fix test case title

[youtube] Don't search the flash player version for videos with age gate activated

release 2013.09.17

Update 85 signature (Fixes #1449)

This is the first signature algorithm to have been parsed automatically, although that only works for HTML5 players for now, and is not yet integrated into master.

Add an extractor for vice.com (closes #1051)

[ooyala] prefer ipad url

It has better quality with m3u8 manifests

Add an extractor for Bloomberg (closes #1436)

[ooyala] add support for more type of video urls, like m3u8 manifests.

Always correct encoding when writing to sys.stderr (Fixes #1435)

release 2013.09.16

[devscripts/release] temporary workarounds

Merge remote-tracking branch 'origin/master'

Starts of a Windows service

Add an extractor for southparkstudios.com (closes #1434)

It uses the MTV system

Merge pull request #1422 from rzhxeo/xhamster

XHamsterIE: Add support for new URL format (download in hd by default)

[youtube] support youtube.googleapis.com/v/* urls (fixes #1425)

[soundcloud] Add an extractor for users (closes #1426)

Set the ext field for each format

[mixcloud] Rewrite extractor (fixes #278)

Now --all-sub is a modifier to --write-sub and --write-auto-sub (closes #1412)

For keeping backwards compatibility --all-sub sets --write-sub if --write-auto-sub is not given

[googleplus] Fix upload date extraction

XHamsterIE: Add support for new URL format

[ustream] Simplify channel extraction

the ChannelParser has been moved to a new function in utils get_meta_content
Instead of the SocialStreamParser now it uses a regex

Merge pull request #1413 from tewe/master

Add Ustream channel support

Merge pull request #1409 from JohnyMoSwag/master (closes #1404)

added kickstarter IE

Merge pull request #1350 from Jaiz909/description-keyerror-fix

Fixed issue #1277 KeyError when no description.

[buildserver] Service installation and uninstallation

[gamespot] Update test video title

[youtube] update algo for length 82 (fixes #1416)

[canalplust] accept urls that don't include the video id (fixes #1415), extract more info and update test

[buildserver] Rely on repository license

Add original buildserver from @fraca7

Add Ustream channel support

[funnyordie] fix video url extraction

release 2013.09.12

Check for both automatic captions and subtitles with options `--write-sub` and `--write-auto-sub` (fixes #1224)

added kickstarter IE

[youtube] Fix detection of videos with automatic captions

[subtitles] Also list the available automatic captions languages with '--list-sub'

[youtube] Support automatic captions with original language different from English (fixes #1225) and download in multiple languages.

Credit @iemejia

Merge branch 'subtitles_rework' (closes PR #1326)

[howcast] Do not download from howcast.com/videos/{video_id}

It takes too much to follow the redirection.

[subtitles] Use self._download_webpage for extracting the subtitles

It raises ExtractorError for the same exceptions we have to catch.

[subtitles] Simplify the extraction of subtitles in subclasses and remove NoAutoSubtitlesInfoExtractor

Subclasses just need to call the method extract_subtitles, which will call _extract_subtitles and _request_automatic_caption
Now the default implementation of _request_automatic_caption returns {}.

[subtitles] rename SubitlesIE to SubtitlesInfoExtractor

Otherwise it can be automatically detected as a IE ready for use.

[youtube] move subtitles methods from the base extractor to YoutubeIE

[subtitles] made inheritance hierarchy flat as requested

Merge branch 'master' into subtitles_rework

In the supported sites page, sort the extractors in case insensitive

release 2013.11.09

[youtube] update algo for length 85 (fixes #1408 and fixes #1406)

[francetv] Add an extractor for francetvinfo.fr (closes #1317)

It uses the same system as Pluzz, create a base class for both extractors.

Merge pull request #1402 from Rudloff/canalc2

Wrong property name

Wrong property name

Add an extractor for pluzz.francetv.fr (closes PR #1399)

release 2013.09.10

Add an extractor for Slideshare (closes #1400)

[sohu] add support for my.tv.sohu.com urls (fixes #1398)

Fix the minutes part in FileDownloader.format_seconds (fixed #1397)

It printed for the minutes the result of (seconds // 60)

[youtube] Modify the regex to match ids of length 11 (fixes #1396)

In urls like http://www.youtube.com/watch?v=BaW_jenozKcsharePLED17F32AD9753930 you can't split the query string and ids always have that length.

Revert "[youtube] Fix detection of tags from HLS videos."

They have undo the change

This reverts commit 0638ad9999e7c374b253d0e13f4e3a20ef0b1171.

release 2013.09.07

Merge branch 'master' of github.com:rg3/youtube-dl

Merge branch 'master' into subtitles_rework

[generic] If the url doesn't specify the protocol, then try to extract prepending ''

[daylimotion] accept embed urls (fixes #1386)

Add an extractor for Metacritic

[subtitles] fixed multiple subtitles language separated by comma after merge

As mentioned in the pull request, I forgot to include this changes.
https://github.com/rg3/youtube-dl/commit/aa6a10c44a8e2e86f709c5301f9ea6ac3f01f002

[youtube] Fix some issues with the detection of playlist/channel urls (reported in #1374)

They were being caught by YoutubeUserIE, now it only extracts a url if the rest of extractors aren't suitable.
Now the url tests check that the urls can only be extracted with an specific extractor.

[youtube] Fix detection of feeds urls (fixes #1294)

Urls like https://www.youtube.com/feed/watch_later were being as users (before the last changes to YoutubeUserIE, as videos)

Fix add-versions

release 2013.09.06.1

Merge remote-tracking branch 'origin/master'

Do not re-download files for hashsum generation (Fixes #1383)

[youtube] Users: download from the api in json to simplify extraction (fixes #1358)

There could be duplicate videos or other videos if the description have links.

[youtube] Fix detection of tags from HLS videos.

release 2013.09.06

Merge pull request #1378 from patrickslin/patch-6

Vevo sig changed again, please update for us! Thanks very much! (fixes #...

Vevo sig changed again, please update for us! Thanks very much! (fixes #1375)

[youtube] Urls like youtube.com/NASA are now interpreted as users (fixes #1069)

Video urls like http://youtube.com/BaW_jenozKc are not valid, but http://youtu.be/BaW_jenozKc is correct.

release 2013.09.05

[youtube] Playlists: extract the videos id from ['media$group']['yt$videoid'] (fixes #1374)

'media$player' is not defined for private videos.

[generic] Recognize html5 video in the format '<video src=".+?"' and only unquote the url when extracting the id (fixes #1372)

Add extractor for tvcast.naver.com (closes #1331)

[daum] Get the video page from a canonical url to extract the full id (fixes #1373) and extract description.

Credit  @Huarong for tv.sohu.com

Add extractor for daum.net (closes #1330)

release 2013.09.04

Merge pull request #1341 from xanadu/master

add support for "-f mp4" for YouTube

AHLS -> Apple HTTP Live Streaming

Merge pull request #1363 from Rudloff/defense

defense.gouv.fr

Merge remote-tracking branch 'upstream/master'

Suggested by @phihag