[downloader/external] Use the 'http_headers' field

[extractors] Use http_headers for setting the User-Agent and the Referer

[utils] YoutubeDLHandler: don't use 'Youtubedl-user-agent' for overriding the default user agent

Setting the 'User-Agent' header is enough

[downloader/external] Add curl and aria2c (Closes #182)

[youtube:truncated_url] Add x-yt-cl URLs (#4773)

[videott] Improve _VALID_URL and add test

Merge pull request #4771 from irfancharania/videott

[videott] improve extraction

[videott] improve extraction

[downloader] Lay groundwork for external downloaders.

This comes with a very simply implementation for wget; the real work is in setting up the infrastructure.

[downloader] Improve downloader selection

README: Recommend using flake8 instead of pyflake and pep8 separately

[twitch] PEP8

[auengine] Remove extractor

The test is probably infringing copyright and nobody has provided a new test (see #4643).

[cliphunter] Fix extraction and update test (Fixes #4362)

release 2015.01.23.4

Merge remote-tracking branch 'origin/master'

[youtube] Fixup DASH m4a headers

This fixes #2288, #2506, #2607, #3681, #4741, #4767.

[atresplayer] Extract subtitles

Merge remote-tracking branch 'origin/master'

[liveleak] Add original videos (Fixes #4768)

[atresplayer] Filter URLs and clarify android format ids

[liveleak] Modernize

[twitch] Add support for bookmarks

[atresplayer] Don't include f4m formats if they are protected by DRM (fixes #4705)

[downloader/f4m] build_fragments_list: Support videos with more than 1 segment

release 2015.01.23.3

[utils] Catch strange Windows errors (Closes #4733)

Fix --sleep-interval (#3426)

Merge remote-tracking branch 'rupertbaxter2/master'

Conflicts:
youtube_dl/__init__.py
youtube_dl/downloader/common.py

[generic] Add support for Cinerama player (Fixes #4752)

release 2015.01.23.2

[utils] Simplify HTTPS socket creation

We were duplicating (bad) code and doing crazy things with SSL.
Just use TLSv1 across the board, and do with one implementation of HTTPSConnection.connect.
Fixes #4696.

[gamestar] Modernize slightly

Merge remote-tracking branch 'derrotebaron/master'

Merge pull request #4745 from BitLooter/master

Embed description and URL as MP4 tags

[generic] Add support for BOMs (Fixes #4753)

release 2015.01.23.1

[testtube] Add new extractor (Fixes #4759)

release 2015.01.23

Merge remote-tracking branch 'origin/master'

[YoutubeDL] Allow filtering by properties (Fixes #4584)

[pornhub] Detect private videos and emit an error message (Closes #4764)

[twitch] PEP8

[twitch:stream] Randomize query

Merge branch 'master' of github.com:rg3/youtube-dl

[README] Add an FAQ entry about destination folder

[twitch] Move URL matching tests into extractor

[comedycentral:shows] Remove references to colbert report

[hearthisat] Correct error message

[twitch] Add support for streams (Closes #893, closes #3693, closes #1884)

[videomega] Fix extraction (Closes #4763)

release 2015.01.22

[hearthisat] Add support for more high-quality download links

[hearthisat] Add new extractor (Closes #4743)

[twitch:past_broadcasts] Fix IE_NAME

Credit @yan12125 for streetvoice (#4758)

[streetvoice] Improve

Merge pull request #4758 from yan12125/IE_streetvoice

[StreetVoice] Add new extractor

[twitch] Refactor and add support for past broadcasts

[StreetVoice] Add new extractor

[nbc] Fix pep8 issue

[cnn] Use edition.cnn.com for getting the information (fixes #4757)

Some videos (like http://edition.cnn.com/videos/us/2015/01/20/orig-yellowstone-oil-spill.cnn) will fail if we use cnn.com.

[CNNArticle] Update test

[tinypic] Tweak VALID_URL regex (Closes #4754)

[nbcnews] Ignore HTTP errors while coping with playlists (Closes #4749)

[tvp] Fix extraction

[ndtv] Modernize

Embed description and URL as MP4 tags

[abc7news] Add extractor (Closes #4734)

[options] Clarify that --password can be left out (#4723)

release 2015.01.16

[bandcamp:album] Fix title extraction (Fixes #4721)

[fourtube] Fix extraction

[npo] Remove unused import

FFmpegEmbedSubtitlePP: simplify command

FFmpegEmbedSubtitlePP: don't fail if the video doesn't have an audio stream (fixes #4718)

Instead of specifying which streams ffmpeg must copy, we tell it to copy all.

release 2015.01.15.1

[youtube] Add test for #4706

Merge pull request #4706 from pkulak/master

Fix Youtube encrypted sigs.

Looks like Google switched to a new JS compiler that includes dollar signs in function names.

[videomega] Fix extraction (Closes #4703)

[atresplayer] Add authentication support (Closes #4700)

release 2015.01.15

[ssl] Correct connect creation

We want to authenticate the server, see https://docs.python.org/dev/library/ssl.html#ssl.Purpose.SERVER_AUTH .

[smotri] Improve extraction (Closes #4698)

[spiegel] Test format video URLs for 404 (Closes #4579)

[lnkgo] Make more robust

[utils] Add additional format to unified_strdate

[lnkgo] Add new extractor

[npo:live] Add extractor (Closes #4691)

[README] Add FAQ for playing from another machine (Fixes #4693)

[utils] Prevent override of custom headers.

The dict of headers of request objects in urllib has its keys always
capitalized.

This causes the lookup to fail and overwrite the header. If for example
a Extractor tries to add a "User-Agent" header the internal
representation in the request object is "User-agent". The header is
therefore clobbered by the "User-Agent" in std_headers, because the
strings are not equal.

[test_utils] Add more tests for parse_duration

[utils] Disallow non string types in parse_duration (Closes #4679)

[npo] Remove unused import

Credit @Josso for drbonanza (#4581)

[drbonanza] Simplify and fix duration (#4687)

[DRBonanza] Add new extractor (fixing #4581)

[npo] Make extension check less strict and add test (#4680)

[npo] Fix non asf streams (Closes #4680)