[clipfish] extract mp4 video link

NationalGeographic._VALID_URL: work site-wide

Closes #6343.

[downloader/dash] Improve 'combine_url' (fixes #6341)

In some videos the base_url already ends with '/'.

[viki] Rewrite dict selection codes

[viki] Fix description extraction (closes #6339)

[generic] Unescape HTML escape sequences in redirect urls (fixes #6311)

[youtube] Don't use the DASH manifest from 'get_video_info' if 'use_cipher_signature' is True (#5118)

Currently they give a 403 Forbidden error.

[tagesschau] Remove unused import

[prosiebensat1] Modernize

[prosiebensat1] Recognize DRM protected videos (#6334)

[viki] Fix height (Closes #6333)

[tagesschau] Improve tests

[tagesschau] Add support for audio

Merge branch 'rohieb-patch/enhance-tagesschau-regex'

[tagesschau] Relax _VALID_URL and simplify

Merge branch 'patch/enhance-tagesschau-regex' of https://github.com/rohieb/youtube-dl into rohieb-patch/enhance-tagesschau-regex

Credit @nichdu for Lecture2Go extractor

[pbs] No need to escape colon

[pbs] Clean up title construction rationale

Merge pull request #6292 from atomicdryad/pr-fix_pbs_titles

pbs: fix vague 'Full Episode' titles; prepend name of show

[udemy] Handle already-logged-in scenario (Closes #6327)

Merge pull request #6303 from jaimeMF/dash_no_live

[YoutubeDL] don't default to 'bestvideo+bestaudio/best' for live videos

Merge branch 'nichdu-lecture2go'

[lecture2go] Make optional fields non-fatal

[lecture2go] Add more metadata fields

[utils] Improve parse_duration

Now dots are parsed. For example '87 Min.'

[lecture2go] Update _TEST

[lecture2go] Support more formats

[lecture2go] Improve some regular expressions

Merge branch 'lecture2go' of https://github.com/nichdu/youtube-dl into nichdu-lecture2go

Credit Zach Bruggeman for the appleconnect extractor (#6190)

[viewster] Strip titles

[viewster] Rewrite for new API (Closes #6317)

[snagfilms] Don't use '_' as a variable that is used

[snagfilms] Improve m3u8 extraction (Closes #6309)

release 2015.07.21

[options] Fix a typo (#6307)

Merge pull request #6307 from jwilk/spelling

README: fix a typo

README: fix a typo

[YoutubeDL] don't default to 'bestvideo+bestaudio/best' for live videos

Doesn't work currently.

[youtube] Set 'is_live'

[youtube] Fix upload_date in test

Merge remote-tracking branch 'yan12125/download-dash-segments' (#5886)

[tumblr] Improve downloading notes

[tumblr] Delegate to GenericIE for non-tumblr videos

Fixes #6162

[extractor/generic] Support vid.me embeds

[twitch:stream] Improve _VALID_URL (Closes #6294)

[francetv] Improve _VALID_URL

less clunky if statement

[vice] Modernize

[vice] Make test only matching

[vice] Do not capture unused groups in _VALID_URL

Merge pull request #6291 from atomicdryad/pr-fixvice

fix/support news.vice.com

[ard:mediathek] Add test for direct mp4

[ard:mediathek] Remove dead test

[ard:mediathek] Add audio test

[sportschau] Reimplement in terms of ard extractor

[ard] Extract all formats

pbs: fix vague 'Full Episode' titles; prepend name of show

Many videos are given the title 'Full Episode' or 'Episode x', etc;
in the info json 'title' is the episode title (for oneshots this is
'Full Episode') while the program name is 'program':{'title'. This
changes the title from '(episode title)' to
 '(program name) - (episode title)'

The following urls demonstrate useless titles

    http://video.pbs.org/video/2365367186/
    http://video.pbs.org/video/2365519307/
    http://video.pbs.org/video/2365527039/
    http://video.pbs.org/video/2365530605/

Before change

    Full Episode
    Episode 5 | Preview
    Season 3 | Episode 4 Preview
    July 17, 2015

After change

    To Catch A Comet - Full Episode
    The Crimson Field - Episode 5 | Preview
    Last Tango in Halifax - Season 3 | Episode 4 Preview
    Charlie Rose The Week - July 17, 2015

fix/support news.vice.com

[francetv] Remove unused import

[francetv] Fix embed test

[francetv] Update jt test

[francetv] Fix f4m extraction completely

[francetv] Restore support for jt videos

[francetv] Fix f4m extraction

[appleconnect] Add new extractor (fixes #6189)

Closes #6190.

[sportschau] Improve title extraction

The html '<title>' ends with '- sportschau.de', which shouldn't be part of the title.

[sportschau] skip download in test

[sportschau] Add support for sportschau.de

Closes #6199.

[francetv] Remove unused import

[iqiyi] Add skip_download to reduce network traffic

MD5 checksums are commented out in
36068ae019138710a3023334db2241ec815e2fe6, and actual downloads are not
necessary anymore.

Credit @sceext2 for fixing iQiyi extractor (#6266)

[tagesschau] set description=None for empty descriptions

[tagesschau] add support for Bericht aus Berlin videos

Merge pull request #6283 from rohieb/patch/fix-tagesschau-tests

[tagesschau] fix test which links to nonexisting video

[tagesschau] fix test which links to nonexisting video

[tagesschau] add support for more video types

I found that currently only tagesschau videos are played. There are some
more shows hosted on tagesschau.de (see [0] for example) which are
easily playable by adjusting the regex. So this patch adds support for:
* tagesthemen
* tagesschau vor 20 Jahren
* tagesschau (mit Gebärdensprache)
* nachtmagazin

Note that some videos don't provide a description, so in order for the
tests to succeed, an ExtractorError needs to get caught.

[0]: http://www.tagesschau.de/multimedia/video/videoarchiv2~_date-20150714.html

Merge branch 'sceext2-fix-iqiyi-2015-07-17'

[iqiyi] Comment out some MD5 sums

The value is different on Travis CI server

[iqiyi] Remove unused imports

Merge branch 'fix-iqiyi-2015-07-17' of https://github.com/sceext2/youtube_dl into sceext2-fix-iqiyi-2015-07-17

[rtlnl] Avoid episodes completely (Closes #6275)

[extractor/generic] Add support for francetv embeds

[francetv] Fix duration extraction

[francetv] Add support for embeds and clean up _VALID_URL

[vk] Add age restricted video test for reference

[vk] Capture error message

[bliptv] Remove unused import

[compat] Fix _asciire

[vk:uservideos] Revert orderedSet

[bilibili] Show georestriction error

[vk] Clarify extractor names

[vk:uservideos] Improve extraction

[extractor/common] Style

release 2015.07.18

[iqiyi] fix iqiyi (2015-07-17), update the md5 salt (enc_key) to iqiyi latest (2015-07-17) flash player.

[nationalgeographics] Fix extraction (Closes #6262)

[twitch:stream] Clarify channel_id reassignment rationale (#6263)

[twitch:stream] Fix channel_id in different case (Closes #6263)