用Python做下载器，需要哪些方面的知识？

Question

自己对下载东西挺感兴的，想找些代码来看看，大家有什么好的推荐没有？

做下载器，需要python哪些方面的知识呢？

Answer 1

看你什么需求，比如我要扒豆瓣上美女相册，python用BeautifulSoup把图片地址过滤出来，然后os.system("wget")就搞定了。
你如果希望支持多种协议，或者长时间跑在服务器上，伪装客户端，robot自动爬资料，连接池⋯⋯那自然要看的知识就多了

Answer 2

如果是很窄的，想要为了什么做个小工具的话很简单，用几个库搭配一下就行了，只要会用别人的库加上一些基本语句没问题

如果是通用的大软件自然不容易了

Answer 3

不需要python，看看wget的参数吧，直接镜像站点。
复杂的话涉及格式化、多线程、多进程、数据库、html、js等等