之前写了一篇小米的众筹产品数据抓取，今天分享一下Indiegogo的众筹产品的数据抓取，两个网站的请求方式不一样，但是Indiegogo对数据抓取更加严格，请求头还需要添加Cookie属性，发现这个一点，花了我不少的时间，好在后面还是发现了这个问题。
这次没有用到新的东西，好了，废话不多说，直接上源码：
import requests
import json
headers = {'Accept': 'application/json, text/plain, */*',
'Accept-Encoding': 'gzip, deflate, sdch, br',
'Accept-Language': 'zh-CN,q=0.8',
'Connection': 'keep-alive', 'Host': 'www.indiegogo.com',
'If-None-Match': 'W/"faed2ad6b530ca10a18ef3"',
'Referer': 'https://www.indiegogo.com/explore/home',
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.81 Safari/537.36',
'Cookie':'ki_t=2%3B2%3B9%3B4%3B16; ki_r=; D_SID=113.104.195.55:YisvIcHF4Z24s3TB2TKbitxWEwrmGlyymljvxklDswE; __ar_v4=MNA52ZMPS5A5HHGLKMZP3O%3AA3%7CZIENZZYANBHC5MQ4WYNKZI%3AA3%7C6RP73TXU3VCT7KLJC3P7EZ%3AA3; __stripe_mid=35ce441a--b482-b0cba67f7fd4; romref=sch- romref_referer_host=www.baidu. D_IID=02B91A75-51CD-3F94-A882-07B72A5961C2; D_UID=F30-31AC-81E7-A4; D_ZID=FDDDFB6A-67FA-340D-9C89-564B5A0B9899; D_ZUID=5D0201DE-2FF3-3A22-AD4E-8F28FE310CF0; D_HID=2FCF09D9-15AF-3626-BC88-5C189ABE314C; _ga=GA1.2.; _gid=GA1.2.; _ceg.s=or7 _ceg.u=or7 __hstc=066ddf2df71226efcf1aa.8.7.7.12; __hssrc=1; __hssc=.7; hubspotutk=c31df2df71226efcf1 locale= cohort=www.baidu.com%7Csch-baid%7Cshr-pica%7Csch-baid%7Cshr-pica%7Csch- visitor_id=bbabf53f1e7ab5ffa02d354; analytics_session_id=2cab9ceefda0ea06d63e02fb536b212e3d6; recent_project_ids=625355; _session_id=742dcf10f5962f23becc4f'
pg_num = 0
urls = ([])
while flag == 1:
pg_num = pg_num + 1
payload = {'pg_num': pg_num}
r = requests.get("https://www.indiegogo.com/private_api/explore?filter_category=Tech+%26+Innovation&filter_funding=&filter_percent_funded=&filter_quick=popular_all&filter_status=&per_page=100",headers=headers,params=payload)
productlist = r.json()['campaigns']
for product in productlist:
print(product['id'])
print(product['title'])
print(product['currency_code'])
print(product['balance'])
print(product['in_forever_funding'])
print(product['url'])
print(product['compressed_image_url'])
print(product['amt_time_left'])
print(product['collected_percentage'])
itemUrl = "https://www.indiegogo.com/private_api/campaigns/%s/perks" % (product['id'])
urls.append(itemUrl)
print("====================================")
if len(productlist) == 0:
for url in urls:
print(url)
items = requests.get(url,headers=headers).text
itemlist = json.loads(items)['response']
for item in itemlist:
print(item['id'])
print(item['amount'])
print(item['label'])
print(item['description'])
print(item['number_available'])
print(item['number_claimed'])
print("====================================")
小米众筹产品数据抓取（Python）
刚学习Python不久，这应该是学Python以来的第一个实战，总体来说感觉还行，应为之前用Java写过一个，现在用Python写，单论这个简单的功能，Python确实要比Java轻便很多。当然肯定是...
Python爬取小米众筹数据
Python爬取小米众筹数据
#爬取小米众筹
import pymongo
import requests
import time
client = pymongo.MongoClien...
Python爬虫抓取基金数据
Python做网络爬虫需要学习额外基本知识：
1.HTML。基金所需的数据都通过HTML网页的形式返回，数据和HTML tag通过一定的规范组成渲染后的形成网页。了解HTML是为了有...
学好Python爬取京东知乎价值数据
Python爬虫为什么受欢迎如果你仔细观察，就不难发现，懂爬虫、学习爬虫的人越来越多，一方面，互联网可以获取的数据越来越多，另一方面，像 Python这样的编程语言提供越来越多的优秀工具，让爬虫变得简...
用python爬取天猫商品评论并分析（2）
用python爬取天猫商品评论并分析（2）
之前介绍过天猫数据的爬取和数据初步处理，今天介绍下 将采集的评论进行文本分析！下面是总流程：0. 主要流程0. 数据采集这一步参考网址：https:/...
这是自己写的第一个使用Pyspider完成数据抓取，也算是小有收获，最近这几天一直都在折腾这个Pyspider，算是有点入门吧。感觉还行，能感觉出国人写的框架，还有点熟悉的味道，觉得使用习惯有点接近吧...
基于区块链技术的众筹平台
基于区块链技术的众筹平台
Whats 众筹
传统第三方中心化系统与去中心化的系统对比
区块链技术
Whats 区块链
区块链的特点
没有更多推荐了，Indiegogo - 知乎有问题，上知乎。知乎作为中文互联网最大的知识分享平台，以「知识连接一切」为愿景，致力于构建一个人人都可以便捷接入的知识分享网络，让人们便捷地与世界分享知识、经验和见解，发现更大的世界。暂无话题描述关注话题分享阅读全文添加评论分享阅读全文添加评论分享阅读全文添加评论分享阅读全文添加评论分享阅读全文添加评论分享401众筹大站Indiegogo试水保险：产品失败将赔款
[摘要]如果项目公司未能在承诺日期的三个月之内交付产品，Indiegogo将会进行赔付。
腾讯科技讯 以Kickstarter和Indiegogo为代表的网络众筹网站，已经成为全球互联网和科技领域创新创业的重要资金来源，不过，并非所有的融资人的承诺都会变成现实，也不乏不良之徒，通过科技创新的名义进行诈骗。日前，Indiegogo推出了一个创新的服务——众筹保险。如果融资公司的科技产品推迟交付，或者证明是骗局，该公司将会赔偿投资人的资金。在众筹网站上，投资人和用户付出资金，一般以获得产品为目的。Indiegogo表示，在保险制度推出之后，如果项目公司未能在承诺日期的三个月之内交付产品，Indiegogo将会进行赔付。这一保险属于可选项，用户在投资时可以选择。Indiegogo目前已经在一个融资项目上进行第一次测试，该产品为一个用于减少用户压力的穿戴设备，单个投资人融资额为129美元，如果购买保险，则另外支付15美元。如果试验获得成功，Indiegogo将会在更多的融资项目中推广附加的保险服务。目前还不清楚在这一服务上，Indiegogo是否和保险行业公司进行了合作，还是赔付资金完全由自己承担。美国科技新闻网站“瘾科技”指出，众筹保险这一服务是一个十分有用的功能，因为实施众筹的科技产品，往往也是高风险项目，一旦项目失败，用户不用再担心自己的几百甚至几千美元投资打了水漂。不过与此同时，众筹网站仍然需要对融资的公司和产品项目进行审核把关。据报道，近些年在Kickstarter等网站上，会看到一些千奇百怪的融资项目，产品成功研发的可能性不高，风险很大，但是仍然在吸纳资金。在众筹领域，Kickstarter是当之无愧的老大，Indiegogo则是紧随其后的竞争对手。为何Indiegogo首先会推出融资保险服务？根据一家美国科技媒体的分析，在融资项目的审核把关上，Indiegogo更加松散，风险更大，因此更加需要推出保险制度。据报道，为了和Kickstarter竞争，Indiegogo在众筹方面的政策更加灵活。比如不论项目团队是否完成了实现预定的融资目标，依然可以从Indiegogo拿到全部资金（需要向Indiegogo支付一笔融资费用）。今年一月份，Indiegogo进行了B轮融资，一共获得4000万美元。此后，Indiegogo也在网络众筹的多个领域进行创新，比如九月份，该网站推出了一个名为“永久性融资”的服务，一些项目团队，在完成了第一次融资计划之后，在产品的研发过程中，仍然可以接受对产品感兴趣人士的资助或者投资，相当于投资窗口被拉大，这有助于后续的研发获得稳定的资金保障。资料显示，Indiegogo公司和众筹网站成立于2008年，总部位于美国加州旧金山。目前这家众筹网站每月的活跃用户为900万人，用户来自全球各地。（晨曦）
[责任编辑：samxiao]
您认为这篇文章与"新一网（08008.HK）"相关度高吗？
Copyright & 1998 - 2018 Tencent. All Rights Reserved
还能输入140字分享到微信
使用微信扫码将网页分享到微信
最近，著名的玩具制造商孩之宝（Hasbro）与众筹网站 Indiegogo 合作，组织了“关于下一个伟大游戏的挑战”。这个竞赛的目的是发现出色的独立桌面游戏，并将其推向主流市场。
（插图来自：）
今年的竞赛在美国、英国、加拿大、法国和德国等多个国家展开。竞赛中胜出的五名选手将获得 2000 美元的奖金，并且，孩之宝与 Indiegogo 会帮他们完善游戏，开展游戏众筹。最后，筹得资金最多的开发者会得到附加的 2.5 万美元奖金。他将与孩之宝的员工会面，把自己的游戏变为现实。
（插图来自：）
看来，众筹已经不再是独立开发者或者小型发行商的专利了。那么，大公司如何利用众筹创造有趣的新产品？针对这个问题，与孩子宝、Indiegogo 的高管进行了交流。
（插图来自：）
Indiegogo 的高级副总裁 Jerry Needel 说，大型公司同样可以使用众筹。“对于大型公司来说，众筹是一种很有趣的市场调研方法，” 他说，“基本上，他们并不缺钱，但是，他们需要来自现实世界的数据，以证明市场确实存在着某种需求，并且能够制造人们真正需要的产品。”
（插图来自：）
在谈到孩之宝与 Indiegogo 的关系时候，孩之宝设计与开发部门的主管 Brian Chapman 说，他的团队要创造出“世界上最棒的玩乐体验”，而 Indiegogo 能够把来自全球的各种好想法汇集起来。“我们意识到，大量的好点子分布在全球各地，每个人都可能有好点子。Indiegogo 是一个好地方。在那里，人们可以培育想法，使其成形，而我们则能把它们带给消费者，因此，孩之宝与 Indiegogo 的结合是理所当然的。”
（插图来自：）
Chapman 说，孩之宝拥有一些家喻户晓的桌面游戏，但是，他们同样想要去发现那些潜力巨大的新游戏。“我们想要改变人们的观念，” 他说，“我们因那些著名的游戏而为人所知，但是，我们的团队也在培育那些名气较小的游戏，并且比过去更积极地寻找新游戏，因为我们意识到，许多消费者想要玩这些游戏。”
当然，众筹成功并不意味着游戏一定会到达消费者手中。事实是，一些众筹成功的产品最终表现令人失望。这不免引起了人们对众筹的疑虑。大型公司的介入或许能够恢复人们的信心。“Indiegogo 正在做的事情是，除了众筹本身之外，我们还要帮助企业家和创作者，把他们的想法变成实际产品。这意味着，我们要帮助他们制造产品，帮助他们搞好营销。” Jerry Needel 说，“这就是孩之宝的合作是件大好事的原因。孩之宝能够做出产品。你从大众那里找出最好的点子，然后将其交给制造与营销方面的市场领导者。”
扫一扫分享到微信
The wind is rising,we must try to live.
累计已发布 2045 篇文章
最近文章：
使用微信扫码关注爱范儿微信公众号
版权所有 & 广州爱范儿科技股份有限公司 2008 - 2018。以商业目的使用爱范儿网站内容需获许可。非商业目的使用授权遵循 CC BY-NC 4.0。
All content is made available under the CC BY-NC 4.0 for non-commercial use. Commercial use of this content is prohibited without explicit permission.
Designed by
Design Studio.
关注 if Design Studio.
微信扫码关注公众号 if Design Studio.
关注爱范儿微信号，连接热爱，关注这个时代最好的产品。
想让你的手机好用到哭？关注这个号就够了。
关注玩物志微信号，就是让你乱花钱。
小程序开发快人一步。
最好的微信新商业服务平台。众筹平台Indiegogo测试“众筹保险”
项目失败可获赔偿
【牛华网讯】北京时间12月4日消息，在众筹平台投资项目，可能会遇到项目无法按时交付，或者欺诈问题，那么投资的钱就会打水漂。现在，众筹网站Indiegogo正在测试众筹保险，如果项目流产，投资者将获得赔偿，保护投资者的部分利益。
你只需支付一定的金额，一旦项目超过三个月没能交付，或者根本没有收到产品，你将获得赔偿。目前，Indiegogo上仅有一个项目参与了众筹保险&&Olive手环，旨在帮助佩戴者管理压力，你只需支付15美元，就能获得最高129美元的项目退款。
这种保险非常实用，尤其适用于高风险的项目。这样一来，你就不必担心亏损，轻松投资。
相关报道：
新闻热线：010-
责任编辑：许巧艳
位网友参与评论
名企动态： |
标志着Windows迈出个性化计算的第一步……
&& 本站特聘法律顾问:于国富律师
Copyright (C)
newhua.com