硬核黑科技告诉你,漫威十年到底有多少个角色?

栏目: 数据库 · 发布时间: 5年前

内容简介:作者 | 法纳斯特

硬核黑科技告诉你,漫威十年到底有多少个角色?

硬核黑科技告诉你,漫威十年到底有多少个角色?

作者 | 法纳斯特

责编 | 郭芮

最近正值复联4上映,笔者也发现了一个有趣的网站,主要是关于漫威人物、漫威电影的图谱。

硬核黑科技告诉你,漫威十年到底有多少个角色?

https://graphics.straitstimes.com/STI/STIMEDIA/Interactives/2018/04/marvel-cinematic-universe-whos-who-interactive/index.html

其实之前笔者也利用了有关Graph的库实现了一波人物的关系分析,只不过分析结果比较粗糙而已~下面是网站的概况, 网站是基于Graph技术开发的。, 大家可以一览。

硬核黑科技告诉你,漫威十年到底有多少个角色? 硬核黑科技告诉你,漫威十年到底有多少个角色?

那么人家能做出这么酷炫的关系图,我们自己能不能实现呢?本文就利用网站提供的数据,使用Neo4j(NOSQL图形数据库)进行实战一波。

硬核黑科技告诉你,漫威十年到底有多少个角色?

获取分析

人物及人物关联信息从网站上获取,具体接口如下:

硬核黑科技告诉你,漫威十年到底有多少个角色?

数据为json格式,分别在「characters」和「relationship」中。

硬核黑科技告诉你,漫威十年到底有多少个角色?

这里的信息是分别指托尼·斯达克,关系「0」为朋友,斯蒂文·罗杰斯。

硬核黑科技告诉你,漫威十年到底有多少个角色?

硬核黑科技告诉你,漫威十年到底有多少个角色?

数据获取

具体代码如下:

import json
import requests

headers = {
    'user-agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'
}

url = 'https://graphics.straitstimes.com/STI/STIMEDIA/Interactives/2018/04/marvel-cinematic-universe-whos-who-interactive/data/marvel-data.json'
response = requests.get(url=url, headers=headers)
result = json.loads(response.text)

num = 0
names = []
item = {0: 'friend', 1: 'enemy', 2: 'creation', 3: 'family', 4: 'work', 5: 'love'}

for i in result['relationship']:
    subject = result['relationship'][i]['id']
    object = result['relationship'][i]['target_id']

    if subject not in names:
        names.append(subject)
    if object not in names:
        names.append(object)

    relation = int(result['relationship'][i]['relationship'])
    with open('relation_message.csv', 'a+') as f:
        f.write(subject + ',' + object + ',' + item[relation] + '\n')

for j in names:
    num += 1
    with open('names_message.csv', 'a+') as f:
        f.write(j + ',' + str(num) + '\n')

for k in result['characters']:
    id = result['characters'][k]['id']
    name = result['characters'][k]['name']
    status = result['characters'][k]['status']
    species = result['characters'][k]['species']
    with open('message.csv', 'a+') as f:
        f.write(id + ',' + name + ',' + status + ',' + species + '\n')

最后成功获取数据。

硬核黑科技告诉你,漫威十年到底有多少个角色?

人物名为简称,共计182个人物。

硬核黑科技告诉你,漫威十年到底有多少个角色?

1144条人物关系数据,4大类型,下面是182个人物的一些详情信息:

硬核黑科技告诉你,漫威十年到底有多少个角色?

包含了人物的名字及简称,存活状态,人物属性。

硬核黑科技告诉你,漫威十年到底有多少个角色?

数据可视化

下面通过Neo4j对人物关系进行可视化,Neo4j的安装这里就不细说了,大家可以自行百度。

开启Neo4j服务后,登陆Neo4j网站,初始化界面如下:

硬核黑科技告诉你,漫威十年到底有多少个角色?

先加载第一个文件:

硬核黑科技告诉你,漫威十年到底有多少个角色?

具体代码如下:

LOAD CSV  WITH HEADERS FROM 'file:///names_message.csv' AS data CREATE (:people{name:data.name, id:data.id});

下面加载第二个文件:

硬核黑科技告诉你,漫威十年到底有多少个角色?

具体代码如下:

LOAD CSV  WITH HEADERS FROM "file:///relation_message.csv" AS relations
MATCH (entity1:people{name:relations.subject}) , (entity2:people{name:relations.object})
CREATE (entity1)-[:rel{relation: relations.relation}]->(entity2)

点击1144按钮处,取消限制数,再点击全屏。

硬核黑科技告诉你,漫威十年到底有多少个角色?

硬核黑科技告诉你,漫威十年到底有多少个角色?

硬核黑科技告诉你,漫威十年到底有多少个角色?

这里大致能看出来漫威的人物聚集情况,第一大反派灭霸(thanos),原来这么孤立的。

这里由于人物太多,造成观察不便,所以对结果进行一些筛选,比如筛选托尼·斯达克的朋友,运行下面的代码。

match p=(n:people{name:"tonys"})-[:rel{relation:"friend"}]->() return p;

得到下图结果:

硬核黑科技告诉你,漫威十年到底有多少个角色?

其中「thor」为「雷神」,「stever」为「美队」,「blackw」为「黑寡妇」,「vision」为「幻视」,「peterp」为「蜘蛛侠」,「bruceb」为「绿巨人」。

下面再来看一下美队的女友吧。

硬核黑科技告诉你,漫威十年到底有多少个角色?

佩吉·卡特和她的侄女莎朗·卡特,据说两人样貌极为相像。

硬核黑科技告诉你,漫威十年到底有多少个角色?

总结

本次只是对Neo4j的一些简单操作,后期或许会去深入了解。 此外漫威的这些人物信息,还可以玩出很多花样的。

希望大家能去动手尝试尝试,做一枚硬核铁粉~

作者:法纳斯特,Python爱好者,专注爬虫,数据分析及可视化。

声明:本文首发个人公众号法纳斯特,作者投稿,版权归其个人所有。

【END】

硬核黑科技告诉你,漫威十年到底有多少个角色?

作为码一代,想教码二代却无从下手:

听说少儿编程很火,可它有哪些好处呢?

孩子多大开始学习比较好呢?又该如何学习呢?

最新的编程教育政策又有哪些呢?

下面给大家介绍CSDN新成员: 极客宝宝(ID: geek_baby)

戳他了解更多↓↓↓

硬核黑科技告诉你,漫威十年到底有多少个角色?

 热 文推 荐 

拿什么重建你,巴黎圣母院?

@程序员,你的技术为啥十年八年也没有进步?

☞  开发者如何写好技术简历?

☞  写代码这条路,能走多远?阿里算法专家告诉你

☞ 她说:为啥 程序员 都特想要机械键盘?这答案我服!

System.out.println("点个在看吧!");
console.log("点个在看吧!");
print("点个在看吧!");
printf("点个在看吧!\n");
cout << "点个在看吧!" << endl;
Console.WriteLine("点个在看吧!");
Response.Write("点个在看吧!");
alert("点个在看吧!")
echo "点个在看吧!"

你点的每个“在看”,我都认真当成了喜欢


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

IT不再重要

IT不再重要

(美)尼古拉斯·卡尔 / 闫鲜宁 / 中信出版社 / 2008-10 / 29.00元

在这部跨越历史、经济和技术领域的著作中,作者从廉价的电力运营方式对社会变革的深刻影响延伸到互联网对我们生活的这个世界的重构性影响。他批判式的认为,企业想应用网络或应用程序,不再需要自建资料中心、自组IT团队维护和管理系统,因为互联网就像自来水或电力一样,可由专门公司提供服务,你可以付费使用。而如果他的设想真的会实现,我们的世界将会变成什么样子?IT产业的命运又将如何?这又对企业的IT领域投资产生什......一起来看看 《IT不再重要》 这本书的介绍吧!

Base64 编码/解码
Base64 编码/解码

Base64 编码/解码

Markdown 在线编辑器
Markdown 在线编辑器

Markdown 在线编辑器