个人中心 我的学堂 我的旅行 退出账号

Issuu&Archinet八大设计专业作品集资料及一键批量自动下载器

2020.02.27 | , , ,
合创研造社 合创研造社

作者:合创研造社
原文链接


线索:
01. Issuu作品集数据&自动批量下载器
02. Archinet作品集数据&自动批量下载器
03. 关于我们
04. 如何获得数据表以及下载器


无论出国还是工作,几乎所有设计专业,我们都绕不开个人作品集。所以自从2018年开始,我们每年都会利用Python来爬取全球最大作品集网站Issuu(https://issuu.com/)上的数据,并根据点赞数来排行,以此来检索优秀的作品集。最后通过表格将数据分享给大家。18-19年的数据请公众号CC-LAB内回复CC001。
20年,我们不仅改进了算法,增加了检索关键词,而且从原来较为单一的建筑方向数据扩展到了涵盖建筑,景观,城市,室内,交互,工业,产品,视觉传达八大方向的数据。同时开发了一键批量下载工具。可以更好的收藏作品以供学习参考。文末了解获取方法。
Issuu网站爬虫数据及下载器

虽然有新下载器但这种炒冷饭的数据显然不是我们的作风。所以我们又开发了一个拥有奇高作品集质量的网站Archinet(https://archinect.com/),是一个连接世界各大建筑、景观、城市、室内院校网站。其中很多在读或者已经毕业的学长学姐会上传自己作品集,我们将带有作品集链接的地址按照院校分类整理成数据表格,同时开发了一键合成器,可以将链接中的作品集自动批量下载并合成PDF。文末了解获取方法。
Archinet网站爬虫数据及下载器


01
Issuu作品集数据&批量下载器

关于Issuu网站作品集数据的爬取逻辑,以建筑专业为例,首先,我们设置与建筑专业相关的关键词:
  • Architecture Portfolio
  • Architecture Design Portfolio
  • Architectural Design Portfolio
  • Architecture and Design Portfolio
  • March Portfolio
  • March Application Portfolio
  • Architect Portfolio

之后根据关键词,爬取数据,同时爬取的字段有:
  • 作品集链接
  • 点赞数量
  • 发布时间
  • 标题

然后按照点赞数量将数据排列,下图中可以看到,截至2020年2月,最高赞作品集已达4000多赞,但是发布时间已过去6年之久。超过千赞的有16份,至少有1个赞的有接近2700份。每一份表格我们设置跑出的数据是3000-5000份。基本囊括了所有带有赞数的作品集。部分专业的整体数据量甚至都不太够。
Issuu建筑方向部分数据

其他专业的数据模式相差无几,就不再赘述,唯一区别的是设置的关键字不同。以下为八个专业的关键字。其他相关类别,是将以上专业排除之外剩余的作品集数据,多专业混合,Issuu上的作品集数量庞大,我们目前全部专业加在一起也不过两万多份数据,远没有达到上限。之后,如有需要,我们将进一步完善不同专业的数据。

Issuu作品集爬取关键字


【批量下载器使用】
由于Issuu被墙,为了方便个人学习及收藏,我们开发了一个批量下载器,配合我们的数据表格,可以随心所欲收藏自己喜欢的作品集到本地作为参考:
  • 首先我们需要有一个V.P.N,来链接到网站;
  • 然后点开自动下载器文件夹,会看到两个文件,请不要修改文件名及任何属性,以免失效;


  • 之后点击urls文本框,将表格当中自己想要下载的作品集链接复制到文本框当中,然后点击保存。不要太贪心,下载太多,下载对自己有参考价值的即可,这里我复制点赞数最多的三份建筑类作品集链接;


  • 然后双击auto_load程序,如果是国内用户,则需要初始化,请耐心等待,程序运行结束之后,会产生三个带有链接名字的文件夹,点开之后即是下载好的作品集页面,之后可以用PDF或者ID一键合成即可。之后关闭程序和文本框。如若发生不能使用的情况请添加我们的公众服务号CCLAB-Service咨询在线客服。如若原网站更新,程序则也需要更新,我们也会及时更新后替换旧程序。




02
Archinet作品集数据&批量下载器

关于Archinet网站作品集数据的爬取逻辑会不太一样,这个网站是链接设计师一个网站,这些设计师可以按照海外各大高校来检索,几乎囊括了目前世界上知名的不知名的所有开设设计方向专业的院校。比如我可以去到Yale院校下查看在读的人和已毕业的人,其中一些会上传自己的作品集,一些不会。所以我们要做的就是找到这些有作品集的人。那么这组数据对于海外留学申请来说,犹如神助,我们相当于通过爬取的数据链接来了解自己申请院校前辈的作品水平和作品风格,而且,可以负责任的说一句,这上面的作品集质量要远远高于Issuu的质量。
Archinet院校一栏

Archinet网站爬取出来的字段有:
  • 院校
  • 作者
  • 链接

之后,我们在Excel里将数据根据院校排列,得到一张6000多份,包含数百个院校学生的作品集数据表。我们Excel内寻找院校的时候请输入完整院校英文名,不然可能检索不到。
Archinet作品集部分数据展示


【批量下载器使用】
由于Archinet被墙,所以也需要一个V.P.N,具体使用方法与Issuu下载器相同。且完成下载后是一个完整的PDF文档存在data文件夹下。如有问题同样可以添加我们的公众服务号CCLAB-Service咨询在线客服。




03

关于我们


我们是一个创新创意团队,我们致力于发展多个学科交叉的设计类教育平台,目前已打通PC端和移动端,致力于打造一个课程、图文、视频、专栏、社群 、商城、问答多位一体的线上知识社区,形成良好的生态闭环。

我们的团队分部海外学社也初具成果,今年的招生也已启动,如需设计类海外留学申请的同学可以随时咨询我们,客服号c-c-lab。以下为海外学社部分成员及成果。

同时我们有针对每年留学申请同学的优雅申请交流群,入群请添加我们客服微信c-c-lab,备注来意。目前学术氛围良好,群内已有100多位小伙伴,也希望进来的同学能以申请为主要目的。期间任何有关的设计问题,留学的问题都可以在群里讨论,会有我们的专线客服轮流值班回答大家的问题。你们面对的也是我们整个团队,大部分问题我们应该是都能解决。



【成果展】





04
如何获得数据表以及下载器

【免费方法】

长按识别二维码(或微信搜索ID:CC-LAB)

发送代码 CC002 给公众号


【付费方法一】
通过公众号合创营造社(ID:CC-LAB下端菜单栏云课堂进入我们的知识云社区,点击云商城购买。售价59元。购买后24小时之内我们会将下载链接发送于你。如有问题请联系云课堂小助手。


【付费方法二】
通过公众号合创营造社(ID:CC-LAB下端菜单栏云课堂进入我们的知识云社区,点击知识社群,加入到我们的知识社群中,此社群玩法类似贴吧,为学员与我们提供双向交流,目前刚创立,适合留学申请的同学,我们会在社区内发表未公布的留学干货及资源,不仅这一份。同时大家都可以发布帖子分享问题及想法,包括留学过程中的疑难杂症以及作品集制作等。我们会一一解答。也可以分享出作品集由我们免费进行指导修改,加入该群的同学也可以讨论学习与交流。目前社区门槛为99元,之后随着内容增加会适当提高门槛。有留学想法的同学越早加入越好。



【原创申明&免责声明】
本资料由合创研发,请勿随意传播修改,我们也将表格锁定,仅可复制,不影响使用。之后每1-2年我们会更新数据以及修复程序问题(如有)。如有问题请联系我们。本工作室仅提供数据链接及下载器,不提供原版作品集,请各位合理使用,勿做他用。

【相关推荐】


image.png

微信截图_20200227171022.png

End



0条评论
合创研造社 合创研造社

作者:合创研造社
原文链接

media@archcollege.com
建筑学院来稿须知 关闭
感谢您的关注与支持!我们非常欢迎各类投稿。
几点简单的来稿须知,望您耐心读完。
来稿要求如下:

● 作品类稿件

1、高清项目实景照片/效果图/模型照片/手绘草图
2、高清技术图纸,如:分析图/主要平立剖/总平面/关键节点详图
(图片要求:无水印,格式为JPG,图片分辨率72,宽度大于1200像素)
3、详实的设计说明800字左右(word格式)
4、真实准确的基本项目信息
5、如有项目视频,请提供高清项目视频
6、贵司的LOGO、官网相关信息。(用于注明文章出处及作者)

● 其他稿件

1、配图清晰且无水印图片
2、内容有趣有料,文字流畅通顺。
3、作者姓名,若有公号请提供公号名称及LOGO
我们的编辑将在收到稿件后的3个工作日内审稿并与您取得联系,如果没有刊载也会在3个工作日内您答复。
投稿邮箱:tougao@archcollege.com
如有其他疑问请加微信: jzxy-yz
建筑学院 建筑学院

建筑学院APP

为建筑师而打造的精品应用

点击下载
close
社交账号登录
close
close
close
欢迎加入【建筑学院】
快去完善你的个人信息吧!
完善资料
等下完善
close