学院公开课|Python爬虫/Excel实用技能/Spark大数据,2018年开场豪华学习礼 ...

[复制链接]
bigocean 发表于 2017-12-31 16:42:02 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
今天「棕榈学院」主要内容有三个——
4 l: h  L- S8 f7 t对某门课程超感兴趣的可以手动跳跃至相关课程呦~: R6 Z# H+ R5 b. v, \1 _, a
以下请看详细内容:5 l! R# I- U$ l4 C& s# c
1
. {* f# F, T; {) ^9 o6 KPython网络爬虫找美食
: O" i4 K9 [* U# W人生三大难题之一:今天的晚饭吃啥?* h3 W# i& k9 d, T( }* |" |( s5 d
小学9 k$ g  T& \0 ]2 Q7 Z
2017年就快没了,我们抓紧最后的时间去吃点好吃的吧!8 b- M4 x3 M" X: [! P( b6 u1 b
小院
4 c  e7 s# ]: l, V# |4 I0 m5 K; n哈哈哈约饭理由100分!我们去吃啥呢?
# c) e' h3 m1 B8 l7 v小学
1 f' [) L" Q/ T" v9 k$ n7 }稍等我去看一下点评~你想吃什么种类?+ b4 w# l  g5 Q- y
小院5 [' t& S3 W! `; a* k/ l
我都行啊,找家好吃的呗。
7 u& R3 v' V. B4 Z5 f3 z- i. h  t. i小学, @, c) ?  D4 `, u% L. @
火锅?你看下这个,我收藏好久了。还有这家日料也很好吃。对了之前新开的这个烤鱼口碑也很好,哎还有这个海鲜馆……0 U# ~$ ^- [7 i6 u0 V( u
小院
2 q9 d6 I; w1 ]/ _* _% f( R3 i, QEmmmm……4 N* d% b# E( k0 h' h: a
10分钟后……
4 S2 q. N- L9 L( @: l7 G- 哎好累,评论看得我眼花,不知道去哪个了……
. z6 ~7 b) ~$ I% \+ U7 [! P2 p- 评论太两极分化了,要是能快速筛选就好了。; Z: y( E- h% \
有!学院君再次邀请到你们认真可爱的杰克老师,用Python做一次网络爬虫,使用美食点评网站上的各类评论、位置、价位、打分、图片等数据,对美食们做一波「全面彻底、刚正不阿」的大筛选!
& x* U8 T$ u6 R本次公开课 爬虫项目预览& s+ |5 `0 f. V3 h
杰克老师已经身先士卒,用Python大法爬过了Yelp上餐馆的数据,搜集了1000家纽约的美食餐厅信息。
/ E( F1 `/ I9 P; Y1 G% f* v看再多的文章和演示而不动手去尝试,知识永远不会变成你自己的能力。% p5 z) J; O, P4 O' V( D: t7 b' H
▌01 杰克老师爬取出的1000家餐馆数据. Z% y) }" }1 S" }- \
▌02 前方高能!爬取出的1000张美食图片!
8 W1 L  }! Y: `; H; R5 r(求学院君没吃饱饭做这张图时的心理阴影面积)
8 Z0 e, B1 U" C4 n: Q▌03 杰克老师编写成功的爬取代码* A" Z3 G1 E) d0 y/ H. v5 v
快来和我们杰克老师一起,用Python做美食网站的网络爬虫吧!我们自己,动手动脑,丰衣足食!
' y' X) \6 |" ?5 O$ V( G/ x7 W
第一,方法有了,我教,你照搬;2 T$ i) O5 |* D7 n7 K' T9 f# d
第二,美食有了,你约,不会错!
! K1 y; r) n: C4 x9 e2 D
适合人群
8 A1 W2 S! C- y( M) C9 n
1. 正在学Python,好奇如何玩儿小项目的同学们;2 {7 {% x2 v& d' N$ r
2. 苦恼如何搜集数据源,科研/学习/工作中不知道第一步如何下手的宝宝;
& S& L0 i4 ]- S. U. ?6 O( n- V3 K5 Y. m3. 关注产品评论/大众舆情/顾客喜好偏向的市场调研猿们;. \  O0 [* }0 U- P9 n
4. 关注搜索引擎优化,想要通过爬虫学习如何更好做内容的从业者;8 n0 |- [2 x1 Q  z! k6 [7 X
5. 史诗级选择困难症,每天都不知道吃啥好的天秤座;
4 O( d' R/ e0 d0 Y
讲师介绍. S3 `% G5 b1 E+ Z/ Z+ f1 W( V( g

* O$ C# Y, P3 c8 UJack; Z9 N5 c5 r; Y- k
中国科学技术大学硕士,马里兰大学信息系统专业PhD,有多项开发信息系统的经验,曾获得过ACM/ICM-Finalist特等奖提名奖。(超级认真超级nice的杰克老师又要和大家见面啦~)
/ |. B, _( P3 B/ ~3 y, _↓↓ 讲座知识点预览 ↓↓5 V3 f' X; S2 ]% E  [; J
用Python进行网络爬虫——% c& m7 I+ P( P& i2 L- `" a* `5 m
寻找最好吃的美食店!
& q! j' Y# H( I0 x1. 介绍普通网页的基本结构和布局0 i8 h" Q4 b# X# {
2. 个人电脑设备是如何访问数据和爬取网络资源的?" U! `' a, k( ]& L0 R2 V# p* U/ C: E
3. 爬虫是怎样工作的,爬取流程是怎么样的?1 u, I# g0 a# G0 e1 o
4. 如何用Python做爬虫的结构?
3 o6 {; C0 [/ k+ s. O5. 两个常见的Python爬虫库:" L" A" C2 B/ ~  W' L8 t; \
BeautifulSoup V.S. Scrapy1 E7 j- `! {' Y( @5 H$ ?& }  s
6. 两个常见大库里,一些小的Library和方法, K: F" d; z) g; x: ~8 F. g
7. 如何避免爬虫程序被网站服务器禁止?
: v* W" I- i7 B* \" A8. 实例演示:以Yelp上餐馆的数据为例,爬取了1000家纽约的美食餐厅。同样的方法也可以用来爬大众点评噢~5 W% a$ T! Q8 ^9 g+ |& H
公开课时间&形式0 W; X& p. X" X, j* c# l+ [$ P

  `$ ]" L" w" O/ P北京时间( W% H1 [- a, O) [7 K" l% m
1月10日 周三 晚上21:00
! O" y0 c6 ]* V" p3 z  B# y在线直播:PPT+视频语音/ K- w# M5 L+ b2 A8 S6 V9 h$ R
提供录播:无限回看: V/ R/ e) E& E) ~
报名方式
& {* u; r) e2 E) l1 Y. J5 C3 h  {# M$ [3 k& G' R" d
长按识别此二维码,
- F1 S! l+ I+ \% k. Z回复关键词5 Y5 ^- {! p( G# j/ w( k0 K
「 美食 " X" k0 l. H- o( ?7 b2 J
即可获得入群方式
- Y+ r4 N7 O( w' I0 _  ?23 w/ S  Q, K0 B
Excel实用技能 公开课* ?" T& O3 i/ _5 K
我吹过的最堂而皇之的牛,就是「本人精通/熟练掌握 Office 办公软件!! R  W; j2 }, Q( u5 c
有些事儿,比如Excel,你以为你会了,你其实完全不会。
7 C. z  R/ k7 j" F  ?0 G2 j- m有些事儿,比如Excel,你以为你不会,发现,百度了也没会……(住口)" z- e, @8 I: e% D
● 简历上写着「熟练使用office办公软件」,却被HR几句话识破?+ n6 z/ R, g" I
● 看了无数Excel教程和心得,还是菜鸟一枚?
$ H: [( Z5 Z) ~: u2 Y- m, g' X' ]● 需要制作图表时,靠着百度经验一点一点查,折腾半天还是一头雾水?( `' t& J: x8 Z: }5 [3 y
● 实习/工作,一碰上数据报表就会变成非自愿加班星人?
0 k/ e& l0 |. y# x● Excel到底有多厉害?怎样才算精通?如何系统学习?有哪些公式/技能是必备的?
" U. D+ F2 m0 i……2 J+ P9 l" ~9 G+ X, P
不会三连
, v/ k6 K1 x1 I7 l- S6 r8 ]% ]0 P2 h+ P差点意思9 e( ^% d- N. c- {3 l8 A2 H
感觉不对* x3 c* y2 V$ C1 X( ~% X9 a( ^" ]
我真不会
  _. j: G. V/ I; b& O但其实,这还不是最可怕的。
1 I* [5 A) p* Y8 ~' W3 v) X: T我们常说,学习是一件有针对性有目标的事情,如果现在让一只小白立下「2018年一定要精通Excel」的宏愿,Ta的第一个问题一定是——
  n% g- P+ J" u$ J; ^) y- o) d1 e诶?我不知道从哪里开始学?我好像也会做一点表啊……# T) p4 L9 v; @2 h
今天,学院踩着2017年的尾巴,专门成立了 Excel 扫黄(手动划掉)盲小分队,为大家普及那些工作上常用,而大部分小伙伴却不知道的 Excel 技能点!(2018年我们要一起成为Excel小能手!)
4 c" M* ^- W6 Q9 S+ E% x9 H划重点:首先,我要告诉你,Excel怎么才能「物尽其用」~  W5 H, R; ~& S3 E
希望2018年的你,可以这么说:
: P2 O( v' Q1 g适合人群  ~: g' F; K2 L8 O3 n/ I& z! i' M+ |2 l
1.Excel 基础薄弱,想快速提升自己 Excel 数据处理能力的同学;! S% U5 W$ h# g+ |% d- |
2.需要找工作,再也不好意思厚着脸皮说自己精通 Excel 的同学;
0 Y( y  J" l; R5 `4 N$ o( O3.工作中需要经常使用 Excel 的财务、审计、数据专员们;
0 l" u, }: h& c9 g3 n* Q4.已将Excel加入「2018年豪华学习礼包」,需要学习方向的小伙伴!
) j" F6 w- {& m0 L4 f& K! J* U
我们人美音甜超级可爱的语洋老师又回来辣~这次带领大家Excel大扫盲噢~~1 h: {/ I: c: t1 F8 k+ }7 H
1小时不一定能精通Excel(学院君真这么吹你也不会信呀),但是一定能帮助你2018年有更加清晰的Excel学习计划!
+ B5 P& u7 H1 J1 M3 aYu yang   k2 M/ M: q2 h8 O4 r5 j0 z
芝加哥大学金融工程硕士,本科就读于弗吉尼亚大学经济与数学专业。
- W6 c9 l  ?+ Z曾实习于四大/投行/资产管理公司/保险公司,即将在美国开始投资分析师工作,关注于ABS和CLO等资产证券化产品的投资以及投资组合分析。熟练使用R语言、Excel等各类软件。
  U# x% S7 V% P! M4 r$ `! G↓↓ 讲座大纲概览 ↓↓ 1 n- n  A, k) J# H/ [$ y9 S# ~
1. Excel基础知识扫盲:
- \0 k' {# v% i6 s8 M+ ]4 o+ a& R9 ~8 ~a.神奇的格式刷+ z. T# `6 \" ?7 Y) R
b.变量与非变量
, F$ E$ B. m6 N4 ~' z) Nc.首行固定' v; s  J# n  D$ K$ q( D
2. Excel的数据可视化:
( H/ o2 ]# _' |+ Q4 e. c8 y! @& n$ D6 W% Xa. 折线图/柱状图/扇形图
& q+ ^* P# d! U( h* X# ib. 画图的“潜规则”是什么?
3 ^2 l, U, `: x& Oc.《华尔街日报》上的复杂图表是怎么做的?
* h( E1 M1 P* ^3. Excel神奇的公式有哪些?3 W, H$ Z, i( L- |
a.IS Function' z1 Y. f1 i2 @: ^- n$ ~
b.Conditional+ e: }; T0 U4 R1 o" e) n; X
c.Mathemaical
1 F& v: p. T* id.Find&Search! p- G1 }$ x4 V
e.lookup
1 y) G; I3 f9 ~' k# I5 }6 o! sf.Logical
$ G3 Z% a6 [! Q9 H! T: l# C4.什么才算 Excel 的高级应用?4 p4 O0 h. e( m, s
a.VBA
. q& U" _* _8 U  ~+ E, M0 q- Kb.Pivot Table: x+ P& }- |0 e: a8 I1 v
c.统计建模* A: i4 c) @9 I& M
5. 成功前的Excel:1 o% G2 V/ n6 y8 O+ r$ X) S7 F
交图表给老板前,需要检查什么细节?/ W' K" j% [5 Q) J, z8 I: [! Z* _
6.职业好奇心:) O$ a2 h4 J/ H/ N
数据科学家和投行分析师都用 Excel 做些什么?2 o2 b+ A. r" Y! C
7. 案例分析Case study:
/ k# X% F8 j5 o% S, M用Excel 完成信用评级迁移模型的估测
8 S! m: G5 q- ?5 u- g1月7日 周日 晚上21:00
2 {2 b/ O9 g: f「 Excel / P4 S& Z9 X/ @+ l5 R7 G& E
即可获得入群方式% P# [* p* X/ m- q, p
3
3 J3 d) ]7 s- kSpark大数据 公开课
/ r9 o0 b% z' w  M* \7 T大数据就是很大很大的数据?那到底有多大?# F  T: J' N; m# Q
举个知乎上看见的简单例子:8 e9 ?- q8 i* x  E
你有10个数字需要储存计算,那你可以直接丢进内存再分下类就完事儿。% Z% n3 h( E" p8 r; y* d; L4 k
有1GB的数字需要储存计算,也可以一把丢进内存,前提是你电脑不太破,也勉强完事儿。
+ {0 t/ l& g3 s有10GB的数字需要储存计算呢,咋办?买几根内存条安上??
4 y" W' d) h, |& g6 A9 A那100GB呢?你可以选择直接砸电脑了......9 `- a  v& u1 G
然而100GB也「只是」小数据,往往我们说的大数据都是 TB、PB 级别的,数据大到在一台电脑上不能完成储存和计算。: ~* n9 w1 K, A$ G# a/ ~+ ]7 |) a
世界上第一个发明洗衣机的人一定是个懒人,想要轻便地处理大数据一定有懒人给我们提供的工具。今天,学院君就带大家学习一款目前大数据处理软件中的新兴网红——Spark。
: D7 r/ k( r) t' `$ ^- L: hSpark 是一款专为大规模数据处理而设计的快速通用的计算引擎,是 UC Berkeley AMP lab 所开源的类似 Hadoop MapReduce 的通用并行框架,可用它来完成各种各样的运算,包括 SQL 查询、文本处理、机器学习等。
5 v0 k4 p0 b& ^, X: F4 ~' D% j学院Spark公开课' f# v: M# |! @9 m0 l
是的没错,学院给大家带来的「Spark入门公开课」,当然是资源珍贵价值高!+ u: P+ u5 a9 X7 r- F% I# U
1.介绍Spark软件:它是如何工作的?为什么火?: K( ~' _& e) C( l* P' S5 m
2.与 Hadoop 作比较,为什么很多人唱衰 Hadoop,看好 Spark?
" i. e# B8 B* j# W3.介绍 Spark 的各类强大组件,它怎样构建出怎样一个庞大的生态环境。  H3 \/ O% _; \0 a
通过这次公开课,了解 Spark 的同时,带大家一起入门了解大数据~! u/ a8 E3 R4 `, V4 E
课程适合人群# g- g7 w9 Q: n1 r% V9 u
1.想了解大数据,不被时代所抛弃,看看这个行业为啥如此火爆的同学。
, l, S2 t* V! {1 q  K2 X2 U, Q2.目前需要做大数据相关论文、学术研究,急需补充大数据相关知识的同学~
; C3 ^0 @: X. Z. K& O3.有计算机科学背景,想往数据分析方向发展,想掌握一种大数据处理手段的同学!
/ L* Q3 g+ ?3 G) G3 p2 k: v4.我不管!哪行工资高、前景好我就去干哪行的同学!
+ M. G- {$ i: W- Y5 _* |. H4 a
公开课指导老师/ C3 h6 Q" G5 M2 i! o6 X+ |. |

9 M7 u8 _: ^( `7 A$ ]- iMuyang
1 L9 d+ O1 Y! W* v" v8 _- H硕士毕业于University of Virginia, Data Science Institute; 本科毕业于University of Virginia 数学专业(金融数学方向)。在校期间曾担任微积分和常微分方程的课程助教,有丰富的教学经验。
  {# p$ M0 a# I6 X( A* O1 }精通SQL/R/Python和Spotfire,有超过3年的数据统计和可视化软件使用经验;已通过精算概率论(P) / 金融数学(FM)等精算师相关行业考试;现为CFA 二级候选人。$ R. q: h3 W4 E9 }
通过在金融行业中多年的积累和观察,Muyang导师对金融和保险业有着自己独到的行业洞察力,是数据统计和分析的「小达人」。
2 _* ^) a% L4 j9 {, l- T. j↓↓ 讲座大纲概览 ↓↓ # o4 m% W  R. K: k2 D& \, ^
1. Need of spark
8 q% k0 d# X4 _: b· Real time Data (实时计算). L% a! d' p" F
· BIG data: a3 F0 }# f& P5 b
2. What is spark
- S& J0 K8 @8 h. P/ E. [. ]3. How does Spark work
! C! b! j1 ]+ a+ T0 o· Foudamental concepts of some important words, as RDD, API
* w; ?& q" i0 h: M+ D' j" F+ Y· Spark VS Hadoop
+ ^+ G5 S3 G& j4. Spark Ecosystem(生态环境)/ f) `3 a7 r  N; k& D
1月2日 晚上22:00; Z( ~; B( y) V
「 Spark * I/ i: A8 P, b& [5 W$ A
即可获得入群方式
1 B/ W8 A6 F8 t1 i8 E! Y  U# ~我还能说什么呢,请看下图。↓
& x/ g- P. G3 v5 T5 L. Z) R2 A4 N/ Y, K: P) |+ r5 G: Y
以下课程报名未截止,欢迎继续上车

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发布主题
推荐阅读更多+
阅读排行更多+
用心服务创业者
0851-88611148
周一至周五 9:00-18:00
意见反馈:admin@0851life.com

扫一扫关注我们

Powered by 童码少儿编程 X3.4© 2001-2013 0851life Inc.|网站地图