学院公开课|Python爬虫/Excel实用技能/Spark大数据,2018年开场豪华学习礼 ...

[复制链接]
bigocean 发表于 2017-12-31 16:42:02 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
今天「棕榈学院」主要内容有三个——
5 v( }" X! D( Y- P* q# f对某门课程超感兴趣的可以手动跳跃至相关课程呦~
5 ]- J6 R/ h& T7 r% \5 h以下请看详细内容:! D1 Y4 `- `' T+ Z7 L( Z3 F: l: p
14 a$ b4 P/ e4 [: P3 l
Python网络爬虫找美食
0 G: Y3 P% d. Z; D人生三大难题之一:今天的晚饭吃啥?
6 D7 p5 O& x' a& N5 L小学/ o% H% A8 ]" `; D( i
2017年就快没了,我们抓紧最后的时间去吃点好吃的吧!+ q) F+ N. s5 |+ B: z
小院
: ~8 g2 N; I5 Y5 D  V4 o$ C哈哈哈约饭理由100分!我们去吃啥呢?
& Y+ M2 U7 \% ^; Y( n小学' a  X! n0 n! ~0 X% M# j
稍等我去看一下点评~你想吃什么种类?; l' ^& k% Y( k4 m, @
小院9 `+ D, n- A2 `) U0 v3 k
我都行啊,找家好吃的呗。
* s$ \/ h( @/ A! W& J小学* l2 O* x8 e+ G
火锅?你看下这个,我收藏好久了。还有这家日料也很好吃。对了之前新开的这个烤鱼口碑也很好,哎还有这个海鲜馆……
' e+ n( L2 c6 d6 Q; x" k1 }小院
& N/ c( [3 |. \6 w2 F3 bEmmmm……
+ }* m* ~* l' I# F10分钟后……; o; q( r) J- W2 t+ {5 f' G
- 哎好累,评论看得我眼花,不知道去哪个了……0 \7 W/ Y: a6 `% Y) [
- 评论太两极分化了,要是能快速筛选就好了。3 H1 {9 m$ s, e" M* M8 m
有!学院君再次邀请到你们认真可爱的杰克老师,用Python做一次网络爬虫,使用美食点评网站上的各类评论、位置、价位、打分、图片等数据,对美食们做一波「全面彻底、刚正不阿」的大筛选!
; S$ I( l( @8 F本次公开课 爬虫项目预览7 B8 e& t: K$ R& d
杰克老师已经身先士卒,用Python大法爬过了Yelp上餐馆的数据,搜集了1000家纽约的美食餐厅信息。6 n7 ^7 C" i# g: A4 K/ {1 R7 v
看再多的文章和演示而不动手去尝试,知识永远不会变成你自己的能力。) y2 g8 n% M- Y9 }) h  i! g
▌01 杰克老师爬取出的1000家餐馆数据% Z0 S, ?! h% g) Y3 ~: J
▌02 前方高能!爬取出的1000张美食图片!
. K0 E; j  p$ K7 b& [0 E, M(求学院君没吃饱饭做这张图时的心理阴影面积)
$ h% a2 Q+ O2 C  t/ ]6 S▌03 杰克老师编写成功的爬取代码: h2 G4 z& b( |
快来和我们杰克老师一起,用Python做美食网站的网络爬虫吧!我们自己,动手动脑,丰衣足食!  W% Z  Y9 d3 ^2 m) o$ k$ S# j3 P
第一,方法有了,我教,你照搬;
0 s  x$ e) i" d8 L: ]# Q第二,美食有了,你约,不会错!
, f- N2 v4 w. o# ]6 t5 |& s" @$ x
适合人群
% g8 ~8 d; O- E, M
1. 正在学Python,好奇如何玩儿小项目的同学们;
' F4 q% H" U8 _) p0 Z2. 苦恼如何搜集数据源,科研/学习/工作中不知道第一步如何下手的宝宝;1 ^5 l9 [9 K9 Y) g4 T7 E
3. 关注产品评论/大众舆情/顾客喜好偏向的市场调研猿们;
& Z: x* a1 |8 q" ~  D7 E: C4. 关注搜索引擎优化,想要通过爬虫学习如何更好做内容的从业者;
" N8 U, p5 d2 }% D+ A) ~+ h5. 史诗级选择困难症,每天都不知道吃啥好的天秤座;$ ]# |9 V8 P5 P8 ~9 n0 n
讲师介绍' ?& [/ N! U4 N
; D, `) R! |- j/ ^2 {9 M. N0 ]1 Y
Jack5 ?$ i2 P( e. p; H4 h% z7 F
中国科学技术大学硕士,马里兰大学信息系统专业PhD,有多项开发信息系统的经验,曾获得过ACM/ICM-Finalist特等奖提名奖。(超级认真超级nice的杰克老师又要和大家见面啦~)  F; E/ _9 k* n. ]0 n
↓↓ 讲座知识点预览 ↓↓
- [: J/ S1 n- M  [用Python进行网络爬虫——+ \9 z" J; B  F
寻找最好吃的美食店!' |7 l1 U, p  r( J9 ~2 ?
1. 介绍普通网页的基本结构和布局! m+ f2 U/ D; S0 M- r5 h6 W5 d
2. 个人电脑设备是如何访问数据和爬取网络资源的?8 Q( E3 A" h. t- X
3. 爬虫是怎样工作的,爬取流程是怎么样的?
& |6 B0 W% v5 D5 u* T4. 如何用Python做爬虫的结构?
. C9 l9 }9 @6 u2 S% g, ~- G5. 两个常见的Python爬虫库:
! q# ~$ G' d; J' D" d8 t9 z. JBeautifulSoup V.S. Scrapy2 k8 a7 D* Y& t( R
6. 两个常见大库里,一些小的Library和方法
6 u6 b9 u" \# t4 Z. E# f: S* S7. 如何避免爬虫程序被网站服务器禁止?! S4 C7 P& o* ]
8. 实例演示:以Yelp上餐馆的数据为例,爬取了1000家纽约的美食餐厅。同样的方法也可以用来爬大众点评噢~
. P1 j) C, C$ ?* w公开课时间&形式1 ^; x* O6 G0 a2 S

) @; z% N* j! }3 q3 i北京时间8 E" i0 Z' A: `* p3 r9 u
1月10日 周三 晚上21:002 ]! E. C( j& Y& l; @0 f
在线直播:PPT+视频语音
7 L! F1 o1 I( ]0 P: @+ K0 l0 T提供录播:无限回看
1 s3 n, _2 ]* E6 N: |" d) |报名方式
2 B( h0 H/ `' G5 H/ D0 c6 I6 d$ s8 L  c0 V* [: N: W  j( q4 y
长按识别此二维码,+ J9 D* N$ ]& `8 @  S
回复关键词- X8 Q  o7 q, O* F& q% L
「 美食 - h% a8 Y& a2 x0 e
即可获得入群方式
5 V: x0 |; j+ \5 d2 C& j22 ~9 _; ]" U' B
Excel实用技能 公开课  D: i1 ~5 x3 H! K! [0 O
我吹过的最堂而皇之的牛,就是「本人精通/熟练掌握 Office 办公软件!% z; ^% Z( e) q. ^1 f
有些事儿,比如Excel,你以为你会了,你其实完全不会。# D! L( g. q- N. y2 v2 _" J
有些事儿,比如Excel,你以为你不会,发现,百度了也没会……(住口)
7 T& ?  j9 m# k/ e6 r4 x
● 简历上写着「熟练使用office办公软件」,却被HR几句话识破?: e3 G0 \) I: D. D1 n
● 看了无数Excel教程和心得,还是菜鸟一枚?
) N& c6 l  u# ~# s9 b/ R● 需要制作图表时,靠着百度经验一点一点查,折腾半天还是一头雾水?
* E  @9 |, ?. Q- C  a● 实习/工作,一碰上数据报表就会变成非自愿加班星人?
% }. ^9 C2 F; t3 g" R* r9 a● Excel到底有多厉害?怎样才算精通?如何系统学习?有哪些公式/技能是必备的?5 H0 e; S# Z0 k+ p$ k0 q8 K7 E
……, j. V: g1 D+ [7 \) S0 `" [
不会三连+ @' q! V$ q  L0 g% |
差点意思6 R1 r/ ^; y; p  U6 P
感觉不对7 R2 L7 F3 Z% z' s4 z' H9 Q
我真不会* M% k1 Q: [- @
但其实,这还不是最可怕的。3 C! u7 u4 ?  m& V- A, N6 ]
我们常说,学习是一件有针对性有目标的事情,如果现在让一只小白立下「2018年一定要精通Excel」的宏愿,Ta的第一个问题一定是——& l0 P. I7 g+ W: \* h9 X& i
诶?我不知道从哪里开始学?我好像也会做一点表啊……
0 J7 i2 A: i  s. u今天,学院踩着2017年的尾巴,专门成立了 Excel 扫黄(手动划掉)盲小分队,为大家普及那些工作上常用,而大部分小伙伴却不知道的 Excel 技能点!(2018年我们要一起成为Excel小能手!)3 {" i8 s1 G- c) q, ?0 I1 R+ v4 L2 t0 v
划重点:首先,我要告诉你,Excel怎么才能「物尽其用」~
& p' v2 l1 ~2 n( X, j$ i- K希望2018年的你,可以这么说:8 V' i  {) E5 ~. z# ]: U* i( I+ r1 v
适合人群
: x: l) k* i6 ]
1.Excel 基础薄弱,想快速提升自己 Excel 数据处理能力的同学;
5 ]+ j% J  u3 K! t9 O/ M4 i2.需要找工作,再也不好意思厚着脸皮说自己精通 Excel 的同学;
: p) w% Z% m$ p4 F8 K6 d3.工作中需要经常使用 Excel 的财务、审计、数据专员们;
7 |  e: `! p, E  ]  u4.已将Excel加入「2018年豪华学习礼包」,需要学习方向的小伙伴!
% P$ W' D4 K- ?6 A/ K6 r2 R
我们人美音甜超级可爱的语洋老师又回来辣~这次带领大家Excel大扫盲噢~~# F; J2 ^! X- }4 x# \2 Z. u' x
1小时不一定能精通Excel(学院君真这么吹你也不会信呀),但是一定能帮助你2018年有更加清晰的Excel学习计划!
* S% G6 E4 B1 L+ UYu yang
5 @) P9 I4 e: T! k4 {2 W芝加哥大学金融工程硕士,本科就读于弗吉尼亚大学经济与数学专业。
' H: n& ]! l9 x' ~& [# ]4 v曾实习于四大/投行/资产管理公司/保险公司,即将在美国开始投资分析师工作,关注于ABS和CLO等资产证券化产品的投资以及投资组合分析。熟练使用R语言、Excel等各类软件。8 L4 D6 H# v4 C" U. h5 d
↓↓ 讲座大纲概览 ↓↓ % i& n! C6 l0 i* q) w1 x
1. Excel基础知识扫盲:
* M( O& Y+ P; D1 u# `a.神奇的格式刷
5 U. G" e+ e5 M' m2 k0 _) ]* nb.变量与非变量3 Y! x& x5 h& ~  `5 E. c: H
c.首行固定
( C& q% w+ x0 Q% ?" v( G2. Excel的数据可视化:; a# L5 W# N4 f7 Y) E( u
a. 折线图/柱状图/扇形图/ N/ f  v( e& H$ a7 o  C, \$ w
b. 画图的“潜规则”是什么?
; T, e8 z/ A/ o8 Z: U: z6 gc.《华尔街日报》上的复杂图表是怎么做的?: c$ a- P: z0 j7 y- i: ?6 N! `
3. Excel神奇的公式有哪些?( m5 X, Y/ X, ?- X, O+ D
a.IS Function
- ~$ m/ S, @0 v$ [b.Conditional" ^4 r% G9 J" {$ i; k8 f
c.Mathemaical
6 D& r0 G. G: pd.Find&Search% f( Z# J" M8 G1 P
e.lookup
8 ?8 ]2 [' A. [) K% Tf.Logical' P6 T! W% B2 [
4.什么才算 Excel 的高级应用?$ Q2 R! P- j/ u+ W
a.VBA
; F% r* }0 s4 C' Q, O5 Vb.Pivot Table
8 Z" i# r( m, ?& Yc.统计建模
) H, K+ W/ Q' o# o0 _0 h# V6 m5. 成功前的Excel:
& D$ V8 [# Y5 I& v' |; D! G交图表给老板前,需要检查什么细节?+ w  A. p. f# m* D! R
6.职业好奇心:' G9 {, j6 y) y0 o
数据科学家和投行分析师都用 Excel 做些什么?) }& M' Y4 S0 G$ L0 S
7. 案例分析Case study:6 \- V4 }. ]1 ]4 g! h' J
用Excel 完成信用评级迁移模型的估测
  Q+ d. m2 s1 r% R- l  {1月7日 周日 晚上21:00
+ R3 h) C8 S% n" c( q) g  p「 Excel
( E1 l% j+ `5 E即可获得入群方式9 y; J6 ]2 {4 _8 c; S! c9 ?/ V' J  a
3
% z, `- T4 o0 n1 [5 V" k% f4 n% t$ zSpark大数据 公开课) c/ F+ g! T4 y; W4 _0 @9 q" |1 S
大数据就是很大很大的数据?那到底有多大?
+ N7 \4 e* }/ S1 u" r举个知乎上看见的简单例子:% L7 R* n( K% J% n  z' u7 D
你有10个数字需要储存计算,那你可以直接丢进内存再分下类就完事儿。
8 a$ F7 U0 H+ z7 d9 R$ u  n6 k9 E' D) X有1GB的数字需要储存计算,也可以一把丢进内存,前提是你电脑不太破,也勉强完事儿。
: N0 x; G# P) i5 M有10GB的数字需要储存计算呢,咋办?买几根内存条安上??) _. l* U5 I: h% `
那100GB呢?你可以选择直接砸电脑了......1 t( ~2 r' n3 r0 @. x! B7 p
然而100GB也「只是」小数据,往往我们说的大数据都是 TB、PB 级别的,数据大到在一台电脑上不能完成储存和计算。
! d3 _" i$ H6 [) Z世界上第一个发明洗衣机的人一定是个懒人,想要轻便地处理大数据一定有懒人给我们提供的工具。今天,学院君就带大家学习一款目前大数据处理软件中的新兴网红——Spark。. ^: S& ?+ T5 I0 e; a% w
Spark 是一款专为大规模数据处理而设计的快速通用的计算引擎,是 UC Berkeley AMP lab 所开源的类似 Hadoop MapReduce 的通用并行框架,可用它来完成各种各样的运算,包括 SQL 查询、文本处理、机器学习等。
. u. C% j! y; v6 t/ C, B# @3 f学院Spark公开课
1 ]: w1 n8 M! \- C. Q是的没错,学院给大家带来的「Spark入门公开课」,当然是资源珍贵价值高!0 I" U5 z# }: f) O& V
1.介绍Spark软件:它是如何工作的?为什么火?% Q. t, p/ h' k; r; }
2.与 Hadoop 作比较,为什么很多人唱衰 Hadoop,看好 Spark?
3 V6 ~! ^/ P" `! [1 y  I3.介绍 Spark 的各类强大组件,它怎样构建出怎样一个庞大的生态环境。. `7 P' i& i9 H7 X
通过这次公开课,了解 Spark 的同时,带大家一起入门了解大数据~
- N3 z8 M; K$ G0 B" M# W课程适合人群. N+ r6 C" u6 u6 l4 I
1.想了解大数据,不被时代所抛弃,看看这个行业为啥如此火爆的同学。* d% S8 J9 T& w$ N. I9 \  r8 I6 Q
2.目前需要做大数据相关论文、学术研究,急需补充大数据相关知识的同学~3 W& C, w/ y% x
3.有计算机科学背景,想往数据分析方向发展,想掌握一种大数据处理手段的同学!
# W" S* A2 g0 R5 B- M' s8 L* e$ y4.我不管!哪行工资高、前景好我就去干哪行的同学!4 d9 \- |9 o) J  R+ A
公开课指导老师
9 w2 h3 f+ d0 z  i& v0 b1 I% l$ d9 X# o/ r. J1 f& t
Muyang
* b' p/ `' M' q) e0 r硕士毕业于University of Virginia, Data Science Institute; 本科毕业于University of Virginia 数学专业(金融数学方向)。在校期间曾担任微积分和常微分方程的课程助教,有丰富的教学经验。
) _% c$ \9 A6 i5 q& x$ w7 s8 _精通SQL/R/Python和Spotfire,有超过3年的数据统计和可视化软件使用经验;已通过精算概率论(P) / 金融数学(FM)等精算师相关行业考试;现为CFA 二级候选人。) d4 `  ]5 u7 u( K- x
通过在金融行业中多年的积累和观察,Muyang导师对金融和保险业有着自己独到的行业洞察力,是数据统计和分析的「小达人」。7 m+ M: c) V2 E6 m% n3 _& S  L8 N
↓↓ 讲座大纲概览 ↓↓
6 N) f% l( s& r1. Need of spark
4 O- B% |7 O: k2 C9 N' {; y· Real time Data (实时计算)
4 f' v2 |$ ^5 A/ u2 L. D· BIG data
: @7 a5 ]) e% a, [+ W2. What is spark- }# Z* ^+ w2 n' v. ^( c" N% y
3. How does Spark work
1 D0 }. u! L$ e- R9 h· Foudamental concepts of some important words, as RDD, API . E8 i/ j, e3 H/ \8 Z9 o, m- d2 e0 N
· Spark VS Hadoop/ u* z. Q2 |0 J! v2 p, f& ~: k+ l
4. Spark Ecosystem(生态环境)
4 w4 f% q3 g' t. \5 Q( B# d1月2日 晚上22:00( Y3 p/ e! D; a+ x+ P; K
「 Spark $ |* p0 `% T# _  n
即可获得入群方式
3 r! H; C% }, l/ M" K我还能说什么呢,请看下图。↓
( r$ a# ?/ P2 G# O& C6 U- C- K. f: ~
以下课程报名未截止,欢迎继续上车

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发布主题
推荐阅读更多+
阅读排行更多+
用心服务创业者
0851-88611148
周一至周五 9:00-18:00
意见反馈:admin@0851life.com

扫一扫关注我们

Powered by 童码少儿编程 X3.4© 2001-2013 0851life Inc.|网站地图