学院公开课|Python爬虫/Excel实用技能/Spark大数据,2018年开场豪华学习礼 ...

[复制链接]
bigocean 发表于 2017-12-31 16:42:02 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
今天「棕榈学院」主要内容有三个——
2 w, K& e8 A2 T8 z2 u对某门课程超感兴趣的可以手动跳跃至相关课程呦~, ]+ Q6 z8 E% a( l' }% }
以下请看详细内容:
4 }/ F3 i8 X; Z19 S7 `4 _- v( P
Python网络爬虫找美食9 n4 q( v/ L: X2 S3 t
人生三大难题之一:今天的晚饭吃啥?
: J% M5 M2 Q$ G/ {小学
; M! F7 Y4 U# G. a1 K% `2017年就快没了,我们抓紧最后的时间去吃点好吃的吧!
4 H; r: U% z$ J+ b& _小院% P, Z( h: O8 P( C
哈哈哈约饭理由100分!我们去吃啥呢?/ G( B+ g1 C! a0 U5 k- j* f
小学' q; N. @5 S# X, |( _
稍等我去看一下点评~你想吃什么种类?1 U8 y+ A+ n7 T; \2 L' S8 R
小院
. x4 \& p. W$ I. n6 \, y我都行啊,找家好吃的呗。
. }% b4 W7 b7 e: k小学- B8 o: @+ {7 |$ z7 |9 J6 x
火锅?你看下这个,我收藏好久了。还有这家日料也很好吃。对了之前新开的这个烤鱼口碑也很好,哎还有这个海鲜馆……
0 ^) r0 b4 E3 V- P1 y) Z( ~% r小院
3 e( x4 t& e2 L# `8 \- v- xEmmmm……
& \6 @3 B3 v* ^* c* B10分钟后……
3 \$ ?0 K& x# m7 X+ g- _- _% P- 哎好累,评论看得我眼花,不知道去哪个了……  Z/ U; c; O6 k
- 评论太两极分化了,要是能快速筛选就好了。
# D7 V6 z! a. w" v8 r6 [% A; k$ N有!学院君再次邀请到你们认真可爱的杰克老师,用Python做一次网络爬虫,使用美食点评网站上的各类评论、位置、价位、打分、图片等数据,对美食们做一波「全面彻底、刚正不阿」的大筛选!$ S4 X' _' E9 v6 ?
本次公开课 爬虫项目预览* ^5 Y7 K5 ?( |: R
杰克老师已经身先士卒,用Python大法爬过了Yelp上餐馆的数据,搜集了1000家纽约的美食餐厅信息。
" I( [) K1 W3 G" f看再多的文章和演示而不动手去尝试,知识永远不会变成你自己的能力。
# Y; F: }  p/ i/ P. V▌01 杰克老师爬取出的1000家餐馆数据0 M1 L% E! E3 t: Q0 d# {
▌02 前方高能!爬取出的1000张美食图片!8 \9 n. b' a  r0 T; q( d& p2 k$ V
(求学院君没吃饱饭做这张图时的心理阴影面积). R/ N& T0 }& _  @" @1 m+ Y; h
▌03 杰克老师编写成功的爬取代码! E. q7 L6 R2 m4 D) ]* F
快来和我们杰克老师一起,用Python做美食网站的网络爬虫吧!我们自己,动手动脑,丰衣足食!
" \4 Y9 Z# R- N7 `; J
第一,方法有了,我教,你照搬;
: S3 W2 O6 p6 U% t7 L4 G3 N) n第二,美食有了,你约,不会错!
8 Y- ~& l8 B( K5 {! e6 G' c
适合人群, S+ M& y" z" o# F4 y; V
1. 正在学Python,好奇如何玩儿小项目的同学们;2 C3 w; n  S, ]- C, j8 e. k/ _
2. 苦恼如何搜集数据源,科研/学习/工作中不知道第一步如何下手的宝宝;7 B1 J3 @, `" t
3. 关注产品评论/大众舆情/顾客喜好偏向的市场调研猿们;" ?, W$ s8 a! b# \- Z1 T
4. 关注搜索引擎优化,想要通过爬虫学习如何更好做内容的从业者;2 P( ~7 v4 w: m$ C
5. 史诗级选择困难症,每天都不知道吃啥好的天秤座;
1 k: [+ X5 |: C& E9 f& E
讲师介绍2 k6 n" h* `1 _& H) ?$ w" n
$ q8 }# o: Y. m1 L  F  P% K3 W* t
Jack0 d1 {: A* F5 t# @0 C* S! P( }
中国科学技术大学硕士,马里兰大学信息系统专业PhD,有多项开发信息系统的经验,曾获得过ACM/ICM-Finalist特等奖提名奖。(超级认真超级nice的杰克老师又要和大家见面啦~)
. K! d( Y/ G! g% V: n' Z↓↓ 讲座知识点预览 ↓↓
6 h8 W* X0 ?# U+ g用Python进行网络爬虫——
7 w# ]8 X* s. b, G. P寻找最好吃的美食店!+ t# _2 N5 D' o0 p1 a9 X
1. 介绍普通网页的基本结构和布局
7 A+ @- m% w+ \5 I" w2. 个人电脑设备是如何访问数据和爬取网络资源的?
! }0 |5 O+ U) U, |5 I/ C3. 爬虫是怎样工作的,爬取流程是怎么样的?$ i! W8 q8 ~0 C' @  [
4. 如何用Python做爬虫的结构?
; Z, v5 }6 f: ~8 N/ C+ ~5. 两个常见的Python爬虫库:
8 N6 ?4 x6 w% q/ L* A3 c, OBeautifulSoup V.S. Scrapy) {: V3 J; ]( I: u4 h
6. 两个常见大库里,一些小的Library和方法
; F0 f! }8 O4 V$ C9 F) @5 ~% a7. 如何避免爬虫程序被网站服务器禁止?6 J2 Y' _- S- Q0 [
8. 实例演示:以Yelp上餐馆的数据为例,爬取了1000家纽约的美食餐厅。同样的方法也可以用来爬大众点评噢~
2 ^- z) T+ }' `/ C- D公开课时间&形式
) q% I. c, z% w; ~3 F5 S2 S- F4 M6 m- K
北京时间2 b: v  k/ S3 y1 K/ b
1月10日 周三 晚上21:00
" o0 o% B2 j+ [' @9 C8 T在线直播:PPT+视频语音
% k- ?3 N1 @) r  S; l提供录播:无限回看" X+ b: b7 p) @' a+ a% c
报名方式4 W4 p. d2 }. W4 c

, \! A4 C/ W3 q7 K" H# E3 T& O长按识别此二维码,
. X* A. x9 O& @' j7 {. _3 E0 B& ]0 ?回复关键词$ j" h) o* p- e5 |2 }7 u  S$ a
「 美食 : ~8 K$ ^9 ~# _
即可获得入群方式% F, R" b5 G$ U& Z2 A# }
2
# I" d0 ]: d  W; E' l! _4 bExcel实用技能 公开课# ?" O: q! K; x( m( @
我吹过的最堂而皇之的牛,就是「本人精通/熟练掌握 Office 办公软件!, Q6 X3 x- C+ b1 N: j" c5 `* t, @# u
有些事儿,比如Excel,你以为你会了,你其实完全不会。
' c+ L2 V5 a" m- d, {有些事儿,比如Excel,你以为你不会,发现,百度了也没会……(住口)
  l% z+ m$ r; |* T8 |) j5 ~
● 简历上写着「熟练使用office办公软件」,却被HR几句话识破?
! `" s" }/ g( E● 看了无数Excel教程和心得,还是菜鸟一枚?
2 W9 L* E3 j) r' r4 R5 b● 需要制作图表时,靠着百度经验一点一点查,折腾半天还是一头雾水?0 {6 J% r0 I' P/ n" s$ }1 U7 J
● 实习/工作,一碰上数据报表就会变成非自愿加班星人?: H; _- m& D* u8 ^
● Excel到底有多厉害?怎样才算精通?如何系统学习?有哪些公式/技能是必备的?% [) u- ]# x* C( m- V7 {. X+ B1 y
……$ E' K$ P) d0 V8 Z7 ]
不会三连
9 F2 g# n, q7 N' @" N差点意思
+ F* s0 H/ J5 k% g感觉不对, t+ E9 z) S; i! g& C. T) g
我真不会- Y* j" p* z3 n+ E
但其实,这还不是最可怕的。
6 n7 m- A' i" i# M我们常说,学习是一件有针对性有目标的事情,如果现在让一只小白立下「2018年一定要精通Excel」的宏愿,Ta的第一个问题一定是——. R4 O, c( @* \+ Y7 P" X& l5 p
诶?我不知道从哪里开始学?我好像也会做一点表啊……# h& t- r4 _5 a) p: |
今天,学院踩着2017年的尾巴,专门成立了 Excel 扫黄(手动划掉)盲小分队,为大家普及那些工作上常用,而大部分小伙伴却不知道的 Excel 技能点!(2018年我们要一起成为Excel小能手!)
: r; h1 Y3 U$ U9 m6 ~6 F划重点:首先,我要告诉你,Excel怎么才能「物尽其用」~+ u( P. c0 K4 i1 z7 @! A
希望2018年的你,可以这么说:
. W1 R, ?$ c( a& v适合人群
2 B; z+ J4 E; J$ h6 E# d; X& H
1.Excel 基础薄弱,想快速提升自己 Excel 数据处理能力的同学;- N! U. f6 l% ~$ z9 _9 H
2.需要找工作,再也不好意思厚着脸皮说自己精通 Excel 的同学;, s& {4 b/ b2 E9 a; r5 }' w
3.工作中需要经常使用 Excel 的财务、审计、数据专员们;# A( q' Y% ~! c8 b
4.已将Excel加入「2018年豪华学习礼包」,需要学习方向的小伙伴!
4 w% v2 Z) N& l. G. y
我们人美音甜超级可爱的语洋老师又回来辣~这次带领大家Excel大扫盲噢~~1 J: m7 i2 u. z3 U* n
1小时不一定能精通Excel(学院君真这么吹你也不会信呀),但是一定能帮助你2018年有更加清晰的Excel学习计划!
: A+ x) C3 s, v7 Z8 S. BYu yang
& H2 K  V$ g" f& j( B, w+ m芝加哥大学金融工程硕士,本科就读于弗吉尼亚大学经济与数学专业。; G* e1 Y9 P3 k( d
曾实习于四大/投行/资产管理公司/保险公司,即将在美国开始投资分析师工作,关注于ABS和CLO等资产证券化产品的投资以及投资组合分析。熟练使用R语言、Excel等各类软件。
6 k( D# D9 A( P0 h2 r1 e↓↓ 讲座大纲概览 ↓↓ # R3 w1 G4 D: f$ B# Z7 H
1. Excel基础知识扫盲:
5 a# ~* E! ]% m7 l# ca.神奇的格式刷
1 P: w& @: o) [" {3 m) o, O  Db.变量与非变量# f, t* |- s/ K4 V& g0 G8 i
c.首行固定
) u" b  {; S- R& T1 E6 U& q2. Excel的数据可视化:
8 Q. J6 ?- E- m  [. ua. 折线图/柱状图/扇形图* E& a8 Y5 l) D. N( S
b. 画图的“潜规则”是什么?
& R! I0 R) u1 R  \& Xc.《华尔街日报》上的复杂图表是怎么做的?
$ S2 Z# v% S0 ~- M* ~+ ^. b9 p3. Excel神奇的公式有哪些?
  X' a; l; j% [- E/ {a.IS Function( w6 {( h, f) g- N
b.Conditional! |! k5 N* F* z. f
c.Mathemaical8 C: x# S/ p: _2 _# X
d.Find&Search
$ F0 w% T6 h1 o+ q7 ]e.lookup
6 m' r6 q8 H; kf.Logical
9 s9 O" P5 R6 A& S$ K$ t* _; n4.什么才算 Excel 的高级应用?0 C) z* b' X- X  N0 J! L9 G4 U
a.VBA/ b& f+ E9 g! ]* Y
b.Pivot Table# N. Q# @- _7 J& n
c.统计建模
3 B* g% n9 k8 v8 L: W( O+ d' G5. 成功前的Excel:/ @  x" Z% s- E7 x- o! T2 ^: U
交图表给老板前,需要检查什么细节?
6 C" y  D; ~. t% s7 a* _  r, P6.职业好奇心:8 v7 V6 l' P7 t8 a! k
数据科学家和投行分析师都用 Excel 做些什么?& O) B# n. e' R1 a2 _0 Z
7. 案例分析Case study:4 Z5 F7 p% P% m: ?
用Excel 完成信用评级迁移模型的估测
- v" ~# a  j2 P2 T1月7日 周日 晚上21:00
2 x' }: {' {/ v* x$ [( B$ v「 Excel
7 b8 ]; g* L: ]8 Q7 j# q% B# k即可获得入群方式. Z6 e& p2 q6 s, @  _
3
7 V- D* O& p& z) o$ Q* ySpark大数据 公开课9 v6 e9 W7 b' W, A
大数据就是很大很大的数据?那到底有多大?  a1 C3 h  G5 }( P" [
举个知乎上看见的简单例子:  `" P# x  W- n$ ?
你有10个数字需要储存计算,那你可以直接丢进内存再分下类就完事儿。
9 {! O5 V% l2 M  V* W有1GB的数字需要储存计算,也可以一把丢进内存,前提是你电脑不太破,也勉强完事儿。' @, b+ \/ ~# \* \, f% w$ M; l
有10GB的数字需要储存计算呢,咋办?买几根内存条安上??/ O1 H5 U! }! B, \1 M
那100GB呢?你可以选择直接砸电脑了......% D* ]8 G  q0 g- O1 c
然而100GB也「只是」小数据,往往我们说的大数据都是 TB、PB 级别的,数据大到在一台电脑上不能完成储存和计算。
# F; c3 G% I3 o! \1 q. ~6 a世界上第一个发明洗衣机的人一定是个懒人,想要轻便地处理大数据一定有懒人给我们提供的工具。今天,学院君就带大家学习一款目前大数据处理软件中的新兴网红——Spark。& `( b/ t: S3 `/ e: P3 l# ^3 c% c
Spark 是一款专为大规模数据处理而设计的快速通用的计算引擎,是 UC Berkeley AMP lab 所开源的类似 Hadoop MapReduce 的通用并行框架,可用它来完成各种各样的运算,包括 SQL 查询、文本处理、机器学习等。
1 L9 }& h9 B9 T  f$ F# s学院Spark公开课& V5 C: F7 B, q: q& Z  f
是的没错,学院给大家带来的「Spark入门公开课」,当然是资源珍贵价值高!/ N- M& h: f* Z4 p2 C5 p
1.介绍Spark软件:它是如何工作的?为什么火?' P$ A' S9 i% q: O0 S4 m) r' Y
2.与 Hadoop 作比较,为什么很多人唱衰 Hadoop,看好 Spark?9 R/ ^$ e. j5 g% P$ x
3.介绍 Spark 的各类强大组件,它怎样构建出怎样一个庞大的生态环境。
3 N  ]2 W, y. T3 X3 W+ Q- g
通过这次公开课,了解 Spark 的同时,带大家一起入门了解大数据~9 S' ~; d  Z3 ~' n, I0 H5 W
课程适合人群
% g) p  ~0 S3 S
1.想了解大数据,不被时代所抛弃,看看这个行业为啥如此火爆的同学。
5 s, `; J4 u% W  T3 V: o& d- p5 x2.目前需要做大数据相关论文、学术研究,急需补充大数据相关知识的同学~- w: Q" V- J" K' P  s+ Y9 i4 T. h
3.有计算机科学背景,想往数据分析方向发展,想掌握一种大数据处理手段的同学!
- m/ P. A2 \7 Q8 N% ?4.我不管!哪行工资高、前景好我就去干哪行的同学!9 E! R# w5 L: Z1 q, M3 m
公开课指导老师
  ]5 x; U/ Y- c9 s" r' f2 q# H) ]( R8 H
Muyang * K7 y! H! F' e2 I) I! j( \- H/ E
硕士毕业于University of Virginia, Data Science Institute; 本科毕业于University of Virginia 数学专业(金融数学方向)。在校期间曾担任微积分和常微分方程的课程助教,有丰富的教学经验。
- I% {- i8 y% ~8 h$ u+ V2 i精通SQL/R/Python和Spotfire,有超过3年的数据统计和可视化软件使用经验;已通过精算概率论(P) / 金融数学(FM)等精算师相关行业考试;现为CFA 二级候选人。$ {! B$ W7 b- r+ W' G( q
通过在金融行业中多年的积累和观察,Muyang导师对金融和保险业有着自己独到的行业洞察力,是数据统计和分析的「小达人」。; P7 _0 n4 u  `- d( Y. G7 t
↓↓ 讲座大纲概览 ↓↓ % S! o! ?" ]. \6 V
1. Need of spark
& a* O/ R: B7 o$ m; P· Real time Data (实时计算)9 |( t4 l* O7 D: b$ u7 B7 ~
· BIG data
# B7 @+ c8 o$ \4 ]5 v( m2. What is spark  w5 S7 P4 h* X. e) M
3. How does Spark work* X' W2 D8 w. \. q8 D
· Foudamental concepts of some important words, as RDD, API , M& z! ?7 G' O2 p
· Spark VS Hadoop
& q- \4 y0 B! u' ^3 s4. Spark Ecosystem(生态环境)
- \! b; ^/ A$ W, U8 c5 H- j; k1月2日 晚上22:002 F9 {8 M' z/ Q3 F# k/ J$ F; G$ ~
「 Spark . ?' e  G2 L$ R6 p& i. z5 p' @
即可获得入群方式
0 I# t: V) ?2 m% s  I2 K4 k& I我还能说什么呢,请看下图。↓" P& q6 P9 G. }" H2 Q
2 W: A' z' z2 [- ?  q
以下课程报名未截止,欢迎继续上车

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发布主题
推荐阅读更多+
阅读排行更多+
用心服务创业者
0851-88611148
周一至周五 9:00-18:00
意见反馈:admin@0851life.com

扫一扫关注我们

Powered by 童码少儿编程 X3.4© 2001-2013 0851life Inc.|网站地图