学院公开课|Python爬虫/Excel实用技能/Spark大数据,2018年开场豪华学习礼 ...

[复制链接]
bigocean 发表于 2017-12-31 16:42:02 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
今天「棕榈学院」主要内容有三个——2 a, T4 [9 P/ Q5 w0 a" n$ H
对某门课程超感兴趣的可以手动跳跃至相关课程呦~
" F3 N) r7 C, ]% W& B7 P9 T以下请看详细内容:
: x% s3 `2 N" J1, ~( k( e8 N& L4 n. }9 {
Python网络爬虫找美食4 @/ _# n& h/ D9 X8 i
人生三大难题之一:今天的晚饭吃啥?
0 X: z; x3 B/ L4 W' {* n. q8 U- P' u小学
& y9 {  I( T0 G( Y2017年就快没了,我们抓紧最后的时间去吃点好吃的吧!% E7 B% o" \2 q( i; f
小院) L3 c- e; O# A% L
哈哈哈约饭理由100分!我们去吃啥呢?
- W5 p* @" N  ^小学! e+ B8 J7 m/ l0 A6 p
稍等我去看一下点评~你想吃什么种类?* W3 I7 H& l, R+ u! B
小院
6 A# {' f: G5 K6 J. ?我都行啊,找家好吃的呗。
8 N* G3 ]: `! X: A  s- P% T小学* E# n, q7 s" J4 y6 f# J7 A
火锅?你看下这个,我收藏好久了。还有这家日料也很好吃。对了之前新开的这个烤鱼口碑也很好,哎还有这个海鲜馆……
& [, Q1 ^1 @2 p2 H& x. v0 N& r. z小院7 Y' t8 x& O0 E2 A8 _
Emmmm……
# o9 {7 O8 H; }4 K10分钟后……
+ C9 U8 z5 C5 M# R( m% y3 R! ~8 T- 哎好累,评论看得我眼花,不知道去哪个了……
6 s+ M* F* u2 I1 |& K: d- 评论太两极分化了,要是能快速筛选就好了。
2 c$ ]0 _, P+ I& m  i9 Q  \有!学院君再次邀请到你们认真可爱的杰克老师,用Python做一次网络爬虫,使用美食点评网站上的各类评论、位置、价位、打分、图片等数据,对美食们做一波「全面彻底、刚正不阿」的大筛选!
1 [0 z8 z8 R9 {0 C/ a  E+ C% H& K本次公开课 爬虫项目预览8 r( m' B. J6 K! H) ?3 B7 q  p* W
杰克老师已经身先士卒,用Python大法爬过了Yelp上餐馆的数据,搜集了1000家纽约的美食餐厅信息。& _" ?  z7 l' W* }* @7 Z
看再多的文章和演示而不动手去尝试,知识永远不会变成你自己的能力。& y) E% T' A! h) F  C" j2 A
▌01 杰克老师爬取出的1000家餐馆数据
, w9 Q* ~, b9 A* L1 J▌02 前方高能!爬取出的1000张美食图片!
' P- ^% h" Y+ F5 w9 u(求学院君没吃饱饭做这张图时的心理阴影面积): f. t7 Z- C9 l6 c2 R' n  O
▌03 杰克老师编写成功的爬取代码3 L3 r1 h( c; y: u" y7 v
快来和我们杰克老师一起,用Python做美食网站的网络爬虫吧!我们自己,动手动脑,丰衣足食!. O3 ~6 q! V: N' m8 ], v1 u
第一,方法有了,我教,你照搬;0 j* E) @* _0 b+ i& o$ d" U
第二,美食有了,你约,不会错!
- M! o9 M- G$ ~, A# K5 u' E- E
适合人群
+ b1 Q6 @. V6 i( ?- C& u, e
1. 正在学Python,好奇如何玩儿小项目的同学们;
7 @* {4 k' C6 d( S1 ]+ i2. 苦恼如何搜集数据源,科研/学习/工作中不知道第一步如何下手的宝宝;7 g$ a; I% h6 Y8 Z6 P; C
3. 关注产品评论/大众舆情/顾客喜好偏向的市场调研猿们;5 X$ p, H$ s- O+ Q2 }+ }6 h9 [; N; r
4. 关注搜索引擎优化,想要通过爬虫学习如何更好做内容的从业者;' i# q$ Z" g+ ?5 k) K% I, v
5. 史诗级选择困难症,每天都不知道吃啥好的天秤座;
2 y+ ]+ W2 p: Z* W+ J
讲师介绍
. _; a: t" C( }- f+ x7 r4 i5 S7 j2 P; S  ~7 ]& q' A. {
Jack
& k4 i* b" G7 x9 T8 q0 y中国科学技术大学硕士,马里兰大学信息系统专业PhD,有多项开发信息系统的经验,曾获得过ACM/ICM-Finalist特等奖提名奖。(超级认真超级nice的杰克老师又要和大家见面啦~)
- b4 T, f* i4 `6 \↓↓ 讲座知识点预览 ↓↓; W! S2 Z. T5 A0 v  B: U) c+ {# N
用Python进行网络爬虫——' v& o/ W7 a+ f6 C7 q+ c8 J, n  \
寻找最好吃的美食店!
6 ~7 P# C5 G3 r# E. I1. 介绍普通网页的基本结构和布局5 [% G* s& R/ ~  \  T
2. 个人电脑设备是如何访问数据和爬取网络资源的?& E+ j' e7 w' k& K5 W9 O
3. 爬虫是怎样工作的,爬取流程是怎么样的?! g0 c+ p" r! x7 ~. A" _
4. 如何用Python做爬虫的结构?
9 Z, X( {: B: i) k5. 两个常见的Python爬虫库:
* {" i( U( `6 i7 WBeautifulSoup V.S. Scrapy# A3 Y. u- a& Z# U. I, J
6. 两个常见大库里,一些小的Library和方法
4 I) X' U; I8 |# H- _1 u7. 如何避免爬虫程序被网站服务器禁止?; s" z2 @1 ^& z- K1 e: K1 p
8. 实例演示:以Yelp上餐馆的数据为例,爬取了1000家纽约的美食餐厅。同样的方法也可以用来爬大众点评噢~$ a7 I/ L' @1 e/ C: c3 c# m
公开课时间&形式$ Z+ l. {) u7 b5 R) Q" }; q

. e2 F2 c# F; ?/ ^8 p! c北京时间
& o  r  n. I3 f3 P: s' U1月10日 周三 晚上21:008 J9 s9 @1 o, ]% i% w8 r: f
在线直播:PPT+视频语音! c  {  Y7 a, ^! |
提供录播:无限回看5 A! {! h4 ?5 t7 P3 u. e6 `' w' n% k- H
报名方式
6 l9 S3 N, A9 x2 E- V
: V0 I3 P/ O7 A; W  r* G长按识别此二维码,
) l  m" s5 y: z2 y5 R回复关键词: q& y7 ^& }2 c+ C
「 美食
( ]# o9 K7 h3 T6 H1 p5 @即可获得入群方式+ `/ F, k1 B% x% b3 a3 \
2
3 l  g- I. T/ h0 T3 B3 |Excel实用技能 公开课
1 T: T( _- e1 f' [8 p7 m我吹过的最堂而皇之的牛,就是「本人精通/熟练掌握 Office 办公软件!/ c5 N, O0 G, h: A6 G
有些事儿,比如Excel,你以为你会了,你其实完全不会。' M2 s- \  x# O+ G) d, O
有些事儿,比如Excel,你以为你不会,发现,百度了也没会……(住口)- A- {4 [6 |* n2 e, ^9 F- e$ n
● 简历上写着「熟练使用office办公软件」,却被HR几句话识破?
! L: \9 a1 F1 l- h! J$ g" _5 G) H/ ?● 看了无数Excel教程和心得,还是菜鸟一枚?
% ~9 r; B2 J1 C+ n5 N9 k● 需要制作图表时,靠着百度经验一点一点查,折腾半天还是一头雾水?
: J) ^, o2 G% g0 L" [# B● 实习/工作,一碰上数据报表就会变成非自愿加班星人?
% t; g# U4 S, |/ {5 P● Excel到底有多厉害?怎样才算精通?如何系统学习?有哪些公式/技能是必备的?) B6 k9 H6 P/ r9 X* w" b
……
; p% f2 Q0 D/ K' u
不会三连; ?- Y1 X* i, R& D+ y2 t3 V5 P: h
差点意思# D5 j$ J9 ]  ~4 J( k: ]7 U% t
感觉不对: R4 q- r3 M+ K, e1 A: A9 ]$ W( n1 g
我真不会
/ t# F# m! e. c但其实,这还不是最可怕的。  ?6 d. N2 l' {, {' y+ H5 `+ P* T
我们常说,学习是一件有针对性有目标的事情,如果现在让一只小白立下「2018年一定要精通Excel」的宏愿,Ta的第一个问题一定是——* p3 _5 j& g! Y$ w$ N
诶?我不知道从哪里开始学?我好像也会做一点表啊……
4 T" {3 V$ c( v" b# {  H+ c今天,学院踩着2017年的尾巴,专门成立了 Excel 扫黄(手动划掉)盲小分队,为大家普及那些工作上常用,而大部分小伙伴却不知道的 Excel 技能点!(2018年我们要一起成为Excel小能手!)
5 B$ n. H1 J5 D4 g8 }7 Z划重点:首先,我要告诉你,Excel怎么才能「物尽其用」~- d4 f" V- B: A% r1 q; \+ k
希望2018年的你,可以这么说:
: k$ v( _4 u& w* Z6 R  ]$ I适合人群) j& ]1 N$ h/ d5 V6 N$ N- u
1.Excel 基础薄弱,想快速提升自己 Excel 数据处理能力的同学;9 K/ p& e8 |" G6 L7 ~, o$ k
2.需要找工作,再也不好意思厚着脸皮说自己精通 Excel 的同学;4 B# W- S* n6 S; Q7 w. T( _
3.工作中需要经常使用 Excel 的财务、审计、数据专员们;( I  [  H! n8 H2 t2 i
4.已将Excel加入「2018年豪华学习礼包」,需要学习方向的小伙伴!
/ U- p. f" r/ z" s! f
我们人美音甜超级可爱的语洋老师又回来辣~这次带领大家Excel大扫盲噢~~
7 ~$ N% X: `4 L* y; G1小时不一定能精通Excel(学院君真这么吹你也不会信呀),但是一定能帮助你2018年有更加清晰的Excel学习计划!# @8 W  `, O7 M' ^( y7 }
Yu yang
- b( X9 c+ X" }3 ]2 l芝加哥大学金融工程硕士,本科就读于弗吉尼亚大学经济与数学专业。
( n/ y7 A6 {" X曾实习于四大/投行/资产管理公司/保险公司,即将在美国开始投资分析师工作,关注于ABS和CLO等资产证券化产品的投资以及投资组合分析。熟练使用R语言、Excel等各类软件。
* i) [6 K3 `* P, @/ r) r+ Y↓↓ 讲座大纲概览 ↓↓ 2 T& m" N' @' z* |
1. Excel基础知识扫盲:3 }7 C! M$ V* o$ _
a.神奇的格式刷% U% e4 r: X" o# S/ D
b.变量与非变量8 f( |+ K5 H: Z% }! h1 E' @
c.首行固定; H$ O2 r2 x1 d; W1 I
2. Excel的数据可视化:% [+ X& n, A6 g9 \, n; o$ J
a. 折线图/柱状图/扇形图
3 @0 M5 [/ z6 c7 }( N7 A9 {b. 画图的“潜规则”是什么?
; @  b3 \) u2 U7 x! u  d2 cc.《华尔街日报》上的复杂图表是怎么做的?3 R: U# ^& e5 G" [. c
3. Excel神奇的公式有哪些?  f  O0 ?3 `) |- }' M( m# l  x
a.IS Function
$ W5 Q/ b4 E" P. Ub.Conditional. C: V, L* }; C3 Y1 H& h5 [* y
c.Mathemaical0 p5 r  \! L+ ]$ q9 Z" z
d.Find&Search
4 A" k4 H, Z2 t4 C  \2 W& M5 T) _3 ae.lookup5 D8 N( j5 O, r, k
f.Logical
. @! F: L* |3 y4.什么才算 Excel 的高级应用?# n7 p' k8 {' I* l
a.VBA
- `+ R; Y% a- Z: {- w& Ob.Pivot Table9 G+ B) C  r$ K% W
c.统计建模" Y1 M8 V1 p, p$ ~0 H7 {
5. 成功前的Excel:2 A7 C0 f: I+ [0 c) y9 T8 ^
交图表给老板前,需要检查什么细节?
+ x# K- X- Y5 X) B5 M5 I% Z6.职业好奇心:( V6 z2 _3 J. z3 N: |
数据科学家和投行分析师都用 Excel 做些什么?
8 q; ]) z2 o9 o( ~1 @% @& ?7. 案例分析Case study:
2 l1 u4 g* o: J9 H; {用Excel 完成信用评级迁移模型的估测
9 P" P# I; Z' [. U4 S) ~1月7日 周日 晚上21:00" H& B; f# b- X( q3 j4 H7 k2 C
「 Excel
# q; C; _# ]- a' J% x, \; k+ U即可获得入群方式4 X/ {$ Y( W# P6 O( @1 X
3- i. Z* w% k" s  X
Spark大数据 公开课
1 g3 T) P3 d. B* o5 n大数据就是很大很大的数据?那到底有多大?2 ~; A' ~. K( V) d( X
举个知乎上看见的简单例子:
) }- Y  B0 G4 m; X
你有10个数字需要储存计算,那你可以直接丢进内存再分下类就完事儿。- w4 b0 Y, ~6 G6 K. w  j
有1GB的数字需要储存计算,也可以一把丢进内存,前提是你电脑不太破,也勉强完事儿。1 y! Z0 s7 z/ q% P7 v
有10GB的数字需要储存计算呢,咋办?买几根内存条安上??
% X. j& K# T* f, g, I% [1 z; Y那100GB呢?你可以选择直接砸电脑了......  R" p6 D8 w! \6 V9 D/ H
然而100GB也「只是」小数据,往往我们说的大数据都是 TB、PB 级别的,数据大到在一台电脑上不能完成储存和计算。
7 q3 d! b7 n& r+ }世界上第一个发明洗衣机的人一定是个懒人,想要轻便地处理大数据一定有懒人给我们提供的工具。今天,学院君就带大家学习一款目前大数据处理软件中的新兴网红——Spark。
0 X- _0 T! `) o/ G% cSpark 是一款专为大规模数据处理而设计的快速通用的计算引擎,是 UC Berkeley AMP lab 所开源的类似 Hadoop MapReduce 的通用并行框架,可用它来完成各种各样的运算,包括 SQL 查询、文本处理、机器学习等。( B; n* w8 J/ T4 S& i/ M5 e
学院Spark公开课, u4 }! ^8 B0 C3 B4 A9 \
是的没错,学院给大家带来的「Spark入门公开课」,当然是资源珍贵价值高!5 M" n( E- q5 F7 }
1.介绍Spark软件:它是如何工作的?为什么火?1 q3 `6 n9 K6 Y) w$ n" S, |
2.与 Hadoop 作比较,为什么很多人唱衰 Hadoop,看好 Spark?
( F6 M: M: |3 \0 |. [2 ^) B9 \3.介绍 Spark 的各类强大组件,它怎样构建出怎样一个庞大的生态环境。
$ F+ N8 K  \' i1 H" b0 d
通过这次公开课,了解 Spark 的同时,带大家一起入门了解大数据~
# l5 F3 V$ x- K7 H0 T3 o课程适合人群- E$ N% e& a5 ?9 X+ _, y
1.想了解大数据,不被时代所抛弃,看看这个行业为啥如此火爆的同学。
. E4 h9 U3 I/ O5 d$ C2.目前需要做大数据相关论文、学术研究,急需补充大数据相关知识的同学~7 g& }) S9 _$ S9 U% y
3.有计算机科学背景,想往数据分析方向发展,想掌握一种大数据处理手段的同学!
* f) s$ _. }( d# o% I4.我不管!哪行工资高、前景好我就去干哪行的同学!
; Y8 U2 Y" p4 b% M$ w
公开课指导老师4 {' G! `) u7 u, U& `- V
# |% C- {4 r9 o. L* P9 ]- S
Muyang
! i. V7 w# a) I5 }8 Y硕士毕业于University of Virginia, Data Science Institute; 本科毕业于University of Virginia 数学专业(金融数学方向)。在校期间曾担任微积分和常微分方程的课程助教,有丰富的教学经验。
# }+ B3 C! A, G0 l+ p, T精通SQL/R/Python和Spotfire,有超过3年的数据统计和可视化软件使用经验;已通过精算概率论(P) / 金融数学(FM)等精算师相关行业考试;现为CFA 二级候选人。
" {* m" p9 J& J* L通过在金融行业中多年的积累和观察,Muyang导师对金融和保险业有着自己独到的行业洞察力,是数据统计和分析的「小达人」。
7 Z; C$ g2 J2 R1 ^8 f, U3 u↓↓ 讲座大纲概览 ↓↓
: c6 }, b' S) Z2 I1. Need of spark
1 ^7 C5 H8 w- h+ {. Q4 w· Real time Data (实时计算)
0 m; G. a2 I% z2 r· BIG data7 J1 s1 D  C* _: Y9 P
2. What is spark; g! M) e9 D: \0 S/ D' i
3. How does Spark work
' X: [# @7 K* o7 Z: x% m· Foudamental concepts of some important words, as RDD, API & O6 A8 m* L  V& O  X( u: O6 a
· Spark VS Hadoop% I2 l6 a# r8 w. t( C, U
4. Spark Ecosystem(生态环境)
  y1 m: x) X, M" k- u! P7 z1月2日 晚上22:00
  h8 M3 d: ]3 j「 Spark
# R1 D) O$ }% m. U' W  o即可获得入群方式) s4 t/ z" W% H2 n8 L7 ^, q$ n* ]
我还能说什么呢,请看下图。↓6 g7 j9 M$ G/ @, E) b# I
1 m( X4 k7 {- _
以下课程报名未截止,欢迎继续上车

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发布主题
推荐阅读更多+
阅读排行更多+
用心服务创业者
0851-88611148
周一至周五 9:00-18:00
意见反馈:admin@0851life.com

扫一扫关注我们

Powered by 童码少儿编程 X3.4© 2001-2013 0851life Inc.|网站地图