学院公开课|Python爬虫/Excel实用技能/Spark大数据,2018年开场豪华学习礼 ...

[复制链接]
bigocean 发表于 2017-12-31 16:42:02 | 显示全部楼层 |阅读模式 打印 上一主题 下一主题
今天「棕榈学院」主要内容有三个——" d. C; _7 G9 g1 H; Y( m9 o7 X
对某门课程超感兴趣的可以手动跳跃至相关课程呦~* H' y; b+ b# P6 ~! f6 M; ?
以下请看详细内容:
" l8 d) a6 A8 E7 B16 R' \, B& W9 u5 M  @6 V" G* F9 L+ Y
Python网络爬虫找美食
$ m" y. |. e2 a人生三大难题之一:今天的晚饭吃啥?
! J( A) ^! z6 \5 U5 F* l小学. I  p2 J: @/ f$ {
2017年就快没了,我们抓紧最后的时间去吃点好吃的吧!- z! G5 n2 N, S& I  f! k0 l
小院$ X' |4 i. C" Z6 ?
哈哈哈约饭理由100分!我们去吃啥呢?4 A: N- w% ~" g& V; }$ p
小学
0 P4 ^3 @5 B! _- ]8 h5 y稍等我去看一下点评~你想吃什么种类?7 k9 N& a( M; i7 r/ S' r3 t
小院/ }8 p! J+ ~' Q( d5 Y
我都行啊,找家好吃的呗。
$ H) @6 {0 s( l, s' k小学
) e$ _+ k+ ^# x6 m& o火锅?你看下这个,我收藏好久了。还有这家日料也很好吃。对了之前新开的这个烤鱼口碑也很好,哎还有这个海鲜馆……) h/ O( h, O4 l; \, l7 f( S1 L
小院/ t5 }8 S9 ^/ q) i! u
Emmmm……8 R" u, I! B( _. A
10分钟后……6 Z4 s0 V& E1 Y3 k. s; d
- 哎好累,评论看得我眼花,不知道去哪个了……7 @, R4 c  w* m+ X# z
- 评论太两极分化了,要是能快速筛选就好了。1 }( e2 z" [7 ?* I$ m4 _; o% C+ |' V6 J
有!学院君再次邀请到你们认真可爱的杰克老师,用Python做一次网络爬虫,使用美食点评网站上的各类评论、位置、价位、打分、图片等数据,对美食们做一波「全面彻底、刚正不阿」的大筛选!& m* \- F0 E, b9 A
本次公开课 爬虫项目预览: d! Z3 Q: `/ V% K6 {
杰克老师已经身先士卒,用Python大法爬过了Yelp上餐馆的数据,搜集了1000家纽约的美食餐厅信息。
" \/ y+ L2 B+ Q4 D$ `看再多的文章和演示而不动手去尝试,知识永远不会变成你自己的能力。  ]% R( l* `$ f
▌01 杰克老师爬取出的1000家餐馆数据" `$ C% Y- j& k
▌02 前方高能!爬取出的1000张美食图片!5 H4 \% U! x7 M7 y
(求学院君没吃饱饭做这张图时的心理阴影面积), M8 @7 y$ k4 ^
▌03 杰克老师编写成功的爬取代码
  b9 y7 X6 `+ r( v" P0 x# x# E- B快来和我们杰克老师一起,用Python做美食网站的网络爬虫吧!我们自己,动手动脑,丰衣足食!1 S+ B. w7 o& c6 e
第一,方法有了,我教,你照搬;
& x  Y% f4 f' `; r第二,美食有了,你约,不会错!
1 {# o6 A, ^1 `4 t2 M( i
适合人群. ^7 x  G7 H! V, }( S5 [- _2 C
1. 正在学Python,好奇如何玩儿小项目的同学们;
4 G5 C6 q) F* a* R/ v$ O3 q2. 苦恼如何搜集数据源,科研/学习/工作中不知道第一步如何下手的宝宝;
2 ?9 u$ {* S4 v( T& Q- }3. 关注产品评论/大众舆情/顾客喜好偏向的市场调研猿们;$ v  O4 R+ a$ i- o) B6 j
4. 关注搜索引擎优化,想要通过爬虫学习如何更好做内容的从业者;
' w* Y: A/ c7 _9 s: j5. 史诗级选择困难症,每天都不知道吃啥好的天秤座;
  v; `( a+ d. t0 p" K0 A0 P# ~
讲师介绍
, I: ]" e9 O( u( ]& }
% q; o5 `/ l' r# w/ CJack: @1 p0 @( K+ ]
中国科学技术大学硕士,马里兰大学信息系统专业PhD,有多项开发信息系统的经验,曾获得过ACM/ICM-Finalist特等奖提名奖。(超级认真超级nice的杰克老师又要和大家见面啦~)
  f/ p6 l9 Q/ E2 T3 r↓↓ 讲座知识点预览 ↓↓( W1 \$ T" u. s& t; d- ?
用Python进行网络爬虫——
. A# a, B7 s' E6 U: b9 g/ a寻找最好吃的美食店!
/ ]$ d8 `; M# m+ t/ o1 b1. 介绍普通网页的基本结构和布局
& A# @: m. s+ p5 T$ O+ a% K& g+ i4 v2. 个人电脑设备是如何访问数据和爬取网络资源的?; {- c. [, ]  U: C/ z$ _
3. 爬虫是怎样工作的,爬取流程是怎么样的?$ T* @4 d6 u) _: ~
4. 如何用Python做爬虫的结构?$ V$ I2 @# t8 \1 l0 C: ?9 B
5. 两个常见的Python爬虫库:4 l% R# u; n9 i7 P2 |$ Y
BeautifulSoup V.S. Scrapy3 p; `* M- a( I; @
6. 两个常见大库里,一些小的Library和方法# ^0 `4 Y9 g2 x' I* Z
7. 如何避免爬虫程序被网站服务器禁止?
7 J  S7 w$ n+ L8. 实例演示:以Yelp上餐馆的数据为例,爬取了1000家纽约的美食餐厅。同样的方法也可以用来爬大众点评噢~
1 g$ d2 h2 c( r: C, ~9 M2 o; U公开课时间&形式8 c' W; D4 X4 d, i+ x6 y

, f1 D6 h" t$ ^0 X8 |" ], o北京时间
# a! I! ]" X' |0 ~" z- c, |1月10日 周三 晚上21:001 u% H9 v/ i8 T
在线直播:PPT+视频语音2 E7 s+ i) m- H( u5 E* L& t
提供录播:无限回看
$ z! b  f7 ^" T8 o报名方式
# k( G9 Q  r/ \: e+ a5 @; g. ?  {( u! O+ h: c" ^' Y3 [4 Y
长按识别此二维码,9 p  N0 F7 }* |! o- I* d
回复关键词
% l# b5 E& V! a「 美食 9 H' h; A/ p% v0 F9 E( u
即可获得入群方式' J0 Y* A# F4 b  {! {
28 y) h( C' w  `5 Y  U
Excel实用技能 公开课
$ r' R5 g6 }" y9 A% ^% M; J! b. W我吹过的最堂而皇之的牛,就是「本人精通/熟练掌握 Office 办公软件!
7 Z! @5 f( y1 v/ S- M. p有些事儿,比如Excel,你以为你会了,你其实完全不会。
5 d  N$ r7 [0 W: {有些事儿,比如Excel,你以为你不会,发现,百度了也没会……(住口)
% @2 j' r  @' ~8 @( K7 [; l( Q1 k
● 简历上写着「熟练使用office办公软件」,却被HR几句话识破?: o/ r) j% J: ?1 [& b0 z% Q
● 看了无数Excel教程和心得,还是菜鸟一枚?" x8 D# ?* w# P* m& u1 G
● 需要制作图表时,靠着百度经验一点一点查,折腾半天还是一头雾水?
! n" T7 Y8 b' I, Y, d. a5 _● 实习/工作,一碰上数据报表就会变成非自愿加班星人?* l  w. u6 A* G" k+ w
● Excel到底有多厉害?怎样才算精通?如何系统学习?有哪些公式/技能是必备的?
2 A3 H2 l+ v, C8 J……6 e! [1 w& D8 N* a
不会三连5 t1 u& L' c4 e6 u9 C" p* o
差点意思
0 D$ ~1 _; H0 ^8 v* k: d感觉不对
) z6 B5 t/ v( [2 h  w我真不会2 K  y4 d+ f/ F" J& n% {
但其实,这还不是最可怕的。2 F: `8 l/ u7 E& L8 A* _) D
我们常说,学习是一件有针对性有目标的事情,如果现在让一只小白立下「2018年一定要精通Excel」的宏愿,Ta的第一个问题一定是——+ |: a+ G  X4 e' S1 Q
诶?我不知道从哪里开始学?我好像也会做一点表啊……
$ P3 j/ c  ^, y' ]1 [- u$ s9 l今天,学院踩着2017年的尾巴,专门成立了 Excel 扫黄(手动划掉)盲小分队,为大家普及那些工作上常用,而大部分小伙伴却不知道的 Excel 技能点!(2018年我们要一起成为Excel小能手!)* d1 ]# g3 Y' g$ r: T0 {
划重点:首先,我要告诉你,Excel怎么才能「物尽其用」~8 v. t/ s% N2 H
希望2018年的你,可以这么说:
/ \+ R) ^  a$ a. c. S适合人群. L! c& a" D  O
1.Excel 基础薄弱,想快速提升自己 Excel 数据处理能力的同学;  u; Q% O. L" `& H, R* c
2.需要找工作,再也不好意思厚着脸皮说自己精通 Excel 的同学;
- {9 x. N% n/ _+ J; e* c3.工作中需要经常使用 Excel 的财务、审计、数据专员们;% Y& N/ R, b& Q8 G9 A" I3 E/ r' W4 H
4.已将Excel加入「2018年豪华学习礼包」,需要学习方向的小伙伴!9 r' B' v% @' @; h4 ?
我们人美音甜超级可爱的语洋老师又回来辣~这次带领大家Excel大扫盲噢~~8 {  K8 p% v) w* r) E% [' U
1小时不一定能精通Excel(学院君真这么吹你也不会信呀),但是一定能帮助你2018年有更加清晰的Excel学习计划!
$ F3 v* I9 T% g) n8 H+ I+ IYu yang $ ]; c( a) ~$ C9 |2 `$ a& Z
芝加哥大学金融工程硕士,本科就读于弗吉尼亚大学经济与数学专业。
" L; S; p  B0 A0 Q, q7 w/ F& f曾实习于四大/投行/资产管理公司/保险公司,即将在美国开始投资分析师工作,关注于ABS和CLO等资产证券化产品的投资以及投资组合分析。熟练使用R语言、Excel等各类软件。
: Z4 f. P1 h; _/ }+ I; E↓↓ 讲座大纲概览 ↓↓
! I5 ^, ^8 ^; j8 x! F& n- k1. Excel基础知识扫盲:" t  S2 N6 {. W! H, m2 f
a.神奇的格式刷1 y) \* J- R+ t7 F
b.变量与非变量
. `& p5 ?0 [+ zc.首行固定4 x4 O5 N' L7 k- S0 C0 a- c
2. Excel的数据可视化:
+ s0 z  T( ?2 u* Ca. 折线图/柱状图/扇形图8 r; [% B* O4 H5 Q2 a
b. 画图的“潜规则”是什么?
% c. E# f+ D# A! B6 `) J3 K. Fc.《华尔街日报》上的复杂图表是怎么做的?
. B  R) o2 E* s2 K0 O. y, N* E, \3. Excel神奇的公式有哪些?2 @0 A) M& s  O, k1 Q
a.IS Function
) \' Z& }2 H+ hb.Conditional
3 Q( }8 {4 ?$ b1 _0 l1 J5 o; y& Yc.Mathemaical
' A$ u9 f  |- G. p9 \d.Find&Search  Q8 E3 O/ B. E
e.lookup' S- k* D, W' @
f.Logical
$ E% B6 T6 B8 Y1 ]0 s8 x7 S1 T4.什么才算 Excel 的高级应用?
9 k7 y5 |) I8 _- ]+ S4 ~0 _a.VBA
/ a  T9 l& C$ U8 ?b.Pivot Table) y1 r( C$ ]# ?' n1 X
c.统计建模) o  _. A% e9 i* ^$ e
5. 成功前的Excel:# o2 q0 D* g+ a5 W% z! a0 S
交图表给老板前,需要检查什么细节?
: G6 r5 \. M  {. F9 c2 R( r6.职业好奇心:$ Y; s: `( P, e7 \: K
数据科学家和投行分析师都用 Excel 做些什么?
. [, M6 D7 p  t# F% E8 y) }) Q7. 案例分析Case study:6 k/ O5 Z7 }4 b! u1 K; a
用Excel 完成信用评级迁移模型的估测$ T0 d' Q; O. e. z* K# B8 u( Y$ F3 U& _
1月7日 周日 晚上21:00
$ O# A' ~/ E, d% X「 Excel : [; ?1 y' q% z* |  K; ?
即可获得入群方式
1 S) l4 F5 W! l3
& e6 a/ x" c. vSpark大数据 公开课0 Y  P) L2 _( j, p! E- I! ~8 m
大数据就是很大很大的数据?那到底有多大?( u3 v/ |  z. j% F1 }$ `5 w
举个知乎上看见的简单例子:
1 a0 i! _- s; m3 i! R2 i
你有10个数字需要储存计算,那你可以直接丢进内存再分下类就完事儿。6 w/ M: r, X0 w# N. M
有1GB的数字需要储存计算,也可以一把丢进内存,前提是你电脑不太破,也勉强完事儿。, h# ?/ e8 p9 y  q) v
有10GB的数字需要储存计算呢,咋办?买几根内存条安上??- i; b9 O% d- e9 Y- k! k
那100GB呢?你可以选择直接砸电脑了......
0 M( l  l1 r, B1 W
然而100GB也「只是」小数据,往往我们说的大数据都是 TB、PB 级别的,数据大到在一台电脑上不能完成储存和计算。
2 ~% v4 |# U3 y0 E5 {+ k. u世界上第一个发明洗衣机的人一定是个懒人,想要轻便地处理大数据一定有懒人给我们提供的工具。今天,学院君就带大家学习一款目前大数据处理软件中的新兴网红——Spark。* s' D$ j: a" @
Spark 是一款专为大规模数据处理而设计的快速通用的计算引擎,是 UC Berkeley AMP lab 所开源的类似 Hadoop MapReduce 的通用并行框架,可用它来完成各种各样的运算,包括 SQL 查询、文本处理、机器学习等。1 |& |( u" Z) u: Q( _7 K/ h- N
学院Spark公开课- U; n& W7 q/ [! }  z/ o: R
是的没错,学院给大家带来的「Spark入门公开课」,当然是资源珍贵价值高!
, V) b% G0 r8 m! u
1.介绍Spark软件:它是如何工作的?为什么火?
" _: a1 Z$ Z3 f4 h* \* y( \6 i2.与 Hadoop 作比较,为什么很多人唱衰 Hadoop,看好 Spark?
3 r* r& ?- g) K, _' M% V2 R, `1 C3.介绍 Spark 的各类强大组件,它怎样构建出怎样一个庞大的生态环境。7 |1 r& o$ m; A! i7 f4 Y1 w: l7 p
通过这次公开课,了解 Spark 的同时,带大家一起入门了解大数据~
$ z6 Y  c. \0 x! K课程适合人群: Y, i1 r- j4 x+ V( o$ Y7 R$ j$ x2 h
1.想了解大数据,不被时代所抛弃,看看这个行业为啥如此火爆的同学。2 L5 R8 D' _. I  s' w
2.目前需要做大数据相关论文、学术研究,急需补充大数据相关知识的同学~# a0 g+ n3 q2 @- M- n
3.有计算机科学背景,想往数据分析方向发展,想掌握一种大数据处理手段的同学!* b- c4 V7 H# _" V9 G( \
4.我不管!哪行工资高、前景好我就去干哪行的同学!8 j9 Q2 B; |! w+ J" f
公开课指导老师; ?- I2 s# |3 ^

/ D( N/ x& |# v% u: h( M; X" ZMuyang , t- n4 ]' @0 c* B. j6 Y8 ?% C% `
硕士毕业于University of Virginia, Data Science Institute; 本科毕业于University of Virginia 数学专业(金融数学方向)。在校期间曾担任微积分和常微分方程的课程助教,有丰富的教学经验。
, M7 p9 S9 `3 b- r# W精通SQL/R/Python和Spotfire,有超过3年的数据统计和可视化软件使用经验;已通过精算概率论(P) / 金融数学(FM)等精算师相关行业考试;现为CFA 二级候选人。. m. E4 F' a: U+ X$ e" U1 k9 \
通过在金融行业中多年的积累和观察,Muyang导师对金融和保险业有着自己独到的行业洞察力,是数据统计和分析的「小达人」。; n" J, `' P9 ~8 W
↓↓ 讲座大纲概览 ↓↓ $ v% Y! {$ B  J
1. Need of spark% D8 n# u* A1 P1 ]* q$ e
· Real time Data (实时计算)
2 g9 g0 R, E0 Z/ T· BIG data' ]% w+ c  Z2 m' n4 V: J; T
2. What is spark
" w) V, s) ~+ Q( t3. How does Spark work
6 W' g: P) Z" L· Foudamental concepts of some important words, as RDD, API 7 W/ r0 l/ p# [$ Z+ f
· Spark VS Hadoop
) O- A( S. ^6 v4. Spark Ecosystem(生态环境)0 n1 Y' B% p# r; g
1月2日 晚上22:00
3 d: S( U6 Y( k* F「 Spark
) V! v3 X' {4 n+ R/ l! S+ t) M即可获得入群方式
  v/ O# e/ i* N$ e  g' l我还能说什么呢,请看下图。↓- Z! J7 F) Y5 H7 I( y/ p
6 n* V6 B: e/ S3 F
以下课程报名未截止,欢迎继续上车

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发布主题
推荐阅读更多+
阅读排行更多+
用心服务创业者
0851-88611148
周一至周五 9:00-18:00
意见反馈:admin@0851life.com

扫一扫关注我们

Powered by 童码少儿编程 X3.4© 2001-2013 0851life Inc.|网站地图