1. DashDash是用纯Python构建数据可视化app的理想选择，因此特别适合处理数据做大屏展示的人。Dash是Flask，Plotly.js和React.js的混合体，示例图如下：2. PillowPillow专门用于处理图像，你可以使用该库创建缩略图，在文件格式之间转换，旋转，应用滤镜，显示图像等等。之前的文章有多篇都提到了这个包，例如图片批量加水印、办公自动化等等，只要是需要对图像进行
CDA117526
2022-03-11
1. 页面分析我爬取的页面是腾讯体育，链接如下：https://nba.stats.qq.com/player/list.htm观察上图：左边展示的分别是NBA的30支球队，右边就是每只球队对应球员的详细信息。此时思路就很清晰了，我们每点击一支球员，右侧就会出现该球队的球员信息。整个爬虫思路简化如下：① 获取每支球员页面的url；② 利用Python代码获取每个网页中的数据；③ 将获取到的数据，存
CDA117526
2022-03-05
1. DashDash是用纯Python构建数据可视化app的理想选择，因此特别适合处理数据做大屏展示的人。Dash是Flask，Plotly.js和React.js的混合体，示例图如下：2. PillowPillow专门用于处理图像，你可以使用该库创建缩略图，在文件格式之间转换，旋转，应用滤镜，显示图像等等。之前的文章有多篇都提到了这个包，例如图片批量加水印、办公自动化等等，只要是需要对图像进行
CDA117526
2022-03-05
通过这篇文章让设计师能入门数据分析。并为以后学习数据分析，摸索前进方向。并将数据思维引入到我们的项目中。数据分析不再是设计师的弱项，我们也可以站在数据的角度和产品经理一起做决策。设计团队引入数据分析，那么就需要一套成熟的适合自己的团队的模型做基础，所以数据模型是我们数据分析的理论基础。本文讲的是设计团队中可能会用到的一些数据模型。在数据模型中，我们可以学到数据模型的分类思路，以及如何创造出适用自己
CDA117526
2022-02-06
数据可视化，是将抽象的数据、指标、概念进行具象图形可视的过程。其在几个世纪前就是人们理解数据之间相互关联的首选方法。举个例子，最早的条形图开发在1786年，由威廉·普莱费尔发布的《The Commercial and Political Atlas》，这是有史以来第一个线性图和条形图。（史上第一张条形图）威廉·普莱费尔想比较苏格兰一年内（1780-1781）的进口总额和出口总额，并按照进出口的来源
CDA117526
2022-02-05
指标如何选择我们来看一个场景：当我们打开京东时，我们要计算页面中「精选」模块的点击情况，我们该怎么计算？相信你能想到 CTR ，也就是 点击次数 / PV，算出来是 平均一次PV，有多少次点击但是这么算真的合理吗？思考30秒，再往下看。就分子来说，点击次数没有异议，点击了多少次就是多少次。但是PV呢？PV其实有三种计算方式：1、页面展现次数展现就算，不论是首次，还是各种操作后，回到当前页面，都记录
CDA117526
2022-02-03
SQL优化之执行顺序 总结FROM 才是 SQL 语句执行的第一步，并非 SELECT 。对FROM子句中的前两个表执行笛卡尔积(交叉联接），生成虚拟表VT1，获取不同数据源的数据集。FROM子句执行顺序为从后往前、从右到左，FROM 子句中写在最后的表(基础表 driving table)将被最先处理，即最后的表为驱动表，当FROM 子句中包含多个表的情况下，我们需要选择数据最少的表作为基础表。
CDA117526
2022-02-03
1.1. 关于 SQLSQL 是 Structure Query Language（结构化查询语言）的缩写，是关系型数据库的基本语言，由 IBM 在 20 世纪 70 年代开发出来，作为 IBM 关系数据库原型 System R 的原型关系语言，实现了关系数据库中的信息检索。20 世纪 80 年代初，美国国家标准局（ANSI）开始着手制作 SQL 标准，并于 1986 年完成，被叫做 SQL-86
CDA117526
2022-01-26
【问】某胡同口的煎饼摊一年能卖出多少个煎饼？使用逻辑树分析方法来拆解。一年卖的煎饼数量=1天卖出的煎饼数量 * 365天。1天卖出的煎饼数量是多少呢？我们可以进一步拆解：1天卖出的煎饼数量=1天的工作时间 / 做一个煎饼的平均时间 现在我们将这个问题拆解为两个子问题了：1）做一个煎饼的平均时间是多少？2）1天的工作时间是多少？ 子问题1：做一个煎饼的平均时间是多少？大家都吃过煎饼，我们猜测是1分
CDA117526
2022-01-26
概述SQL中包含以下七种类型的函数：聚合函数:返回汇总值。转型函数:将一种数据类型转换为另外一种。日期函数:处理日期和时间。数学函数:执行算术运算。字符串函数:对字符串、二进制数据或表达式执行操作。系统函数:从数据库返回SERVER中的值、对象或设置的特殊信息。文本和图像函数:对文本和图像数据执行操作。1、聚合函数它对其应用的每个行集返回一个值。AVG(表达式) 返回表达式中所有的平均值。仅用于数
CDA117526
2022-01-24
所有的查询语句都是从 FROM 开始执行的。在实际执行过程中，每个步骤都会为下一个步骤生成一个虚拟表，这个虚拟表(VT)将作为下一个执行步骤的输入。1 FROM 执行笛卡尔积FROM 才是 SQL 语句执行的第一步，并非 SELECT 。对FROM子句中的前两个表执行笛卡尔积(交叉联接），生成虚拟表VT1，获取不同数据源的数据集。FROM子句执行顺序为从后往前、从右到左，FROM 子句中写在最后的
CDA117526
2022-01-24
一、什么是开窗函数开窗函数/分析函数：over()开窗函数也叫分析函数，有两类：一类是聚合开窗函数一类是排序开窗函数分析函数用于计算基于组的某种聚合值，它和聚合函数的不同之处是：对于每个组返回多行，而聚合函数对于每个组只返回一行。开窗函数指定了分析函数工作的数据窗口大小，这个数据窗口大小可能会随着行的变化而变化！开窗函数的调用格式为：函数名(列名) OVER(partition by 列名 ord
CDA117526
2022-01-23
