数据科学专业问答社区，好文章，一字千金--CDA答疑社区

热线电话：13121318867

登录

CDA持证人阿涛哥

大数据应用案例之社会生活

大数据应用案例之社会生活——印度有一档非常受欢迎的电视节目Satyamev jayate，该节目整理并分析社会民众关于争议话题的各种意见，包括女性堕胎、种姓歧视和虐待儿童等社会热点问题，并使用这些数据来推进政治改革。虽然目前只播放了13集，但是来自各方的反馈数据不容小觑。来自印度电视和世界各地的YouTube上的400万观众;超过1.2亿人在其网站、Facebook，Twitter，YouTube

1.1152

1

0

0

关注作者

收藏

CDA持证人阿涛哥

大数据应用案例之能源行业

大数据应用案例之能源行业——智能电网现在欧洲已经做到了终端，也就是所谓的智能电表。在德国，为了鼓励利用太阳能，会在家庭安装太阳能，除了卖电给你，当你的太阳能有多余电的时候还可以买回来。通过电网收集每隔五分钟或十分钟收集一次数据，收集来的这些数据可以用来预测客户的用电习惯等，从而推断出在未来2~3个月时间里，整个电网大概需要多少电。有了这个预测后，就可以向发电或者供电企业购买一定数量的电。因为电有点

0.0000

0

0

0

关注作者

收藏

CDA持证人阿涛哥

大数据应用案例之保险行业

大数据应用案例之保险行业——保险行业并非技术创新的指示灯，然而MetLife保险公司已经投资3亿美金建立一个新式系统，其中的第一款产品是一个基于MongoDB的应用程序，它将所有客户信息放在同一个地方。MongoDB汇聚了来自70多个遗留系统的数据，并将它合并成一个单一的记录。它运行在两个数据中心的6个服务器上，目前存储了24TB的数据。这包括MetLife的全部美国客户，尽管它的目标是扩大它的国

0.0151

1

0

0

关注作者

收藏

liting李

一般银行的项目都是分析哪些指标呢

1、盈利性指标。①资产收益率；②银行利差率；③非利息净收入率；④银行利润率；⑤权益报酬率；2、流动性指标。①现金资产比例；②短期国库券持有比例；③持有证券比例；④贷款资产比例；⑤易变负债比例；⑥短期资产；⑦预计现金流量比3、风险指标。①利率风险②信用风险商业银行绩效评价的核心是资产收益率和股本回报率，利用这两个财务指标及其他派生财务比率指标可较准确地认识银行的获利能力。

54.5391

1

0

0

关注作者

收藏

liting李

一条sql执行过长的时间如何优化

1、查看sql是否涉及多表的联表或者子查询，如果有，看是否能进行业务拆分，相关字段冗余或者合并成临时表（业务和算法的优化）2、涉及链表的查询，是否能进行分表查询，单表查询之后的结果进行字段整合3、如果以上两种都不能操作，非要链表查询，那么考虑对相对应的查询条件做索引。加快查询速度4、针对数量大的表进行历史表分离（如交易流水表）5、数据库主从分离，读写分离，降低读写针对同一表同时的压力，至于主从同步

0.0000

0

0

0

关注作者

收藏

马锦涛

Python连接MySQL

from sqlalchemy import create_engineimport pymysqlengine = create_engine('mysql+pymysql://root:1234@127.0.0.1/jixun?charset=utf8', echo=True, encoding='utf-8', convert_unicode=True)engine = create_eng

119.8223

2

0

0

关注作者

收藏

马锦涛

mysql常见的错误代码大全

0101 属于其他进程的专用标志。 0102 标志已经设置，无法关闭。 0103 无法再次设置该标志。 0104 中断时无法请求专用标志。 0105 此标志先前的所有权已终止。 0106 请将软盘插入驱动器 %1。 0107 后续软盘尚未插入，程序停止。 0108 磁盘正在使用或已由其他进程锁定。 0109 管道已经结束。 0110 系统无法打开指定的设备或文件。 0111 文件名太长。 0112

0.0000

1

0

0

关注作者

收藏

马锦涛

什么是宏？

1、Excel宏就是一系列的操作步骤，比如在单元格中输入数据，复制A1的数据到B1，对A1:C3求和等等，这些操作步骤有简单有复杂。当某些操作步骤需要不断重复时，我们就要考虑录制宏了。2、宏的运行原理电影是用数字记录下来的，Excel中的宏是则是用一种语言保存下来的，这种语言就是VBA语言，这种VB语言可以在Excel中编写一些语句和代码，我们通过执行这些语言和代码可以完成一些特别操作，可

0.0000

1

0

0

关注作者

收藏

马锦涛

mysql异常错误 ERROR 2002？

启动mysql 报错：ERROR 2002 (HY000): Can’t connect to local MySQL server throughsocket ‘/var/lib/mysql/mysql.sock’ (2)1、先查看 /etc/rc.d/init.d/mysqld status 看看mysql是否已经启动.另外看看是不是权限问题.2、确定你的mysql.sock是不是在那个位置，

119.8223

3

0

0

关注作者

收藏

马锦涛

MySQL数据库数据量比较大的时候如何优化?

当MySQL单表记录数过大时，数据库的CRUD性能会明显下降，一些常见的优化措施如下：1、限定数据的范围：务必禁止不带任何限制数据范围条件的查询语句。比如：我们当用户在查询订单历史的时候，我们可以控制在一个月的范围内。；2、读/写分离：经典的数据库拆分方案，主库负责写，从库负责读；3、缓存：使用MySQL的缓存，另外对重量级、更新少的数据可以考虑使用应用级别的缓存；还有就是通过分库分表的方式

0.0000

2

0

0

关注作者

收藏

马锦涛

MySQL数据表损坏的修复方式有哪些？

使用 myisamchk 来修复，具体步骤：1）修复前将mysql服务停止。2）打开命令行方式，然后进入到mysql的/bin目录。3）执行myisamchk –recover 数据库所在路径/*.MYI使用repair table 或者 OPTIMIZE table命令来修复，REPAIR TABLE table_name 修复表 OPTIMIZE TABLE table_name 优化表 RE

0.0000

2

0

0

关注作者

收藏

马锦涛

MySQL存储引擎MyISAM与InnoDB区别

存储引擎Storage engine：MySQL中的数据、索引以及其他对象是如何存储的，是一套文件系统的实现。常用的存储引擎有以下：1、Innodb引擎：Innodb引擎提供了对数据库ACID事务的支持。并且还提供了行级锁和外键的约束。它的设计的目标就是处理大数据容量的数据库系统。2、MyIASM引擎(原本Mysql的默认引擎)：不提供事务的支持，也不支持行级锁和外键。3、MEMORY引擎：所有的

39.0688

2

1

0

关注作者

收藏

马锦涛

什么是MySQL的表分区？表分区与分表的区别？表分区有什么好处？

什么是表分区？表分区，是指根据一定规则，将数据库中的一张表分解成多个更小的，容易管理的部分。从逻辑上看，只有一张表，但是底层却是由多个物理分区组成。表分区与分表的区别分表：指的是通过一定规则，将一张表分解成多张不同的表。比如将用户订单记录根据时间成多个表。分表与分区的区别在于：分区从逻辑上来讲只有一张表，而分表则是将一张表分解成多张表。表分区有什么好处？1、分区表的数据可以分布在不同的物理设备上，

0.0000

2

0

0

关注作者

收藏

马锦涛

MySQL什么情况下应不建或少建索引？

1、表记录太少2、经常插入、删除、修改的表3、数据重复且分布平均的表字段，假如一个表有10万行记录，有一个字段A只有T和F两种值，且每个值的分布概率大约为50%，那么对这种表A字段建索引一般不会提高数据库的查询速度。4、经常和主字段一块查询但主字段索引值比较多的表字段

0.0000

2

0

0

关注作者

收藏

马锦涛

MySQL为什么使用数据索引能提高效率？

1、数据索引的存储是有序的2、在有序的情况下，通过索引查询一个数据是无需遍历索引记录的3、极端情况下，数据索引的查询效率为二分法查询效率，趋近于 log2(N)

0.0000

2

0

0

关注作者

收藏

马锦涛

Mysql中的myisam与innodb的区别？

1、InooDB支持事务，而MyISAM不支持事务2、InnoDB支持行级锁，而MyISAM支持表级锁3、InnoDB支持MVCC，而MyISAM不支持4、InnoDB支持外键，而MyISAM不支持5、InnoDB不支持全文索引，而MyISAM支持

0.0000

2

0

0

关注作者

收藏

赵娜0418

数据分析预处理的时候必须要把数据标准化吗？

问题详述：数据分析预处理的时候必须要把数据标准化吗？解答：要想了解上面的问题需要先明白为什么要进行数据标准化、什么时候要进行标准化以及标准化的原则1、为什么要进行数据标准化？在现实生活中，一个目标变量（y）可以认为是由多个特征变量（x）影响和控制的，那么这些特征变量的量纲和数值的量级就会不一样，比如x1 = 10000，x2 = 1，x3 = 0.5 可以很明显的看出特征x1和x2、x3存在量纲的

30.7684

3

0

0

关注作者

收藏

liting李

机器学习常用的五种预测结果评价

机器学习和深度学习的广泛应用，人们对回归预测/分类预测的结果评估的重视，为此总结了五种常用的模型结果评估方法，并简要做一些说明，RMSE、MAE、Accuracy、R2、var等五种评估方法，其中精度一般用于分类预测上，但是，也可以用于回归预测评估上。均方根误差： (2) 均方误差：(3) 精度：(4) 决定系数: (5) 解释方差得分:RMSE 和 MAE 用来评估预测误差：其值越小越好。精度衡

119.8223

1

0

0

关注作者

收藏

liting李

怎样设置两张不同EXCEL表格上数据的求和公式？

假如是一个工作簿的表格，但求和的格范围相同，如：=SUM(Sheet1:Sheet2!B3:B20)如果各表求和的单元格范围不相同，如：=SUM(B3:B20,Sheet2!C3:C20)

0.0000

0

0

0

关注作者

收藏

liting李

mysql 中group_concat函数详解

函数语法：group_concat( [DISTINCT] 要连接的字段 [Order BY 排序字段 ASC/DESC] [Separator ‘分隔符’] )先看测试表的总数据信息：select * from employee 1.将同一个部门的人合并到一起。select dept_id,group_concat(name) from employee group by dept_id 2.

0.0067

1

0

0

关注作者

收藏

<1…858687…404>

CDA考试动态

CDA报考指南