知识目录前言一、NumPy介绍1.1 导入NumPy库1.2 查看NumPy版本1.3 读取图片返回NumPy数组二、创建NumPy数组的十二种方式2.1 array 和 full2.2 zeros 和 ones2.3 随机...
-
数据分析 数据挖掘 【NumPy系列】基本操作 - 一
-
数据挖掘 利用低代码 BI 平台获得竞争优势:实现数据分析与业务决策的革新
介绍疫情迫使企业优先考虑数字化转型。由于公司被迫参加计划外的数字化速成课程,这种文化转变将数字技术的采用加速了数年。转向数字解决方案已成倍增加了跨行业生成的数据量。大量数据可以更好地了解运营、客户和市场,还可以推动任何组织的...
-
用户运营 数据挖掘 big data 数据标签体系与用户画像
1.什么是数据标签体系?用户的数据标签是指通过对用户的社会属性、消费习惯、偏好特征等多个维度的数据进行采集和处理,实现对用户或产品属性特征的刻画,并对这些特征进行分析、统计,挖掘潜在价值,从而抽象出用户的信息全貌。对于用户的...
-
数据挖掘 lingkage python scipy聚类图dendrogram详解
文章目录入手参数入手dendrogram是scipy提供的聚类树形图绘制函数,其使用方法大致如下其效果如图所示很明显2,5,1,0,3,4并不是Y中的数据,而应该理解为Y中数据类别的编号,记作下面逐条解析聚类图2和7对应0和...
-
线性代数 人工智能 半正定核矩阵在数据挖掘中的应用前景
1.背景介绍数据挖掘是指从大量数据中发现隐藏的模式、规律和知识的过程。随着数据量的增加,数据挖掘中的计算量也随之增加,这导致了许多算法的时间复杂度和空间复杂度都是较高的。因此,在数据挖掘中,我们需要寻找更高效的算法来处理这些...
-
人工智能 python flask django pygame 基于数据挖掘的用电数据异常的分析与研究
家庭用电居民生活中不可缺少的部分,随着家用电器等设备增多,用电安全已经成为人们最为关心的部分,在用电过程中若出现超负荷的用电,会损坏电器,甚至会造成火灾等事故的发生。另外受利益驱动,出现偷电等现象,传统的检测方式基于人工判断...
-
人工智能 图数据挖掘:社交网络分析与知识图谱
1.背景介绍图数据挖掘是一种利用图结构数据的方法,以解决各种复杂问题。在社交网络分析和知识图谱等领域,图数据挖掘具有广泛的应用前景。本文将从背景、核心概念、算法原理、最佳实践、应用场景、工具推荐和未来趋势等方面进行全面阐述。...
-
数据挖掘 手把手教你做单细胞测序数据分析(五)——细胞类型注释
前面的课程中基本已带领大家将单细胞测序预处理部分打通了,这里给大家介绍的是单细胞测序中最让人头疼的细胞类型注释。第一个代码块中没有注释,看不懂的同学去看一下我们的第三讲 单样本分析,测试数据也与那里的相同。视频教程: 手把手...
-
数据挖掘 企业级数据分析:从零开始
1.背景介绍企业级数据分析是指在企业环境中进行的大规模数据处理和分析工作。随着数据的增长和复杂性,企业级数据分析已经成为企业竞争力的关键因素。在这篇文章中,我们将从以下几个方面进行深入探讨:背景介绍核心概念与联系核心算法原理...
-
pandas 数据挖掘 大数据 云计算 numpy python数据分析——数据分析的数据的导入和导出
数据分析的数据的导入和导出前言一、导入数据1.1导入Excel表格数据1.2、导入CSV格式数据1.3、导入JSON格式数据1.5导入(爬取)网络数据二、输出数据2.1CSV格式数据输出2.2 xlsx格式数据输出2.3导入...
-
数据挖掘 图像处理 python 人工智能 【数据分析入门】Seaborn
这里写目录标题一、数据二、画布外观2.1 Seaborn样式2.2 上下文函数2.3 调色板三、使用 Seaborn 绘图3.1 坐标轴栅格3.2 各类图形3.2.1 散点图3.2.2 条形图3.2.3 计数图3.2.4 点...
-
数据挖掘 人工智能 数据分析案例:深度学习与自动驾驶
1.背景介绍自动驾驶技术是近年来最热门的研究领域之一,它涉及到多个技术领域,包括计算机视觉、深度学习、机器学习、路径规划等。深度学习是自动驾驶技术的核心技术之一,它可以帮助自动驾驶系统理解和处理车辆周围的环境信息,从而实现智...
-
数据挖掘 数据分析 大数据 数据建模的基本流程
数据建模的基本流程主要包含六个步骤:确定分析目标、数据理解、数据准备、建立模型、模型评估、模型发布与应用。数据建模是以业务为驱动,基于数据构建科学模型应用于实际中去解决问题的过程。这个过程并不以模型构建、或者模型落地就终止的...
-
大数据 人工智能 数据挖掘的实际案例:电商分析与金融风险控制
1.背景介绍数据挖掘是指从大量数据中发现有用信息、隐藏的知识和潜在的模式的过程。它是一种利用计算机科学方法来解决复杂问题的方法。数据挖掘可以帮助企业更好地了解市场、客户和产品,从而提高业绩。电商分析和金融风险控制是数据挖掘的...
-
r语言 开发语言 数据挖掘 MATLAB偏最小二乘回归(PLSR)和主成分回归(PCR)分析光谱数据
全文链接:http://tecdat.cn/?p=2655此示例显示如何在matlab中应用偏最小二乘回归(PLSR)和主成分回归(PCR),并讨论这两种方法的有效性(点击文末“阅读原文”获取完整代码数据)。当存在大量预测变...
-
深度学习 人工智能 数据挖掘 2022知识追踪最新综述——A survey on DLKT
论文在2022年10月收录于Knowledge-Based Systems期刊中 ——原文链接 后文里,我用DLKT来代替deep learning based knowledge tracing摘要这是综述性文章,评估了过...
-
数据挖掘 【ML】基于机器学习的心脏病预测研究(附代码和数据集,逻辑回归模型)
写在前面: 首先感谢兄弟们的关注和订阅,让我有创作的动力,在创作过程我会尽最大能力,保证作品的质量,如果有问题,可以私信我,让我们携手共进,共创辉煌。(专栏订阅用户订阅专栏后免费提供数据集,代码贴在博文中,超级VIP用户不在...
-
人工智能 【DTEmpower案例操作教程】智能数据挖掘
DTEmpower是由天洑软件自主研发的一款通用的智能数据建模软件,致力于帮助工程师及工科专业学生,利用工业领域中的仿真、试验、测量等各类数据进行挖掘分析,建立高质量的数据模型,实现快速设计评估、实时仿真预测、系统参数预警、...
-
数据挖掘 大数据 数据分析应该怎么做?
一、常见的数据分析报告类型数据分析报告通常可以分为三类:日常分析报告、专题型分析报告和综合性分析报告。前两者是以数据+结论+建议的格式去撰写,综合性分析报告则是:行业环境调研(竞品类产品数据分析)+自身产品数据综合性分析+结...
-
大数据 人工智能 数据挖掘 数据治理:认识数据治理
参考《一本书讲透数据治理》、《数据治理》等数据治理是什么笔者自我理解就是:对数据进行任何规整处理,包括从数据从业务系统接入到最后被业务系统查询应用的这其中整个过程,都是数据治理。然而,不同数据团队或者不同企业对数据治理的理解...
-
数据库 数据分析 数据挖掘 github python 分布式 《MySQL 简易速速上手小册》第4章:数据安全性管理(2024 最新版)
文章目录4.1 用户认证和权限控制4.1.1 基础知识4.1.2 重点案例:使用 Python 管理 MySQL 用户权限4.1.3 拓展案例4.2 防止 SQL 注入和其他安全威胁4.2.1 基础知识4.2.2 重点案例:...
-
数据挖掘 机器学习 Python:如何实现提取文本关键词、摘要、短语、无监督文本聚类
我们在使用Python对文本数据进行处理时,通常会遇到提取文本关键词、提取摘要、提取短语或者进行无监督文本聚类等需求。本文将向大家推荐一个非常实用的包pyhanlp,使用这个包中的函数通过几行代码就可以完成以上所有的操作。一...
-
数据挖掘 数据分析之数据相关性分析
相关性分析作者:学者科技 时间:2022/12/25应用场景发现数据之间的关联性比如 啤酒 和 尿布 删减统计指标比如 城市里的温度传感器,相关性强的可以去掉以节约成本 挑选回归建模的变量选择与因变量相关性高的自变量自变量间...
-
数据挖掘 数据分析 皮尔逊Pearson相关系数python代码实现
皮尔逊相关系数简介wiki介绍皮尔逊积矩相关系数(英语:Pearson product-moment correlation coefficient,缩写:PPMCC,或PCCs,有时简称相关系数)用于度量两组数据的变量X和...
-
数据挖掘 职场晋升力加分利器:巧用ChatGPT快速搞定数据分析
个人网站:【工具大全】【游戏大全】【神级源码资源网】蘭 前端学习课程:【28个案例趣学前端】【400个JS面试题】 寻找学习交流、摸鱼划水的小伙伴,请点击【摸鱼学习交流群】第一部分: ChatGPT在数据分析中的应用...
-
python 数据挖掘 实验7 回归问题
1. 实验目的①掌握一元线性回归模型的实现方法; ②掌握多元线性回归模型的实现方法; ③掌握三维数据可视化方法。2. 实验内容①使用TensorFlow建立一元线性回归模型,使用商品房销售数据训练模型,并使用训练好的模型预测...
-
人工智能 机器学习 数据挖掘 文本摘要生成评价指标——rouge
文本摘要生成评价指标——rougerouge的作用:rouge的内容:rouge的类别:rouge的使用:rouge-N的理解:Rouge-L的理解rouge的作用:-Rouge的全名是Recall-Oriented Und...
-
java 算法 人工智能 1024程序员节 【2月比赛合集】28场可报名的数据挖掘大奖赛,任君挑选!
CompHub[1] 实时聚合多平台的数据类(Kaggle、天池… 和OJ类(Leetcode、牛客…)比赛。本账号会推送最新的比赛消息,欢迎关注!以下信息仅供参考,以比赛官网为准目录Kaggle(2场比赛)阿里天池(4场比...
-
数据挖掘 数据分析 数据可视化 大数据毕业设计题目选题推荐
文章目录0 前言1 如何选题1.1 选题技巧:如何避坑(重中之重 1.2 为什么这么说呢?1.3 难度把控1.4 题目名称1.5 最后2 大数据 - 选题推荐2.1 大数据挖掘类2.2 大数据处理、云计算、区块链 毕设选题2...
-
科技 大数据 数据挖掘 自动驾驶 吴恩达对话刘慈欣:让科幻更有勇气,让人工智能更有想象力
目录0 写在前面1 凡尔纳计划2 人工智能的价值和影响3 人工智能的发展趋势4 人类大脑vs人工智能5 超级智能的诞生6 科技与科幻的总结0 写在前面机器学习强基计划聚焦深度和广度,加深对机器学习模型的理解与应用。“深”在详...
-
数据挖掘 区块链数据分析:解决供应链管理的挑战
1.背景介绍区块链技术是一种分布式、去中心化的数字货币和交易系统,它通过将交易记录存储在一个公开的、不可篡改的数字 ledger(账本 中,从而确保交易的透明性、安全性和不可抵赖性。在过去的几年里,区块链技术已经从数字货币领...
-
大数据 分布式 数据挖掘 掌握Hadoop流处理:实时数据分析的关键技术
1.背景介绍Hadoop流处理(Hadoop Streaming 是一种将命令行接口(CLI 工具与Hadoop MapReduce框架结合使用的方法,以实现数据处理和分析任务。Hadoop流处理允许用户使用任何编程语言(如...
-
大数据 数据挖掘 人工智能 低代码 数字化 数智转型助力建筑业全产业链升级,你了解多少?
关于数智转型,指的是基于数字化技术和数据驱动的思维方式,将企业的管理、业务和服务进行全面的升级和改造,从而帮助实现企业的数字化转型和升级。通过数字技术和数据分析来提高企业的效率、创新能力和竞争力,进一步提高企业的市场占有率和...
-
spark 大数据 分布式 人工智能 机器学习 数据挖掘 案例系列:客户流失预测
文章目录介绍:使用Spark进行特征工程使用PySpark的Spark设置Spark测试SparkSpark 仪表盘数据存储特征工程一个分区的特征自定义基元运行深度特征合成将分区转换为特征矩阵的函数测试函数使用Spark运行...
-
大数据 人工智能 数据挖掘 低代码 制造 数字化采购管理系统解决方案
数字化采购管理系统是一种现代化的管理工具,它可以帮助企业优化采购流程、提高采购效率、降低采购成本。本文将介绍数字化采购管理系统的解决方案。一、数字化采购管理系统的概述数字化采购管理系统是指将传统采购流程数字化并整合管理的一种...
-
perl 人工智能 数据挖掘的应用在大数据分析和云计算
1.背景介绍数据挖掘是指从大量数据中发现有价值的隐藏信息和知识的过程。随着数据的大规模生成和存储,数据挖掘技术在各个领域得到了广泛应用。大数据分析和云计算技术的发展为数据挖掘提供了强大的支持,使得数据挖掘的范围和深度得到了进...
-
数据挖掘 ArcGIS与地理加权回归GWR【一】
开个新坑啊,写一写关于地理加权回归基础的东西(深了我也不会啊),希望也能用通俗的语言来记录一下我以前学习空间统计过程中的理解。1. 传统线性回归不管你有没有系统学习过,对于线性回归,相信多少都有那么点了解。回归分析实质上就是...
-
python 人工智能 数据挖掘 机器学习 探索性数据分析(EDA):从数据中发现洞察力
目录写在开头1. EDA的基本步骤1.1 数据概览1.2 描述性统计1.3 借用一些EDA库2. 数据可视化2.1 直方图2.2 散点图2.3 折线图3. 探索性分析的应用场景3.1 数据分布检查3.2 特征关系探索4. E...
-
机器学习 数据挖掘 python df 计算两列时间之间相差的天数并添加到表中
# 读取数据到tample# 获取birthday 和 day 并转为datetime格式 记得astype(str 否则有可能会所有数据变成1970-01-01的时间# 计算两个日期之间相差的天数 结果为比如某一列...
-
机器学习 数据挖掘 KNN(K最近邻算法)原理及代码实现
机器学习没有免费午餐定理和三大机器学习任务 如何对模型进行评估 K-Means(K均值聚类 原理及代码实现 KNN(K最近邻算法 原理及代码实现 KMeans和KNN的联合演习文章目录机器学习前言一、K是什么?二、算法步骤三...
-
1024程序员节 基于非侵入式负荷检测与分解的电力数据挖掘
摘要本案例将根据已收集到的电力数据,深度挖掘各电力设备的电流、电压和功率等情况,分析各电力设备的实际用电量,进而为电力公司制定电能能源策略提供一定的参考依据。01 案例背景为了更好地监测用电设备的能耗情况,电力分项计量技术随...
-
数据结构 数据挖掘 算法基础知识
算法基础文章目录1.算法概述数据结构的特征需要数据结构执行时间案例基本术语2.算法基础3.算法的特征4.如何编写算法?实例5.算法分析渐近符号大哦符号,ΟOmega表示法,ΩTheta Notation,θ常见的渐近符号算法...
-
网络 python 数据挖掘 学习 齿轮过载、偏心、不对中、断齿特征分析及信号特征提取
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、齿轮常见故障信号特征1.1 齿轮过载1.2 齿轮偏心1.3 齿轮不对中1.4 齿轮断齿二、仿真DEMO1.测试程序总结前言齿轮在运行过程中除了会...
-
数据分析 数据挖掘 【关于时间序列的ML】项目 9 :机器学习中的 ARIMA 模型
大家好,我是Sonhhxg_柒,希望你看完之后,能对你有所帮助,不足请指正!共同学习交流个人主页-Sonhhxg_柒的博客_CSDN博客 欢迎各位→点赞 + 收藏⭐️ + 留言系列专栏 - 机器学习...
-
数据挖掘 算法 【大数据分析与挖掘】挖掘建模之关联分析
文章目录一、关联规则1.1 常用的关联规则算法1.2 Apriori算法介绍1.2.1 关联规则与频繁项集1.2.2 Apriori算法的思想与性质1.2.3 Apriori算法的实现的两个过程1.2.4 Apriori算法...
-
人工智能 【海量数据挖掘/数据分析】之 决策树模型(决策树模型、决策树构成、决策树常用算法、决策树性能要求、信息增益、信息增益计算公式、决策树信息增益计算实例)
【海量数据挖掘/数据分析】之 决策树模型(决策树模型、决策树构成、决策树常用算法、决策树性能要求、信息增益、信息增益计算公式、决策树信息增益计算实例)目录【海量数据挖掘/数据分析】之 决策树模型(决策树模型、决策树构成、决策...
-
数据挖掘 spss数据分析
SPSS软件在其基本界面上集成了数据录入、转换、检索、统计分析、作图、制表及编辑等功能;采用类似EXCEL表格的方式输入与管理数据,数据接口较为通用,能方便的从其他数据库中读入数据。1.1 定义变量1、变量试图中的名称首字母...
-
数据挖掘 数学建模 2022年全国大学生数据分析大赛医药电商销售数据分析求解全过程论文及程序
2022年全国大学生数据分析大赛医药电商销售数据分析原题再现: 问题背景 20 世纪 90 年代是电子数据交换时代,中国电子商务开始起步并初见雏形,随后 Web 技术爆炸式成长使电子商务处于蓬勃发展阶段,目前互联网信息...
-
r语言 数据挖掘 多项式回归 通过示例快速理解二次回归
当两个变量有线性关系时,通常使用简单线性回归测定它们的关系。但变量间有二次关系时,应该使用二次回归进行拟合。本文介绍R如何实现二次回归。示例假设我们希望理解工作时长与幸福感之间的关系。现收集到下面数据集,包括每周工作时长以及...
-
数据挖掘 企业数字化转型与供应链效率-基准回归复刻(2007-2022年)
参照张树山(2023)的做法,本团队对来自统计与决策《企业数字化转型与供应链效率》一文中的基准回归部分进行复刻。文章实证检验企业数字化转型对供应链效率的影响。用年报词频衡量上市公司数字化转型程度,以库存周转天数来衡量供应链效...