尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
个人笔记:实用机器学习(b站李沐)2.2
2.2数据清理数据清理格式变换特征提取数据错误 数据与真实值Ground Truth的不匹配常见形式缺失值Missing错误值Erroneous录入错误、单位混淆极端值Extreme Values异常但可能是真实的*数据错误不会导致训练失败但会慢性中毒模型能跑但精度差更危险的是部署后会持续污染新数据形成不可逆的质量下降螺旋。1异常值Outliers与其他观测值显著偏离的数据2规则违反Rule Violations违反数据完整性约束3模式违反Pattern Violations违反语法或语义约束基于统计的数据监测错误依据数据分布可以根据2.1介绍的各种查看数据的方法可视化图寻找数据的Outliers基于规则的数据错误检测依据领域知识1. 函数依赖Functional Dependenciesx → yx 的值唯一确定 y 的值邮编唯一对应州2. 拒绝约束Denial Constraints更灵活的一阶逻辑规则表达某些情况不应该发生基于模式的数据错误检测1.语法模式Syntactic Patterns关注数据格式和类型的一致性找出列中最常见的数据类型格式标记不符合的值为异常。2. 语义模式Semantic Patterns关注数据含义是否符合现实世界知识利用知识图谱外部知识库验证数据的语义正确性。
RELATED

相关推荐

虚拟化网络知识点整理

虚拟化网络知识点整理

扁平网络(Flat Network) 1.1 定义与本质 扁平网络是一种将虚拟机(VM)直接接入物理交换机二层域的网络模式。虚拟机与物理宿主机处于同一子网,共享同一个广播域,通信基于 MAC 地址进行二层转发,无…

📅 2026/8/3 23:03:51
C++简易线程池实现:从核心原理到工程实践

C++简易线程池实现:从核心原理到工程实践

1. 项目概述:为什么我们需要一个简易线程池?如果你写过C多线程程序,尤其是那种需要处理大量短期、独立任务的场景,比如一个网络服务器要处理成百上千的并发请求,或者一个数据处理程序需要并行计算大量数据块&#xff0…

📅 2026/7/20 14:57:17
Windows专业卸载工具Revo Uninstaller Pro核心技术解析

Windows专业卸载工具Revo Uninstaller Pro核心技术解析

1. 为什么Windows需要专业卸载工具?在Windows生态中,软件卸载一直是个老大难问题。我见过太多用户抱怨:"明明已经卸载了程序,为什么C盘空间还是没释放?"或者"系统越来越卡,是不是之前装的软…

📅 2026/9/9 18:33:58
MORE NEWS

更多资讯

📰

指甲病变目标检测:小目标低对比医疗影像数据集与YOLO优化实践

简介:指甲病变是系统性疾病的皮肤窗口,其图像识别本质属于小目标检测范畴——病灶常仅毫米级、边缘模糊、与背景色差微弱,对模型鲁棒性提出严苛要求。这类任务需兼顾医学语义准确性与工程落地可行性,核心挑战在于低对比度纹理建模…

📰

OpenMetadata 快速入门:开源元数据管理完整指南

OpenMetadata 快速入门:开源元数据管理完整指南 【免费下载链接】OpenMetadata The Open Context Layer for Data and AI , OpenMetadata is the open platform for building trusted data context and business semantics for humans, AI assistants, and agents. …

📰

从OpenPose到动作识别:关键点提取、规则判定与时序分类实践

简介:本资源是一套基于OpenPose的实时姿态估计与动作识别实战项目,面向计算机视觉方向的初学者与开发者,旨在解决从视频流中提取人体关键点并对常见动作进行分类的问题。项目涵盖完整的工作流:视频采集、人体姿态估计、关键点预处…

📰

HeyGem.ai 数字人本地部署完全指南:10 秒素材克隆出会说话的口播视频

HeyGem.ai 数字人本地部署完全指南:10 秒素材克隆出会说话的口播视频 【免费下载链接】Duix-Avatar 🚀 Truly open-source AI avatar(digital human) toolkit for offline video generation and digital human cloning. 项目地址: https://gitcode.com…

📰

C语言Hello World程序解析与开发环境配置指南

1. 为什么Hello World是编程入门的必修课 第一次接触C语言的新手往往会对"Hello World"程序的价值产生疑问——这个只能输出一行文字的小程序,真的值得专门学习吗?实际上,这个看似简单的程序蕴含着编程最基础的逻辑结构。1978年&am…

📰

Vue3自定义Tabs组件实现与翻页交互优化

1. 项目概述:自定义Tabs组件的翻页交互设计在前端开发中,Tabs(标签页)组件是最常用的UI控件之一。当标签数量超出容器宽度时,传统的滚动条方案既不美观也不符合移动端交互习惯。我最近在Vue3项目中实现了一个带翻页按钮…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬