知识卡片
结构化数据与非结构化数据
内容
结构化数据是文件存储结构已被事先约定好的数据(比如CSV中第几列固定填什么),计算机能直接按位置解析,因此便于搜索和排序;非结构化数据(如日记、备忘录)由自然语言句子构成,即使其中写了人名,计算机也无法直接判断”这是一个名字”,只能做字面文字匹配,无法理解语义。这个区分的本质是”机器能否不经额外理解就定位到某个字段”。图像、视频、语音也属于非结构化数据,人脸识别精度不高正是因为从非结构化信号里提取结构化含义本身就很难。发散:所谓”AI能力提升”很大程度上就是不断把非结构化数据转化为可处理的结构化表示的过程。
参考来源
《图解数据科学》第1章《数据科学的支撑技术》