社区首页 >问答首页 >在应用Vader获取情感之前，我们应该清理文本数据吗？

问在应用Vader获取情感之前，我们应该清理文本数据吗？
EN

Data Science用户

提问于 2022-02-11 22:49:57

回答 1查看 825关注 0票数 0

我所说的数据清理是指

移除标点符号
下套管
移除停止词
删除不相关的符号、链接和表情符号

据我所知，像标点符号、大写字母、停止词如“但是”和表情符号之类的东西往往会强化维德的情感价值，或者换句话说，它会影响情感。

所以，我应该清理我的数据，还是留下标点符号、大写字母和停止词，因为维德也在使用它们？

machine-learning

deep-learning

nlp

text-mining

sentiment-analysis

CDN&音视频通信出海专场

提供游戏出海、社交娱乐等方案，助力企业抢占出海市场

回答 1

Data Science用户

发布于 2022-02-11 23:20:35

不要干净，所有的帽子和标点符号都意味着什么！让模型决定什么是不相关的符号和表情符号，否则可能会去掉有用的情感信号¯_(ツ)_/¯。

票数 1

页面原文内容由Data Science提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://datascience.stackexchange.com/questions/108094

复制

Windows - Hash散列值抓取方法

windows https 网络安全爬虫

LM Hash（LAN Manager Hash）其本质是 DES 加密。在 Windows 2008 及开始之后默认禁用的是 LM Hash。

渗透攻击红队

2020/11/25

1.9K0

散列算法与散列码

编程算法

一、引入 1 /** 2 * Description:新建一个类作为map的key 3 */ 4 public class Groundhog 5 { 6 protected int number; 7 8 public Groundhog(){ 9 } 10 public Groundhog(int number) 11 { 12 this.number = number; 13 } 14 15 @Overr

JMCui

2018/03/15

1.5K0

散列/散列函数「建议收藏」

https java 网络安全编程算法

每个关键字被映射到从0-TableSize-1这个范围中的某个数，并且被放到适当的单元中。这种映射就叫做散列函数

全栈程序员站长

2022/08/28

8920

散列

编程算法存储

将一个元素的关键码和存储位置之间建立对应的函数关系 Hash( ), 使得每个关键码与结构中的唯一的存储位置相对应:

Rikka

2022/02/07

1.8K0

散列

sql

选择键值，冲突的时候采取不同的策略散列函数：简单的散列函数： 1 int hash(const string & key,int tableSize) 2 { 3 int hashVal = 0; 4 for(int i = 0; i < key.length();++i) 5 { 6 hashVal + = key[i]; 7 } 8 return hashVal % tableSize; 9 } 比较好的散列函数： 1 int hash( c

用户1154259

2018/01/17

8140

分离链接的散列散列代码实现

python 数据结构

散列散列为一种用于以常数平均时间执行插入，删除和查找的技术。一般的实现方法是使通过数据的关键字可以计算出该数据所在散列中的位置，类似于Python中的字典。关于散列需要解决以下问题：散列的关键字如何映射为一个数（索引）——散列函数当两个关键字的散列函数结果相同时，如何解决——冲突散列函数散列函数为关键字->索引的函数，常用的关键字为字符串，则需要一个字符串->整数的映射关系，常见的三种散列函数为： ASCII码累加（简单）计算前三个字符的加权和$\sum key[i] * 27^{i}$ （不太

月见樽

2018/04/27

1.5K0

散列查找和哈希查找_散列检索

存储 serverless

散列技术是在记录的存储位置和它的关键字之间建立一个确定的对应关系f，使得每个关键字key对应一个存储位置f(key)。建立了关键字与存储位置的映射关系，公式如下：

全栈程序员站长

2022/11/15

8990

散列冲突

编程算法 https java 网络安全

概念：如果当一个元素被插入时与一个已经插入的元素散列到相同的值，那么就会产生冲突，这个冲突需要消除。解决这种冲突的方法有几种：本章介绍两种方法:分离链接法和开放定址法

全栈程序员站长

2022/08/27

5950

Hash散列[通俗易懂]

hashmap https java http 网络安全

发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/146553.html原文链接：https://javaforall.cn

全栈程序员站长

2022/08/27

6720

散列函数

编程算法

散列的概念属于查找，它不以关键字的比较为基本操作，采用直接寻址技术。在理想情况下，查找的期望时间为O(1)。

233333

2019/09/24

9200

散列查找

编程算法存储

散列同顺序、链接和索引一样，是又一种数据存储方法。散列存储的方法是：以数据集合中的每个元素的关键字k为自变量，通过一种函数h(k)计算出函数值，把这个值用做一块连续存储空间（即数组或文件空间）中的元素存储位置（即下标），将该元素存储到这个下标位置上。散列存储中使用的函数h(k)被称为散列函数或哈希函数，它实现关键字到存储位置（地址）的映射（或称转换），h(k)被称为散列地址或哈希地址；使用的数组或文件空间是对数据集合进行散列存储的地址空间，所以被称为散列表或哈希表。在散列表上进行查找时，首先根据给定的关键字k，用与散列存储时使用的同一散列函数h(k)计算出散列地址，然后按此地址从散列表中取出对应的元素。

全栈程序员站长

2022/08/27

1.2K0

Go 生成散列值 sha256.Sum256

编程算法

追加： append(x,1,2) ages:=make(map[string]int)

用户5760343

2019/07/17

2.3K0

Hash（散列）冲突解决线性探测再散列和二次探测再散列

hashmap

例如哈希函数为： H（key） = key %13,key 为关键字，采用开放地址法中的线性探测再散列解决冲突，依次输入

用户2965768

2018/12/28

16.6K0

浅谈散列运算

编程算法

“指纹”一词形象地描述了散列运算的结果。在现实生活中，两个人可能长得很像，但是他们的指纹不同，根据指纹就能对这两个人进行区分。

小蜜蜂

2019/07/24

1.1K0

单向散列函数

编程算法网站

如果你需要从国外的网站上下载一个软件，但是因为种种原因，国外的网络太慢了，下载几个G的数据几乎是不可能的。刚好国内有镜像网站，可以从国内下载数据。但是如何保证国内的镜像不是被篡改过后的呢？这个时候就需要单向散列函数了。一般来说网站会提供MD5或者SHA的值作为验证值。

程序那些事

2020/07/08

7940

查找-散列查找

存储 serverless

散列技术是在记录的存储位置和它的关键字之间建立一个确定的对应关系f，使得每个关键字key对应一个存储位置f(key)。查找时，根据这个确定的对应关系找到给定值key的映射f(key)，若查找集合中存在这个记录，则必定在f(key)的位置上。

全栈程序员站长

2022/08/28

1.4K0

hash散列 introduction

存储

hash散列是在记录的存储位置与他的关键字之间建立的对应关系f, 使得每个key都对应一个存储位置, 查找时根据key的hash去查找.

CoffeeLand

2020/03/26

5390

线性探测再散列

编程算法 java https 网络安全

哈希表又称散列表。哈希表存储的基本思想是：以数据表中的每个记录的关键字 k为自变量，通过一种函数H(k)计算出函数值。把这个值解释为一块连续存储空间（即数组空间）的单元地址（即下标），将该记录存储到这个单元中。在此称该函数H为哈函数或散列函数。按这种方法建立的表称为哈希表或散列表。

全栈程序员站长

2022/08/28

5220

哈希函数/散列算法

编程算法

哈希函数（Hash function），又称散列函数、散列算法，它是一种不可逆的信息摘要算法，具体实现就是把任意长度的输入信息通过哈希算法变成固定长度的输出信息。

arnodev

2022/10/20

8970

散列函数（哈希）（转）

编程算法 hashmap

Hash一般翻译作散列也有直接音译作“哈希”。就是把任意长度的输入通过散列算法变换成固定长度的输出，该输出就是散列值。

Oceanlong

2018/12/28

9200

相似问题

用符号键和字符串键引用散列元素

用多个键/值合并散列

使用restTemplate检查redis键是散列还是字符串

检查散列映射与在散列图中迭代键的区别

对散列映射键的空检查

活动推荐

助力在校大学生快速入门云计算，畅游云端

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例