我听说vader在使用时会自动执行标记化/柠檬化 SentimentIntensityAnalyzer() 但我无法在他们的github页面上得到明确的确认。我尝试了标记化和柠檬化我的输入文本无论如何和输出（复合分数）是相同的，如果我没有做任何我自己的预处理。
有人能确认他们使用了什么预处理技术吗？
谢谢您。