YouTube视频上的评论重复

Question

我正在使用YouTube API在任意一部视频中以python格式提取YouTube评论。但是，当我创建数据框架并尝试查找重复的注释时，它们中的大多数都在重复，即，在160万条注释中，只有1700条注释是唯一的。