抖音的数据是怎样清洗的？

之前某大神用爬虫把抖音一天所有短视频的数据都扒出来了，总共2万多条的数据，拿到数据之后，用这份数据洗出我们想要的几个关键点。
洗出人群的标签，标签包括爱好，关注点，时间点。
对2万数据经过清洗，经过描述做分词词频统计，排除无效词，统计出高频词“喜欢”“自己”“真的”“可以”“教程”“发型”“思域”“化妆”等，这里我们之后引出可以干嘛。
接着是时间段，这个主要是为了统计用户的习惯，客观是可以看出用户在什么时间段比较活跃。
再根据上面用户发布时间段的时间统计出这个时间段用户的点赞转发量做为参考，最终得到下图。这样可以得到比较准确的时间段。
可以明显在时间段看出效果的差别，下午13:00和晚上18:00是点赞高峰期。
在统计的2万条数据里面再进行一次点赞的分布曲线的清洗，大概的出的数据分布，大部分的短视频点赞在700以下，上万的短视频占比并不大，这个是抖音的数据造成的，按照之前做今日头条的算法都是计算你前面1000个推荐量，你所获得的点赞率与转发量。这个时候你的转发量点赞量（比例）高的话再会推送下一批流量给你。
所以前面1000个点赞量很关键。
上面用工具干完数据清洗最大的一个版块是人肉再清洗，人肉清洗是为了得到热门短视频的标签。参考这部分数据是为了之后做短视频的时候去靠这个方向。大概类型有几大块！
1、舞蹈
2、高效段子
3、才艺
4、模仿
5、励志鸡汤
6、特色景点
7、恶搞
8、撩姐撩小哥哥
9、正能量
10、炫技能
11、挑战
从这些热门内容标签统计出来最终满足热门的背后人性属性，因为属性才可以复用，内容不能模仿。
这里祭出大杀器，满足疯传的触发器。公式：社交货币、诱因、情绪、公共性、实用价值=传播。
在你去看所有这类短视频的时候，你去思考背后哪些关键点触发了你的行动，去点赞转发了。
二次传播的核心点，一种里利益上面的驱动，这个驱动的方式也很多比如在微信里面点赞送礼品，转发送产品，这个抖音里面也有一批这样玩的，尤其年前的时候点赞送手机疯了一段时间。这个就是典型的利益驱动。
除了这个物上面的利益驱动，还可以调动的就是社交货币的价值的六个维度。

1、毛巾加热水。数据线脏了的话，我们只需要用毛巾在热水中浸泡，然后拧干后趁着毛巾的热度按照一个方向擦拭数据线即可。这个方法效果非常的有效，反复几次过后就会发现毛巾上就会有许多的脏东西都被擦拭下来了。

2、牙膏加纸巾。当我们的数据线脏了的话，我们可以将牙膏挤在纸巾上，按照一个方向擦拭数据线即可，因为牙膏中的一些物质可以很快的清理吸附在数据线上的脏东西。

3、酒精加纸巾。酒精是一个非常好用的东西，用酒精擦拭数据线上的脏东西可以很快的擦掉，效果很好，如果大家没有酒精的话，也可以用含有酒精的湿巾来代替。

4、卸妆水加纸巾。卸妆水对于清洗数据线上的脏东西来说是非常实用的，而且使用起来非常便捷，只需在纸巾上滴一点卸妆水，然后对有脏东西的地方来回擦拭就可以了。

5、白醋加棉花。我们可以用白醋倒在棉花上，按照一个方向对充电线进行擦拭，效果也是非常的不错。但是棉花对于大家来说可能很少有，所以这个方法不是特别的常用。方法六：专用的喷雾手机店里面都有专门的清理喷雾可以买到，价格也是非常的便宜的。

数据仓库在原始数据层ODS层存放原始数据，直接加载原始日志、数据，保留数据的本貌不进行处理
数据清洗 *** 作主要在明细数据DWD层中进行
清洗 *** 作主要有：
1简单的数据标准化，比如表和字段命名
2去除空值，默认值填充，比如性别为空的都补0
3超出范围的数据再处理

问题一：手机软件的手机储存数据怎么删除？ 点击设置，进入应用程序，选择管理应用程序，点击要删除数据的软件，上面有清除账户信息，就ok，别忘了给好评

问题二：怎么清除手机内存卡的数据 1、进入手机自带文件管理软件，分为内部存储和SD卡，进入SD卡，选择要删除的内容。 2、下载第三方文件管理软件。 3、下载猎豹清理大师深度清理。 推荐使用第三方文件管理软件或者猎豹清理大师，可以显示文件用途，防止误删。

问题三：在手机存储里的清除数据点了会怎么样 清除手机缓存后可以增加内存，增加使用空间。
1、打开手机的菜单，然后在里面找到设置这个选项。
2、打开设置后，可以看到关于手机的设置功能，选择应用这个选项。
3、打开应用选项后，选择全部分类，可以看到手机中全部已安装的软件，点击会d出一个设置该软件的窗口。
4、打开后在这里可以看到有卸载、移动至手机内存、清除数据和清除缓存功能，点击清除数据和清除缓存就可以把软件产生的缓存清理了。

问题四：手机系统内存快满了，如何清理 现在大部分人都是用智能机，手机经常下载各种app，或者更换新的app，不过卸载之后，手机里还有很多的软件卸载参残余，这些长期积累就会越来越多，占用手机空间，可以给手机下载一个腾讯手机管家，除了软件卸载残余，上网是产生的缓存文件，垃圾文件可以一键清理，只要按一下，手机一下又有很多空间啦。

问题五：手机信息存储空间已满怎样删除 删信息都不会？

问题六：手机内存空间不够 该怎么删除 系统文件？ 安卓手机功能繁多，但是使用时间长了，会发现自己的安卓手机内存变小了，大家有没有遇到自己的安卓手机内存不足等类似的提示呢？众所周知，安卓手机的内存容量都是有限的，这样就导致了一个相对来说很棘手的问题――安卓手机内存不足。虽然现在安卓22以上的 *** 作系统均支持Apps2SD功能，但这个问题依然会困扰着我们的用户，相应的安卓手机内存清理方法就诞生了，那么安卓手机怎么清理被过多占用的内存空间呢？好了，现在我就来告诉你安卓手机内存清理的一些小秘诀，让你的安卓手机内存容量释放更多！
1、将系统的apk程序的缓存文件都清理掉，进入手机的设置选项，选择“设置”―“应用程序”―“管理应用程序”，点击MENU键，选择“按大小排序”(安卓22系统要先选择好已下载标签)，这样系统安装的应用程序就按程序大小排列起来了，然后选择其中一款程序，点击“清除缓存”即可。注意，像Google Maps、Market、浏览器和相册等应用程序的缓存文件可能积累到好几兆，因此保持清理系统程序的缓存文件是相当必要的。
2、HTC手机如果不打算使用Sense UI界面了，请清理掉HTC Sense的数据文件，这样得到的系统内存空间还是可观的。
3、建议卸载掉那些你很少使用的应用程序，这样也有利于很多安卓手机内存空间清理。
4、当然你还可以下载一些自动清除缓存文件的软件，这些软件在一定程度帮助缓解安卓手机内存不足的问题。
5、将所有可以移动的应用程序移动到手机的SD卡上，现在安卓22以上的系统都可以支持安装应用程序到SD卡的，当然前提你已经拥有ROOT权限了。
6、打开RE管理器，找到/data/local/目录，里面有rights和tmp两个文件夹，没有rights文件夹也没关系，打开tmp文件夹，这里面都是大家之前安装失败的软件，然后清空就可以了。

问题七：手机的内部存储空间怎么删除 没法直接删除，有两种方法。1同过手机助手把应用搬家到内存卡上，2下载一个百度一键root，删除一些没用的自带应用（注意别把手机必备的软件删了）。

问题八：手机磁盘空间不足怎么清理 你可以使用腾讯手机管家清理，它能加速减少内存占用率，最大化的释放更多的手机内存，直接点击垃圾清理，自动扫描并清理软件缓存、垃圾文件、多余装包、系统缓存，彻底清除软件卸载后的残余。最后使用小火箭加速功能，可以随时帮您燃烧空间占用量大的进程， *** 作简单，趣味性强。

问题九：怎么能清理手机迅雷储存数据 10分 尊敬的迅雷用户，您好：
亲，手机设置C应用C迅雷appC清除缓存。如果还是清理效果不明显建议重新安装迅雷app。
希望能帮到您！
更多疑问，欢迎您向迅雷网络平台提问。

问题十：安卓手机内部存储空间越来越小，如何清理？ 使用PC套件进行优化，把手机里面的程序转移到内存卡中，用卓大师，91手机助手都可以。

---