静静网站流量分析项目之自动化执行脚本_6

静静七分醉

于 2019-06-18 13:00:48 发布

阅读量578

点赞数 2

CC 4.0 BY-SA版权

分类专栏：静静网站流量分析项目文章标签：离线分析自动化脚本定时任务

本文链接：https://blog.youkuaiyun.com/m0_37657725/article/details/92775182

静静网站流量分析项目专栏收录该内容

11 篇文章 ¥9.90 ¥99.00

订阅专栏

本文详细介绍了如何通过自动化脚本进行网站流量离线分析，包括在MySQL中创建数据库和表，使用sqoop从Hive导出数据，编写HQL脚本进行数据处理，并设置Linux定时任务每天执行分析。最后，讨论了Linux中crontab的使用，以确保每天零点执行流量分析任务。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.在MySql中创建需要的数据库和表

create database JingJingdb;

use JingJingdb;

create table tongji1(

        reportTime date,

        pv int,

        uv int,

        vv int,

        br double,

        newip int,

        newcust int,

        avgtime double,

        avgdeep double

);