hive标签_DAMO开发者矩阵

hive

大数据平台敏感数据保护：银行数据仓库、Hive 场景的审计与管控怎么做？

大数据场景敏感数据保护，是指对数据仓库、数据湖、大数据分析平台（Hive、Spark、StarRocks 等）中存储的敏感数据，实施识别、访问控制、脱敏与审计的一整套措施。它管的是“数据集中存储和批量计算”这一环节的安全，区别于业务系统的实时查询场景。为什么大数据场景风险突出？三个原因：第一，数据高度集中。数据仓库汇聚了各业务条线的数据，一个库里可能装着全行客户的身份、账户、交易、资产信息——泄露

 yuandiansec
2026-09-09 09:09:34

 423

 2

#大数据 #数据仓库 #hive
数据入湖入仓问题分析笔记

多源数据源 → 全量/CDC数据同步 → 原始数据入湖 → 湖内清洗加工 → 聚合数据入仓 → 统一引擎对外服务。

ruxshui
2026-07-17 20:00:00

 328

 7

#数据仓库 #hive #sql
PD快充协议芯片XSP18 支持诱骗5V9V12V15V20V电压档位

针对目前Type-C接口的普及，许多小家电设备开始采用Type-C接口，这个接口支持正反插，支持功率大，支持的协议全，优点很明显。而且，USB-C还可以使用现在流行的快充技术，让充电器、充电宝、车充等电源输出快充电压给产品供电，无需携带多种充电器。由于目前的快充协议比较多，每家手机厂商都有自己的快充协议，所以就要求USB-C识别芯片XSP18需要支持多种快充协议，这样，无论设备USB-C连接的是哪

 Msshu123
2025-10-23 16:22:00

 440

 3

#mysql #hbase #hive +2
Hive企业级应用案例：大数据分析实战

在当今数据驱动的商业环境中，企业面临着海量数据的存储、处理与分析挑战。Apache Hive作为构建在Hadoop之上的数据仓库工具，凭借其类SQL查询语言(HQL)、可扩展性和与Hadoop生态系统的无缝集成，已成为企业级大数据分析的首选解决方案。本文深入剖析Hive的核心架构与工作原理，通过三个不同行业的真实企业案例（电商销售分析平台、金融风险控制系统和物流路径优化系统），详细展示Hive在实

 Java技术栈实战
2025-08-30 21:37:45

 875

 14

#hive #数据分析 #hadoop
【Spark+LSTM】基于Spark+LSTM美食数据分析预测系统大众点评数据 HIVE（完整系统源码+数据库+开发笔记+详细部署教程+虚拟机分布式启动教程）✅

【Spark+LSTM】基于Spark+LSTM美食数据分析预测系统大众点评 HIVE（完整系统源码+数据库+开发笔记+详细部署教程+虚拟机分布式启动教程）✅

___Edward
2024-11-21 17:02:33

 1915

 19

#分布式 #spark #lstm +4
大数据项目实战-基于招聘网职位数据的可视化实验教程（六、数据分析Hive处理数据）

7.对t_ods_tmp_salary表的每一条数据进行泛化处理，将处理结果储存到中间表t_ods_tmp_salary_dist中，命令如下。3.分析大数据职位全国薪资分布情况，将分析结果储存在维度表t_ods_salary中，命令如下。11.创建维度表t_ods_company，用于储存福利标签的统计结果，命令如下。12.创建维度表t_ods_salary，用于储存薪资分布的统计结果，命令如下

 你听邂逅像风
2024-11-16 14:40:41

 1687

 30

#大数据 #hive #hadoop +1
鸿鹄（深圳）创新技术有限公司 ERP 软件，引领企业数字化转型新征程！

鸿鹄 ERP 软件，让您的企业如虎添翼，翱翔于数字化时代的天空！立即联系我们，开启智能管理之旅。

az335836az
2024-03-24 16:30:35

 180

 2

#hbase #oracle #json +4
基于Hive和FineBI数据分析可视化案例--泰坦尼克号乘客数据集

生成的图表包含柱状图，折线图，饼状图，词云图，雷达图，文本框图。图2-7 添加乘客生存人数文本框内容，调整颜色字体大小。图2-8 添加乘客死亡人数文本框内容，调整颜色字体大小。图2-6 添加乘客总人数文本框内容，调整颜色字体大小。图2-13 确定与饼状图相关的数据集。图2-15 确定与词云图相关的数据集图。图2-17 确定与折线图相关的数据集。图2-18 确定与横轴，纵轴，颜色。图2-9 选择与雷

 Levi287
2024-01-18 14:24:22

 1475

 10

#finebi #数据分析 #数据可视化 +2
【头歌】Sqoop数据导出 - 详解

【主要内容】Sqoop数据导出语法学习；HDFS数据导出至Mysql内；Hive数据导出至MySQL中。【实践内容】Sqoop数据导出语法实践与详解。

梦想编程家
2023-03-30 04:51:04

 9230

 10

#mysql #数据库 #linux +2
数据分析-Python连接hive数据库

基于Python建立hive库的连接

 迹部的圆舞曲
2023-02-24 22:57:51

 1041

#python #开发语言 #hive
Hive 表 DML 操作——Hive 表 DML 操作——第1关：将文件中的数据导入（Load）到 Hive 表中

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Spu92Lls-1666382974341)(https://data.educoder.net/api/attachments/297553)]关键字，目标表或分区中的原始数据会被删除，替换成新数据；为了完成本关任务，你需要掌握：1.导入命令语法，2.如何将本地。中的任何一个文件同名，则表或分区中的同名文件会被。本关任

 真题OK撒
2022-10-22 04:11:12

 3906

 1

#hive #hadoop #大数据
hive大作业-餐饮外卖平台数据分析

1、背景W餐饮外卖平台向广大用户提供网上订餐服务，其市场占有量在近年不断增加。当用户在W平台订餐完成后，平台会引导用户对于品尝过的菜品进行评价打分，最高为5分，最低为1分。通过用户的评分数据，可以分析外卖平台的受欢迎度、客户的体验度。数据说明用户评分数据（mealrating.txt）属性名称属性说明UserID用户IDMealID菜品IDRat

听书人123
2022-05-22 16:35:55

 3530

 6

#hive #数据库 #大数据
Hive SQL--使用hive计算中位数以及分位数

开门见山的说，hive中有两个函数percentile和percentile_approx，可以用来计算分位数。而中位数即2分位数，那么同样可以使用该函数计算。具体使用方如下：percentile：percentile(col, p) col是要计算的列（值必须为int类型），p的取值为0-1，若为0.5，那么就是2分位数，即中位数。percentile_approx：percentile_app

会飞的鱼__
2020-10-14 10:11:54

 4.5w

 11

#hadoop #cloudera #hive
hive的同比、环比计算（add_months 函数）

说明：同比：同去年的今天进行比较环比：同上个月的今天进行比较环比计算一、先看一下数据，这里只能进行7.10号和6.10号进行对比，比到12号这里是引用±------------------------±-----------------------±-----------------------------±-------------------------+| bas_cgj_ssrlsj1.s

生活中的那点小事
2020-09-04 16:56:20

 1.4w

 4

#大数据 #hive
基于hive的京东手机销量的数据分析系统设计与实现（源码+定制+开发）

【摘要】本文介绍了程序员阿龙的技术服务内容与专业背景。作为拥有10W+粉丝的Java技术专家，阿龙提供包括毕业设计开发、论文辅导、答辩演练等一站式服务，涵盖SpringBoot、Vue、大数据等多个技术领域。文章详细展示了基于Hadoop生态的视频数据分析项目实现过程，包括环境部署（Linux+Hadoop3.3.5+Spark）、数据采集（Python爬虫）、系统测试等核心环节，并附有京东爬虫代

 C++_刘斯淇
2025-08-07 23:18:13

 1593

 30

#hive #hadoop #数据仓库 +4
计算机大数据毕业设计hadoop+spark+hive大学生就业数据分析可视化推荐系统大数据毕设大数据毕业设计(源码+LW+PPT+讲解)

摘要：本文提出基于Hadoop+Spark+Hive的大学生就业数据分析可视化推荐系统，通过分布式架构处理海量就业数据。系统整合多源异构数据，采用混合推荐算法（协同过滤与内容过滤）实现个性化职位推荐，并利用ECharts进行可视化展示。实验结果表明，该系统在推荐准确率（NDCG@10达0.78）和响应时间（低于200ms）方面显著优于传统方法，为高校就业指导提供高效技术支持。研究还探讨了数据倾斜处

 haochengxu2022
2025-12-11 00:38:57

 1220

 17

#大数据 #hadoop #spark +2
计算机毕业设计hadoop+spark+hive空气质量预测系统空气质量大数据分析可视化大数据毕业设计(源码+LW文档+PPT+讲解)

计算机毕业设计hadoop+spark+hive空气质量预测系统空气质量大数据分析可视化大数据毕业设计(源码+LW文档+PPT+讲解)

haochengxu2022
2025-06-10 07:32:06

 736

 26

#hadoop #大数据 #深度学习 +3
计算机毕业设计Hadoop+Spark+DeepSeek-R1大模型酒店推荐系统酒店可视化酒店数据分析机器学习深度学习(源码+文档+PPT+讲解)

计算机毕业设计Hadoop+Spark+DeepSeek-R1大模型酒店推荐系统酒店可视化酒店数据分析机器学习深度学习(源码+文档+PPT+讲解)

haochengxu2022
2025-06-04 07:41:25

 1013

 13

#spark #深度学习 #大数据 +2
【Hive】九、复杂数据类型：ARRAY / MAP / STRUCT 与嵌套展开

系统讲解 Hive 三种复合数据类型（ARRAY / MAP / STRUCT）的定义、访问语法、嵌套用法，以及配套的 UDTF 函数（explode / posexplode / LATERAL VIEW）与 Spark 3.0+ 的 CROSS JOIN UNNEST 标准语法对比

 Nefu_lyh
2026-06-22 17:41:23

 751

 9

#hive #hadoop #数据仓库
网约车大数据综合项目——数据分析Hive

【代码】网约车大数据综合项目——数据分析Hive。

CYDYYD
2023-10-15 23:04:24

 4287

 18

#大数据 #数据分析 #hive
SQL：数据去重的三种方法

SQL中去除重复数据

 还能坚持
2022-11-12 07:00:00

 15.5w

 40

#sql #hive #数据库
基于hive的全国热门旅游景点数据分析及可视化_vue

基于hive的全国热门旅游景点数据分析及可视化_vue

从rm到跑路
2025-06-26 10:31:42

 434

 4

#hive #数据分析 #spark +2
秒级数据写入，毫秒查询响应，天眼查基于 Apache Doris 构建统一实时数仓

随着天眼查近年来对产品的持续深耕和迭代，用户数量也在不断攀升，业务的突破更加依赖于数据赋能，精细化的用户/客户运营也成为提升体验、促进消费的重要动力。在这样的背景下正式引入 Apache Doris 对数仓架构进行升级改造，实现了数据门户的统一，大大缩短了数据处理链路，数据导入速率提升 75 %，500 万及以下人群圈选可以实现毫秒级响应，收获了公司内部数据部门、业务方的一致好评。王涛，天眼查实时

 SelectDB技术团队
2023-05-16 19:10:36

 1711

 1

#apache #大数据 #hive
计算机毕业设计Python+Spark知识图谱课程推荐系统课程预测系统课程大数据课程数据分析课程大屏 mooc慕课推荐系统大数据毕业设计

计算机毕业设计Python+Spark知识图谱课程推荐系统课程预测系统课程大数据课程数据分析课程大屏 mooc慕课推荐系统大数据毕业设计

 haochengxu2022
2024-06-06 00:00:00

 1551

 33

#大数据 #spark #python +3