logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

spark-sql优化简述

对于一条SQL语句中可能多次使用到的表,可以对其进行缓存,使用SQLContext.cacheTable(TableName)或者DataFrame.cache即可,SparkSQL会用内存列存储的格式进行表的缓存,然后SparkSQL就可以仅仅扫描需要使用的列,并且自动优化压缩,来最小化内存的使用和GC的开销,SQLContext.uncacheTable(tableName)可以将表从缓存中移

#sql#大数据
重磅!天翼云多云统管体系及两个验证节点通过云计算服务安全评估

同时,天翼云也将持续携手生态伙伴,推进云计算安全发展,制定和完善云计算安全标准,促进产业生态繁荣和进步,为国家安全贡献力量。,实现对不同云平台的统一安全管控,解决了各地政务云及行业云资源池分散建设、分散管理导致的安全水平差异问题,从全生命周期保障了安全要求与管控措施的一致性,大幅提高了各资源池集约化运维及安全水准。,实现云环境的自动化监控、故障预警,天翼云SOC实现对安全事件的实时监测、分析与响应

文章图片
#云计算#安全
云服务器虚拟化超分与虚机性能关系分析

虚拟化是指使用虚拟化软件在计算机硬件上创建抽象层,将单个计算机的硬件元素(包括处理器、内存、存储器等)分成多个虚拟计算机 (VM), 每个 VM 都运行自己的操作系统 (OS) ,类似于独立的计算机。这样虚拟化技术能让一台服务器变成几台甚至上百台互相隔离的虚拟服务器,不再受限于物理上的界限,而是让CPU、内存、存储、I/O等硬件变成可以动态管理的“资源池”,从而提高资源的利用率

文章图片
#服务器#运维
使用element-ui 的上传组件upload完成自定义上传到天翼云oss云服务器

由于浏览器的同源策略,在浏览器里调用 JS-SDK 时, 部分功能无法实现,包括 Service 的 操作,Bucket 的新建,AccessKey 以及 SecretKey 的操作。原文链接:https://blog.csdn.net/qq_32849999/article/details/110000814。uploadList: [], // 自定义的数组,用于处理fileList,file

文章图片
#ui#服务器#javascript
安全可信 | 安全与高效兼得?天翼云EasyCoding敏捷开发平台来了!

在此背景下,中国信息通信研究院联合业内专家共同编制了《云计算服务安全要求 第2部分:SaaS安全要求》标准,规范了SaaS的安全通用要求,包括访问控制、身份鉴别、数据安全、安全审计、安全运行、安全策略管理六大部分,为业界SaaS服务商提升产品安全性提供了前沿的方法论和标准指南。工作项为敏捷开发团队提供简单高效的团队协作服务,包含开发团队管理、需求管理、敏捷迭代、看板协作、缺陷跟踪、仪表板自定制报表

文章图片
#安全#敏捷流程
云灾备:云时代的数据安全

灾备(DR),在信息化的IT系统中,指的是容灾与备份结合,利用IT技术对企业数据、业务高可用进行保护,确保系统遭受灾难时数据安全、业务快速恢复。其作为“网络安全的最后一公里”,是网络安全保障体系的重要组成部分,也是网络与系统基础设施持续有效运行的基本保障。

文章图片
#网络#安全#运维
数据治理之数据分类分级

为了更好地保护数据安全、提高数据管理效率、确保数据合规性,企业需要对数据进行分类分级,根据数据的密级和敏感程度制定不同的管理和使用策略,尽可能做到有差别和针对性的防护,避免敏感数据的防护不足,非敏感数据的过度防护。为了更好地保护数据安全、提高数据管理效率、确保数据合规性,企业需要对数据进行分类分级,根据数据的密级和敏感程度制定不同的管理和使用策略,尽可能做到有差别和针对性的防护,避免敏感数据的防护

#大数据
数据治理之数据质量评估维度及方法

字符乱码的问题或者字符被截断的问题,可以使用分布来发现这类问题,一般的数据记录基本符合正态分布或者类正态分布,那么那些占比异常小的数据项很可能存在问题,比如某个字符记录占总体的占比只有0.1%,而其他的占比都在3%以上,那么很有可能这个字符记录有异常。每日提供的数据应该是完整的,无论在量上还是在特定的数据上,高质量的数据是通过完整的数据统计出来的。其中统计的范围只涉及有价值的任务。可靠性:指数据的

#数据库#大数据#数据挖掘
天翼云安全一体化纵深体系是怎么炼成的?

随着数字化建设的推进,关键信息基础设施逐渐成为国家重要的战略资源,天翼云作为云计算的国家队与排头兵,一直以安全作为发展核心,深耕云原生技术,构建端到端安全,致力于突破关键核心技术,提高国产化能力,掌握核心竞争力,捍卫企业云上安全。天翼云不断完善产品能力,打造安全管理、数据安全、应用安全、网络安全等多个层面的安全产品,层层加固靶向防御,为企业筑起全方位的互联网安全护城河。天翼云通过专属云、虚拟网络隔

文章图片
#安全#网络
“天翼云息壤杯”高校AI大赛福建赛区启动!

11月20日,2024首届全国“天翼云息壤杯”高校AI 大赛(福建赛区)正式启动。中国电信福建公司携手华为公司、福建省计算机学会、福建省自动化学会,正式启动天翼云科技有限公司承办的“天翼云息壤杯”高校AI大赛(福建赛区)赛事。该赛事是中国电信搭建的进一步挖掘培养AI人才、丰富AI生态、突破AI技术和应用难点的重要交流平台,将加速推动全省在AI领域的产学研合作、技术创新和相关产业发展。

文章图片
#人工智能
    共 144 条
  • 1
  • 2
  • 3
  • 15
  • 请选择