Is this you? As a journalist, you can create a free Muck Rack account to customize your profile, list your contact preferences, and upload a portfolio of your best work.
Claim your profile
Articles by Francek Chen
【华为Mate90系列】麒麟9050Pro首秀!Mate90系列及多款新品正式发布-CSDN博客
原创 已于 2026-10-01 22:00:40 修改 · 置顶 · 94 阅读 · 5 · 2 · 本内容遵循CC 4.0 BY-SA版权协议 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 GEO检测 · 收录于 当前文章被收录于: HarmonyOS学习 于 2026-10-01 21:59:23 首次发布 前言 2026 年 10 月 1 日,华为 Mate 90 系列及全场景新品发布会在线上正式举行,HUAWEI Mate 90 系列、nova 16 Pro 联名款限定礼盒、HUAWEI FreeBuds Neo、华为 WATCH D3 腕部动态血压记录仪以及华为智慧屏 MateTV 2 系列等多款新品亮相。华为以科技创新持续构建全场景生态,为消费者打造万物互联的智慧体验。 华为商城链接:HUAWEI Mate 90 Pro Max 典藏版 | HUAWEI FreeBuds Neo | HUAWEI WATCH D3 一、Mate 系列简介 余承东表明 Mate 90...
【TimechoAI】DB×AI融合新标杆:TimechoAI赋能数据智能化升级-CSDN博客
原创 于 2026-09-24 08:35:28 发布 · 8 阅读 · 1 · 0 · 本内容遵循CC 4.0 BY-SA版权协议 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 GEO检测 · 收录于 当前文章被收录于: 商务合作推广 当前文章被收录于: 大数据与数据库应用 【作者主页】Francek Chen 【专栏介绍】 ⌈ ⌈ ⌈大数据与数据库应用 ⌋ ⌋ ⌋ 大数据是规模庞大、类型多样且增长迅速的数据集合,需特殊技术处理分析以挖掘价值。数据库作为数据管理的关键工具,具备高效存储、精准查询与安全维护能力。二者紧密结合,数据库为大数据提供坚实存储与处理基础,在电商、金融、医疗等领域广泛应用,助力企业精准决策、提升运营效率。 前言...
【HarmonyOS 7】新品发布:华为Mate XT 2携麒麟9050 Pro与鸿蒙7重磅登场
原创 已于 2026-09-08 10:40:34 修改 · 置顶 · 170 阅读 · 8 · 2 · 本内容遵循CC 4.0 BY-SA版权协议 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 GEO检测 · 收录于 当前文章被收录于: HarmonyOS学习 于 2026-09-07 23:23:30 首次发布 前言 2026 年 9 月 7 日,华为在广州召开 HarmonyOS 7|HUAWEI Mate XT 2 及全场景新品发布会,华为全新展翼三折叠焕新登场。同时,HarmonyOS 7、HUAWEI Pura X Max 新配色、HUAWEI Pura X View、HUAWEI Mate Pad Air、HUAWEI Watch 6 等也在同日重磅亮相。 华为商城链接:HUAWEI Mate XT 2 非凡大师 | HUAWEI Pura X View | HUAWEI WATCH 6 一、HarmonyOS 7 首先,何刚先行把“非常棒的鸿蒙 HarmonyOS 7”正式带给了大家。 谈及...
行业应用案例:MCP在不同垂直领域的落地实践-CSDN博客
行业应用案例:MCP在不同垂直领域的落地实践 目录 行业应用案例:MCP在不同垂直领域的落地实践 摘要 1. 金融服务行业 1.1 应用场景概览 1.2 案例分析:某大型银行的智能风控系统 1.3 监管合规挑战与解决方案 2. 医疗健康行业 2.1 应用场景分析 2.2 案例分析:智能诊断辅助系统 3. 制造业 3.1 智能制造MCP应用 3.2 案例分析:某汽车制造厂的智能生产线 4. 教育行业 4.1 个性化学习MCP系统 4.2 案例分析:在线教育平台的个性化学习系统 5. 零售电商行业 5.1 智能零售MCP应用 5.2 案例分析:某电商平台的智能推荐系统 6.
Hadoop 2.0 大家族(四)
Flume是一个分布式高性能、高可靠的数据传输工具,它可用简单的方式将不同数据源的数据导入某个或多个数据中心,典型应用是将众多生产机器日志数据实时导入HDFS。 (一)Flume简介 1、Flume逻辑结构 Flume核心思想是数据流,即数据从哪来到哪去,中间不需用经过谁。 用户可以将Flume看成是两台机器之间通过网络互相传送数据,Flume定制了大量的数据源(Thrift、Shell)与数据汇(Thrift、HDFS、Hbase),通过使用“管道”,Flume能够确保不会丢失一条数据,提供了数据高可靠性。 2、Flume组成 (1)Source 它负责读取原始数据,目前Flume支持大量类型。用户可以自定义Source,使用时在配置文件里声明即可。 (2)Channel 它负责将从Source端传来的数据存入Channel。Flume的分用、复用和过滤功能即在于此。 (3)Sink 它负责从Channel中取出并发送数据。Sink内部都是使用netty来发送数据的。 (二)Flume入门 1、Flume部署...
Hadoop 2.0 大家族(一)
(一)分布式组件 1、组件简介 (1)Apache ZooKeeper:分布式、开源的协调服务。主要是用来解决多个分布式应用遇到的互斥协作与通信问题,大大简化分布式应用协调及其管理的难度。 (2)Apache Hbase:分布式存储系统。高可靠性、高性能、面向列、可伸缩。可在廉价PC Server上搭建大规模结构化存储集群。 (3)Apache Pig:基于Hadoop的大规模数据分析工具。提供类SQL类型语言,该语言的编译器会把用户写好的Pig型类SQL脚本转换为一系列经过优化的MR操作并负责向集群提交任务。 (4)Apache Hive:基于Hadoop的一个数据仓库工具。将结构化的数据文件映射为一张数据库表,通过类SQL语句快速实现简单的MR统计,适合数据仓库的统计分析。 (5)Apache Oozie:工作流引擎服务。用于管理和协调运行在Hadoop平台上各种类型任务(HDFS、Pig、MR、Shell,Java等)。 (6)Apache Flume:分布式日志数据聚合与传输工具。可用于日志数据收集、处理和传输,功能类似于Chukwa,但比Chukwa更小巧实用。...
Python文件和异常(一)-CSDN博客
目录 文本文件可存储的数据量多得难以置信:天气数据、交通数据、社会经济数据、文学作品等。每当需要分析或修改存储在文件中的信息时,读取文件都很有用,对数据分析应用程序来说尤其如此。例如,可以编写一个这样的程序:读取一个文本文件的内容,重新设置这些数据的格式并将其写入文件,让浏览器能够显示这些内容。 要使用文本文件中的信息,首先需要将信息读取到内存中。为此,你可以一次性读取文件的全部内容,也可以以每次一行的方式逐步读取。 (一)读取整个文件 要读取文件,需要一个包含几行文本的文件。下面首先创建一个文件,它包含精确到小数点后30位的圆周率值,且在小数点后每10位处换行: 3.1415926535 8979323846 2643383279 要动手尝试后续示例,可在编辑器中输入这些数据行,再将文件保存为 pi_digits.txt 。 下面的程序打开并读取这个文件,再将其内容显示到屏幕上: with open('pi_digits.txt') as file_object: contents = file_object.read() print(contents)...
Python编程实验五:文件的读写操作-CSDN博客
目录 第1题 第2题 (1)通过本次实验,学生应掌握与文件打开、关闭相关的函数,以及与读写操作相关的常用方法的使用; (2)理解基于文件的词频统计以及数据分析的基本思路,能根据问题需要灵活选择合适的数据结构; (3)综合应用所学知识实现对问题的编程求解; (4)按照实验题目要求独立正确地完成实验内容(编写、调试算法程序,提交程序清单及及相关实验数据与运行结果) 请使用Python语言在Jupyter Notebook环境下编程,完成下列题目的要求: 1、实验5素材文件夹下的文件 data.txt 是一个来源于网上的技术信息资料。 问题1:用 Python 语言中文分词第三方库 jieba 对文件 data.txt 进行分词,并选择长度大于等于3个字符的关键词,写入文件 out1.txt , 每行一个关键词,各行的关键词不重复,输出顺序不做要求,例如: 人工智能 科幻小说 …… 问题2:对实验5素材文件夹下的文件 data.txt 进行分词,对长度不少于3个字符的关键词,统计出现的次数,按照出现次数由大到小的顺序输出到文件 out2.txt ,每行一个关键词及其出现次数,例如:...
Spark编程实验六:Spark机器学习库MLlib编程-CSDN博客
目录 1、通过实验掌握基本的MLLib编程方法; 2、掌握用MLLib解决一些常见的数据分析问题,包括数据导入、成分分析和分类和预测等。 1.数据导入 从文件中导入数据,并转化为DataFrame。 2、进行主成分分析(PCA) 对6个连续型的数值型变量进行主成分分析。PCA(主成分分析)是通过正交变换把一组相关变量的观测值转化成一组线性无关的变量值,即主成分的一种方法。PCA通过使用主成分把特征向量投影到低维空间,实现对特征向量的降维。请通过setK()方法将主成分数量设置为3,把连续型的特征向量转化成一个3维的主成分。 3、训练分类模型并预测居民收入 在主成分分析的基础上,采用逻辑斯蒂回归,或者决策树模型预测居民收入是否超过50K;对Test数据集进行验证。 4、超参数调优 利用CrossValidator确定最优的参数,包括最优主成分PCA的维数、分类器自身的参数等。 附:数据集:...
Spark编程实验五:Spark Structured Streaming编程
目录 1、通过实验掌握Structured Streaming的基本编程方法; 2、掌握日志分析的常规操作,包括拆分日志方法和分析场景。 1、通过Socket传送Syslog到Spark 日志分析是一个大数据分析中较为常见的场景。在Unix类操作系统里,Syslog广泛被应用于系统或者应用的日志记录中。Syslog通常被记录在本地文件内,也可以被发送给远程Syslog服务器。Syslog日志内一般包括产生日志的时间、主机名、程序模块、进程名、进程ID、严重性和日志内容。 日志一般会通过Kafka等有容错保障的源发送,本实验为了简化,直接将Syslog通过Socket源发送。新建一个终端,执行如下命令: $ tail -n+1 -f /var/log/syslog | nc -lk 9988 “tail -n+1 -f /var/log/syslog”表示从第一行开始打印文件syslog的内容。“-f”表示如果文件有增加则持续输出最新的内容。然后,通过管道把文件内容发送到nc程序(nc程序可以进一步把数据发送给Spark)。...
【数据仓库与联机分析处理】多维数据模型-CSDN博客
目录 数据仓库和OLAP工具是基于多维数据模型的,该模型以数据立方体(Cube)的形式来观察和分析数据。 区别于关系数据模型中的二维表,数据立方体是一个多维的数据模型,类似于一个超立方体。它允许从多个维度来对数据建模,并提供多维的视角以观察数据。 数据立方体由维和事实定义。一般来说,维是透视图或是一个组织想要记录的实体。在通常情况下,多维数据模型会围绕某个主题来构建,该中心主题被称为事实,事实是用数值来度量的。 一个分店的销售数据表,如表所示,分店的销售按照时间维(按季度组织)和商品维(按所售商品的类型组织)表示: 一个分店的销售数据表 XX武汉分店 时间(季度) 商品(类型)(单位:台) 笔记本 台式机 Q1 408 887 Q2 496 945 Q3 522 768 Q4 6000 1023 下面从三维角度观察销售数据,如表所示,添加一个分店地址维,从时间、商品类型和分店地址来观察数据。 四个分店的销售数据表 时间(季度) XX武汉分店 XX宜昌分店 XX北京分店 XX郑州分店 商品(类型)(单位:台) 笔记本 台式机 笔记本 台式机 笔记本 台式机 笔记本 台式机 Q1...
Spark编程实验四:Spark Streaming编程
目录 1、通过实验掌握Spark Streaming的基本编程方法; 2、熟悉利用Spark Streaming处理来自不同数据源的数据。 3、熟悉DStream的各种转换操作。 4、熟悉把DStream的数据输出保存到文本文件或MySQL数据库中。 1、参照教材示例,利用Spark Streaming对三种类型的基本数据源的数据进行处理。 2、参照教材示例,完成kafka集群的配置,利用Spark Streaming对Kafka高级数据源的数据进行处理,注意topic为你的姓名全拼。 3、参照教材示例,完成DStream的两种有状态转换操作。 4、参照教材示例,完成把DStream的数据输出保存到文本文件或MySQL数据库中。 1、利用Spark Streaming对三种类型的基本数据源的数据进行处理 (1)文件流 首先打开第一个终端作为数据流终端,创建一个logfile目录: [root@bigdata zhc]# cd /home/zhc/mycode/sparkstreaming [root@bigdata sparkstreaming]# mkdir logfile...
【数据采集与预处理】数据接入工具Kafka-CSDN博客
目录 (一)消息队列 消息队列内部实现原理 1、点对点模式(一对一,消费者主动拉取数据,消息收到后消息清除) 点对点模型通常是一个基于拉取或者轮询的消息传送模型,这种模型从队列中请求信息,而不是将消息推送到客户端。这个模型的特点是发送到队列的消息被一个且只有一个接收者接收处理,即使有多个消息监听者也是如此。 2、发布/订阅模式(一对多,数据生产后,推送给所有订阅者) 发布订阅模型则是一个基于推送的消息传送模型。发布订阅模型可以有多种不同的订阅者,临时订阅者只在主动监听主题时才接收消息,而持久订阅者则监听主题的所有消息,即使当前订阅者不可用,处于离线状态。 (二)什么是Kafka Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群来提供实时的消息。 在流式计算中,Kafka 一般用来缓存数据,Storm 通过消费 Kafka 的数据进行计算。 1、Apache...
【数据仓库与联机分析处理】数据仓库工具Hive-CSDN博客
目录 (一)什么是Hive Hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapReduce变得更加简单,而不必开发专门的MapReduce应用程序。Hive十分适合对数据仓库进行统计分析。 本质:将 HQL 转化成 MapReduce 程序 (1)Hive 处理的数据存储在 HDFS (2)Hive 分析数据底层的实现是 MapReduce (3)执行程序运行在 Yarn 上 (二)优缺点 1、优点 (1)操作接口采用类 SQL 语法,提供快速开发的能力(简单、容易上手)。 (2)避免了去写 MapReduce,减少开发人员的学习成本。 (3)Hive 的执行延迟比较高,因此 Hive 常用于数据分析,对实时性要求不高的场合。 (4)Hive...
大数据编程期末大作业2023_直接将第4题的计算结果保存到/user/root/lisi目录中lisipi文件里。-CSDN博客
目录 按要求完成以下操作: 1、在HDFS中创建目录 /user/root/你的名字。 例如:李四同学 /user/root/lisi,后同。 首先需要启动hdfs,在终端输入如下命令: start-dfs.sh 在终端输入如下命令创建目录: hdfs dfs -mkdir -p /user/root/***(你自己的名字全拼,下同) 2、创建本地文件lisi.txt,文件内容为包括Lisi love Hadoop等其他任意输入的6行英文句子,并将该文件上传到HDFS中第1题所创建的目录中。 在终端的root目录下面创建本地文件并输入题目要求的内容: vim ***.txt 然后我们再在终端输入上传命令: hdfs dfs -put ***.txt /user/root/*** 3、查看上传到HDFS中的lisi.txt文件的内容。 直接在终端输入查看命令: hdfs dfs -cat /user/root/***/***.txt 4、在Hadoop官方的示例程序包hadoop-mapreduce-examples-3.1.3.jar中,包括计算Pi值的测试模块,使用hadoop...
Spark编程实验三:Spark SQL编程
目录 1、通过实验掌握Spark SQL的基本编程方法; 2、熟悉RDD到DataFrame的转化方法; 3、熟悉利用Spark SQL管理来自不同数据源的数据。 1、Spark SQL基本操作 将下列JSON格式数据复制到Linux系统中,并保存命名为employee.json。 { "id":1 , "name":"Ella" , "age":36 } { "id":2, "name":"Bob","age":29 } { "id":3 , "name":"Jack","age":29 } { "id":4 , "name":"Jim","age":28 } { "id":5 , "name":"Damon" } { "id":5 , "name":"Damon" } 为employee.json创建DataFrame,并写出Python语句完成下列操作: (1)查询所有数据; (2)查询所有数据,并去除重复的数据; (3)查询所有数据,打印时去除id字段; (4)筛选出age>30的记录; (5)将数据按age分组; (6)将数据按name升序排列; (7)取出前3行数据;...
Show More
loading
Actions
Is this you?
As a journalist, you can create a free Muck Rack account to customize your profile, list your contact preferences, and upload a portfolio of your best work.Get in touch with Francek
Contact Francek, search articles and posts on X, monitor coverage, and track replies from one place.
Learn more about Muck Rack