flink个人
Impala与Flink开发应用_tyt2023
本实验基于MRS环境，Impala部分主要介绍基本操作。假定用户开发一个应用程序，用于管理企业中的使用A业务的用户信息，使用Impala客户端实现A业务操作流程。Flink部分主要介绍如何实现Flink与Kafka的连接以满足实时计算场景应用。 购买MRS集群 选择“自定义购买” 区域：华北-北京四 ......
flink 的安装以及fink-cdc 基于多数据源导入的es 的简单使用
此文档是参照flink-cdc 文档( https://ververica.github.io/flink-cdc-connectors/master/content/快速上手/mysql-postgres-tutorial-zh.html) 案例 的最佳实践 1.下载flink release 最 ......
2023年秋季个人阅读计划9
《见微知著：从软件实践到软件工程》读后感 在信息时代，软件工程的重要性日益凸显。作为IT学生，我深知掌握软件工程知识对于未来的职业生涯至关重要。最近，我阅读了《见微知著：从软件实践到软件工程》这本书，它以酒店信息管理系统的开发为例，深入浅出地介绍了软件工程的全过程。 软件工程不仅仅是一个编写代码的过 ......
一些基于SpringBoot2.X的后台管理系统，可以作为高校毕设项目、个人学习之用
该酒店管理系统适用于各类酒店管理，用于提高酒店内部工作效率。主要是针对酒店内部工作人员即管理员和酒店普通员工设计的。主要是具备客房预订、退房、房间信息管理、员工管理、入住管理等模块,提高了酒店内部业务的运转效率,大大降低了成本；该系统基于SpringBoot+VUE+MyBatisPlus+MySQ ......
Flink计算TopN
在 Apache Flink 中实现高效的 Top N 数据处理，尤其是涉及时间窗口和多条件排序时，需要精细地控制数据流和状态管理。 普通计算TopN： 1. 定义数据源（Source） 首先，我们需要定义数据源。这可能是 Kafka 流、文件、数据库或任何其他支持的数据源。 val stream: ......
【Flink从入门到精通 05】Source&Sink
【Flink从入门到精通 05】Source&Sink Flink用于处理有状态的流式计算，需要对Source端的数据进行加工处理，然后写入到Sink端，下图展示了在Flink中数据所经历的过程，今天就根据这张图分别给大家分享下。 01 Environment Flink所有的程序都从这一步开始，只 ......
Java版Flink（一）概述和入门案例
一、概述 1、Flink 是什么 Apache Flink is a framework and distributed processing engine for stateful computations over unbounded and bounded data streams. Apac ......
面对游戏新政，个人开发者如何突围
最近国家发布了针对游戏行业的限制意见稿，具体内容，相信大家都已经了解了，不同的人,坐在不同的位置,有不同的解读，游戏厂商与相关行业股票下跌,微信抖音小游戏没有版号但靠广告收益的小游戏开发公司也非常焦虑, 想利用自己的编程技术，通过游戏创业或增加收入的个人开发者更是感觉所有的路子都堵死了。屁股决定脑袋 ......
Linux下，安装单机版Flink
安装前准备 jdk环境 开始安装 下载安装包 地址1：https://archive.apache.org/dist/flink/flink-1.18.0/flink-1.18.0-bin-scala_2.12.tgz 官方：https://dlcdn.apache.org/flink/flink- ......
Flink on Yarn安装部署
引言 Apache Flink 是一款用于大规模数据处理和分析的分布式流处理框架，它提供了高性能、容错性和灵活性，广泛应用于实时数据处理和批处理场景。Flink 的核心特性包括事件驱动、状态管理、窗口操作等，使其成为处理实时和离线数据的理想选择。 本文档将引导您在 YARN（Yet Another ......
HBase Shell操作&Flink写入HBase
一、HBase Shell操作 1、基本操作 1）进入HBase客户端命令行 [root@bigdata1 hbase]$ bin/hbase shell 2）查看帮助命令 hbase(main):001:0> help 3）查看当前数据库中有哪些表 hbase(main):002:0> list ......
聊聊Flink必知必会(七)
What is State 虽然数据流中的许多操作一次只查看一个单独的事件（例如事件解析器），但某些操作会记住多个事件的信息（例如窗口算子）。 这些操作称为有状态的(stateful)。 有状态操作的一些示例： 当应用程序搜索某些事件模式(event patterns)时，状态(state)将存储迄 ......
2023第七届强网杯 个人题解
27 htppy Spring 评价: 相对简单，放出来的晚，做的出来的人相对比较少 大致流程是可以上传.pebble模板文件，然后通过访问上传的恶意模板文件进行rce。 首先上传恶意模板文件，经过几次尝试，黑名单过滤了，org.springframework.context.support.Cla ......
聊聊Flink必知必会(六)
Flink是一个分布式系统，需要有效地分配和管理计算资源才能执行流应用程序。它集成了所有常见的集群资源管理器，如Hadoop YARN和Kubernetes，但也可以设置为作为一个独立的集群运行，甚至作为一个库。 Flink集群的剖析 Flink运行时由两种类型的进程组成:一个JobManager和 ......
数据可视化对个人用户是否具有实用价值？
当谈论到数据可视化对个人用户的实用价值时，很多人可能会想到它仅适用于企业或专业领域。然而，数据可视化对个人用户同样具有重要的实用价值。本文将从可视化从业者的角度出发，简单说说数据可视化对个人用户的实用价值。 ......
高等数学学习笔记 | 1.关于学校课时安排和个人学习方式的体会
高等数学是一门基础课，是一门非常基础的大学课程。 基础到什么程度呢？几乎每个专业的同学都有学习这门课的内容，同时这门课具有比较高的学分比重。 而且高等数学也是考研数学中占比很高的一部分。 这就导致了一个现象，首先，高等数学的应试化体系已经非常成熟了，但是学生们仍然感到学习障碍大。 一部分学生投入了很 ......
Flink处理函数解析（ProcessFunction和KeyedProcessFunction）
Flink中的处理函数（ProcessFunction和KeyedProcessFunction）在对于数据进行颗粒化的精确计算时使用较多，处理函数提供了一个定时服务（TimerService），可以向未来注册一个定时服务， ......
Flink 在风控场景实时特征落地实战
背景介绍 风控简介 二十一世纪，信息化时代到来，互联网行业的发展速度远快于其他行业。一旦商业模式跑通，有利可图，资本立刻蜂拥而至，助推更多企业不断的入场进行快速的复制迭代，企图成为下一个“行业领头羊”。 带着资本入场的玩家因为不会有资金的压力，只会更多的关注业务发展，却忽略了业务上的风险点。强大如拼 ......
个人老师可直接使用的在线授课软件
Flat 在线教室 —— 个人老师可直接使用的在线授课软件，开箱即用。前后端完全开源，快速搭建简约美观的在线教室。支持 Web 端、Windows 客户端与 macOS 客户端。 ......
宝塔面板搭建部署wordpress个人网站实现无公网即可远程访问(小白建站福音!!)
WordPress是一个非常灵活和强大的博客建站平台，适用于各种不同类型的网站建设需求。 简单几步实现宝塔面板结合cpolar工具实现无公网远程访问,无需云服务器即可发布自己的网站到公网访问 1. 环境安装 wordpress运行需要PHP环境,我们在宝塔商店中我们搜索PHP8.0 版本安装 然后安 ......
flink在linux上运行成功但是无法访问webUI界面
本文参考博主：Flink Web UI不能访问_flink启动后web页面打不开-CSDN博客 首先我在finallshell上运行成功flink之后长这样： 然后再web界面上输入：localhost：8081显示无法进入： 然后我把防火墙关闭了： hdfs dfsadmin -safemode ......
数据可视化对个人用户有什么帮助？
数据可视化是一种强大的工具，不仅可以为企业和专业人士提供见解，也对个人用户带来了许多实际的帮助。下面我就以一个数据可视化从业者的视角，来谈谈数据可视化对个人用户的益处： 首先对于个人用户来说，数据可视化可以让平时接触的数据更易于理解。它能够将数字转化为图形或图表，为用户提供更清晰直观的视觉展示，让个 ......
部署K8S(个人记录 很乱)
顺便回顾一下Linux的知识点 都忘完了快 ip addr 获取ip地址 无IP4地址 解决方法 vi /etc/sysconfig/network-scripts/ifcfg-ens33 修改配置文件 ONBOOT=NO改为YES 参数说明 表示在系统启动时不自动激活该网卡设备 这意味着系统启动时 ......
电子公文传输系统——个人贡献
一、简述你完成的工作 完成电子公文系统中用户管理和角色控制部分的后端设计与实现，撰写大部分团队博客，组织小组召开小组会议、进行分工等。 （一）在检索资料进行学习 之前在Java-web课上也做过网站设计，不过是一个有简单用户管理的视频网站。 所以这次开始实验之前，我也把之前Java课程的书籍和web ......
电子公文系统--个人贡献
1 简述你完成的工作 实验报告的撰写 数据库设计 java与数据库接口实现 网站页面美学调研与设计 撰写前端网页代码 项目部署与测试 帮助组员完成项目环境配置 2.小组总共的代码行数，我贡献的代码行数。 代码总行数：6872行 我贡献的代码行数：1513行 代码链接：https://gitee.co ......
个人贡献20211228许博文
20211228许博文 个人贡献 作为组长，我明确本次团队合作任务，了解电子公文传输系统任务分配，确保每个组员分领到适合的任务。我主要负责 1.数据库设计 2.完成了前端的构建 3.帮助组员完成项目环境配置 这个项目也是由我将每个人的成果汇总到一起的，可以说是十分了解此项目。 代码总行数：6872行 ......
电子公文系统--个人贡献dzcl
一、简述你完成的工作: 1.java与数据库接口实现 2.网站页面美学调研与设计 3.撰写前端网页代码 4.项目部署与测试 二、 小组总共的代码行数，我贡献的代码行数： 代码总行数：6872行 我贡献的代码行数：2569行 三、 小组总共的文档数11个，我贡献的文档数共3个，分别为 （3） 确定分工 ......
2022年个人总结
参与开源项目： 在2022年，我积极参与维护了一个开源项目：春松客服。我在项目中主要负责技术讨论群的建设，包括回答用户的各种提问，解决用户的部署编译问题。与其他开发者的合作，我们成功地将项目推向了一个新的阶段。 通过参与开源项目的建设，我认识了一群志同道合的伙伴，了解了开源项目的建设思路，也理解了开 ......
兰馨五棵松20211110个人贡献
我完成的工作： 主要负责前端设计，参与了部分数据库整合和文本编写。 我们小组的相关代码链接：https://gitee.com/an-jiran/dzgwxt/tree/master/ （撰写代码时未统计代码行数） 我们小组总共发布14篇博客，我贡献了其中5篇，相关链接如下： https://www ......