Nov132020
Spring Boot Flink CDC MySQL 同步 Elasticsearch (DataStream方式)
概述
在现代数据处理应用中，实时数据同步至搜索引擎是一个重要的需求。本文将介绍如何利用Spring Boot和Flink CDC (Change Data Capture)来实现MySQL数据库数据的实时同步至Elasticsearch，采用DataStream方式进行处理。
准备工作
在开始之前，确保以下组件已经安装并配置好：
JDK 1.8 或以上版本
Maven 3.x 或以上版本
MySQL 数据库
Elasticsearch
项目依赖
在pom.xml文件中添加如下...阅读全文
作者：绝缘体.. | 分类：apache, elasticsearch, java, MySQL, spring, 后端框架, 开发工具, 数据库, 编程语言 | 阅读： | 标签：Apache, elasticsearch, java, MySQL, spring
抢沙发
Nov022020
大数据技术开发中的数据流程与任务调度
在大数据技术开发中，数据流程和任务调度是非常重要的环节。数据流程包括数据抽取、转换和加载（ETL）过程，而任务调度用于管理和调度各个任务的执行。本文将介绍大数据技术开发中的数据流程和任务调度，并探讨错误处理机制。
ETL流程
ETL（Extract, Transform, Load）是大数据技术开发中的关键步骤。它涉及从源系统中抽取数据、对数据进行清洗和转换，并最终加载到目标系统中的过程。以...阅读全文
Nov022020
数据库读写分离与分库分表架构设计：MySQL主从复制、ShardingSphere实战指南
数据库读写分离与分库分表架构设计：MySQL主从复制、ShardingSphere实战指南
一、引言：为什么需要数据库水平扩展？
随着互联网应用的快速发展，用户量和数据量呈指数级增长。传统的单机数据库架构在面对高并发请求和海量数据存储时，逐渐暴露出性能瓶颈——CPU、内存、磁盘I/O以及网络带宽成为制约系统扩展的关键因素。
为应对这一挑战，数据库水平扩展（Horizontal Scaling） 成为现代分...阅读全文
Nov012020
CentOS7 httpd搭建配置Apache HTTP服务
Apache HTTP服务是一款开源的，基于Apache的一个模块，用于提供Web服务。在CentOS7上搭建和配置Apache HTTP服务非常简单，本篇博客将介绍搭建和配置的详细步骤。
安装Apache HTTP服务
打开终端，执行以下命令安装Apache HTTP服务：
sudo yum install httpd
启动和配置Apache HTTP服务
启动Apache HTTP服务：
sudo systemctl start httpd
将Apache HTTP服务设置为开机启动：
sudo system...阅读全文
Oct062020
微服务架构下分布式事务一致性保障方案：Seata与Saga模式深度对比
微服务架构下分布式事务一致性保障方案：Seata与Saga模式深度对比
引言：微服务架构中的分布式事务挑战
随着企业数字化转型的深入，微服务架构已成为构建大型复杂系统的主流选择。它通过将单体应用拆分为多个独立部署、可独立扩展的服务单元，显著提升了系统的灵活性、可维护性和开发效率。然而，这种“按业务边界划分”的设计理念也带来了新的技术难题——分布式事务的一致性保障。
在传统单...阅读全文
Oct062020
apache虚拟主机解析php
安装：yum -y install php httpd
在配置文件中加上（打红部分）：
listen 192.168.1.3:80
<virtualhost 192.168.1.3:80>
servername www.meml.comdocumentroot /webLoadModule php5_module modules/libphp5.soAddType application/x-httpd-php .phpDirectoryIndex index.php index.html
<Directory “/web”> Require all granted</Directory></virtu...阅读全文
Oct032020
Apache服务器的优化与调优
Apache是目前最常用的Web服务器之一，它广泛用于提供网站和应用程序的访问。为了确保服务器的高性能和稳定性，需要对Apache进行优化和调优。本文将介绍一些常见的优化技巧和调优策略，以提供更好的用户体验和合理利用服务器资源。
1. 优化配置文件
Apache的配置文件（httpd.conf）包含了大量的参数和选项，可以根据实际需求进行调整。以下是一些常见的优化配置：
调整MaxClients参数：M...阅读全文
Sep212020
Accumulo的API接口：如何使用Java API进行数据存储和检索操作
Apache Accumulo是一个高性能、分布式的键值存储系统，它基于Google的BigTable论文，并建立在Apache Hadoop和Apache ZooKeeper之上。Accumulo提供了强大的API接口，使开发人员可以使用Java编程语言轻松地进行数据存储和检索操作。
本文将介绍如何使用Java API进行Accumulo数据存储和检索操作，重点涵盖以下内容：
连接到Accumulo集群
创建表
插入数据
执行查询
修改数据
删除数据
关闭连...阅读全文
Sep172020
攻防世界-web-Zhuanxv（任意文件读取、万能密钥、sql盲注 ）
题目来源：XCTF 4th-SCTF-2018题目描述：你只是在扫描目标端口的时候发现了一个开放的web服务
进入场景后是一个显示时间的页面
使用dirsearch扫描一下，发现隐藏目录list。命令：
python3 dirsearch.py -u http://220.249.52.133:43210/ -e *
访问list目录，发现是一个后台登录页面
抓包发现背景图片是从后台加载的一张图片
或者从网页源代码也可以看出
猜测这里可能有文件读取漏洞...阅读全文
Sep162020
攻防世界-web-comment（密码爆破、.git泄漏、代码审计、sql二次注入）
题目来源：网鼎杯 2018题目描述：SQL
一、密码爆破
进入场景后，点击发帖，输入内容提交后，系统返回登录页面
可以看到账号框默认账号为：zhangwei 密码为zhangwei***
由于仅密码的后三位不知道，我们想到了爆破。
爆破出来的密码为zhangwei666
二、.git泄漏
尝试访问http://220.249.52.133:35828/.git/，系统返回无权限，说明存在.git泄漏。
使用如下命令下载git源码
python GitHack.p...阅读全文