首页
博客
小笔记
我的论文
Study on an emergency evacuation model considering information transfer and rerouting: Taking a simplified H-shape metro station hall as an example
A combined real-time intelligent fire detection and forecasting approach through cameras based on computer vision method
卷积神经网络在建筑消防信息化的应用———以城市综合管廊火灾监控为例
Theoretical and experimental study on image noise reduction for improving camera-based fire detection performance in thermal environments
1
关于时间序列异常检测
2
深度学习工程实践:PyTorch Lightning与Ignite框架的技术特性对比分析
3
(徒手搓LLM)逐行代码从0构造一个LLM——LlaMa篇
4
11种经典时间序列预测方法:理论、Python实现与应用
5
【京东技术】京东广告研发——AIGC在京东广告创意的技术应用
陈铭
🤪阿巴阿巴阿巴🤪
累计撰写
294
篇文章
累计创建
294
个标签
累计收到
24
条评论
栏目
首页
博客
小笔记
我的论文
Study on an emergency evacuation model considering information transfer and rerouting: Taking a simplified H-shape metro station hall as an example
A combined real-time intelligent fire detection and forecasting approach through cameras based on computer vision method
卷积神经网络在建筑消防信息化的应用———以城市综合管廊火灾监控为例
Theoretical and experimental study on image noise reduction for improving camera-based fire detection performance in thermal environments
搜索
标签搜索
异常检测
Ignite
PyTorch Lightning
LlaMa
时间序列
图生成
扩散模型
推荐系统
j
搜广推
RoaringBitMap
位图计算
倒排索引
Java Agent
热部署
业务中台
中台
技术中台
时序数据监控
异常数据监控
CLIP
DSSM
双塔模型
匿名设备匹配
产品思维
架构设计文档模板
架构设计
情感分类
对话评价
个人感悟
思维模式
动态定价
灵活网格
防火墙
机器学习
护士排班问题
量子退火
分布式缓存
缓存一致性
AIOps
AI
日志监控
NVIDIA Container Toolkit
GPT
Prompt
GPU集群
流水线并行
张量并行
智能修复
插帧
超分辨率
异常分析
根因分析
告警体系
SRE
SLO
带宽
降本增效
侵权
版权
图像
数字水印
水印
SQL
索引
Seq2Seq
DAG
分词
tokenizers
NLP
cudnn
向量搜索
向量相似度
Faiss
交叉熵
图像分类
注意力机制
异步编程
高并发
自监督
OpenPose
专家混合
MoE
日志
ONNX
数据质量
对象存储
BOSS
特征工程
半监督
MOCO
ChatGPT
Stable Diffusion
Diffusion
RL
强化学习
DL
OCR
Paddle
图嵌入
GPU
nvitop
JQuery
多模态
分布式锁
实体关系
图像裁剪
迁移学习
预训练
推荐算法
ChatGLM-6B
Nvidia
GLM
LLM
自注意力
Transformer
智能BI
维度下钻
数据库
可观测性
序列
时序数据
数据异常检测
ResNet
RNN
LSTM
Neo4j
GNN
n
SpringCloud
Nacos
Vue
cAdvisor
GridFS
MongoDB
i18n
i18
国际化
CSRF
多数据源
若依
EasyExcel
FlyWay
F
Gradle
Jackson
Cafine
Guava
Cache
架构
SpringSecurity
Optianal
LogBack
Junit
@Valid
@Validate
Mybatis-Plus
Pipeline
Redis
异步接口
Slf4j
Druid
DbUtils
Hologres
Lombok
Ghelper
Grafana
Prometheus
消息队列
ZooKeeper
虚拟机
虚拟ji
Qemu
Android
Termux
Mysql
Flume
MaxCompute
DataHub
DataWorks
阿里云
SparkSql
Kafka
Scala
SparkStream
SparkStrea
HQL
Spark
Hive
DataNode
NameNode
MapReduce
Yarn
HDFS
Hadoop
大数据
HTML
显卡
驱动
Nvdia
AMD
Tampermonkey
watchdog
Systemd
刷机
极路由
Frp
树莓派
VPN
sshpass
expect
PXE
LVM
远程唤醒
WOL
VNC
快照
KVM
虚拟化
RabbitMQ
Rabb
Netty
stomp
双亲委派
Mybatis
SPI
策略模式
元胞自动机
JFormDesigner
IDEA
pip
Yum
PHP
Dockerfile
luarocks
Lua
HS256
JWT
Token
Maven Wrapper
wrk
Nginx
@ControllerActive
IOC
AOP
SpringIOC
RPC
Dubbo
csv
手写框架
SpringMVC
Tomcat
Javascript
editormd
systemctl
npm
压测
linu
Postgresql
linx
C++
etcd
Apisix
Cpplint
CheckStyle
Pypi
cm
cmake
GCC
Maven
Nexus
Conan
RPM
Hook
Jenkins
Git
Visdom
Yolo
CNN
Web
Cuda
Pytorch
Websocket
SSH
Bat
Python
Leetcode
SpringBoot
Interceptor
Java
Linux
SSL
Docker
个人博客
目 录
CONTENT
以下是
Hadoop
相关的文章
2023-01-30
Spark单机部署和集群部署
前言整个Spark集群是建立在之前的Hadoop集群+Hive的基础上的。由于Hive的计算引擎默认是MR,计算效率相对较慢,主要是MR整个过程中有大量的IO操作。我们的目的是,在三节点上部署一个Spark集群部署,让Spark成为代替MR的计算引擎。由于Spark是基于内存的,对虚拟机的内存要求相
2023-01-30
689
0
0
大数据
2023-01-25
Hive的安装部署
什么是HiveHive是由Facebook开源,基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。本质上它是一个Hadoop客户端,用于将HQL(Hive SQL)转化成MapReduce程序(极大的简化了编写Mapper和Reducer的工作量)。(1
2023-01-25
285
0
0
大数据
2023-01-25
DataNode启动源码解析
工作机制DataNode启动后会向NameNdoe注册自己注册成功后,DN会每隔6小时上报当前节点的所有块信息并且每隔3s进行心跳如果超过10min30s没有心跳,NN会把这个DN当成死亡节点,去除掉环境准备创建一个Maven项目,pom文件依赖如下 <dependencies>
2023-01-25
307
0
0
大数据
2023-01-25
NameNode启动源码解析
启动9870端口服务加载镜像文件和编辑日志初始化NN的RPC服务端NN启动资源检查NN对心跳超时判断安全模式
2023-01-25
178
0
1
大数据
2023-01-23
Yarn原理介绍及其基本操作
Yarn作业提交流程这里以hadoop命令启动一个MR任务为例,如上图所示:首先会找ResourceManager去申请一个Appilication,而ResourceManager会返回一个Appilication的资源缓存路径,专门存放启动MR任务的各类信息(切片、任务参数、jar包等)各类资源
2023-01-23
296
0
0
大数据
2023-01-18
MapReduce源码解析和基本操作
WordCount这边自行实现一个WordCount任务,和HDFS的Java调用一样,需要win的Hadoop依赖,此处略。但是自行定义的MR程序后面需要打包成Jar,所以pom文件里加上如下依赖:<!--如果下方maven-assembly-plugin插件报红,可以再加上对应依赖--&g
2023-01-18
435
0
2
大数据
2023-01-17
HDFS基本操作
Shell命令hadoop fs xxx 和 hadoop dfs xxx是完全一样的命令,这里用hadoop fs 举例# 查看某个命令的帮助hadoop fs -help rm# 在HDFS根目录下创建文件夹myDirhadoop fs -mkdir /myDir
2023-01-17
180
0
1
大数据
2023-01-16
Hadoop集群搭建(三台虚拟机为例)
虚机准备启动CentOS7虚拟机首先去官网下载x86_64架构mini版本的iso镜像(当然可选择标准版的,就是iso文件大一些)。使用Vmware启动虚拟机(启动过程略),这边的虚拟配置是:20G硬盘4核(每核1线程,不开启虚拟化)2G内存配置网络信息配置静态ipvim /etc/sysconfi
2023-01-16
597
0
0
大数据