该站未曾设置keywords

爱思考www.ask3.cn于2023-09-14 11:04:08由该站站长自助申请提交或根据来路被便民库自助收录，便民库仅展示爱思考www.ask3.cn网站的基础信息，www.ask3.cn的IP地址：185.199.108.153 [泛播 GitHub]，www.ask3.cn的百度权重为0、百度手机权重为0、百度收录为0条、360收录为17条、搜狗收录为0条、谷歌收录为0条、百度来访流量大约在0~0之间、百度手机端来访流量大约在0~0之间、www.ask3.cn的备案号是沪ICP备13036234号、备案人叫杨泽、被百度收录的关键词有1个、手机端关键词有0个、迄今为止已经创建15年2月3天。

如此站不想被收录或存在违法违规内容，请联系我们删除

爱 思 考 爱 思 考 分 享 知 识 ， 分 享 快 乐 首 页 归 档 搜 索 0 % t r i n o 集 群 优 化 发 表 于 2 0 2 3 0 4 0 6 t r i n o 集 群 优 化 h t t p s : / / w w w . c n b l o g s . c o m / e r l o u 9 6 / p / 1 6 8 7 8 1 7 0 . h t m l c o n f i g . p r o p e r t i e s 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2 1 3 1 4 1 5 1 6 1 7 1 8 1 9 2 0 2 1 2 2 2 3 2 4 2 5 2 6 2 7 2 8 2 9 3 0 3 1 3 2 3 3 3 4 3 5 3 6 3 7 3 8 3 9 c o o r d i n a t o r = t r u e n o d e s c h e d u l e r . i n c l u d e c o o r d i n a t o r = t r u e h t t p s e r v e r . h t t p . p o r t = 8 0 8 9 # q u e r y . m a x t o t a l m e m o r y p e r n o d e = 2 G B d i s c o v e r y s e r v e r . e n a b l e d = t r u e d i s c o v e r y . u r i = h t t p : / / c d h 1 9 2 1 4 7 . h a d o o p . x y : 8 0 8 9 # 禁 用 保 留 池 ( 新 版 本 已 经 删 除 了 ) # e x p e r i m e n t a l . r e s e r v e d p o o l e n a b l e d = f a l s e # 在 单 个 w o r k e r 上 面 可 以 使 用 的 最 大 的 u s e r m e m o r y 值 （ 默 认 J V M m a x m e m o r y * 0 . 1 ） 调 整 到 J V M m a x m e m o r y * 0 . 2 5 # q u e r y . m a x m e m o r y p e r n o d e = 1 0 0 G B # 单 个 Q u e r y 在 单 个 W o r k e r 上 允 许 的 最 大 u s e r m e m o r y + s y s t e m m e m o r y 调 整 到 J V M m a x m e m o r y * 0 . 4 # q u e r y . m a x t o t a l m e m o r y p e r n o d e = 1 6 G B # 这 个 内 存 主 要 是 第 三 方 库 的 内 存 分 配 ， 无 法 统 计 跟 踪 。 （ 默 认 J V M m a x m e m o r y * 0 . 3 ） 调 整 到 J V M m a x m e m o r y * 0 . 2 # m e m o r y . h e a p h e a d r o o m p e r n o d e = 8 G B # 单 个 查 询 在 所 有 任 务 调 度 的 节 点 上 瞬 间 最 大 能 用 的 内 存 （ 单 个 查 询 的 峰 值 内 存 ） 调 整 到 q u e r y . m a x m e m o r y = 3 0 0 G B # 当 p r e s t o 集 群 发 生 O O M 时 的 内 存 保 护 策 略 ， 配 置 t o t a l r e s e r v a t i o n 是 k i l l 掉 占 用 内 存 最 大 的 任 务 q u e r y . l o w m e m o r y k i l l e r . p o l i c y = t o t a l r e s e r v a t i o n # 延 长 等 待 时 间 e x c h a n g e . h t t p c l i e n t . r e q u e s t t i m e o u t = 1 0 s # 从 其 他 P r e s t o 节 点 获 取 数 据 的 线 程 数 。 较 高 的 值 可 以 提 高 大 型 群 集 或 具 有 很 高 并 发 性 的 群 集 的 性 能 ( 默 认 值 ： 2 5 ) e x c h a n g e . c l i e n t t h r e a d s = 1 2 8 e x c h a n g e . h t t p c l i e n t . i d l e t i m e o u t = 1 0 s # 并 行 运 算 符 （ 例 如 联 接 和 聚 合 ） 的 默 认 本 地 并 发 性 。 较 低 的 值 对 于 同 时 运 行 许 多 查 询 的 集 群 更 好 （ 默 认 值 ： 1 6 ， 必 须 是 2 的 幂 次 ） t a s k . c o n c u r r e n c y = 2 t a s k . m a x w o r k e r t h r e a d s = 2 5 6 # 可 以 创 建 用 于 处 理 H T T P 响 应 的 最 大 线 程 数 。 在 具 有 大 量 并 发 查 询 的 群 集 上 或 在 具 有 数 百 或 数 千 个 工 作 程 序 的 群 集 上 ， 可 以 调 高 （ 默 认 值 : 1 0 0 ） t a s k . h t t p r e s p o n s e t h r e a d s = 2 0 0 0 j o i n d i s t r i b u t i o n t y p e = A U T O M A T I C n o d e s c h e d u l e r . m a x s p l i t s p e r n o d e = 2 0 0 0 q u e r y . m a x s t a g e c o u n t = 4 0 0 0 # 自 动 k i l l 运 行 时 长 超 过 2 0 分 钟 的 s q l （ 代 替 脚 本 k i l l 任 务 ， 让 p r e s t o 自 动 管 理 ） ： q u e r y . m a x r u n t i m e = 1 2 0 0 s # 解 决 新 版 本 r e m o t e t o o l a r g e 报 错 e x c h a n g e . h t t p c l i e n t . m a x c o n t e n t l e n g t h = 1 2 8 M B n o d e m a n a g e r . h t t p c l i e n t . m a x c o n t e n t l e n g t h = 6 4 M B j v m . c o n f i g 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2 1 3 X m x 1 0 2 4 G X m s 1 0 2 4 G X X : + U s e G 1 G C X X : + E x p l i c i t G C I n v o k e s C o n c u r r e n t X X : + H e a p D u m p O n O u t O f M e m o r y E r r o r X X : + U s e G C O v e r h e a d L i m i t X X : O n O u t O f M e m o r y E r r o r = k i l l 9 % p D H A D O O P _ U S E R _ N A M E = h d f s D u s e r . t i m e z o n e = A s i a / S h a n g h a i D j d k . a t t a c h . a l l o w A t t a c h S e l f = t r u e X X : G 1 R e s e r v e P e r c e n t = 1 5 X X : I n i t i a t i n g H e a p O c c u p a n c y P e r c e n t = 4 0 X X : C o n c G C T h r e a d s = 8 阅 读 全 文 » s t a r R o c k s 部 署 发 表 于 2 0 2 3 0 3 3 0 [ c l i c k h o u s e ] 1 7 2 . 2 0 . 8 5 . [ 1 1 1 : 1 1 3 ] 1 7 2 . 2 0 . 8 5 . [ 1 3 8 : 1 4 2 ] [ f e ] 1 7 2 . 2 0 . 8 5 . [ 1 1 1 : 1 1 3 ] [ b e ] 1 7 2 . 2 0 . 8 5 . [ 1 3 8 : 1 4 2 ] 1 2 a n s i b l e c l i c k h o u s e m c o p y a s r c = / r o o t / . b a s h r c d e s t = / r o o t / . b a s h r c a n s i b l e c l i c k h o u s e m s h e l l a j a v a v e r s i o n 1 2 3 a n s i b l e c l i c k h o u s e m s h e l l a y u m i n s t a l l y r s y n c a n s i b l e c l i c k h o u s e m s y n c h r o n i z e a s r c = / o p t / m o d u l e / S t a r R o c k s d e s t = / o p t / m o d u l e / a n s i b l e c l i c k h o u s e m s h e l l a l s / o p t / m o d u l e / S t a r R o c k s f e 部 署 第 一 次 启 动 需 指 定 – h e l p e r 参 数 ， 后 续 再 启 动 无 需 指 定 此 参 数 s h / o p t / m o d u l e / S t a r R o c k s / f e / b i n / s t a r t _ f e . s h h e l p e r 1 7 2 . 2 0 . 8 5 . 1 1 1 : 9 0 1 0 d a e m o n 1 2 a n s i b l e f e m s h e l l a s h / o p t / m o d u l e / S t a r R o c k s / f e / b i n / s t o p _ f e . s h a n s i b l e f e m s h e l l a s h / o p t / m o d u l e / S t a r R o c k s / f e / b i n / s t a r t _ f e . s h d a e m o n 1 2 3 4 5 6 m y s q l h 1 2 7 . 0 . 0 . 1 P 9 0 3 0 u r o o t p m y s q l > S H O W P R O C / f r o n t e n d s \ \ G A L T E R S Y S T E M A D D F O L L O W E R 1 7 2 . 2 0 . 8 5 . 1 1 2 : 9 0 1 0 ; A L T E R S Y S T E M A D D F O L L O W E R 1 7 2 . 2 0 . 8 5 . 1 4 2 : 9 0 1 0 ; # A L T E R S Y S T E M D R O P F O L L O W E R 1 7 2 . 2 0 . 8 5 . 1 4 2 : 9 0 1 0 ; A L T E R S Y S T E M A D D O B S E R V E R 1 7 2 . 2 0 . 8 5 . 1 1 3 : 9 0 1 0 ; b e 部 署 阅 读 全 文 » h b a s e 的 m a s t e r 和 r e g i o n s e r v e r 的 j v m 调 优 发 表 于 2 0 2 3 0 3 2 9 h b a s e 的 m a s t e r 和 r e g i o n s e r v e r 的 j v m 调 优 h t t p s : / / b l o g . c s d n . n e t / R o b o t s _ / a r t i c l e / d e t a i l s / 1 1 2 4 7 5 7 5 8 阅 读 全 文 » 部 署 A l l u x i o 集 群 发 表 于 2 0 2 3 0 3 2 1 准 备 下 载 文 件 ： w g e t h t t p s : / / d o w n l o a d s . a l l u x i o . i o / d o w n l o a d s / f i l e s / 2 . 8 . 0 / a l l u x i o 2 . 8 . 0 b i n . t a r . g z 解 压 目 录 ： / o p t / s e r v e r s / a l l u x i o 1 2 w g e t h t t p s : / / d o w n l o a d s . a l l u x i o . i o / d o w n l o a d s / f i l e s / 2 . 9 . 2 / a l l u x i o 2 . 9 . 2 b i n . t a r . g z t a r x z f a l l u x i o 2 . 9 . 2 b i n . t a r . g z C / o p t / s e r v e r s / a l l u x i o 创 建 目 录 ： m k d i r p / m n t / r a m d i s k 机 器 ： 1 0 . 0 . 2 1 . 1 9 0 （ m a s t e r ， w o r k e r ） 1 0 . 0 . 2 1 . 1 9 1 （ m a s t e r ， w o r k e r ） 1 0 . 0 . 2 1 . 1 9 2 （ w o r k e r ） H A 配 置 搭 建 高 可 用 集 群 前 的 准 备 : ① 确 保 Z o o k e e p e r 服 务 已 经 运 行 ② 一 个 单 独 安 装 的 可 靠 的 共 享 日 志 存 储 系 统 ( 可 用 H D F S 或 S 3 等 系 统 ) ③ 这 个 配 置 针 对 A l l u x i o 2 . x 版 本 ， 不 适 用 于 1 . x 版 本 ④ 需 要 事 先 创 建 好 r a m d i s k 挂 载 目 录 配 置 h i v e a l l u x i o 文 件 系 统 ： c o r e s i t e . x m l 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2 f s . a l l u x i o . i m p l a l l u x i o . h a d o o p . F i l e S y s t e m T h e A l l u x i o F i l e S y s t e m ( H a d o o p 1 . x a n d 2 . x ) f s . A b s t r a c t F i l e S y s t e m . a l l u x i o . i m p l a l l u x i o . h a d o o p . A l l u x i o F i l e S y s t e m T h e A l l u x i o A b s t r a c t F i l e S y s t e m ( H a d o o p 2 . x ) 阅 读 全 文 » H b a s e C a l l q u e u e i s f u l l 问 题 分 析 及 解 决 发 表 于 2 0 2 3 0 3 2 1 H b a s e C a l l q u e u e i s f u l l 问 题 分 析 及 解 决 h t t p s : / / h i j i a z z . g i t e e . i o / h b a s e c a l l q u e u e i s f u l l / 阅 读 全 文 » 集 成 F l i n k H i s t o r y S e r v e r 至 C D H 发 表 于 2 0 2 3 0 3 1 0 集 成 F l i n k H i s t o r y S e r v e r 至 C D H 参 考 h t t p s : / / b l o g . c s d n . n e t / g u i y i f e i / a r t i c l e / d e t a i l s / 1 0 9 3 2 5 9 8 0 制 作 F l i n k 的 p a r c e l 包 和 c s d 文 件 1 . 下 载 制 作 脚 本 1 2 3 g i t c l o n e h t t p s : / / g i t h u b . c o m / E v e n G u i / f l i n k p a r c e l m a s t e r c d f l i n k p a r c e l m a s t e r 修 改 参 数 v i m f l i n k p a r c e l . p r o p e r t i e s 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2 1 3 1 4 1 5 1 6 1 7 1 8 1 9 # F L I N k 下 载 地 址 F L I N K _ U R L = / o p t / s o f t / f l i n k 1 . 1 4 . 6 b i n s c a l a _ 2 . 1 2 . t g z # f l i n k 版 本 号 F L I N K _ V E R S I O N = 1 . 1 4 . 6 # 扩 展 版 本 号 E X T E N S _ V E R S I O N = B I N S C A L A _ 2 . 1 2 # 操 作 系 统 版 本 ， 以 c e n t o s 为 例 O S _ V E R S I O N = 7 # C D H 小 版 本 C D H _ M I N _ F U L L = 5 . 1 3 . 1 C D H _ M A X _ F U L L = 6 . 3 . 2 # C D H 大 版 本 C D H _ M I N = 5 C D H _ M A X = 6 编 译 p a r c e l 1 s h b u i l d . s h p a r c e l . / F L I N K 1 . 1 4 . 6 B I N S C A L A _ 2 . 1 2 / l i b / f l i n k / b i n / s t a r t s c a l a s h e l l . s h d o e s n o t e x i s t . 阅 读 全 文 » C D H 6 . 3 . 2 集 成 f l i n k 1 . 1 4 . 6 发 表 于 2 0 2 3 0 3 1 0 C D H 6 . 3 . 2 集 成 f l i n k 1 . 1 4 . 6 制 作 F l i n k 的 p a r c e l 包 和 c s d 文 件 1 . 下 载 制 作 脚 本 1 2 3 # 克 隆 源 码 g i t c l o n e h t t p s : / / g i t h u b . c o m / p k e r o p e n / f l i n k p a r c e l . g i t c d f l i n k p a r c e l 2 修 改 参 数 v i m f l i n k p a r c e l . p r o p e r t i e s 1 2 3 4 5 6 7 8 9 1 0 1 1 1 2 1 3 1 4 1 5 1 6 1 7 1 8 1 9 # F L I N K 下 载 地 址 F L I N K _ U R L = h t t p s : / / a r c h i v e . a p a c h e . o r g / d i s t / f l i n k / f l i n k 1 . 1 4 . 6 / f l i n k 1 . 1 4 . 6 b i n s c a l a _ 2 . 1 2 . t g z # f l i n k 版 本 号 F L I N K _ V E R S I O N = 1 . 1 4 . 6 # 扩 展 版 本 号 E X T E N S _ V E R S I O N = B I N S C A L A _ 2 . 1 2 # 操 作 系 统 版 本 ， 以 c e n t o s 为 例 O S _ V E R S I O N = 7 # C D H 小 版 本 C D H _ M I N _ F U L L = 5 . 1 3 . 1 C D H _ M A X _ F U L L = 6 . 3 . 2 # C D H 大 版 本 C D H _ M I N = 5 C D H _ M A X = 6 4 编 译 p a r c e l 1 2 3 4 # 赋 予 执 行 权 限 c h m o d + x . / b u i l d . s h # 执 行 编 译 脚 本 . / b u i l d . s h p a r c e l 编 译 完 会 在 f l i n k p a r c e l 项 目 根 目 录 下 生 成 _ b u i l d 文 件 夹 阅 读 全 文 » 内 网 穿 透 发 表 于 2 0 2 3 0 2 2 2 内 网 穿 透 花 生 壳 的 h t t p 不 能 免 费 使 用 了 ， 网 上 找 了 资 料 实 测 下 面 这 2 款 可 以 用 l o c a l h o s t . r u n h t t p : / / l o c a l h o s t . r u n / 1 、 这 个 使 用 最 简 单 ， 不 需 要 下 载 任 何 软 件 ， 简 单 一 行 s s h 命 令 就 行 。 1 s s h R 8 0 : l o c a l h o s t : 8 0 8 0 n o k e y @ l o c a l h o s t . r u n 1 2 3 4 5 R 命 令 表 示 反 向 端 口 转 发 8 0 是 被 指 定 的 转 发 端 口 l o c a l h o s t 是 你 局 域 网 i p 地 址 （ 对 应 1 2 7 . 0 . 0 . 1 ） 8 0 8 0 是 你 的 局 域 网 端 口 号 n o k e y @ l o c a l h o s t . r u n 是 一 台 处 在 公 网 的 服 务 器 F a s t T u n n e l h t t p s : / / s u i d a o . i o / 在 个 人 中 心 获 取 用 于 客 户 端 登 录 的 A c c e s s K e y 在 创 建 隧 道 页 面 ， 创 建 需 要 穿 透 的 隧 道 信 息 。 下 载 并 启 动 客 户 端 软 件 , 根 据 提 示 录 入 A c c e s s K e y 进 行 登 录 , 登 录 成 功 后 根 据 映 射 信 息 提 示 进 行 访 问 你 的 服 务 。 阅 读 全 文 » d o r i s 部 署 发 表 于 2 0 2 3 0 2 2 1 d o r i s 部 署 f e 部 署 1 2 3 4 5 第 一 次 启 动 需 指 定 h e l p e r 参 数 ， 后 续 再 启 动 无 需 指 定 此 参 数 s h / o p t / m o d u l e / a p a c h e d o r i s f e / b i n / s t a r t _ f e . s h h e l p e r c d h 1 9 2 1 5 0 : 1 9 0 1 0 d a e m o n a n s i b l e f e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s f e / b i n / s t o p _ f e . s h a n s i b l e f e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s f e / b i n / s t a r t _ f e . s h d a e m o n 1 2 3 4 5 6 7 8 9 1 0 m y s q l h 1 2 7 . 0 . 0 . 1 P 9 0 3 0 u r o o t p m y s q l > S H O W P R O C / f r o n t e n d s \ \ G A L T E R S Y S T E M A D D F O L L O W E R c d h 1 9 2 1 5 1 : 1 9 0 1 0 ; # A L T E R S Y S T E M D R O P F O L L O W E R c d h 1 9 2 1 5 1 : 1 9 0 1 0 ; A L T E R S Y S T E M A D D O B S E R V E R c d h 1 9 2 1 5 2 : 1 9 0 1 0 ; # A L T E R S Y S T E M d r o p O B S E R V E R c d h 1 9 2 1 5 2 : 1 9 0 1 0 ; A L T E R S Y S T E M A D D F O L L O W E R c d h 1 9 2 1 5 3 : 1 9 0 1 0 ; A L T E R S Y S T E M A D D F O L L O W E R c d h 1 9 2 1 4 6 . h a d o o p . x y : 1 9 0 1 0 ; n e t s t a t n a p | g r e p 1 9 0 1 0 b e 部 署 1 2 a n s i b l e b e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s b e / b i n / s t o p _ b e . s h a n s i b l e b e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s b e / b i n / s t a r t _ b e . s h d a e m o n 1 2 3 4 5 m y s q l > S H O W P R O C / b a c k e n d s \ \ G A L T E R S Y S T E M A D D B A C K E N D c d h 1 9 2 1 5 0 : 9 0 5 0 ; A L T E R S Y S T E M A D D B A C K E N D c d h 1 9 2 1 5 1 : 9 0 5 0 ; A L T E R S Y S T E M A D D B A C K E N D c d h 1 9 2 1 5 2 : 9 0 5 0 ; A L T E R S Y S T E M A D D B A C K E N D c d h 1 9 2 1 4 6 : 9 0 5 0 ; 1 2 a n s i b l e b e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s b e / b i n / s t o p _ b e . s h a n s i b l e b e m s h e l l a s h / o p t / m o d u l e / a p a c h e d o r i s b e / b i n / s t a r t _ b e . s h d a e m o n d o r i s 升 级 重 要 ！ ！ 在 升 级 之 前 需 要 备 份 元 数 据 （ 整 个 目 录 都 需 要 备 份 ） ！ ！ 阅 读 全 文 » h k b l o c k i n 系 统 优 化 发 表 于 2 0 2 3 0 2 1 0 群 用 到 了 那 些 组 件 ？ 版 本 有 什 么 要 求 ？ t r i n o 3 8 6 ， 这 个 是 j d k 1 1 了 ， 安 装 两 个 目 录 就 行 了 ， p h o e n i x 5 ， h i v e 3 . 1 . 2 , h a d o o p . 3 . 1 . 3 , s p a r k 2 . 4 . 8 , s p a r k 3 . 2 f l i n k 1 . 1 2 . 7 , f l i n k 和 s p a r k 都 想 升 级 。 i c e b e r g . 0 . 1 3 . 2 , t r i n o u i 地 址 h t t p : / / c d h 1 9 2 5 7 : 8 0 8 9 / u i / 用 户 p r e s t o j d b c 1 7 2 . 2 0 . 1 9 2 . 5 7 用 户 p r e s t o 软 件 都 安 装 在 / h o m e / h a d o o p / b i g d a t a / 这 个 下 面 [ r o o t @ h a d o o p 1 0 2 ~ ] $ x s y n c / h o m e / h a d o o p / b i g d a t a / h a d o o p / e t c / h a d o o p / c a p a c i t y s c h e d u l e r . x m l 刷 新 y a r n 集 群 的 队 列 1 $ / b i n / y a r n r m a d m i n r e f r e s h Q u e u e s ` 或 ` y a r n r m a d m i n r e f r e s h Q u e u e s h b a s e c d h 1 9 2 [ 2 3 4 2 3 6 ] / o p t / l o c a l / 阅 读 全 文 » 1 2 … 1 4 文 章 目 录 站 点 概 览 d a t a s i r 小 杨 随 笔 1 3 3 日 志 1 标 签 G i t H u b E M a i l 沪 I C P 备 1 3 0 3 6 2 3 4 号 3 © 2 0 2 3 d a t a s i r