社区日报 第1350期 (2021-03-18)
社区日报 • laoyang360 发表了文章 • 0 个评论 • 969 次浏览 • 2022-03-18 17:10
https://ecommercefastlane.com/ ... arch/
2、决定Elasticsearch 性能的5个关键因素(视频)-梯子
https://www.elastic.co/jp/vide ... mance
3、在 Elasticsearch 中每秒存储 5000 万个事件:我们是如何做到的?
https://datadome.co/bot-detect ... earch
编辑:铭毅天下
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
Elasticsearch 使用Java Api 查询复杂对象(对象里面有对象数组)
Elasticsearch • God_lockin 回复了问题 • 2 人关注 • 1 个回复 • 1869 次浏览 • 2022-03-22 09:42
ES有快照数据文件, 但是在快照仓库中找不到快照,怎么处理?
Elasticsearch • God_lockin 回复了问题 • 2 人关注 • 1 个回复 • 1464 次浏览 • 2022-03-22 09:43
ES无法读取存储库数据,因为存储库的内容与其预期状态不匹配,怎么解决?
Elasticsearch • Charele 回复了问题 • 3 人关注 • 1 个回复 • 2434 次浏览 • 2022-03-17 14:35
社区日报 第1349期 (2021-03-17)
社区日报 • Se7en 发表了文章 • 0 个评论 • 968 次浏览 • 2022-03-17 10:17
https://mp.weixin.qq.com/s/DKarfQAra2DM3ZeA5rvyVw
2.ES+Redis+MySQL,这个高可用架构设计太顶了!
https://mp.weixin.qq.com/s/3QNnJWsJ0zZnZF9sWkSyFw
3.Elasticsearch 功能概览
https://www.elastic.co/cn/elasticsearch/features
编辑:Se7en
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
MetaCon元宇宙技术大会直播预约通道免费开启
活动 • liaosy 发表了文章 • 0 个评论 • 1569 次浏览 • 2022-03-16 22:21
出于疫情防控考虑,原计划于 3 月 19 日在北京召开的 MetaCon 元宇宙技术大会 2022 最终改为线上直播形式,同时改期至 4 月 23 日举行。
为帮助更多对元宇宙感兴趣的技术人群深入了解元宇宙生态及相关技术实践,目前大会官网已开启免费报名预约通道,文末附带报名预约详细流程,感兴趣的小伙伴千万不要错过哦。
峰会介绍
MetaCon 元宇宙技术大会 2022 是由 51CTO 精心策划的业界首个重点围绕元宇宙技术展开的会议活动,大会聚焦元宇宙的产业政策、学术研究、技术创新与行业落地等众多方向。
会议专题覆盖“区块链、人机交互、电子游戏、人工智能、网络及运算、物联网”六大元宇宙核心技术方向,旨在帮助对元宇宙感兴趣的技术开发人员、元宇宙行业创业者、创新领域投资人与相关行业工作者系统性了解元宇宙产业生态发展以及核心技术实践。
本届大会主题为“探索·应用”,届时由 30 位行业内知名科研学者、头部科技公司技术大咖、独角兽型创业企业家组成的专家团队,将以线上直播形式为广大参会者分享元宇宙各个领域技术的落地实践经验,把脉元宇宙技术及行业的未来发展趋势。
专题详情
一、区块链数字生态
在元宇宙概念驱动的大势中,依托区块链技术在数字版权的生产、保护、交易,形成了庞大的经济体系。当前区块链的技术创新有哪些?如何利用技术手段推进各种物理形态产品向数字产品转化?如何打造及应用全新的区块链数字生态?本专场将邀请业内技术专家,与大家共话区块链前沿技术与生态发展,值得期待!
二、人机交互前沿落地
随着人工智能和虚拟技术的不断发展,各行业线上化促进了人机交互虚拟现实体验的迅速崛起。元宇宙世界人机交互如何实现?VR 虚拟现实技术、AR 增强现实技术、MR 混合现实技术、全息影像技术、传感技术等常用技术最新进展如何?人机交互未来的研究方向又是什么?本专题中,多位技术专家及科研专家将带领大家一起走进人机交互技术的前沿阵地!
三、电子游戏 /AI 专场
电子游戏是元宇宙的呈现方式,它的交互灵活、信息丰富,并为元宇宙提供创作平台、交互内容和社交场景并实现流量聚合。其中包括实时渲染、3D 建模和游戏引擎等技术,为元宇宙的数字场景以及数字内容提供重要的技术支撑。
四、网络及运算专场
网络为元宇宙提供高速、低延时、规模化介入传输通道,更实时、流畅的体验;云计算为元宇宙用户提供更强大、更轻量化的终端设备;边缘计算,解决成本和网络堵塞的问题,为元宇宙提更低延时、更流畅的体验。
嘉宾及议程
目前大会已确认嘉宾 18 人,更多重磅嘉宾及精彩内容持续更新中。(海报仅展示部分演讲嘉宾及议程)
报名指南
4 月 23 日早 9 点至晚 17 点,大会将通过 MetaCon 元宇宙技术大会 2022 官方网站进行直播,届时直播间内还将抽取多名幸运观众,赠送神秘大奖。具体报名预约流程如下:
- 点击大会官网链接进入 MetaCon 元宇宙技术大会 2022 官方网站。
官网直达:[https://metacon.51cto.com/act/metaverse/2022?es](https://metacon.51cto.com/act/metaverse/2022?es) - 点击官网首页右上角“立即报名”按钮填写报名信息并提交。
- 报名成功后扫码添加企业微信,回复“福利”,参与会前活动赢精美礼品。
elasticsearch [[node.max_local_storage_nodes] (was [1])
Elasticsearch • yimusidian 回复了问题 • 2 人关注 • 2 个回复 • 4534 次浏览 • 2022-03-25 16:07
社区日报 第1348期 (2021-03-16)
社区日报 • kin122 发表了文章 • 0 个评论 • 1471 次浏览 • 2022-03-16 18:24
https://mkonda007.medium.com/e ... 21ed7
2. Elasticsearch 索引速度优化(需要梯子)
https://medium.com/trendyol-te ... 041dc
3. 如何以零停机时间升级 Elasticsearch-将 Elasticsearch 从 0.90 升级到 7.x(需要梯子)
https://medium.com/sahibinden- ... 857bf
编辑:kin122
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
您好 能请教下中文排序的问题吗
Elasticsearch • medcl 回复了问题 • 2 人关注 • 1 个回复 • 1084 次浏览 • 2022-04-02 13:23
社区日报 第1347期 (2022-03-15)
社区日报 • God_lockin 发表了文章 • 0 个评论 • 1002 次浏览 • 2022-03-15 09:04
1. 教练,我想用k8s部署一个带安全认证的ES集群(需要梯子)
https://thomasdecaux.medium.co ... 25a00
2. 拿ELastic Stack能对电子表格做数据分析吗?(需要梯子)
https://towardsdatascience.com ... 98f51
3. 如何用Azure AD进行Elastic Cloud认证登陆(需要梯子)
https://medium.com/%40rajat-pa ... e3319
编辑:斯蒂文
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
ES数据迁移问题,从两台服务器迁移到另外两台上
Elasticsearch • tongchuan1992 回复了问题 • 2 人关注 • 1 个回复 • 1770 次浏览 • 2022-03-14 19:01
社区日报 第1346期 (2022-03-14)
社区日报 • pangying 发表了文章 • 0 个评论 • 1026 次浏览 • 2022-03-14 14:03
1.Kiabana 8.1 版本新特性
https://www.elastic.co/guide/e ... .html
2.Elasticsearch 8.1 新特性
https://www.elastic.co/guide/e ... .html
3.使用 Elastic Stack 来监控和调优 Golang 应用程序
https://blog.csdn.net/shenlanz ... 18275
编辑:pangying
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
社区日报 第1345期 (2022-03-13)
社区日报 • cyberdak 发表了文章 • 0 个评论 • 894 次浏览 • 2022-03-13 16:49
https://zhuanlan.zhihu.com/p/478144055
2.windows下使用docker安装es和kibana,方便测试
https://zhuanlan.zhihu.com/p/476208071
3.解析elasticsearch数据存储和常用检索功能
https://www.zhihu.com/question/345304458
编辑:cyberdak
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
Elastic日报 第1344期 (2021-03-12)
Elasticsearch • taoxiyang 发表了文章 • 3 个评论 • 1172 次浏览 • 2022-03-12 20:54
https://www.alibabacloud.com/h ... 2.htm
2. 创建Elasticsearch数据清洗任务,将RavenDB中的数据处理到Elasticsearch
https://ravendb.net/docs/artic ... earch
3. 用DbVisualizer管理Elasticsearch的数据
https://www.dbvis.com/database/elasticsearch/
编辑:陶希阳
归档:https://ela.st/cn-daily-all
订阅:https://ela.st/cn-daily-sub
沙龙:https://ela.st/cn-meetup
有了这两个小脚本,不需要再傻乎乎地手动安装 Elasticsearch了
Elasticsearch • spoofer 发表了文章 • 0 个评论 • 2732 次浏览 • 2022-03-11 19:40
在学习 ES 前一般都需要安装 ES,虽然 ES 可以开箱即用,但如果要学习分布式特性的时候,需要安装多个节点,这个时候还是有点工作量的。下面提供两个小脚本,一个是在 Ubuntu 中安装 3 节点的 ES 伪集群,一个是在 docker 中安装3节点 ES 集群。除了安装 ES 外,脚本还提供了对应版本的 Kibana、Cerebro 0.9.4 的安装。
1、在 Ubuntu 中安装 ES 7.13
这里我们采取下载 ES 安装包并且解压安装的方式,并没有走 Ubuntu apt 的方式。ES 的安装非常简单,这里先献上[安装脚本](https://gitee.com/dgl/es-bookl ... rEs.sh)。
下面介绍比较重要的配置项:
- discovery.seed_hosts 在开箱即用的情境下(本机环境)无需配置,ES 会自动扫描本机的 9300 到 9305 端口。一旦进行了网络环境配置,这个自动扫描操作就不会执行。discovery.seed_hosts 配置为 master 候选者节点即可。如果需要指定端口的话,其值可以为:["localhost:9300", "localhost:9301"]
- cluster.initial_master_nodes 指定新集群 master 候选者列表,其值为节点的名字列表。如果配置了 node.name: my_node_1,所以其值为 ["my_node_1"],而不是 ip 列表 !
- network.host 和 http.port 是 ES 提供服务的监听地址和端口,线上一定不能配置 ip 为 0.0.0.0,这是非常危险的行为!!!
怎么样来理解这个 discovery.seed_hosts 和 cluster.initial_master_nodes 呢?
cluster.initial_master_nodes 是候选者列表,一般我们线上环境候选者的数量比较少,毕竟是用来做备用的。而且这个配置只跟选举 master 有关,也就是跟其他类型的节点没有关系。就算你有100个数据节点,然后经常增加或者剔除都不需要动这个列表。
discovery.seed_hosts 这个可以理解为是做服务或者节点发现的,其他节点必须知道他们才能进入集群~ 一般配置为集群的master 候选者的列表。
但是这些 master 候选者(组织联系人)可能经常变化,那怎么办呢?这个配置项除了支持 ip 外还支持域名 ~所以可以用域名来解决这个问题,其他节点的配置上写的是域名,域名解析到对应的 ip,如果机器挂了,新的节点 ip 换了,就把域名解析到新的ip即可,这样其他节点的配就不用修改了。所以非 master 候选节点要配 discovery.seed_hosts (组织联系人)
除了修改 ES 服务配置外,还需要配置 JVM 的配置,我们主要配置服务占用的堆内存的大小。JVM 配置需要以下几点: - 这两个 jvm 的配置必须配置一样的数值。启动时就分配好内存空间,避免运行时申请分配内存造成系统抖动。
- Xmx不要超过机器内存的 50%,留下些内存供 JVM 堆外内存使用
- 并且Xmx不要超过 32G。建议最大配置为 30G。接近 32G,JVM 会启用压缩对象指针的功能,导致性能下降。具体可以参考:[a-heap-of-trouble](https://www.elastic.co/cn/blog/a-heap-of-trouble)。
安装成功后,可以访问:
ES:localhost:9211
Kibana: localhost:5601
cerebro: localhost:9800
2、在docker 中安装 ES 7.13
在做一切工作之前,我们必须安装 docker。如果你已经安装好了 docker、docker-compose,可以访问我为你准备的 [docker-compose.yaml](https://gitee.com/dgl/es-bookl ... e.yaml) 文件。
如果你没有安装 docker,完整的教程可以参考[在 docker 中安装 ES 文档](https://gitee.com/dgl/es-bookl ... bro.md)。
下载此文件,将文件保存为 docker-compose.yaml 后,进入这个文件的目录,执行以下指令即可:
<br /> docker-compose up<br />
如果你没有下载镜像文件,docker-compose 会自动帮你下载镜像,并且启动容器。
如果 docker-compose 启动失败,说是无权限链接 docker 的话,其报错如下:
<br /> Got permission denied while trying to connect to the Docker daemon socket at unix:///var/run/docker.sock: <br /> <br /> Get " <br /> <br /> dial unix /var/run/docker.sock: connect: permission denied<br />
可以运行以下指令临时修改:
<br /> sudo chmod 666 /var/run/docker.sock<br /> <br />
其原因是因为你的 docker 用了 root 启动了。
最后可以访问:
cerebro:ip:9000
Kibana:ip:5601
Elasticsearch: ip:9200,ip:9202,ip:9203
其他学习资料
[创建自己的 ES Docker Image](https://www.elastic.co/cn/blog ... search)
[在 docker image 中安装 Elasticsearch 插件](https://www.elastic.co/cn/blog ... gement)
[一个开源的 ELK docker-compose 配置](https://github.com/deviantony/docker-elk)
[docker 中安装 ES 7.13](https://www.elastic.co/guide/e ... r.html)
[docker 中安装 Kibana 7.13](https://www.elastic.co/guide/e ... r.html)
最后附上[我写的小册](https://juejin.cn/book/7054754754529853475),欢迎刚入门的朋友来订阅~