我一直有看湾区日报的习惯，后来看到 Golang 中国社区的 astaxie 也在做 GoCN 每日新闻 的事情。日报对社区来讲是一件持续输出的事情，对个人来讲是一件持续输入的事情，于是我决定在 Elastic 社区也做这么一件事情，在2017年7月30日我发布了 Elastic日报 第1期。

当天和 medcl 聊过后，他建议发动社区的力量来做，这样才能保证日报做好做久。于是我们开始在社区里面招募日报编辑，很快便有很多同学响应，接着 Elastic日报编辑部成立。到今天，我们一共有8位社区编辑，其中7位负责每周固定一天的日报，另一位负责审稿和公众号文章发布。他们分别是：

• 江水
• 金桥
• bsll
• 至尊宝
• 叮咚光军
• laoyang360
• cyberdak
• 陶文

感谢社区编辑们的付出，我们一同做了一件了不起的事情——持续100天的知识输出。如果有同学把这100天的日报内容都看完吃透，那它的Elastic 技术水准肯定提升了不止1个档次。

现在想来，如果是我一个人做这件事情，恐怕日报不会超过30期。个人的力量是有限的，而社区的力量是无限的。每天看到编辑们精挑细选的文章，我都会诧异 Elastic 相关的优秀文章可真是多啊！

相信社区的力量，让我们期待Elastic日报200期、300期甚至1000期的到来！

原文链接

距离上一篇 esrally 教程过去快2个月了，这期间不停有同学来询问使用中遇到的问题，尤其由于其测试数据存储在国外 aws 上，导致下载极慢。为了让大家快速上手使用 esrally，我 build 了一个可用的 docker 镜像，然后将 13GB 的测试数据拉取到国内的存储上，通过百度网盘的方式分享给大家。大家只要按照下面简单的几步操作就可以顺畅地使用 esrally 来进行相关测试了。

操作步骤

废话不多说，先上菜！

1. 拉取镜像

   docker pull rockybean/esrally

2. 下载数据文件 链接:http://pan.baidu.com/s/1eSrjZgA 密码:aagl
3. 进入下载后的文件夹 rally_track,执行如下命令开始测试

   docker run -it -v $(PWD):/root/track rockybean/esrally esrally race --track-path=/root/track/logging --offline --pipeline=benchmark-only --target-hosts=192.168.1.105:9200

打完收工！

几点说明

数据文件介绍

esrally 自带的测试数据即为 rally_track 文件夹中的内容，主要包括:

• Geonames(geonames): for evaluating the performance of structured data.
• Geopoint(geopoint): for evaluating the performance of geo queries.
• Percolator(percolator): for evaluating the performance of percolation queries.
• PMC(pmc): for evaluating the performance of full text search.
• NYC taxis(nyc_taxis): for evaluating the performance for highly structured data.
• Nested(nested): for evaluating the performance for nested documents.
• Logging(logging): for evaluating the performance of (Web) server logs.
• noaa(noaa): for evaluating the performance of range fields.

可以根据自己的需要下载对应的测试数据，不必下载全部，保证对应文件夹下载完全即可。

命令解释

docker 相关

docker run -it rockybean/esrally esrally 为执行的 esrally 命令，-v $(PWD):/root/track是将 rally_docker 文件夹映射到 docker 容器中，$(PWD)是获取当前目录的意思，所以在此前要 cd 到 rally_docker 目录，当然你写全路径也是没有问题的。

esrally 的 docker 镜像比较简单，可以参看 github 项目介绍。

esrally 相关

该镜像是通过自定义 track 的方式来加载数据，所以命令行中用到 --track=/root/track/logging 的命令行参数。注意这里的 /root/track 即上面我们绑定到容器的目录，更换 logging 为其他的数据集名称即可加载其他的测试数据。

该容器只支持测试第三方 es 集群，即 --pipeline=benchmark-only 模式。这应该也是最常见的压测需求了。

愉快地去玩耍吧！

1. sense为什么不能用了，看看ES官方怎么说？ http://t.cn/RlB3B62

2. 使用allocation API快速定位分片分配问题 http://t.cn/RlrzTsD

3. ES6.0有关防止硬盘被填满的改进 http://t.cn/RlrU3Nr

4. 喜大普奔，ES社区支持Markdown编辑器了 https://elasticsearch.cn/article/366

5. Elastic 收购网站搜索 SaaS 服务领导者 Swiftype http://t.cn/Rl3a4P2

6. 只等你来 | Elastic Meetup 广州交流会 https://elasticsearch.cn/article/364

• 编辑：bsll
• 归档：https://elasticsearch.cn/article/368
• 订阅：https://tinyletter.com/elastic-daily

立即申请

Support Engineer - Mandarin Speaking

Location: Beijing, China

Department: Support

Responsibilities

• Ensuring customer issues are resolved within our committed service level agreements.
• Maintain strong relationships with our customers for the delivery of support.
• Have a mindset of continuous improvement, in terms of efficiency of support processes and customer satisfaction.

Experience

• Demonstrable experience in of support in technology businesses
• Experience working across multi-cultural and geographically distributed teams

Key Skills

• Strong verbal and written communication skills in both Mandarin and English.
• Customer orientated focus.
• Team player, ability to work in a fast pace environment with a positive and adaptable approach.
• Knowledge of databases or search technologies a plus.
• Demonstrated strong technical understanding of software products.

Additional Information

• Competitive pay and benefits
• Stock options
• Catered lunches, snacks, and beverages in most offices
• An environment in which you can balance great work with a great life
• Passionate people building great products
• Employees with a wide variety of interests
• Distributed-first company with employees in over 30 countries, spread across 18 time zones, and speaking over 30 languages!

立即申请

Elastic is an Equal Employment employer committed to the principles of equal employment opportunity and affirmative action for all applicants and employees. Qualified applicants will receive consideration for employment without regard to race, color, religion, sex, sexual orientation, gender perception or identity, national origin, age, marital status, protected veteran status, or disability status or any other basis protected by federal, state or local law, ordinance or regulation. Elastic also makes reasonable accommodations for disabled employees consistent with applicable law.

About Elastic

Elastic is the world's leading software provider for making structured and unstructured data usable in real time for search, logging, security, and analytics use cases. Founded in 2012 by the people behind the Elasticsearch, Kibana, Beats, and Logstash open source projects, Elastic's global community has more than 80,000 members across 45 countries, and since its initial release. Elastic's products have achieved more than 100 million cumulative downloads. Today thousands of organizations, including Cisco, eBay, Dell, Goldman Sachs, Groupon, HP, Microsoft, Netflix, The New York Times, Uber, Verizon, Yelp, and Wikipedia, use the Elastic Stack, X-Pack, and Elastic Cloud to power mission-critical systems that drive new revenue opportunities and massive cost savings. Elastic is backed by more than $104 million in funding from Benchmark Capital, Index Ventures, and NEA; has headquarters in Amsterdam, the Netherlands, and Mountain View, California; and has over 500 employees in more than 30 countries around the world.

Our Philosophy

We’re always on the search for amazing people, people who have deep passion for technology and are masters at their craft. We build highly sophisticated distributed systems and we don’t take our technology lightly. In Elasticsearch, you’ll have the opportunity to work in a vibrant young company next to some of the smartest and highly skilled technologists the industry has to offer. We’re looking for great team players, yet we also promote independence and ownership. We’re hackers… but of the good kind. The kind that innovates and creates cutting edge products that eventually translates to a lot of happy, smiling faces.

LifeAtElastic

有兴趣加入我们么？点击申请

为了改善大家的创作体验，提高大家的写作和分享热情！?，经过两天的不懈奋斗，终于把 Markdown 编辑器搬上来了。 目前只支持文章的发布，可以通过切换编辑器来选择 Markdown 编辑模式。 希望不要再以编辑器作为理由发只有链接的文章了。 ???????????

• 支持 Github 风格的 Markdown 格式
• 支持本站附件功能
• 支持 emoj 符号
• 支持自动的页面导航
• 以前的文章可再次编辑，切换 Markdown 模式然后修改保存

如何使用？

1. 点击【发起】，选择文章
2. 切换绿色按钮，将编辑器切换到 Markdown，然后在文本框内输入 Markdown 格式的内容即可。

在线 Markdown 脚本编辑预览工具：https://elasticsearch.cn/static/js/editor/markdown/

以下为样式测试参考，忽略其意义。

----------- 常用格式-----------------

# 标题1
## 标题2
### 标题3
#### 标题4
##### 标题5
###### 标题6
超大标题   //等于号写于文字下方
===
标题      //同超大标题
---

`短代码`
_ 注：长代码块，用三个: `  _

> This is the first level of quoting.
>
> > This is nested blockquote.
>
> Back to the first level.

* Red
* Green
* Blue

- Red
- Green
- Blue

+ Red
+ Green
+ Blue

1. 这是第一个
1. 这是第二个
1. 这是第三个

* * *
***
*****
- - -
---

[markdown-syntax](http://daringfireball.net/projects/markdown/syntax)

[id]: http://example.com/  "Optional Title Here"
This is [an example][id] reference-style link.

*内容*
**内容**
_内容_
__内容__

![这是张外链图片](https://static-www.elastic.co/assets/bltbfcd44f1256d8c88/blog-swifttype-thumb.jpg?q=845)

<http://elastic.co/>

<info@elastic.o>

    四个空格
    一个tab

----------- 样式预览-----------------

标题1

标题2

标题3

标题4

标题5

标题6

超大标题 //等于号写于文字下方

标题 //同超大标题

短代码

This is the first level of quoting.

This is nested blockquote.

Back to the first level.

• Red
• Green

• Blue

• Red
• Green

• Blue

• Red
• Green
• Blue

1. 这是第一个
2. 这是第二个
3. 这是第三个

markdown-syntax

This is an example reference-style link.

内容 内容 内容 内容

http://elastic.co/

info@elastic.o

四个空格
一个tab

https://github.com/infinitbyte/gopa 的 README 内容

GOPA, A Spider Written in Go.

Goal

• Light weight, low footprint, memory requirement should < 100MB
• Easy to deploy, no runtime or dependency required
• Easy to use, no programming or scripts ability needed, out of box features

Screenshoot

• How to use
  • Setup
  • Download Pre Built Package
  • Compile The Package Manually
  • Optional Config
  • Start
  • Stop
• Configuration
• UI
• API
• Contributing
• License

How to use

Setup

First of all, get it, two opinions: download the pre-built package or compile it yourself.

Download Pre Built Package

Go to Release or Snapshot page, download the right package for your platform.

Note: Darwin is for Mac

Compile The Package Manually

• Mac/Linux: Run make build to build the Gopa.
  
• Windows: Checkout this wiki page - How to build GOPA on windows.

So far, we have:

gopa, the main program, a single binary.
config/, elasticsearch related scripts etc.
gopa.yml, main configuration for gopa.

Optional Config

By default, Gopa works well except indexing, if you want to use elasticsearch as indexing, follow these steps:

• Create a index in elasticsearch with script config/gopa-index-mapping.sh
  Example

  curl -XPUT "http://localhost:9200/gopa-index" -H 'Content-Type: application/json' -d'
  {
  "mappings": {
  "doc": {
    "properties": {
      "host": {
          "type": "keyword",
          "ignore_above": 256
      },
      "snapshot": {
        "properties": {
          "bold": {
            "type": "text"
          },
          "url": {
            "type": "keyword",
            "ignore_above": 256
          },
          "content_type": {
            "type": "keyword",
            "ignore_above": 256
          },
          "file": {
            "type": "keyword",
            "ignore_above": 256
          },
          "h1": {
            "type": "text"
          },
          "h2": {
            "type": "text"
          },
          "h3": {
            "type": "text"
          },
          "h4": {
            "type": "text"
          },
          "hash": {
            "type": "keyword",
            "ignore_above": 256
          },
          "id": {
            "type": "keyword",
            "ignore_above": 256
          },
          "images": {
            "properties": {
              "external": {
                "properties": {
                  "label": {
                    "type": "text"
                  },
                  "url": {
                    "type": "keyword",
                    "ignore_above": 256
                  }
                }
              },
              "internal": {
                "properties": {
                  "label": {
                    "type": "text"
                  },
                  "url": {
                    "type": "keyword",
                    "ignore_above": 256
                  }
                }
              }
            }
          },
          "italic": {
            "type": "text"
          },
          "links": {
            "properties": {
              "external": {
                "properties": {
                  "label": {
                    "type": "text"
                  },
                  "url": {
                    "type": "keyword",
                    "ignore_above": 256
                  }
                }
              },
              "internal": {
                "properties": {
                  "label": {
                    "type": "text"
                  },
                  "url": {
                    "type": "keyword",
                    "ignore_above": 256
                  }
                }
              }
            }
          },
          "path": {
            "type": "keyword",
            "ignore_above": 256
          },
          "sim_hash": {
            "type": "keyword",
            "ignore_above": 256
          },
          "lang": {
            "type": "keyword",
            "ignore_above": 256
          },
          "size": {
            "type": "long"
          },
          "text": {
            "type": "text"
          },
          "title": {
            "type": "text",
            "fields": {
              "keyword": {
                "type": "keyword"
              }
            }
          },
          "version": {
            "type": "long"
          }
        }
      },
      "task": {
        "properties": {
          "breadth": {
            "type": "long"
          },
          "created": {
            "type": "date"
          },
          "depth": {
            "type": "long"
          },
          "id": {
            "type": "keyword",
            "ignore_above": 256
          },
          "original_url": {
            "type": "keyword",
            "ignore_above": 256
          },
          "reference_url": {
            "type": "keyword",
            "ignore_above": 256
          },
          "schema": {
            "type": "keyword",
            "ignore_above": 256
          },
          "status": {
            "type": "integer"
          },
          "updated": {
            "type": "date"
          },
          "url": {
            "type": "keyword",
            "ignore_above": 256
          }
        }
      }
    }
  }
  }
  }'

Note: Elasticsearch version should > v5.0

• Enable index module in gopa.yml, update the elasticsearch's setting:

  - module: index
  enabled: true
  ui:
    enabled: true
  elasticsearch:
    endpoint: http://dev:9200
    index_prefix: gopa-
    username: elastic
    password: changeme

Start

Gopa doesn't require any dependencies, simply run ./gopa to start the program.

Gopa can be run as daemon(Note: Only available on Linux and Mac):

➜  gopa git:(master) ✗ ./bin/gopa --daemon
  ________ ________ __________  _____
 /  _____/ \_____  \\______   \/  _  \
/   \  ___  /   |   \|     ___/  /_\  \
\    \_\  \/    |    \    |  /    |    \
 \______  /\_______  /____|  \____|__  /
        \/         \/                \/
[gopa] 0.10.0_SNAPSHOT
///last commit: 99616a2, Fri Oct 20 14:04:54 2017 +0200, medcl, update version to 0.10.0 ///

[10-21 16:01:09] [INF] [instance.go:23] workspace: data/gopa/nodes/0
[gopa] started.

Also run ./gopa -h to get the full list of command line options.

➜  gopa git:(master) ✗ ./bin/gopa -h
  ________ ________ __________  _____
 /  _____/ \_____  \\______   \/  _  \
/   \  ___  /   |   \|     ___/  /_\  \
\    \_\  \/    |    \    |  /    |    \
 \______  /\_______  /____|  \____|__  /
        \/         \/                \/
[gopa] 0.10.0_SNAPSHOT
///last commit: 99616a2, Fri Oct 20 14:04:54 2017 +0200, medcl, update version to 0.10.0 ///

Usage of ./bin/gopa:
  -config string
        the location of config file (default "gopa.yml")
  -cpuprofile string
        write cpu profile to this file
  -daemon
        run in background as daemon
  -debug
        run in debug mode, wi
  -log string
        the log level,options:trace,debug,info,warn,error (default "info")
  -log_path string
        the log path (default "log")
  -memprofile string
        write memory profile to this file
  -pidfile string
        pidfile path (only for daemon)
  -pprof string
        enable and setup pprof/expvar service, eg: localhost:6060 , the endpoint will be: http://localhost:6060/debug/pprof/ and http://localhost:6060/debug/vars

Stop

It's safety to press ctrl+c stop the current running Gopa, Gopa will handle the rest,saving the checkpoint, you may restore the job later,the world is still in your hand.

If you are running Gopa as daemon, you may stop it like this:

 kill -QUIT `pgrep gopa`

Configuration

UI

• Search Console http://127.0.0.1:9001/
• Admin Console http://127.0.0.1:9001/admin/

API

• TBD

Contributing

You are sincerely and warmly welcomed to play with this project, from UI style to core features, or just a piece of document, welcome! let's make it better.

License

Released under the Apache License, Version 2.0 .

Also XSS Test

alert('XSS test');

Elastic Meetup 线下交流活动再次来到羊城广州，算是社区在广州的第二次线下聚会了，广州的小伙伴们，快快报名吧！ 回顾去年的线下活动，可以点击这里：https://elasticsearch.cn/article/71​  

主办：

本次活动由 Elastic 与 网易游戏运维与基础架构部 联合举办。  

媒体：

本次活动由 IT大咖说 独家提供现场直播。  

时间：

2017.11.25​  下午2:00-5:00（1点半开始签到）  

地点：

广州市天河区科韵路16号广州信息港E栋网易大厦 一楼博学堂  

主题：

1. 网易 - 杜鑫 - ELK在藏宝阁中的应用
2. 酷狗 - 钟旺 - 基于ES的音乐搜索引擎 
3. 阿里云 - 赵弘扬 - Elasticsearch在阿里云的实践分享
4. 网易 - 林邦骏 - 网易ELK 系统综述
5. 数说故事 - 吴文杰 - Data Warehouse with ElasticSearch in Datastory
6. 闪电分享（5-10分钟，可现场报名） 

参会报名：

http://elasticsearch.mikecrm.com/O6o0yq3  

现场直播：

直播连接：http://www.itdks.com/eventlist/detail/1673

主题介绍：

ELK在藏宝阁中的应用 

内容介绍：

 1. 藏宝阁项目介绍  主要介绍一下藏宝阁项目，让不熟悉藏宝阁的听众有一个基本的了解，熟悉应用的背景。

2. ELK在藏宝阁中的应用（概述）  大致简要的阐述一下ELK在藏宝阁中哪些地方发挥了什么样的作用。

3. ELK在藏宝阁推荐系统中的应用（重点）  较为详细的剖析一下ELK在推荐系统中的发挥的作用，具备的优势。

分享嘉宾：

杜鑫，网易藏宝阁工作室资深开发工程师，目前主要从事藏宝阁推荐业务相关的研发工作。  

网易ELK 系统综述

内容介绍：

  从架构以及功能两个角度去阐述网易的 ELK 平台，介绍系统内部各个组件及其管理方式。进而以用户的视角介绍平台中包含的自动化服务等功能，从管理员的视角去讨论组件的配置管理、资源调度回收等问题。

分享嘉宾：

林邦骏，网易 GDC产品组资深运维工程师，主要负责内部 ELK 产品的运维、功能开发等工作。  

基于ES的音乐搜索引擎

内容介绍：

1、酷狗音乐搜索引擎架构变迁

2、构建音乐搜索引擎经验之谈 

分享嘉宾：

钟旺，酷狗后台开发工程师，从事JAVA、ES相关的开发工作。  

Data Warehouse with ElasticSearch in Datastory

内容介绍：

ES最多使用的场景是搜索和日志分析，然而ES强大的实时索引查询、全文检索和聚合能力也能成为数据仓库与OLAP场景的强力支持。

本次分享将为大家带来数说故事如何借助ES和Hadoop生态在不同的数据场景下构建起数据仓库能力。

分享嘉宾：

吴文杰 ，数说故事平台架构团队 高级工程师，负责数说故事百亿级数据的存储查询及内部基础平台建设。  

Elasticsearch在阿里云的实践分享

内容介绍

介绍阿里云Elastiserach服务的技术架构和Xpack相关功能，并分享在云上环境搭建ELK的实践案例。

分享嘉宾

赵弘扬，阿里巴巴搜索产品专家，负责阿里云搜索产品规划和开发。

  深圳也在筹备中，可以提前报名！：https://elasticsearch.cn/article/261  

关于 Elastic Meetup

Elastic Meetup 由 Elastic 中文社区定期举办的线下交流活动，主要围绕 Elastic 的开源产品（Elasticsearch、Logstash、Kibana 和 Beats）及周边技术，探讨在搜索、数据实时分析、日志分析、安全等领域的实践与应用。

关于 Elastic

Elastic 通过构建软件，让用户能够实时地、大规模地将数据用于搜索、日志和分析场景。Elastic 创立于 2012 年，相继开发了开源的 Elastic Stack（Elasticsearch、Kibana、Beats 和 Logstash）、X-Pack（商业功能）和 Elastic Cloud（托管服务）。截至目前，累计下载量超过 1.5 亿。Benchmark Capital、Index Ventures 和 NEA 为 Elastic 提供了超过 1 亿美元资金作为支持，Elastic 共有 600 多名员工，分布在 30 个国家/地区。有关更多信息，请访问 http://elastic.co/cn 。  

关于网易游戏运维与基础架构部

网易游戏运维与基础架构部， 主要负责网易游戏产品的可靠性保障以及基础设施的开发和部署，旨在：

1. 专注为产品全生命周期提供可靠性保障服务，依托于大数据为运维提供决策
2. 通过智能监控提高问题发现和解决能力，以自动化驱动低成本的业务管理
3. 打造混合云方案，站在游戏业务角度驱动的TCO优化和运维智能化

关于IT大咖说

IT大咖说，IT垂直领域的大咖知识分享平台，践行“开源是一种态度”，通过线上线下开放模式分享行业TOP大咖干货，技术大会在线直播点播，在线活动直播平台。http://www.itdks.com 。  

再次感谢网易游戏运维与基础架构部和IT大咖说的大力支持!