使用netstat -lntp来看看有侦听在网络某端口的进程。当然，也可以使用 lsof。
spark

spark

如何在可视化中展示bucket_script聚合的结果

回复

默认分类 • liuwenqiang 发起了问题 • 1 人关注 • 0 个回复 • 2301 次浏览 • 2020-04-04 16:35 • 来自相关话题

Logstash 能不能把常用的参数或经常变换的参数给提取到某一个文件里面去

Logstash • tacsklet 回复了问题 • 4 人关注 • 3 个回复 • 2119 次浏览 • 2019-09-26 10:53 • 来自相关话题

sparkstreaming写es,使用EsSpark API最多能写多少数据量？

回复

Elasticsearch • asura7969 发起了问题 • 2 人关注 • 0 个回复 • 2905 次浏览 • 2018-04-22 16:07 • 来自相关话题

【阿里巴巴】【急聘】高级搜索研发专家

求职招聘 • jaredguo 发表了文章 • 0 个评论 • 5042 次浏览 • 2017-08-03 16:18 • 来自相关话题

岗位描述： 1. 负责阿里云上搜索云产品的设计和研发工作，确保项目质量和进度  2. 能深入理解产品和业务，推动技术不断升级，解决客户和平台问题。 岗位要求： 1. 编程基本功扎实，熟悉常用数据结构和算法，擅长Java编程语言，熟悉JVM机制，熟悉shell、python等脚本语言；  2. 学习能力较强，有较好的逻辑思维能力，较强的抽象、概括和总结能力，有较好的沟通交流能力，善于主动思考，对技术有强烈激情；  3. 熟悉ElasticSearch/Lucene开源系统 4. 熟悉分布式系统，例如hadoop、spark、flink，有云计算相关开发经验者优先  5. 具有敏捷开发经验者优先，具有完整产品生命周期开发者优先   阿里云近期会推出ES云产品，正在组建ES专家小组，工作地点北京、杭州，薪资待遇优厚，简历请发送至ruijie.guo@alibaba-inc.com
岗位描述： 1. 负责阿里云上搜索云产品的设计和研发工作，确保项目质量和进度  2. 能深入理解产品和业务，推动技术不断升级，解决客户和平台问题。 岗位要求： 1. 编程基本功扎实，熟悉常用数据结构和算法，擅长Java编程语言，熟悉JVM机制，熟悉shell、python等脚本语言；  2. 学习能力较强，有较好的逻辑思维能力，较强的抽象、概括和总结能力，有较好的沟通交流能力，善于主动思考，对技术有强烈激情；  3. 熟悉ElasticSearch/Lucene开源系统 4. 熟悉分布式系统，例如hadoop、spark、flink，有云计算相关开发经验者优先  5. 具有敏捷开发经验者优先，具有完整产品生命周期开发者优先   阿里云近期会推出ES云产品，正在组建ES专家小组，工作地点北京、杭州，薪资待遇优厚，简历请发送至ruijie.guo@alibaba-inc.com

【急聘】搜索推荐系统研发工程师 12-20K

求职招聘 • man429 发表了文章 • 0 个评论 • 3822 次浏览 • 2017-07-26 15:38 • 来自相关话题

岗位职责： 1，负责个性化推荐系统的算法和架构研发, 实现在相关产品中的精准推荐； 2，负责产品、内容的推荐与其他场景的基础数据挖掘； 3，根据海量用户行为的分析和挖掘，构建用户画像、标签系统等。   任职要求： 1、两年以上相关工作经验； 2、有推荐系统或搜索排序研发经验, 熟悉常用的推荐算法，有实际算法调优经验； 3、熟悉Hadoop、HBase、Spark、Kafka等计算平台和工具； 4、掌握自然语言处理、协同推荐算法方面的基本知识； 5、良好的沟通和学习能力，团队合作精神，能独立承担工作。   加分项： 1，有大规模海量数据机器学习、数据挖掘、计算广告、搜索引擎相关经验； 2，有互联网电商行业数据经验。 易所试集团（Www.liketry.com），新三板上市公司，市值10亿左右，组建北京研发中心，13薪起，正常基数五险一金并提供商业保险（补充医疗+意外等），10天年假起，弹性工作制，薪资可根据能力商议。工作地点：北京望京SOHO，简历请发送至邮箱：hang.song@liketry.com。
岗位职责： 1，负责个性化推荐系统的算法和架构研发, 实现在相关产品中的精准推荐； 2，负责产品、内容的推荐与其他场景的基础数据挖掘； 3，根据海量用户行为的分析和挖掘，构建用户画像、标签系统等。   任职要求： 1、两年以上相关工作经验； 2、有推荐系统或搜索排序研发经验, 熟悉常用的推荐算法，有实际算法调优经验； 3、熟悉Hadoop、HBase、Spark、Kafka等计算平台和工具； 4、掌握自然语言处理、协同推荐算法方面的基本知识； 5、良好的沟通和学习能力，团队合作精神，能独立承担工作。   加分项： 1，有大规模海量数据机器学习、数据挖掘、计算广告、搜索引擎相关经验； 2，有互联网电商行业数据经验。 易所试集团（Www.liketry.com），新三板上市公司，市值10亿左右，组建北京研发中心，13薪起，正常基数五险一金并提供商业保险（补充医疗+意外等），10天年假起，弹性工作制，薪资可根据能力商议。工作地点：北京望京SOHO，简历请发送至邮箱：hang.song@liketry.com。

spark on elasticsearch性能问题

Elasticsearch • medcl 回复了问题 • 2 人关注 • 1 个回复 • 3787 次浏览 • 2017-07-25 23:33 • 来自相关话题

spark1.6.3+elasticsearch5.4 netty jar冲突

Elasticsearch • luyee2010 发表了文章 • 1 个评论 • 5033 次浏览 • 2017-07-10 00:10 • 来自相关话题

spark1.6.x   elasticsearch5.x     netty冲突   
(Netty4Utils:117)-NoSuchMethodError io.netty.buffer.CompositeByteBuf.addComponents(ZLjava/lang/Iterable;)Lio/netty/buffer/CompositeByteBuf;
at org.elasticsearch.transport.netty4.Netty4Utils.toByteBuf(Netty4Utils.Java:78)
at org.elasticsearch.transport.netty4.Netty4Transport.sendMessage(Netty4Transport.java:422)
at org.elasticsearch.transport.netty4.Netty4Transport.sendMessage(Netty4Transport.java:93)
at org.elasticsearch.transport.TcpTransport.internalSendMessage(TcpTransport.java:1058)
at org.elasticsearch.transport.TcpTransport.sendRequestToChannel(TcpTransport.java:1040)
 试过其他jar排除方案都不生效，暂时可以fix的解决方案   ``` .put("transport.type","netty3") ```

使用spark向elasticsearch中写入数据异常

Elasticsearch • yangruideyang 回复了问题 • 2 人关注 • 3 个回复 • 6742 次浏览 • 2017-06-28 17:55 • 来自相关话题

用es作为数据源，sparksql做count查询速度问题

Elasticsearch • medcl 回复了问题 • 6 人关注 • 4 个回复 • 15556 次浏览 • 2017-02-23 16:16 • 来自相关话题

更多...

如何在可视化中展示bucket_script聚合的结果

回复

默认分类 • liuwenqiang 发起了问题 • 1 人关注 • 0 个回复 • 2301 次浏览 • 2020-04-04 16:35 • 来自相关话题

Logstash 能不能把常用的参数或经常变换的参数给提取到某一个文件里面去

回复

Logstash • tacsklet 回复了问题 • 4 人关注 • 3 个回复 • 2119 次浏览 • 2019-09-26 10:53 • 来自相关话题

sparkstreaming写es,使用EsSpark API最多能写多少数据量？

回复

Elasticsearch • asura7969 发起了问题 • 2 人关注 • 0 个回复 • 2905 次浏览 • 2018-04-22 16:07 • 来自相关话题

spark on elasticsearch性能问题

回复

Elasticsearch • medcl 回复了问题 • 2 人关注 • 1 个回复 • 3787 次浏览 • 2017-07-25 23:33 • 来自相关话题

使用spark向elasticsearch中写入数据异常

回复

Elasticsearch • yangruideyang 回复了问题 • 2 人关注 • 3 个回复 • 6742 次浏览 • 2017-06-28 17:55 • 来自相关话题

用es作为数据源，sparksql做count查询速度问题

回复

Elasticsearch • medcl 回复了问题 • 6 人关注 • 4 个回复 • 15556 次浏览 • 2017-02-23 16:16 • 来自相关话题

更多...

【阿里巴巴】【急聘】高级搜索研发专家

求职招聘 • jaredguo 发表了文章 • 0 个评论 • 5042 次浏览 • 2017-08-03 16:18 • 来自相关话题

岗位描述： 1. 负责阿里云上搜索云产品的设计和研发工作，确保项目质量和进度  2. 能深入理解产品和业务，推动技术不断升级，解决客户和平台问题。 岗位要求： 1. 编程基本功扎实，熟悉常用数据结构和算法，擅长Java编程语言，熟悉JVM机制，熟悉shell、python等脚本语言；  2. 学习能力较强，有较好的逻辑思维能力，较强的抽象、概括和总结能力，有较好的沟通交流能力，善于主动思考，对技术有强烈激情；  3. 熟悉ElasticSearch/Lucene开源系统 4. 熟悉分布式系统，例如hadoop、spark、flink，有云计算相关开发经验者优先  5. 具有敏捷开发经验者优先，具有完整产品生命周期开发者优先   阿里云近期会推出ES云产品，正在组建ES专家小组，工作地点北京、杭州，薪资待遇优厚，简历请发送至ruijie.guo@alibaba-inc.com
岗位描述： 1. 负责阿里云上搜索云产品的设计和研发工作，确保项目质量和进度  2. 能深入理解产品和业务，推动技术不断升级，解决客户和平台问题。 岗位要求： 1. 编程基本功扎实，熟悉常用数据结构和算法，擅长Java编程语言，熟悉JVM机制，熟悉shell、python等脚本语言；  2. 学习能力较强，有较好的逻辑思维能力，较强的抽象、概括和总结能力，有较好的沟通交流能力，善于主动思考，对技术有强烈激情；  3. 熟悉ElasticSearch/Lucene开源系统 4. 熟悉分布式系统，例如hadoop、spark、flink，有云计算相关开发经验者优先  5. 具有敏捷开发经验者优先，具有完整产品生命周期开发者优先   阿里云近期会推出ES云产品，正在组建ES专家小组，工作地点北京、杭州，薪资待遇优厚，简历请发送至ruijie.guo@alibaba-inc.com

【急聘】搜索推荐系统研发工程师 12-20K

求职招聘 • man429 发表了文章 • 0 个评论 • 3822 次浏览 • 2017-07-26 15:38 • 来自相关话题

岗位职责： 1，负责个性化推荐系统的算法和架构研发, 实现在相关产品中的精准推荐； 2，负责产品、内容的推荐与其他场景的基础数据挖掘； 3，根据海量用户行为的分析和挖掘，构建用户画像、标签系统等。   任职要求： 1、两年以上相关工作经验； 2、有推荐系统或搜索排序研发经验, 熟悉常用的推荐算法，有实际算法调优经验； 3、熟悉Hadoop、HBase、Spark、Kafka等计算平台和工具； 4、掌握自然语言处理、协同推荐算法方面的基本知识； 5、良好的沟通和学习能力，团队合作精神，能独立承担工作。   加分项： 1，有大规模海量数据机器学习、数据挖掘、计算广告、搜索引擎相关经验； 2，有互联网电商行业数据经验。 易所试集团（Www.liketry.com），新三板上市公司，市值10亿左右，组建北京研发中心，13薪起，正常基数五险一金并提供商业保险（补充医疗+意外等），10天年假起，弹性工作制，薪资可根据能力商议。工作地点：北京望京SOHO，简历请发送至邮箱：hang.song@liketry.com。
岗位职责： 1，负责个性化推荐系统的算法和架构研发, 实现在相关产品中的精准推荐； 2，负责产品、内容的推荐与其他场景的基础数据挖掘； 3，根据海量用户行为的分析和挖掘，构建用户画像、标签系统等。   任职要求： 1、两年以上相关工作经验； 2、有推荐系统或搜索排序研发经验, 熟悉常用的推荐算法，有实际算法调优经验； 3、熟悉Hadoop、HBase、Spark、Kafka等计算平台和工具； 4、掌握自然语言处理、协同推荐算法方面的基本知识； 5、良好的沟通和学习能力，团队合作精神，能独立承担工作。   加分项： 1，有大规模海量数据机器学习、数据挖掘、计算广告、搜索引擎相关经验； 2，有互联网电商行业数据经验。 易所试集团（Www.liketry.com），新三板上市公司，市值10亿左右，组建北京研发中心，13薪起，正常基数五险一金并提供商业保险（补充医疗+意外等），10天年假起，弹性工作制，薪资可根据能力商议。工作地点：北京望京SOHO，简历请发送至邮箱：hang.song@liketry.com。

spark1.6.3+elasticsearch5.4 netty jar冲突

Elasticsearch • luyee2010 发表了文章 • 1 个评论 • 5033 次浏览 • 2017-07-10 00:10 • 来自相关话题

spark1.6.x   elasticsearch5.x     netty冲突   
(Netty4Utils:117)-NoSuchMethodError io.netty.buffer.CompositeByteBuf.addComponents(ZLjava/lang/Iterable;)Lio/netty/buffer/CompositeByteBuf;
at org.elasticsearch.transport.netty4.Netty4Utils.toByteBuf(Netty4Utils.Java:78)
at org.elasticsearch.transport.netty4.Netty4Transport.sendMessage(Netty4Transport.java:422)
at org.elasticsearch.transport.netty4.Netty4Transport.sendMessage(Netty4Transport.java:93)
at org.elasticsearch.transport.TcpTransport.internalSendMessage(TcpTransport.java:1058)
at org.elasticsearch.transport.TcpTransport.sendRequestToChannel(TcpTransport.java:1040)
 试过其他jar排除方案都不生效，暂时可以fix的解决方案   ``` .put("transport.type","netty3") ```
更多...
Copyright © 2024 · CC BY-NC-SA 3.0

本站服务器及带宽由 提供赞助