scala의 REPL에서 main 클래스/함수를 실행시킬 수 있다.
예제는 다음과 같다.
scala> object Main {
| def main(args: Array[String]) {
| println("Hello World")
| }
| }
defined object Main
scala> Main.main(Array())
Hello World
| [scala] connection pool과 with 메소드로 간결하게 코딩하기 (0) | 2017.11.21 |
|---|---|
| scala에서의 jodatime(ISO8601) 예제 (0) | 2017.11.20 |
| 스칼라의 접근 한정자 (0) | 2017.11.07 |
| lazy val의 내부(volatile/synchronized) (0) | 2017.11.06 |
| [sbt] hbase 연동시 만난 library 의존성 관련 exception 처리하기 (0) | 2017.11.03 |
https://mesosphere.github.io/marathon/docs/ports.html
https://mesosphere.com/blog/networking-docker-containers/
https://stackoverflow.com/questions/36265502/difference-between-ports-and-service-ports
| [marathon] 마라톤 lb의 포트별 설정 (0) | 2018.04.10 |
|---|---|
| [marathon] Insufficient resources 이슈 해결하기 (0) | 2018.04.10 |
| 마라톤(marathon)의 anti affinity 지원 기능 - constraints (0) | 2018.03.14 |
| 마라톤(marathon) 설치/실행하기 (0) | 2017.04.26 |
| 메소스(mesos) 설치 및 실행하기 (0) | 2017.04.24 |
elasticsearch4s의 tcpClient는 내부적으로 connection pool이 있지만 잘 동작이 되지 않는다.(어차피 사라질 tcp.. ㅠㅠ)
https://github.com/sksamuel/elastic4s/issues/385
오히려 새로 만든 httpClient가 잘 동작이 된다. 그러나 connection이 1개이네. 내부적으로 ES의 RestClient와 1:1 Wrapper 구조를 갖고 있다
따라서 특별히 만들어진 connection pool 클래스가 없어서 commons-pool을 구현하면 괜찮은 것 같다.
elasticsearch client 라이브러를 실행 도중에 다음 에러가 발생했다.
ERROR StatusLogger No log4j2 configuration file found. Using default configuration: logging only errors to the console.
해결 방법은 다음 URL에 있다.
https://www.elastic.co/guide/en/elasticsearch/client/java-api/current/_log4j_2_logger.html
다음을 pom파일에 추가하고
appender.console.type = Console appender.console.name = console appender.console.layout.type = PatternLayout rootLogger.level = info rootLogger.appenderRef.console.ref = console
| [elasticsearch5] search_after 예제 (0) | 2017.11.24 |
|---|---|
| [elasticsearch5] _id 필드 대신 _uid (0) | 2017.11.22 |
| [elasticsearch] 인덱스의 최대 필드 개수 제한 (0) | 2017.11.02 |
| [일래스틱서치] “Hot-Warm” architecture - 퍼옴 (0) | 2017.09.01 |
| [elasticsearch5] dynamic template (0) | 2017.08.23 |
클라우드 환경에서는
특정 물리 장비(pm)에서 동작하는 여러 vm 중 특정 vm이 자원을 많이 사용함으로서 다른 vm이 자원을 사용하지 못하는 현상을 bad neighbor 또는 noisy neighbor라고 한다.
http://searchcloudcomputing.techtarget.com/definition/noisy-neighbor-cloud-computing-performance
http://www.clubcloudcomputing.com/2012/06/bad-neighbors-in-the-cloud/
자원 독점을 qos로 막을 수 있다.
| NIFI 팁 (0) | 2017.12.08 |
|---|---|
| [nifi] tail -> cassandra 저장 예제 (0) | 2017.12.01 |
| ha_proxy 인증서 pem 파일 (0) | 2017.11.10 |
| [링크] 오픈스택 firewall (0) | 2017.11.08 |
| 우버의 스트리밍 분석 플랫폼 - AthenaX (0) | 2017.11.01 |
리눅스 jq 툴은 json 파싱을 잘 도와주는 툴이다.
https://stedolan.github.io/jq/
다음은 예제이다. array 구조도 잘 파싱한다.
[~/temp] cat > x.json
{
"id": {
"bioguide": "E000295",
"thomas": "02283",
"fec": [
"S4IA00129"
],
"govtrack": 412667,
"opensecrets": "N00035483",
"lis": "S376"
},
"name": {
"first": "Joni",
"last": "Ernst",
"official_full": "Joni Ernst"
},
"bio": {
"gender": "F",
"birthday": "1970-07-01"
},
"terms": [
{
"type": "sen",
"start": "2015-01-06",
"end": "2021-01-03",
"state": "IA",
"class": 2,
"state_rank": "junior",
"party": "Republican",
"url": "http://www.ernst.senate.gov",
"address": "825 B&C Hart Senate Office Building Washington DC 20510",
"office": "825 B&c Hart Senate Office Building",
"phone": "202-224-3254"
}
]
}
json 데이터 얻는 방법
[~/temp] cat x.json | jq '.name'
{
"first": "Joni",
"last": "Ernst",
"official_full": "Joni Ernst"
}
[~/temp] cat x.json | jq '.name.first'
"Joni"
[~/temp] cat x.json | jq '.terms .start'
jq: error (at <stdin>:36): Cannot index array with string "start"
[~/temp] cat x.json | jq '.terms[0] .start'
"2015-01-06"
[~/temp] cat x.json | jq '.terms[] .start'
"2015-01-06"
| [sourcetree] remote: Invalid username or password. fatal: Authentication failed 해결 (0) | 2018.03.14 |
|---|---|
| [Datagrip] query editor 실행하기 (0) | 2018.03.08 |
| [Intellij] Unexpected exception[BootException:ID: (0) | 2017.11.13 |
| [iterm2] 소리 안나게 하는 방법 (0) | 2017.10.19 |
| github에서 아이디 패스워드 없이 저장소 접근하는 방법 - netrc (0) | 2017.09.04 |
mysql의 innodb에서는 json과 같은 특정 컬럼으로부터 2차 인덱스를 지원한다.
5.7.14부터이니.. 참고.
테스트한 버전은 mysql version은 5.7.17이다.
MySQL [mysql5]> SHOW VARIABLES LIKE "%version%";
+-------------------------+------------------------------+
| Variable_name | Value |
+-------------------------+------------------------------+
| innodb_version | 5.7.17 |
| protocol_version | 10 |
| slave_type_conversions | |
| tls_version | TLSv1,TLSv1.1 |
| version | 5.7.17-log |
| version_comment | MySQL Community Server (GPL) |
| version_compile_machine | x86_64 |
| version_compile_os | linux-glibc2.5 |
+-------------------------+------------------------------+
8 rows in set (0.01 sec)
MySQL [mysql5]> CREATE TABLE jemp (c JSON, g INT GENERATED ALWAYS AS (c->"$.id"), INDEX i (g));
Query OK, 0 rows affected (0.05 sec)
데이터를 추가한다 .
MySQL [mysql5]> INSERT INTO jemp (c) VALUES
-> ('{"id": "1", "name": "Fred"}'), ('{"id": "2", "name": "Wilma"}'),
-> ('{"id": "3", "name": "Barney"}'), ('{"id": "4", "name": "Betty"}');
Query OK, 4 rows affected (0.01 sec)
Records: 4 Duplicates: 0 Warnings: 0
데이터를 검색할 수 있다.
(-->은 5.7.13부터 사용할 수 있는 키워드이다)
MySQL [mysql5]> SELECT c->>"$.name" AS name FROM jemp WHERE g > 2;
+--------+
| name |
+--------+
| Barney |
| Betty |
+--------+
2 rows in set (0.01 sec)
explain으로 확인하면 인덱스가 걸려있음을 확인할 수 있다.
MySQL [mysql5]> EXPLAIN SELECT c->>"$.name" AS name FROM jemp WHERE g > 2;
+----+-------------+-------+------------+-------+---------------+------+---------+------+------+----------+-------------+
| id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
+----+-------------+-------+------------+-------+---------------+------+---------+------+------+----------+-------------+
| 1 | SIMPLE | jemp | NULL | range | i | i | 5 | NULL | 2 | 100.00 | Using where |
+----+-------------+-------+------------+-------+---------------+------+---------+------+------+----------+-------------+
1 row in set, 1 warning (0.01 sec)
warning이 하나 있는데.. 부가 설명이 잘 되어 있다.
MySQL [mysql5]> SHOW WARNINGS
-> ;
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------+
| Level | Code | Message |
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------+
| Note | 1003 | /* select#1 */ select json_unquote(json_extract(`mysql5`.`jemp`.`c`,'$.name')) AS `name` from `mysql5`.`jemp` where (`mysql5`.`jemp`.`g` > 2) |
+-------+------+-----------------------------------------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)
Intellij에서 sbt run을 실행하다가 다음과 같은 에러를 만났다.
잘 동작하다가 에러가 발생한 것이다.
Unexpected exception[BootException:ID: compiler-interface-bin_2.12....
indexing 또는 caching 이슈이기 때문에 삭제 후 메뉴에서 다음 메뉴를 클릭하고 재시작하면 된다.
File | Invalidate Caches / Restart | Just Restart
| [Datagrip] query editor 실행하기 (0) | 2018.03.08 |
|---|---|
| 리눅스 jq 파일 예제 (0) | 2017.11.14 |
| [iterm2] 소리 안나게 하는 방법 (0) | 2017.10.19 |
| github에서 아이디 패스워드 없이 저장소 접근하는 방법 - netrc (0) | 2017.09.04 |
| deckset - 마크업 발표 자료 (0) | 2017.06.26 |
ha_proxy 인증서 파일은 하나로 합쳐서 사용한다.
인증서(crt)
체인키(chainca.crt)
개인키(key)
https://www.securesign.kr/guides/HAProxy-SSL-Certificates-Install
| [nifi] tail -> cassandra 저장 예제 (0) | 2017.12.01 |
|---|---|
| Bad neighbors/Noisy neighbors (0) | 2017.11.15 |
| [링크] 오픈스택 firewall (0) | 2017.11.08 |
| 우버의 스트리밍 분석 플랫폼 - AthenaX (0) | 2017.11.01 |
| [링크] 오픈스택에서 VM 생성후 스크립트 실행할 때 사용되는 cloud init /user data (0) | 2017.11.01 |
github 페이지가 잘 동작하다가 404 에러가 나는 경우가 있다.
이 때는 공 커밋을 하나 날리고 push하면 된다.
$ git commit -m 'rebuild pages' —allow-empty
$ git push
| maven/sbt에서 컴파일 사용시 메모리 설정하기 (0) | 2018.04.09 |
|---|---|
| [git] 기존 브랜치는 지우고 새로운 브랜치를 추가하는 예 (0) | 2018.03.26 |
| [maven] 메이븐 업로드 - mvn deploy 커맨드 예제 (0) | 2017.11.02 |
| [Intellij] Error: scala: No 'scala-library*.jar' in Scala compiler library in test 해결하기 (0) | 2017.11.01 |
| intellij의 java.lang.BootstrapMethodError: java.lang.NoClassDefFoundError: sbt/internal/librarymanagement/GetClassifiersModule (0) | 2017.10.30 |
|
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 |
