'mysql'에 해당되는 글 9건

  1. mysql replication error - 복제 오류 복구 하기 1
  2. mysql binlog에서 특정 위치(position) 읽어보기
  3. on duplicate key update 사용시 last_Insert_Id 가져오기 1
  4. mysql 달의 마지막일 구하기
  5. 문자열 자르기 substirng, substring_index
  6. 이메일 형식 유효성 체크 정규식
  7. mysql에서 join을 이용한 데이타 삭제하기 1
  8. pdo_mysql 확장 모듈 올리기
  9. mysql charset 문제로 한글깨질때. latian1 -> euckr

mysql replication error - 복제 오류 복구 하기

Posted in mysql by 강화도령

#slave에서 로그 확인
> show status slave;
+----------------+----------------+-------------+-------------+---------------+------------------+---------------------+-------------------------+---------------+-----------------------+------------------+-------------------+-----------------+---------------------+--------------------+------------------------+-------------------------+-----------------------------+------------+------------+--------------+---------------------+-----------------+-----------------+----------------+---------------+--------------------+--------------------+--------------------+-----------------+-------------------+----------------+-----------------------+-------------------------------+---------------+---------------------------------------------------------------------------------------------------------------------------------------------+----------------+----------------+
| Slave_IO_State | Master_Host    | Master_User | Master_Port | Connect_Retry | Master_Log_File  | Read_Master_Log_Pos | Relay_Log_File          | Relay_Log_Pos | Relay_Master_Log_File | Slave_IO_Running | Slave_SQL_Running | Replicate_Do_DB | Replicate_Ignore_DB | Replicate_Do_Table | Replicate_Ignore_Table | Replicate_Wild_Do_Table | Replicate_Wild_Ignore_Table | Last_Errno | Last_Error | Skip_Counter | Exec_Master_Log_Pos | Relay_Log_Space | Until_Condition | Until_Log_File | Until_Log_Pos | Master_SSL_Allowed | Master_SSL_CA_File | Master_SSL_CA_Path | Master_SSL_Cert | Master_SSL_Cipher | Master_SSL_Key | Seconds_Behind_Master | Master_SSL_Verify_Server_Cert | Last_IO_Errno | Last_IO_Error                                                                                                                               | Last_SQL_Errno | Last_SQL_Error |
+----------------+----------------+-------------+-------------+---------------+------------------+---------------------+-------------------------+---------------+-----------------------+------------------+-------------------+-----------------+---------------------+--------------------+------------------------+-------------------------+-----------------------------+------------+------------+--------------+---------------------+-----------------+-----------------+----------------+---------------+--------------------+--------------------+--------------------+-----------------+-------------------+----------------+-----------------------+-------------------------------+---------------+---------------------------------------------------------------------------------------------------------------------------------------------+----------------+----------------+
|                | 192.168.10.1 | repluser    |        3306 |            60 | mysql-bin.000028 |           967473320 | mysqld-relay-bin.000075 |     967473465 | mysql-bin.000028      | No               | Yes               |                 |                     |                    |                        |                         |                             |          0 |            |            1 |           967473320 |       967473664 | None            |                |             0 | No                 |                    |                    |                 |                   |                |                  NULL | No                            |          1236 | Got fatal error 1236 from master when reading data from binary log: 'Client requested master to start replication from impossible position' |              0 |                |
+----------------+----------------+-------------+-------------+---------------+------------------+---------------------+-------------------------+---------------+-----------------------+------------------+-------------------+-----------------+---------------------+--------------------+------------------------+-------------------------+-----------------------------+------------+------------+--------------+---------------------+-----------------+-----------------+----------------+---------------+--------------------+--------------------+--------------------+-----------------+-------------------+----------------+-----------------------+-------------------------------+---------------+---------------------------------------------------------------------------------------------------------------------------------------------+----------------+----------------+

#에러 스킵 시도
> stop slave;SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1;start slave;
--> 복제 오류 지속됨.


#현재 master binlog 포지션 이후 로그 기록 확인
> show binlog events in 'mysql-bin.000028' from 967473320 limit 3\G;
Empty set (0.00 sec)

ERROR:
No query specified
--> 데이타가 없다고 함


#현재 binlog파일의 마지막 로그 추출후 확인
> mysqlbinlog --no-defaults --database=daara_db --start-date="2021-10-18 04:30:00" --stop-date="2021-10-18 04:40:00" /var/lib/mysql/mysql-bin.000028 > binlog1018.sql
--> 최종 로그 포지션 안맞음.(더이상없음)
#새로운 binlog파일의 시작 체크
> mysqlbinlog --no-defaults --database=daara_db --start-date="2021-10-18 04:30:00" --stop-date="2021-10-18 04:40:00" /var/lib/mysql/mysql-bin.000029 > binlog1018.sql
--> 해당 시작 포지션 확인후 slave에서 master position 변경

--Slave
> STOP SLAVE;
> CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000029', MASTER_LOG_POS=4;
> START SLAVE;
> SHOW SLAVE STATUS\G; -- 에러확인
--> 복제 정상 동작

 

 

 

잘 진행되던 복제가 오류 났을때, 전에는 일반적으로 "SET GLOBAL SQL_SLAVE_SKIP_COUNTER=1"를 실행해서 해결하고는 했다. 그런데 이번에는 그렇게 되지 않아 좀 애먹었다. 

위에서 보는거 처럼, 오류난 로그 포지션을 스킵을 해줘도 안되서, 현재 오류나는 곳의 binlog파일과, master position을 확인해서 해당 binlog파일을 열어 최종 로그를 확인해보니, 오류나는 binlog에는 해당 포지션이 존재하지 않았다.

아마도, 서버의 오류로 인해 binlog 기록이 잘못되었던거 같다.

 

binlog파일들을 확인해서 현재 오류나는 binlog 다음 파일을 확인 해서 position을 변경해주고 시작하니 이상 없이 복제가 잘되었다.

 

 

Trackback : Comment

mysql binlog에서 특정 위치(position) 읽어보기

Posted in mysql by 강화도령

mysql 서버 쌓이는 binlog를 특정 position에서 최근 로그를 읽어보자.

 

mysql> show binlog events in 'mysql-bin.000011' from 850378398 limit 3\G;

*************************** 1. row ***************************
   Log_name: mysql-bin.000011
        Pos: 850378398
 Event_type: Intvar
  Server_id: 154
End_log_pos: 850378426
       Info: INSERT_ID=6631643
*************************** 2. row ***************************
   Log_name: mysql-bin.000011
        Pos: 850378426
 Event_type: Query
  Server_id: 154
End_log_pos: 850378632
       Info: use `db`; insert LOW_PRIORITY into log (admin_id, admin_log, remote_addr, im_log_seq) values ('best','message:view','61.250.146.69', 727044)
*************************** 3. row ***************************
   Log_name: mysql-bin.000011
        Pos: 850378632
 Event_type: Intvar
  Server_id: 154
End_log_pos: 850378660
       Info: INSERT_ID=679994370
3 rows in set (0.00 sec)

 

 

위와 같이 하면 결과가 검색하는 포지션 위치에서 최근 3개의 로그를 읽을 수 있다.

특정 포지션에서 로그를 확인할때 사용할수 있겠다.

 

 

* binlog - mysql binary log는 DDL(create, drom, alter)문과, DML(insert, update, delete)를 통해 수행되는 db query 문들의 정보를 저장한다고 보면 된다. 단, show 나 select문은 저장되지 않는다. 

이 binlog는 DB를 복제(replication)하거나, 특정 시점에 있었던 query를 확인하고 복구하는데도 사용이 가능하다.

 

아래 해당 내용이 잘 소개된 이웃글이 있으니 상세한 부분이 궁금하면 방문해길..

https://myinfrabox.tistory.com/20

Trackback : Comment

on duplicate key update 사용시 last_Insert_Id 가져오기

Posted in mysql by 강화도령

mysql 에서 insert 와 update를 한번의 query에서 할 수 있는 방법은

 

"on duplicate key update" 기능을 이용하면된다.

 

그런데, insert 구문으로만 등록시 lastInsertId는 잘 가져오는데,

 

"on duplicate key update"를 붙여주면 lastInsertId를 못가져오는 경우가 발생한다.

 

아마도 update구문이 같이 있다보니, 그러는거 같은데... 흠..

 

이를 해결하기 위해서는,

당연히 auto_increment 컬럼(expr)이 있어야 하며,

이를 on duplicate key update 구문에 추가해 주면 된다.

 

insert into ebook (expr, name,title) values (0, 'test','asfdafd') on duplicate key update name='test',title='asfdafd', expr=last_insert_id(expr);

 

이렇게 하면 insert 가 실행되고 나서 last_insert_id()를 가져올 수 있다.

 

 

 

Trackback : Comment

mysql 달의 마지막일 구하기

Posted in mysql by 강화도령

mysql query를 작성하다보면

날짜 관련 처리를 할때가 많다.

이럴때 달의 마지막 날짜를 구해야 하는 경우가 있는데...


쉽게 last_day() 함수를 사용하면 간단히 구할수 있다.

last_day()함수는 mysql 4.1.1 버젼 이상에서 가능하니...버젼 잘 확인해보고 사용하면 되겠다.


last_day("날짜")를 이용하면 되는데, "날짜" 부분에 원하는 달의 아무날이나 넣어줘도 된다.


select last_day('2017-06-23');

-> 2017-06-30


ex)

select * from board where regdate between date_format(now(),'%Y-%m-01') and last_day(now())

저작자표시 비영리 변경금지

Trackback : Comment

문자열 자르기 substirng, substring_index

Posted in mysql by 강화도령

mysql에서 문자의 일정부분을 잘라야 하는경우가 있다.


이때 간단하게 많이 사용하는 것이 substring 함수 일건데, 


substring은 원하는 부분에서 원하는 글자수 만큼 자르는데 유용하다, 


사용법은 간단해서


substring(자를문자열, 시작위치, 반환할문자수)


이다.


시작위치는 -(음수)로 지정이 가능한데, 이때는 뒤에서 부터 가져오게 된다.




기본 자르기 말고, 특정 구분자를 통해서 글자를 자르고 싶을때가 있는데,.


이때는 


substring_index 함수를 이용하면 아주 쉽게 된다.


이 함수는 구분자를 지정해 앞쪽과 뒤쪽을 구분해서 가져올수 있다.



예를 들어보면 "aaa@bbb.ccc" 이라는 메일에서 도메인 부분을 가져가기 위해서는 


select substring_index("aaa@bbb.ccc", "@", -1);

--> bbb.ccc 


가 결과로 리턴된다.


substring_index(자를문자열,구분자,반환할수)


반환할수는 음수로 하면 뒤에서부터 가져오게 되고, 양수면 앞에서부터 가져오게 된다.





저작자표시 비영리 변경금지

Trackback : Comment

이메일 형식 유효성 체크 정규식

Posted in mysql by 강화도령

회원이나, 입력된 메일의 유효성을 체크 하는 방법이다.


mysql의 정규식을 이용하면 쉽게 파악할 수 있다.


이메일이 유효하지 않은 회원은 


SELECT * FROM member WHERE email NOT REGEXP '^[a-zA-Z0-9][a-zA-Z0-9._-]*[a-zA-Z0-9._-]@[a-zA-Z0-9][a-zA-Z0-9._-]*[a-zA-Z0-9]\\.[a-zA-Z]{2,4}$';


로 추출이 가능하다.


mysql의 REGEXP  기능을 이용하면 된다.


다양한 정규식 패턴을 이용하면 원하는 필터링을 쉽게 할수 있겠다.


http://dev.mysql.com/doc/refman/5.7/en/regexp.html



저작자표시 비영리 변경금지

Trackback : Comment

mysql에서 join을 이용한 데이타 삭제하기

Posted in mysql by 강화도령

mysql join을 이용한 데이타 삭제하기

mysql에서는 두개 이상의 table에서 join을 이용해 필터링 되는 데이타를 삭제하기 위해서는 select에서와 같이 join문을 이용해야 하며 여기에서 중요한 점은 using 이라는 문을 더 추가한다는것이다.

예제로 보면, aaa. bbb 라는 테이블을 조인해서  aaa에서 특정 데이타를 삭제하는 구문을 보면

delete from T1 using aaa T1 join bbb T2 on T1.seq = T2.seq where T2.name='홍길동'

이렇게 할경우  T1의 데이타를 삭제하는데 T2와 join 되어 name='홍길동' 인 경우만 삭제하게 된다.
즉, 삭제할 테이블을 FROM 과 USING 사이에 놓으면 된다.

저작자표시 비영리 변경금지

Trackback : Comment

pdo_mysql 확장 모듈 올리기

Posted in 웹프로그래밍/php by 강화도령

pdo_mysql을 이용하기 위해서 pdo_mysql 확장모듈을 서버에 설치해보자.
(개개의 서버마다 서버 설정 및 모듈 설치 경로가 다를수 있으니, 이부분은 환경에 맞게 확인을 해서 설치를 한다.)

linux 웹서버에 로그인한후,
//pdo확장모듈을 다운받을경로로 이동
#cd /usr/local/src
//pdo확장모듈 최신 다운.
#wget http://pecl.php.net/get/PDO_MYSQL-1.0.2.tgz 
//압축해제.
#tar -xzvf PDO_MYSQL-1.0.2.tgz
//압축해제한 pdo모듈 dir로 이동.
#cd PDO_MYSQL-1.0.2
//phpize(php의 확장모듈을 올리는 유틸)위치 확인
#whereis phpize  (whereis로 못찾을경우 find -name phpzie 으로 찾아본다)
#/usr/local/bin/phpize
//php-config 위치 확인
#whereis php-config
//설치하기
#./configure --with-php-config=/usr/local/bin/php-config --with-pdo-mysql=/usr/local/mysql
#make
#makeinstall
//extension dir로 이동후 pdo_mysql.so 존재여부확인.
#cd /usr/local/lib/php/extenstions/no-debug-zts-2006613
#ls pdo_mysql.so

여기까지 pdo_mysql 확장모듈 설치가 끝났다.
이제 프로그램에서 실제로 사용하기 위해서 php.ini 추가를 해준다.

//php.ini에
#vi /usr/local/apache/conf/php.ini
extension=pdo_mysql.so 추가
//아파치 리스타트

이제 pdo를 맘껏 사용해보자...^^


*phpize ?
이건, php 확장 모듈을 php재컴파일을 하지 않고 설치해주는 유틸이란다.
사용방법은 위에 pdo_mysql 설치 예시에서 처럼,
phpize 실행 --> ./configure 환경설정 --> make 를 해주면된다고 한다.


저작자표시

Trackback : Comment

mysql charset 문제로 한글깨질때. latian1 -> euckr

Posted in mysql by 강화도령

mysql 서버의 charset 문제로 한글이 깨져 보이는 경우가 있다.
이때, 테이블별로 charset을 변경해줘서 한글이 깨지는 문제를 해결하기 위해 아래와 같이 하면, db전체를 dump받아서 변경하지 않아도 된다. 다만, 변경해야할 table이 많이면 좀 힘들것이다.

가정.
table : university , charset latin1
한글이 깨진 컬럼 : u_name

- 해당 컬럼을 binary 또는  blob 형식을 변경한다. (mysql메뉴얼의 의하면, binary형식으로 별도의 컨버젼이 일어나지 않아서 올바른 형전환을 할수 있다고 한다.... 참고, http://dev.mysql.com/doc/refman/5.1/en/alter-table.html)
- 해당컬럼을 다시 원래의 형식을 변경하고 collate를 원하는 형식으로 지정한다.
- 해당 테이블을 원하는 charset으로 변경한다.
ex)

alter table university modify u_name blob;
alter table university modify u_name varchar(150) collate euckr_korean_ci;
alter table university convert to charset euckr;


이렇게 한후 조회를 해보면, 한글이 잘 보일것이다.
저작자표시

Trackback : Comment