MySQL server pri vacsich dopytoch pada

Ak potrebujete pomoc alebo poradiť, píšte sem (len PC, elektronika atď.)...
*****HERO*****
Guru wannabe
Guru wannabe
Používateľov profilový obrázok
Príspevky: 2446
Registrovaný: 08 máj 2006, 1:34

MySQL server pri vacsich dopytoch pada

Príspevok od používateľa *****HERO***** »

caute,

mam na svojom kompe (32bit Win XP) pusteny MySQL 5.1.41 server a mam s tym mensi problem, ze pri akomkolvek vacsom dopyte to jednoducho padne. napriklad mam databazu so 100 tabulkami a nemozem ich naraz exportovat, lebo niekde pri desiatej mi to padne. ak dam export iba pre data (bez struktury), tak to exportne cele, no naopak to uz nejde, ta struktura zabera totiz 90% celkoveho obsahu. skusal som to cez PhpMyAdmina a aj priamo cez cmd (mysqldump), no vysledok rovnaky.

vytvara MySQL nejaky log, kde by som nasiel s cim ma problem? pripadne neviete mi poradit, ako inak exportnut 100 tabulkovu databazu a importnut ju na iny server, na ktory mam pristup len cez PhpMyAdmina?


nasiel som ten error log, vie z toho niekto nieco vycitat?

Kód: Vybrať všetko

Version: '5.1.41'  socket: ''  port: 3306  Source distribution
120327 18:17:17 [Note] Plugin 'FEDERATED' is disabled.
InnoDB: The log sequence number in ibdata files does not match
InnoDB: the log sequence number in the ib_logfiles!
120327 18:17:17  InnoDB: Database was not shut down normally!
InnoDB: Starting crash recovery.
InnoDB: Reading tablespace information from the .ibd files...
InnoDB: Restoring possible half-written data pages from the doublewrite
InnoDB: buffer...
120327 18:17:18  InnoDB: Started; log sequence number 0 4629592
120327 18:17:18 [Note] Event Scheduler: Loaded 0 events
120327 18:17:18 [Note] D:\Programy\xampp\xampp\mysql\bin\mysqld.exe: ready for connections.
Version: '5.1.41'  socket: ''  port: 3306  Source distribution
hojko
Site Admin
Site Admin
Používateľov profilový obrázok
Príspevky: 38518
Registrovaný: 24 apr 2004, 18:29
Bydlisko: Európa
Kontaktovať používateľa:

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa hojko »

Take veci sa robia bud cez MySQL konzolu alebo cez nejake scripty, ktore to delia, pouzit mozes napriklad MySQLdumper.

Podla chyby to vyzera na daku nezhodu s poctom zaznamov pri InnoDB, skus pouzit perl script MySQLtuner na vyladenie sql a zaroven by bolo dobre, ak by si sem hodil konfiguracny subor (mysql.cfg alebo .conf) a tiez uviedol aka velka je ta databaza a kolko zaznamov obsahuje.
*****HERO*****
Guru wannabe
Guru wannabe
Používateľov profilový obrázok
Príspevky: 2446
Registrovaný: 08 máj 2006, 1:34

Príspevok od používateľa *****HERO***** »

no ta databaza obsahuje 98 tabuliek a dokopy 607 zaznamov, cize nic extra. je to v podstate prazdna Joomla! s par extensionmi.

skusal som ten MySQLdumper a nastavil som to, nech to deli po 100kB, co je minimum, no takisto to zhodi server, stihne to zexportovat asi polovicu z prveho partu.

ten MySQLtuner mi nejde, vyhadzuje chybu ze

Kód: Vybrať všetko

"Unable to find mysqladmin in your \$PATH.  Is MySQL installed?".
V readme nie je nic o tom, ako nastavit nejaku premennu $PATH, v kode som to takisto nenasiel.

tu by mal byt ten config, je to subor my.ini, iny som tam nenasiel

Kód: Vybrať všetko

# Example MySQL config file for medium systems.
#
# This is for a system with little memory (32M - 64M) where MySQL plays
# an important part, or systems up to 128M where MySQL is used together with
# other programs (such as a web server)
#
# You can copy this file to
# /etc/my.cnf to set global options,
# mysql-data-dir/my.cnf to set server-specific options (in this
# installation this directory is @localstatedir@) or
# ~/.my.cnf to set user-specific options.
#
# In this file, you can use all long options that a program supports.
# If you want to know which options a program supports, run the program
# with the "--help" option.

# The following options will be passed to all MySQL clients
[client]
#user    	= your_username
#password   = your_password
host        = .
port		= 3306
socket		= "MySQL"

# Here follows entries for some specific programs

# The MySQL server
[mysqld]
basedir                 = "D:/Programy/xampp/xampp/mysql/"
datadir                 = "D:/Programy/xampp/xampp/mysql/data/"
port		            = 3306
socket		            = "MySQL"
skip-locking
key_buffer              = 16M
max_allowed_packet      = 1M
table_cache             = 64
sort_buffer_size        = 512K
net_buffer_length       = 8K
read_buffer_size        = 256K
read_rnd_buffer_size    = 512K
myisam_sort_buffer_size = 8M
character-set-server=utf8
collation-server=utf8_slovak_ci
skip-character-set-client-handshake

default-time-zone       = "Europe/Paris"

log_error           = "D:/Programy/xampp/xampp/mysql/data/mysql.err"
pid_file            = "mysql.pid"
general_log         = 0
general_log_file    = "D:/Programy/xampp/xampp/mysql/data/mysql.log"
slow_query_log      = 0
slow_query_log_file = "D:/Programy/xampp/xampp/mysql/data/mysql-slow.log"

# Don't listen on a TCP/IP port at all. This can be a security enhancement,
# if all processes that need to connect to mysqld run on the same host.
# All interaction with mysqld must be made via Unix sockets or named pipes.
# Note that using this option without enabling named pipes on Windows
# (via the "enable-named-pipe" option) will render mysqld useless!
#
#skip-networking
enable-named-pipe

# Disable Federated by default
skip-federated

# Replication Master Server (default)
# binary logging is required for replication
#log-bin = mysql-bin

# binary logging format - mixed recommended
#binlog_format = mixed

# required unique id between 1 and 2^32 - 1
# defaults to 1 if master-host is not set
# but will not function as a master if omitted
server-id = 1

# Replication Slave (comment out master section to use this)
#
# To configure this host as a replication slave, you can choose between
# two methods :
#
# 1) Use the CHANGE MASTER TO command (fully described in our manual) -
#    the syntax is:
#
#    CHANGE MASTER TO MASTER_HOST=<host>, MASTER_PORT=<port>,
#    MASTER_USER=<user>, MASTER_PASSWORD=<password> ;
#
#    where you replace <host>, <user>, <password> by quoted strings and
#    <port> by the master's port number (3306 by default).
#
#    Example:
#
#    CHANGE MASTER TO MASTER_HOST='125.564.12.1', MASTER_PORT=3306,
#    MASTER_USER='joe', MASTER_PASSWORD='secret';
#
# OR
#
# 2) Set the variables below. However, in case you choose this method, then
#    start replication for the first time (even unsuccessfully, for example
#    if you mistyped the password in master-password and the slave fails to
#    connect), the slave will create a master.info file, and any later
#    change in this file to the variables' values below will be ignored and
#    overridden by the content of the master.info file, unless you shutdown
#    the slave server, delete master.info and restart the slaver server.
#    For that reason, you may want to leave the lines below untouched
#    (commented) and instead use CHANGE MASTER TO (see above)
#
# required unique id between 2 and 2^32 - 1
# (and different from the master)
# defaults to 2 if master-host is set
# but will not function as a slave if omitted
#server-id       = 2
#
# The replication master for this slave - required
#master-host     = <hostname>
#
# The username the slave will use for authentication when connecting
# to the master - required
#master-user     = <username>
#
# The password the slave will authenticate with when connecting to
# the master - required
#master-password = <password>
#
# The port the master is listening on.
# optional - defaults to 3306
#master-port     = <port>
#
# binary logging - not required for slaves, but recommended
#log-bin         = mysql-bin

# Point the following paths to different dedicated disks
tmpdir		     = "D:/Programy/xampp/xampp/tmp/"
#log-update      = "D:/Programy/xampp/xampp/tmp/mysql"

# Uncomment the following if you are using InnoDB tables
#skip-innodb
innodb_data_home_dir            = "D:/Programy/xampp/xampp/mysql/data/"
innodb_data_file_path           = ibdata1:10M:autoextend
innodb_log_group_home_dir       = "D:/Programy/xampp/xampp/mysql/data/"
# You can set .._buffer_pool_size up to 50 - 80 %
# of RAM but beware of setting memory usage too high
innodb_buffer_pool_size         = 16M
innodb_additional_mem_pool_size = 2M
# Set .._log_file_size to 25 % of buffer pool size
innodb_log_file_size            = 5M
innodb_log_buffer_size          = 8M
innodb_flush_log_at_trx_commit  = 1
innodb_lock_wait_timeout        = 50

[mysqldump]
quick
max_allowed_packet = 16M

[mysql]
no-auto-rehash
# Remove the next comment character if you are not familiar with SQL
#safe-updates

[isamchk]
key_buffer = 20M
sort_buffer_size = 20M
read_buffer = 2M
write_buffer = 2M

[myisamchk]
key_buffer = 20M
sort_buffer_size = 20M
read_buffer = 2M
write_buffer = 2M

[mysqlhotcopy]
interactive-timeout
test
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 5099
Registrovaný: 13 mar 2005, 5:20
Bydlisko: Doma

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa test »

Cista Joomla nemoze zhodit SQL databazu!
audiotrack
VIP
VIP
Používateľov profilový obrázok
Príspevky: 25958
Registrovaný: 09 sep 2005, 18:39
Kontaktovať používateľa:

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa audiotrack »

nie je čistá, píše že tam sú nejaké extensions. A zrejme v nich by som hladal chybu, lebo vidím že máš xampp a ten by tiež nemal byť nejaký rozštelovaný (ak si do neho nerobil zásahy). Čo za rozšírenia si tam nahadzoval?
*****HERO*****
Guru wannabe
Guru wannabe
Používateľov profilový obrázok
Príspevky: 2446
Registrovaný: 08 máj 2006, 1:34

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa *****HERO***** »

no je jedno ci je to Joomla alebo nieco ine, jednoducho ked ten server pracuje s velkym mnozstvom dat tak padne, skusal som to samozrejme aj na inych databazach

//autoeditácia príspevku (27 Mar 2012, 19:57)
no v tej Joomle je nejaka Kunena, Ajaxovy shoutbox, galeria ... ale ako hovorim, toto ide mimo joomly, robi to aj na ostatnych databazach, kde su nejake random veci
audiotrack
VIP
VIP
Používateľov profilový obrázok
Príspevky: 25958
Registrovaný: 09 sep 2005, 18:39
Kontaktovať používateľa:

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa audiotrack »

a čo je to za stroj? Myslím hardwarovo. Nie je to nejaký starý črep? Ten config zajtra v práci porovnám so svojím čo mám na localhoste, ale tie limity sa mi zdajú celkom normálne
test
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 5099
Registrovaný: 13 mar 2005, 5:20
Bydlisko: Doma

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa test »

Podla teba je 2MB databaza velka databaza? Su take, ktore maju miliony zaznamov, radovo niekolko giga a nic nepada. Nech schvalne audiotrack napise statistiku k hojko.com sql, len tak pre porovnanie tvojej velkej db a velkej db fora.
*****HERO*****
Guru wannabe
Guru wannabe
Používateľov profilový obrázok
Príspevky: 2446
Registrovaný: 08 máj 2006, 1:34

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa *****HERO***** »

no pamate tam mam 2 GB a procesor Intel Core Duo E7300 3.33 GHz. to si nemyslim, ze by mal byt nejaky problem.

inak ten config je uplne default pokial viem


test: no podla mna nie, ale zjavne ten server s tym ma nejaky problem
audiotrack
VIP
VIP
Používateľov profilový obrázok
Príspevky: 25958
Registrovaný: 09 sep 2005, 18:39
Kontaktovať používateľa:

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa audiotrack »

tak potom bude chyba inde. Ja mám notebook s 1GB ram a procesorom 1.6GHz a nikdy mi mysql nepadlo. A to robím s databázami rádovo stovky mega

k tomu testovmu dotazu: hojko.com má aktuálnu veľkosť db 2.21 GB
test
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 5099
Registrovaný: 13 mar 2005, 5:20
Bydlisko: Doma

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa test »

2,21GB a miliony zaznamov vs 1-2MB a par stoviek zaznamov. Nie je velka db ako velka db.
*****HERO*****
Guru wannabe
Guru wannabe
Používateľov profilový obrázok
Príspevky: 2446
Registrovaný: 08 máj 2006, 1:34

Re: MySQL server pri vacsich dopytoch pada

Príspevok od používateľa *****HERO***** »

no asi to bol nejak poskodeny samotny server, skusil som nainstalovat novy server samostatne (mimo xamppu) a nakopiroval som tam data zo xamppoveho servera a odtial sa exportovat v pohode da
Napísať odpoveď