node.js - nodejs 크롤러는 요청 수를 어떻게 제어합니까?

nodejs를 사용하여 웹 페이지 콘텐츠를 크롤링할 때 요청이 너무 많으면 때때로 예외가 발생하여 연결이 너무 많다는 오류가 발생합니다. nodejs에 스레드 잠금을 위한 키워드나 라이브러리가 있습니까? 아니면 어떻게 하면 더 잘 처리할 수 있을까요? 먼저, 감사합니다!

滿天的星座 2017-06-27 09:19:30 0  2  1053

php - 데이터베이스의 데이터에 대해 작동하도록 예약된 작업을 구현하는 방법은 무엇입니까?

현재 laravel 프레임워크를 사용하여 프로젝트를 개발 중입니다. 해당 프로젝트에는 데이터 양이 많기 때문에 데이터베이스에 있는 수십 개의 테이블에 대한 관련 쿼리, 계산 및 처리를 수행하여 필요한 데이터를 얻습니다. 매일 밤 0시부터 시작하여 예정된 작업을 작성합니다...

PHPz 2017-05-27 17:42:05 0  8  1206

특정 필드에서 동일한 데이터를 찾는 방법

예를 들어 데이터베이스의 특정 필드에 대한 중복 데이터만 쿼리하고 싶습니다. 어떻게 쿼리하나요? 아니면 PHP로 어떻게 합니까? 아래 사진과 같이 Zhang**의 이름, 전화번호, 시/도 등이 모두 동일한 방식으로 나열되어 있을 수 있으며, Zhang San에 대한 기록이 여러 개 있을 수 있습니다.

Bob pang 2020-03-13 12:24:57 0  2  1194

몽구스 모든 컬렉션을 얻는 방법

데이터의 모든 컬렉션을 계산해야 하며, 어떤 컬렉션에 가장 많은 데이터가 포함되어 있는지, 그리고 이를 처리하는 방법은 무엇입니까? 내가 본 몽구스는 모델을 사용하여 해당 컬렉션을 처리합니다. 데이터베이스로 가져온 데이터가 너무 많습니다. 어떻게 컬렉션을 얻을 수 있나요?

PHP中文网 2017-05-17 10:03:06 0  2  720

Laravel에서 여러 데이터베이스를 사용하는 방법

내 시스템에서 여러 데이터베이스를 결합하고 싶습니다. 대부분의 경우 데이터베이스는 MySQL이지만 미래에는 달라질 수 있습니다. 즉, 관리자가 이러한 보고서를 생성할 수 있으며 이것이 이기종 데이터베이스 시스템을 사용하는 소스입니다. 그래서 내 질문은 Laravel이 이 상황을 처리하기 위해 Facade를 제공하는가입니다. 아니면 문제에 더 적합한 기능을 갖춘 다른 프레임워크가 있나요?

P粉919464207 2023-10-13 09:54:58 0  2  639

PostgreSQL jsonb 필드의 JSON 데이터를 Javascript로 효율적으로 전달하는 방법은 무엇입니까?

저는 Javascript로 postgresql 데이터베이스의 일부 JSON 데이터를 처리하는 스마트 솔루션을 찾고 있습니다. PHP를 통해 데이터베이스를 읽고 데이터를 Javascript에 배열로 전달해야 한다는 것을 알고 있습니다. 일반적으로 다음과 같은 작업을 수행합니다: <?php$phpArray=array('apple','banana','orange');$jsonString=json_encode($phpArray);?><sri

P粉596161915 2023-09-12 14:52:26 0  1  621

배열 - php+mysql 일회성 업데이트?

데이터베이스에서 멤버 정보를 검색한다고 가정하면, 각 멤버의 p 값이 하나씩 있을 것입니다. "모든 멤버의 p 값을 한 번에 수정할 수 있습니다." " PHP 백엔드를 어떻게 처리해야 하나요? 그렇죠? !

代言 2017-06-12 09:19:49 0  5  802

vim 여러 줄 일치하는 줄의 시작 부분 삭제

문제 설명에서는 더 큰 파일을 처리하고 각 줄에서 일치하는 문자열 앞에 있는 내용을 삭제해야 합니다. 파일 내용의 형식은 다음과 같습니다. {code...} 각 줄이 처음 등장하기 전의 내용을 해당 줄의 시작 부분까지 삭제할 수 있을 것으로 예상됩니다. 예상되는 처리 결과는 다음과 같습니다. .} 현재...

ringa_lee 2017-05-16 16:34:34 0  3  642

대용량 파일을 분할하여 업로드

대용량 파일의 다중 부분 업로드 원칙을 알려주십시오. PHP는 다중 부분 데이터를 어떻게 처리해야 합니까?

PHP 2018-08-14 16:46:23 0  1  1066

python - java로 만든 경매 시스템에서 경매 입찰 중에 동시에 여러 요청이 호출되는 동시성 문제를 처리하는 방법은 무엇입니까? ?

경매 시스템에는 가격에 대한 입찰 기능이 있습니다. 현재 상황은 여러 요청이 동시에 입찰되고 있다는 것입니다. 백그라운드에서 이러한 동시성 문제를 어떻게 처리해야 하는지, 이 경매에서 누가 성공하고 누가 실패하는지에 대한 비즈니스 로직을 대략적으로 분석하는 방법과 데이터베이스의 데이터 수정. 동시성 문제에 관해서 내 동생은 Java에 있습니다 ...

阿神 2017-05-16 13:27:48 0  1  931

php - 여러 mysql 연결이 서로 다른 데이터베이스를 처리합니까?

다양한 데이터베이스를 처리하기 위해 여러 mysql 연결을 구현하는 방법은 무엇입니까? 서로 간섭하지 않겠습니까? !

高洛峰 2017-06-17 09:15:19 0  1  792

쿼리 감소를 최적화하는 방법은 무엇입니까?

그냥 물어보고 싶었어요! 위의 빨간색 점은 백엔드에 데이터베이스 조건을 직접 쿼리하고 결과를 반환하도록 요청합니다! 이제 데이터가 적으면 데이터베이스를 빠르게 처리할 수 있지만, 데이터 양이 많으면 반환되는 결과가 느려집니다. 백엔드를 최적화하는 방법은 무엇입니까? 사용자가 작업을 수행하면 결과를 별도의 테이블에 직접 저장하고 싶습니다.

我想大声告诉你 2017-06-06 09:52:20 0  1  788

Python에서 1:n:1 데이터 구조를 구현하는 방법은 무엇입니까?

첫째, 많은 양의 데이터가 있는데, 이는 3개의 단위로 나누어져 있습니다: {code...} 예를 들어, 현재 이러한 데이터는 100개입니다. 그것을 처리하는 방법? 첫 번째 단계는 사전을 통해 1:n:1을 구성하는 것입니다. 그러나 지금은 그렇습니다. 유형이 키인 경우 동일한 유형이 있으면 어떻게 해야 합니까?

怪我咯 2017-05-18 10:55:26 0  3  779

VB.Net의 MySQL에 활성화된 텍스트 상자만 삽입

저는 기본 기능이 들어오는 송장을 처리하는 것인 VB.Net에서 재고 관리 시스템을 만들고 있습니다. 원격 MySQL 데이터베이스에 데이터를 삽입하고 싶지만 텍스트 상자가 활성화된 것으로 간주되는 경우에만 가능합니다. 모든 필드를 삽입하려는 경우 데이터베이스에 데이터를 삽입하는 데 문제가 없습니다. 하지만 확인란을 사용하여 특정 제품을 활성화하고 직원이 특정 항목만 입력할 수 있도록 하고 싶습니다. 확인란은 필요에 따라 텍스트 필드를 활성화 및 비활성화하지만 데이터가 데이터베이스에 삽입되면 모든 제품 유형에 대해 null 값이 입력...

P粉043432210 2024-02-21 19:42:03 0  1  414

mysql - 수천만 개의 데이터 페이징, 오프셋이 더 큰 것으로 판명되면 속도를 최적화하는 방법은 무엇입니까?

mysql을 예로 들면, 일반적으로 데이터의 양이 많으면 페이징 시 오프셋이 커지고 쿼리 효율성이 떨어지게 됩니다. 예를 들어 게시물에 댓글이 200만개 있는데 페이지당 10개가 표시된다면, 200,000 페이지가 됩니다. 200,000 페이지의 데이터를 어떻게 처리할 수 있을까요? 실용적으로 해결할 수 있는 방법은 없을까요?

伊谢尔伦 2017-05-18 10:48:01 0  2  895

nginx에서 업로드 모듈에 대한 권한을 확인하는 방법은 무엇입니까?

100MB의 파일을 업로드하는 프로젝트를 진행해야 합니다. PHP로 직접 업로드하고 처리하는 것은 번거롭고 시간 초과가 발생하며 리소스를 많이 차지합니다. 그래서 검색해서 nginx의 업로드 모듈을 사용하여 처리하기로 결정했습니다. 업로드가 가능하지만 업로드하는 사용자의 권한을 어떻게 확인하나요?

世界只因有你 2017-05-16 17:28:26 0  1  790

동일한 인터페이스의 새로 고침/로드된 데이터를 처리하는 우아한 방법이 있습니까?

동일한 인터페이스에서 목록 데이터 요청, 풀다운 새로 고침 및 풀업 로딩 요청에 대해 알려주십시오. 그러면 요청 결과를 얻을 때 데이터를 처리하는 더 적절한 방법은 무엇입니까? 나의 현재 접근 방식은 데이터를 동일한 함수에 전달한 다음 함수에서 이 요청을 판단하는 것입니다.

PHP中文网 2017-05-16 13:31:18 0  2  590

PHP 보고 SQL 오류를 비활성화하는 방법은 무엇입니까?

mysqli_error($this->conn)를 사용하여 MySQL 오류를 txt 파일에 기록하는 자체 PHP 데이터 클래스가 있습니다. PHP 오류 처리를 E_ALL로 설정하기 전까지는 모든 것이 잘 작동했습니다. 이제 PHP는 오류를 가로채고 내 MySQL 오류 처리기에 의해 처리될 기회가 없습니다. PHP가 오류의 전체 SQL 문자열을 기록하지 않았다는 점을 제외하면 이는 문제가 되지 않습니다. 처음 20자 정도만 기록하고 그 뒤에 "..."가 붙는데, 이는 디버깅에 별로 유용하지 않습니다. 그래서 내 ...

P粉550257856 2023-09-05 17:14:24 0  1  646

이미지 업로드, 이름 변경 및 압축 문제 관련

두 번째로 동일한 파일 이름의 이미지를 사용했을 때 업로드할 때 파일이 이미 존재한다는 메시지가 표시되고 경로를 데이터베이스에 저장할 수 없으며 파일 이름을 데이터베이스에 저장할 수 없습니다. 표시되지 않습니다. , 이 문제를 해결하기 위해 코드를 추가할 위치를 알려주십시오. 두 번째 질문, 이미지 파일 크기를 압축하기 위한 코드를 어디에 추가해야 할까요?<?phpif (count($_FILES)) { $retFiles = uploadFile("file") if ($ret

主持人~冬旭 2019-12-15 19:39:27 0  0  1155

javascript - 양식을 통해 제출된 동일한 항목에 대한 여러 데이터 조각을 PHP 백그라운드에서 어떻게 처리합니까? ?

페이지 구조는 위 그림과 같으며, 백엔드에서는 PHP를 사용하고 있는데, 교육 경험에 3개의 레코드가 있고 저장을 클릭하면 백엔드에 제출되는 경우 어떻게 처리하는 것이 가장 좋을까요? ? ? 첫 페이지에서 새 행을 동적으로 생성할 수 있는 경우 여러 행 사이의 이름 및 기타 속성 문제를 어떻게 처리합니까? ? 말해도 돼, 빅...

高洛峰 2017-05-16 13:14:33 0  4  621