【node.js】サーバサイドjavascript 5【Nashorn】 (796レス)
上下前次1-新
549: 2020/09/14(月)20:42 ID:JdQogpR1(1/4) AAS
>>544 の者ですが
今日これをデバッグしてました。
clusterでもwoker_threadsfでも
child_processでも
「EADDRINUSE」が発生しました
発生するタイミングは子プロセスを生成した時でも
なく
子プロセスでMySQLに対しのコネクション確立時でもなく
確立したDBコネクションからクエリを投げるコード
を実行する時に発生しますが
なぜこのタイミングなのか分かりません
ここで気になったのが
nodeでフロントユーザーに対し
80番ポートをlistenしていて
nodeがローカルのMySQLにアクセスする時
nodeのクライアントポートはフロントと
おなじ80を使うのでしょうか?
それとも別のランダムポートを取得してきて使うのでしょうか?
550(1): 2020/09/14(月)20:55 ID:AayaioGL(1/2) AAS
説明と全然違う事象じゃねーの
せめてエラーメッセージとスタックトレース貼れ
551: 2020/09/14(月)20:55 ID:JdQogpR1(2/4) AAS
続きですか
もう少し調べてみると
「EADDRINUSE」が発生するタイミングは
MySQLに対しコネクション確立後
SQLを投げる時で間違いないと思いますが、
エラーのスタックとレースを見ても
何かのハンドラから駆動されており自分の書いたコードでは
ありません。
nodeかexpressかmysqlモジュールのハンドラ
だと思います
子プロセスはローカルのMySQLに対して
接続して読み書きするだけで
フロントとのやり取りは一切ありませんが
生成元の親プロセスはExpressのapp.js
で立ち上げてるwebアプリです
552: 2020/09/14(月)20:56 ID:JdQogpR1(3/4) AAS
不思議なのが子プロセスで
mysqlとコネクション確立までは失敗せずに
動作し、SQLを投げる段階で
なぜか大元の「app.js」をもう1つ起動しようとしており
app.jsはもう既に起動してるので、
listenポート重複により上記のエラーが発生するわけです
暫定対応で動くようにはなりましたが、
なぜローカルのDBアクセス時にapp.js実行する
動きをするのかの原因がまだ分かっていません
webとは関係ないはずの子プロセスのファイルを
単体でコマンドで実行した場合も
Expressのベースディレクトリにある
「app.js」が実行されていることが分かりました。
自身のコードではこのようなことをしてないので
フレームワークかモジュールの内部処理だと思いますが、
知っている方がいましたら教えてください。
553: 2020/09/14(月)20:57 ID:JdQogpR1(4/4) AAS
>>550
すみません、もう帰宅してしまったのと
機密事項で怒られるのでスタックトレースは貼れません
554: 2020/09/14(月)21:14 ID:AayaioGL(2/2) AAS
> 単体でコマンドで実行した場合も
> Expressのベースディレクトリにある
> 「app.js」が実行されていることが分かりました。
clusterも何も関係ねーじゃんwww
断言するがフレームワークもモジュールもmysqlも関係なくてお前のバグだから真面目に仕事しろ
子プロセスから再現に関係ない部分を削除しまくって最小限のここで見せられるコードになるまで書き込まなくていいよ
555: 2020/10/03(土)14:17 ID:l4QjehZB(1) AAS
外部リンク:detail.chiebukuro.yahoo.co.jp
abiko tetuってやつヤバすぎ
556(1): 2020/10/17(土)18:10 ID:cX3MrjsP(1/2) AAS
フォルダ全体をコピーしたくて fs-extra のcopySync()を使うために
const fse = require('fs-extra');
としたら、
internal/modules/cjs/loader.js:968
throw err;
^
Error: Cannot find module 'fs-extra'
というエラーが出ます。
npm install fs-extra
や
npm install -g fs-extra
を試しましたが、途中で警告が出たりして、結局、元のエラーは直りません。
直す方法はありますでしょうか?
557: 2020/10/17(土)18:39 ID:cX3MrjsP(2/2) AAS
>>556
結論的には、
$ npm install -g fs-extra
$ set NODE_PATH=%AppData%\npm\node_modules
としてから、
node xxxx.js
とすると直りました。
558: 2020/10/17(土)23:48 ID:5XNVi7jP(1) AAS
Windows?
559: 2020/10/19(月)16:19 ID:faSV5MEm(1) AAS
# Fatal error in , line 0
とか見慣れぬエラーで落ちててビビって調べたらv14のバグか
560: 2020/10/25(日)03:29 ID:xG/xcmJA(1/3) AAS
import って mjsにしないといけないし
561: 2020/10/25(日)03:30 ID:xG/xcmJA(2/3) AAS
途中送信すまん
562: 2020/10/25(日)04:23 ID:Xs0QdE0/(1) AAS
mjsにしないといけないから何なんだよ気になるだろ…
因みにpackage.json弄れば.jsをESM扱いにはできる
563(1): 2020/10/25(日)13:32 ID:xG/xcmJA(3/3) AAS
node v15にしたからmjsにして requireを全部importに変更したらpuppeteerがimportできなくてまたrequireに戻した
564(1): 2020/10/26(月)06:48 ID:AP4vuhmG(1/2) AAS
下記のモジュールを使用してHTMLソースからタグを全て取り除く処理を作っているのですが、タグを取り除いてくれません。
ES6で記述されたjavascriptを対応していないブラウザで動作させるために記法を変換してから読み込ませることは知っているのですが、
nodeコマンドで直接実行する場合にもそのような記法の変換などが必要なのでしょうか?
◆モジュール
外部リンク:github.com
◆ソース
main.js
-----
var striptags = require('striptags');
striptags(html);
console.log(html); // 取り除かれていない
◆コンソールで書きコマンドを実行
node main.js
565(1): 2020/10/26(月)13:39 ID:jWz3MMEX(1) AAS
html = striptags(html);
じゃないの?
566: 2020/10/26(月)14:12 ID:AP4vuhmG(2/2) AAS
>>565
教えて頂いた方法で取り除かれていることが確認できました。
公開されているソースを確認したら戻り値を受け取るようになっていました。
今後はソースも確認するようにします。
ありがとうございました。
567: 2020/10/26(月)14:44 ID:/aZJ5myY(1) AAS
その前にJavaScriptの勉強をちゃんとすべきでは。。。
JSの文字列は不変って知ってればstriptagsの使い方を知らなくても>>564の書き方じゃダメってわかったはず
568: 2020/10/28(水)03:46 ID:Xggm0kAQ(1) AAS
Fetchより先にAbortControllerが来るのタイムパラドックス感がある
569: 2020/10/28(水)14:31 ID:jeoOjGPI(1/2) AAS
node.jsがあればPHPはもういらないよね?
570(1): 2020/10/28(水)14:45 ID:Nt7id6vD(1) AAS
そんなことはない
571: 2020/10/28(水)23:57 ID:jeoOjGPI(2/2) AAS
>>570
なぜ?
572: 2020/10/29(木)00:23 ID:6kIeo5xU(1) AAS
rdb扱うのはphpの方が得意やろ
573(1): 2020/10/29(木)00:35 ID:Phiv6uZl(1/2) AAS
>>563
v15で試したけど import puppeteer from 'puppeteer' で読み込めてるよ
574(2): 2020/10/29(木)10:07 ID:D91L/a15(1/2) AAS
俺も文法的にはPHPよりもjavascriptの方が好みなので、できれば移行したいんだけど、
URL単位で小物サービスを作る用途がメインなので今でもPHPを使ってしまう。
なんか、node.jsはCGI的に使うのはナンセンスという雰囲気があって、
でも、たまにしか使わない小物サービス毎にポート番号を消費したくない、
と思うと移行できない。
こんな俺にもおすすめなnode.jsの使い方ってある?
575: 2020/10/29(木)10:28 ID:89EHBpBz(1) AAS
レンタルサーバーだといまだにPHPだかんね
576: 2020/10/29(木)11:43 ID:6uKcySyb(1) AAS
>>573
ありがとうございます。 -gでインストールしてたのがいけないっぽいです
577(1): 2020/10/29(木)16:31 ID:Phiv6uZl(2/2) AAS
>>574
極々普通にNodeでもルーターから振り分ければいいと思う
PHPだってサービスごとにhttpd立てているわけではないっしょ
578(1): 2020/10/29(木)21:26 ID:/i1l21sm(1) AAS
>>574
無料オンライン格ゲーを作る。
579: 2020/10/29(木)23:24 ID:D91L/a15(2/2) AAS
>>577
ありがとう、それだ!俺に必要だったものは。
とりあえず、expressを入れればいいのかな?
ちょっとやってみる。
>>578
俺にはレベル高すぎ(笑)
580(1): 2020/11/07(土)11:58 ID:fULQIOig(1/2) AAS
npm-run-all で複数のnpm scriptを連続で実行したいんだが、scriptのどれか一つでも
0以外のステータスを返すとそこで処理をやめてしまうのをどうにかできないのかな。
大抵の場合はその仕様でもいいんだけど、たまに、エラーだろうがなんだろうがとにかく
処理しきってしまいたい場合がある。
581: 2020/11/07(土)12:35 ID:1KfyiAX9(1) AAS
>>580
--continue-on-error
options.continueOnError = true;
582: 2020/11/07(土)12:39 ID:fULQIOig(2/2) AAS
さんきう。オプション見落としてた。
583: 2020/11/14(土)16:32 ID:XA/NhCB9(1) AAS
574です。
$ express --ejs myapp
を実行して、routes/index.jsに
router.all('/:ejs',(req,res)=>res.render(req.params.ejs,{req:req}))
の1行を書き加えただけでかなりphpっぽく使えるね。
ejsファイルを置くだけで、nodeを再起動しなくていいし。
ejsファイルが存在しないときに404 Not Foundじゃなくてエラー画面が出るのが愛嬌だけど。
584: 2020/11/18(水)14:56 ID:7Ekft4aV(1/2) AAS
おめーら的にdenoってどうすか?
使ったことなさそうだけど
585: 2020/11/18(水)19:28 ID:Zh0DQZnV(1) AAS
ほんのちょっとしか触ってないけど面倒くささが無い
npmライブラリが使えないけど init だの install だの package.json だの tsc だのやったりいじったりしないで済むから手軽に感じた
時間が経ってライブラリが充実してくれれば普通に使いやすい環境だと思う
586: 2020/11/18(水)20:11 ID:7Ekft4aV(2/2) AAS
期待したいよな
開発者はイケメンだし
587: 2020/11/18(水)21:25 ID:v8HWKopj(1) AAS
npmが使えないからエコシステムが育つまで様子見だな。
@types以前のTypeScriptみたいな。
588: 2020/11/19(木)01:51 ID:/aqa7r+0(1) AAS
io.jsのように良い部分はNode.js側に取り込んでほしいね
最近は複雑さばかりが増しているし
589(1): 2020/11/21(土)19:45 ID:ANSb4B/j(1) AAS
express 5.xを使ってみたいんだけど、4.17.1になってしまう。
どうすればいいの?
$ npm init --y
$ npm install express@>=5.0.0-alpha.8 --save
npm notice created a lockfile as package-lock.json. You should commit this file.
npm WARN e5@1.0.0 No description
npm WARN e5@1.0.0 No repository field.
$ npm view express version
4.17.1
590(1): 2020/11/21(土)23:08 ID:jQLdetle(1) AAS
Ruby のBundler なら、プロジェクトルートに移動してから、
Gemfile にバージョン指定を書いて、
bundle install とコマンド入力するけど
591(1): 2020/11/21(土)23:54 ID:lsz7D7Ic(1) AAS
>>589
npm i express@next
>>590
npm知らないヤツが何ででしゃばるわけ?
592: 2020/11/22(日)00:38 ID:gYBzGuNC(1) AAS
expressは当時koaに移行するのかと思ってたけど結局どっちも開発続いてるのな
593: 2020/11/22(日)00:44 ID:A21DE4YF(1) AAS
koaもhapiもfastifyもexpressの牙城は崩せそうもない
594(2): 2020/11/22(日)00:46 ID:7U8BOc5J(1/2) AAS
>>591
ありがとう。やってみたけどダメだった。
途中の表示にはexpress@5.0.0-alpha.8って出てるのに…
なんか晒すべき設定ってある?
$ npm init --y
$ npm i express@next
npm notice created a lockfile as package-lock.json. You should commit this file.
npm WARN e5@1.0.0 No description
npm WARN e5@1.0.0 No repository field.
+ express@5.0.0-alpha.8
added 57 packages from 39 contributors and audited 57 packages in 4.105s
found 0 vulnerabilities
$ npm view express version
4.17.1
595(1): 2020/11/22(日)01:12 ID:uIWU98XF(1) AAS
viewコマンドはインストールされたものじゃなくて公開されてるパッケージの情報見るものよ
596(1): 2020/11/22(日)01:15 ID:nMBoVd/n(1) AAS
>>594
npm viewはレジストリの情報を表示するものでローカルにインストールされたものとは無関係だからだなw
npm ls express
597(1): 2020/11/22(日)01:19 ID:ujQ9d+0r(1) AAS
>>594
インストールの時は
$ npm i express@next
って打ってるくせに
なんで
$ npm view express version
って打つわけ?
それなら
$ npm view express@next version
でしょうが…
598: 2020/11/22(日)09:31 ID:7U8BOc5J(2/2) AAS
>>595-597
ありがとう。バージョン確認方法の方が間違ってたのか。
あぶねえ。パッケージ側の情報で確認してたら、何を試しても永遠に出来ないって言ってるところだったw
改めて確認したら、ちゃんと5.xが入ってた。
お騒がせしました。
$ npm ls express | grep express
└── express@5.0.0-alpha.8
599(1): 2020/11/23(月)12:57 ID:3jYl7MgH(1) AAS
node.jsのドキュメントや書籍等で、セキュリティー対策を考慮して書かれているものがあれば教えてください
600: uy ◆e6.oHu1j.o 2020/11/24(火)12:43 ID:gfNKbZsO(1) AAS
>>599
(u_・y)っ外部リンク:asciimw.jp
601: 2021/01/01(金)19:21 ID:/+4IUuLb(1) AAS
さくらVPSとかのlinuxサーバにwebアプリをデプロイするベターな手順ってなんかありますか
単純に考えれば、既存のサーバ中のプロジェクトフォルダを消して gitから新しくpullしてnpm ciすればいいはずなんだが
・毎回node_modulesを作るのは時間がかかるから、package-lock.json に変更が無い場合はそのまま引き継ぎたい
・ローカルの設定、ログフォルダといった、消したくないフォルダがある
からちょっと面倒でなんとかしたい
nodejs deployment tool とかで検索しても、すぐ自社のSaasに誘導しようとして
素のEC2的なlinuxマシンでの方法が分からなかった。
602(1): 2021/01/02(土)03:22 ID:HtnkmSa8(1) AAS
普通にDockerでnpm i後のイメージ作ればいいんじゃない
603: 2021/01/02(土)04:25 ID:VICQRi/P(1) AAS
>>602
ありがとうございます。やはりdockerか。
docker使えない自分はこんな感じでやっていました。
>・毎回node_modulesを作るのは時間がかかるから、package-lock.json に変更が無い場合はそのまま引き継ぎたい
git fetchした後git diff HEAD..origin/master -- package.json で変更があるか確認出来る。
変更があった場合のみnpm installすればいい。
>・ローカルの設定、ログフォルダといった、消したくないフォルダがある
ログフォルダや設定ファイルは.gitignoreしてあるはずだから、気にせず毎回git merge origin/master しても全く問題ないはず。
深く考えすぎてて、普通に手を動かしたら違和感なくデプロイ出来ました。
604: 2021/03/01(月)09:14 ID:vtDgs//2(1/2) AAS
for文について質問させてください。
const execTime = new Date(2021,0,1);
for (
const ix = new Date(execTime.getTime());
ix.getMonth() === execTime.getMonth();
ix.setDate(ix.getDate() + 1)
) {
console.log(ix);
}
これを実行すると、以下のようになります。
2020-12-31T15:00:00.000Z
...
2021-01-30T15:00:00.000Z
なぜ1月1日〜1月31日にならないのでしょうか?
どのように書けばいいのか教えてください。
node -v
v15.9.0
605(1): 2021/03/01(月)09:46 ID:g7xhMPQT(1) AAS
タイムゾーン
606: 2021/03/01(月)11:40 ID:vtDgs//2(2/2) AAS
>>605
ボケてました。
ありがとうございました。
607: 2021/03/01(月)17:11 ID:Jj2WQfq1(1/2) AAS
npm outdateをCLIじゃなくてNode側から使う方法ってない?
stdoutからパースするのは流石に手間で
608(1): 2021/03/01(月)17:57 ID:LQGHEOvf(1) AAS
こいつを直接使えばいんじゃねーの知らんけど
外部リンク[js]:github.com
609: 2021/03/01(月)22:10 ID:Jj2WQfq1(2/2) AAS
>>608
thx
試しにnode_modules/lib/outdated.jsがexportしてる関数を叩いてみたけど
内部のglobalディレクトリ参照でコケているようなエラーが出て機能しなかった
npm自体がModとしてのexportするのもAPIのないEventEmitterインスタンスだし想定してなさそうだ
諦めて自前で実装しているユーザーパッケージを適当に探すよ
610: 2021/04/24(土)07:20 ID:CqGuC/ho(1) AAS
JavaScript/TypeScriptランタイム環境「Deno 1.9」がリリース、パフォーマンス向上に寄与する機能追加など
外部リンク:codezine.jp
611(1): 2021/07/14(水)17:16 ID:x3WS9adn(1) AAS
質問ってここで良いの?
Angularが良くわかないんだけど、例えばmd-toobarとmat-toolbarはなにが違うの?
いま触っているのが全部md-xxxだけど、ググるとmat-xxxばかり
package.jsonも、angularーmaterialになっているけど、ググって出てくるのは@angular/materialで、違いが分からない
612: 2021/07/16(金)23:12 ID:ku0oROTf(1) AAS
dnsモジュールのgetServers()が初回実行時の内容キャッシュしてて使い物にならん
>>611
フロントエンドスレが一応立ってるからそっちで聞いてみれば
あとはWeb制作板に質問スレあったけど大分前に荒らしに乗っ取られて今はどうなってるやら
613(2): 2021/07/30(金)15:13 ID:COPEXZUK(1) AAS
Ubuntu18.04でNode.js8.10.0を使ってるのですが、
BigIntのリテラル(例:10N)が使えません。
どうやったら使えるように出来るのでしょう?
614(1): 2021/07/30(金)15:53 ID:0CdNCLhG(1) AAS
Node.jsをv12以上にする(細かいこと言うとv10の途中から使える)
615(2): 2021/07/30(金)17:48 ID:n/UloM9p(1/2) AAS
漏れは、Windows 10, WSL2, Ubuntu 18.04, VSCode だけど、
Linux側には、日本人が作った、バージョンマネージャーのanyenv で、rbenv, nodenv を使って、
ruby 2.6.6, node 12.16.2 を入れた
yarn は、Windows側に入れて、Linux側から、拡張子なしのyarn コマンドを呼べる。
これは、#!/bin/sh で始まるシェルスクリプト
anyenv 公式サイト
外部リンク:github.com
anyenv + macOS環境構築
外部リンク:qiita.com
anyenv は多言語向きで、rbenv, nodenv, pyenv, phpenv などを同じ使い方で、統一的に扱える。
~/.bashrc に、下の2行を追加するだけで、各言語ごとに追加しなくても良い
export PATH="$HOME/.anyenv/bin:$PATH"
eval "$(anyenv init -)"
616: 615 2021/07/30(金)18:08 ID:n/UloM9p(2/2) AAS
anyenv などを使わず、
Docker で探した方が、もっと簡単かも
apt でインストールした、Node.js 8 は、アンインストールすれば良い
617: 2021/07/30(金)18:19 ID:7AkGA5GJ(1) AAS
スクレイピングしたいんですけど何を勉強すればいいですか
不正アクセスに問われたりしないでしょうか?
セキュリティ対策はどのようなことに注意すればよいでしょうか?
618: 2021/07/30(金)21:07 ID:AXk+vMk4(1) AAS
今ならPuppeteerか同種のヘッドレスブラウザで実装するのが楽
通常の用途であればセキュリティを気にする部分はない
不正アクセスはまたの問題だから他の質問スレで聞こう
619(1): 613 2021/07/31(土)11:22 ID:A0amfNLA(1/2) AAS
皆さんありがとうございました。
最新のLTS版Node.jsを入れたらBigIntなリテラル(N)が使える様になりました。
どのようにUbuntu18.04に最新版をインストールしたかと申しますと。
1. npmでnコマンドをインストール
2. nコマンドで最新LTS版Node.jsをインストール
3. aptでインストールしていたnodejsとnpmをアンインストール(依存も解消)
です。
620(1): 615 2021/07/31(土)11:37 ID:tQlroryC(1) AAS
NVM, n も、知ってるけど、
各言語ごとに、ツールの使用方法を覚えるのが大変
全言語で使用方法が統一されている、anyenv, asdf が良い。
最近はどの言語も、Docker が多い
621: 613 2021/07/31(土)12:37 ID:A0amfNLA(2/2) AAS
>>620
Node.jsでパッケージングされているプログラムだけで完結できるのに、
新しいNode.jsにする上で、
他のプログラムや仮想化に依存しなくてはいけない理由は何ですか?
仮想環境が便利だ等であれば別の話だと思うのですが。
私はC/C++、Java、Perl、JavaScript(フロント少々)使いで、
最近Node.jsに手を出し始めたのですが、
anyenvやasdfについては全く存じ上げませんでした。
それらを覚える事によって、
それらのラーニングコストを上回る恩恵を授かれるとは思いませんでした。
>>614さんのアドバイスから>>619まで行き着いた次第で、
シンプルに管理コストを抑えられるるのが一番だとも思っています。
622: 2021/07/31(土)16:07 ID:nZmJDmGx(1) AAS
好きなもん使えばいい
俺もubuntuではaptでクソ古いNode入れてからnpmでn入れてnからlatest突っ込んでるよ
623: 2021/07/31(土)17:22 ID:23Q0KlZH(1) AAS
ruby 君の言うことを真に受けてはいけない
624: 2021/07/31(土)19:12 ID:8Bi9zOKj(1) AAS
Ubuntu-ltsのデフォnodejsが10.xだもんなあ
オレの環境では動かない、とか言われても知らねえよ。NodeJS公式もサポートしないバージョンまでカバーできる訳ないだろうが
625(1): 2021/08/04(水)17:08 ID:O4k/EVJC(1) AAS
「Electron」と「WebView2」はどう違う? 〜「Electron」の開発チームが解説
外部リンク[html]:forest.watch.impress.co.jp
626: 2021/08/04(水)19:09 ID:qrQ4Lnon(1) AAS
>>625
ただの翻訳(かつ雑な簡素化)記事なのにその旨の記述がない
画像も元ブログからの転載(盗用)だけどクレジット無し
大手メディアでこれって大丈夫か?
627: 2021/08/04(水)19:20 ID:L5LJfz6s(1) AAS
丸コピしたのとは違うと思うぞ
画像の方はアウト臭いな
628: 2021/08/24(火)08:49 ID:YRe/N1mJ(1) AAS
node.jsのconsole.logのpretty printをデフォルトでやめさせる方法ないのかな?
このおせっかい機能すごくいらいらするのは俺だけかな?
629: 2021/08/24(火)10:42 ID:5pgrc+RU(1) AAS
process.stdout.write使え
console.logはブラウザに寄せようと頑張ってるんやろ
630: 2021/08/24(火)15:31 ID:qPWgCxGJ(1) AAS
puppeteerを使ってるプログラムをwebpackでバンドルすると、distにはChromiumが無いからエラーが出ちゃうわ
よく分からん
631: 2021/08/24(火)18:06 ID:Ya+eWSVV(1) AAS
Webサイトのコンテキストで動かしてるならDevToolsとセッション張れないから意味ないぞ
外部リンク[md]:github.com
632(1): 2021/08/28(土)10:29 ID:rJz23Izt(1) AAS
nodeで作ってるapiがメモリ使用量1GBくらいでかなりベビーなんですけど
ここら辺のパフォーマンスチューニングについての知見がまとまってるサイトか書籍ないですかね?
633(1): 2021/08/28(土)14:06 ID:TLYe8gOd(1) AAS
>>632
動画リンク[YouTube]
634: 2021/09/01(水)09:26 ID:J/+xOU5Y(1) AAS
>>633
あざます!
635: 2021/09/06(月)01:52 ID:B6t4Zwws(1) AAS
Fastifyいいな
636: 2021/09/15(水)19:03 ID:fHmj5hYp(1) AAS
スクレイピングすると地獄へ落ちるって本当ですか?
637: 2021/09/15(水)20:01 ID:DvcCOYYc(1) AAS
puppeteerのplaygroundでforループすれば任意の回数地獄に落ちられるぞ
638: 2021/09/18(土)03:38 ID:YPBxfQEw(1) AAS
スクレイピングの勉強するのですが、下手するとF5アタックになるとかの法的リスクと回避法を重視している入門書ってありますか?
今の所やりたいことは、特定の市町村の5年分気温気象データを収集して自分用に加工
近所のコインランドリーの稼働データを集計して空いてる確率が高い時間帯を調べるの2つです
前者は膨大なデータを取得する必要があります
後者は10分から20分おきにアクセスすることになります
639: 2021/09/18(土)04:59 ID:ZvozewrD(1) AAS
マルチポストすんな
640: 2021/09/18(土)18:16 ID:J85RgKD5(1) AAS
頭のおかしい人に以下のようなことを言われました
>>基本、スクレイピングは営業妨害との戦い。
>>どの本にも、そう書いてある。
>>スクレイピングを推奨する本はない
具体的な書籍名を教えてください
>>5ch は、マルチポスト禁止!
>>同じ質問を、複数のスレや外部のサイトに書いてはいけない
どこでそんなルールが決まっているのでしょうか?
641: 2021/09/19(日)01:37 ID:k7BgVJB0(1/2) AAS
node初心者だけどnpmが脆弱性情報吐きまくってこわい
642: 2021/09/19(日)13:46 ID:k7BgVJB0(2/2) AAS
ググったらauditはクソ設計みたいな記事が出てきた
無視して良かったんだね
いままで膨大な時間を無駄にしてた…(´Д`)ハァ…
643(1): 2021/10/10(日)13:43 ID:rC7NAnza(1/3) AAS
なんか変な場所でエラー投げられてプロセスが止まると思ったら
依存Modの一つがPromiseコンストラクタのcallback内で非同期エラー投げて止まっていた
そりゃrejectしないしcatchブロックにも引っ掛からんわどうすりゃいいねん
644: 2021/10/10(日)17:42 ID:6Ldb4KuL(1) AAS
そんな事は4,000年に一度しかないからヨシ!
645: 2021/10/10(日)18:08 ID:aEbL1282(1) AAS
>>643
その依存モジュールを捨てる
646(1): 2021/10/10(日)20:04 ID:rC7NAnza(2/3) AAS
最悪プルリク投げるかと思ってリポジトリ見たら消えてた
捨てて自分で書くわ
647: 2021/10/10(日)20:07 ID:zb1mAGkH(1) AAS
>>646
お疲れさん。ちな何て言うモジュール?
648: 2021/10/10(日)20:11 ID:rC7NAnza(3/3) AAS
具体名は避けるけどProxy関連
自前のDNSBL作るのに使ってる
649: 2021/10/20(水)02:52 ID:7Ch1Hu5l(1) AAS
スクレイピングに興味があるのですが1時間に1回の頻度のGETだけで訴えられる危険があるって本当ですか?
650: 2021/10/20(水)07:42 ID:442/7USe(1) AAS
マルチ
651: 2021/10/21(木)01:45 ID:Z5+NocI4(1) AAS
17でStrcturedCloneの実装来るのか
もうv8にある似たようなAPI使わなくてよくなるのな
652: 2021/10/25(月)18:50 ID:xfFAFxQ2(1) AAS
パッケージ管理ツールのnpmで公開されている「UAParser.js」は、ユーザーエージェントの判定処理を
実行するJavaScriptライブラリであり、Facebook・Microsoft・Amazon・Googleなどの超大手企業を
含む1000以上のプロジェクトで採用されています。
そんなUAParser.jsがハッカーによってハイジャックされ、LinuxおよびWindowsデバイスを対象に暗号
資産採掘やパスワードの盗難を行うトロイの木馬が仕込まれていたことが判明しました。
653: 2021/10/25(月)18:55 ID:WgjrPOfi(1) AAS
GIGAZINEからのコピペだろうけどちゃんと引用元URL貼っとけよ
654: 2021/11/17(水)15:53 ID:OJq8ALeu(1) AAS
上にもちょっとありましたが、レンタルサーバでnode.jsを動かすのって現実的じゃないもんなんですか?
655(1): 2021/11/17(水)16:00 ID:lSu1Xmea(1/2) AAS
いや全然
上にある「レン鯖はPHP」ってレスは恐らく既に環境を構築済みで
あとは実行する.phpを配置するだけのWebスペースを想定したレス
656(1): 2021/11/17(水)16:22 ID:sYjDCVja(1) AAS
node.js使えるレンサバってあるの?
657: 2021/11/17(水)16:34 ID:lSu1Xmea(2/2) AAS
>>655に書いたような実質Webスペースの共有レン鯖でも端末触れる一部では使えるよ
占有型ではもちろん使えるけど今なら間違いなくVPSのほうがいい
658: 2021/11/17(水)17:46 ID:+3kxan1m(1) AAS
古き良きLAMP環境に拘る理由がないなら好きにしたら良い
659: 2021/11/17(水)23:30 ID:YG2/9hEL(1) AAS
>>656
昔ながらのFTPとかでファイル置くしかできないようなサービスならまずそんなもの導入されてないだろうな
660(4): 2021/11/25(木)05:21 ID:HW7nta/v(1/3) AAS
gulp4でejsをを使用したい + 別のタスクと記述方法を統一したいのですが
どうしてもエラーが解消できないのでどなたかご教授頂けませんか?(exportsにオブジェクトを突っ込む方法)
古い記述方法では動作しますが、新しい記述方法ではどうしても動作しません。
色々ググったのですが、どのサイト(英語サイトも含め)も古い記述方法で書かれており困っています。
公式も古い書き方に記述されています。(ejsだけ新しい書き方に対応していない?)
外部リンク:www.npmjs.com
//old
gulp.task('ejs', function() {
//
}
新しい記述方法では、どうしても下記のエラーが解消できません。
- The following tasks did not complete
- Did you forget to signal async completion?
また`ps aux`で別のプロセスも走っていないことを確認しており、別のgulpタスクも全てオフにした状態で
デバッグしております。
関数の引数にdoneを入れてdone()で締めたり、return除いてみたり試行錯誤していますが、数時間ハマっています。
どなたら分かる方いらっしゃたらご教授お願い致します。
//new
function ejs() {
return gulp
.src(srcPath.ejs)
.pipe(ejs());
}
exports.ejs = ejs;
661: 2021/11/25(木)06:59 ID:nh0ZEMSE(1/2) AAS
このエラーメッセージで検索すれば?
それか、意味を考えてみれば?
The following tasks did not complete
Did you forget to signal async completion?
もっと単純な例で、動くかどうか試してみれば?
662: 2021/11/25(木)07:24 ID:QOEXsJ22(1/10) AAS
>>660
状況全く分からんが、JSのパーサーはややおかしい?所があって、returnの後はぶった切られる。
よって、 return gulp.src(srcPath.ejs).pipe(ejs()); と改行を無くして試す事を勧める。
663(1): 2021/11/25(木)07:46 ID:88pS2ZzI(1) AAS
>>660
外部リンク:developer.mozilla.org
664: 2021/11/25(木)08:25 ID:QOEXsJ22(2/10) AAS
>>663
これ return と yield (と後置演算子もか?)はパーサの仕様バグだよな?
直感的じゃ無いという意味で。
665(1): 2021/11/25(木)08:37 ID:acYGqwrp(1) AAS
仕様だよ
お前の直感がおかしい
666(1): 2021/11/25(木)08:57 ID:QOEXsJ22(3/10) AAS
>>660
いや実際660はそうしてるだろ。俺も以前嵌った事があったし、
実際セミコロン必須の言語だとどこで切ってもいいから、660の書き方はよく見るよ。
俺はお前がおかしいと思うが。
結局これもMDNで説明するのに例外扱い("no LineTerminator here" 規則)になってるし。
統一された文法ではないよね。(=もっとましな仕様にする事も出来たし、実際他言語はそう)
667: 2021/11/25(木)08:57 ID:QOEXsJ22(4/10) AAS
すまん分かると思うが 666 は >>665 宛
668(1): 2021/11/25(木)09:45 ID:6PNOZvLH(1/3) AAS
>>666
その書き方よくみるというけど
1行で書けば見やすいのにわざわざ複数行で見にくくしている意図がわからない
669(1): 2021/11/25(木)10:02 ID:QOEXsJ22(5/10) AAS
>>668
そりゃ、そうした方が見やすいと思う人がそうするだけだよ。
お前がそう思わなければしなければいいだけ。
ただ実際、660にある公式のコードもそうなってるだろ。
俺も個人的には横に長いコードを書くけど、一般的には縦に長いコードの方が多いと思うよ。
670(1): 2021/11/25(木)10:13 ID:rnpiht7q(1/2) AAS
returnの直後に改行してないからASI関係なくないか?
671(1): 2021/11/25(木)10:19 ID:QOEXsJ22(6/10) AAS
>>670
660の「新しい記述方法だと動かない」とされてるコードは return gulp で改行してる。
660内の公式はこれが出来ない事を知ってるから、 gulp.src(...) で改行してる。(ただしreturnはないが)
672(1): 2021/11/25(木)10:26 ID:6PNOZvLH(2/3) AAS
>>669
それは長い行を分けて改行しているだけ
一方で>>660の人は長い行にならないのに無意味に改行しまくり
673(3): 2021/11/25(木)10:28 ID:rnpiht7q(2/2) AAS
>>671
return
gulp.src()
ならreturnの後にセミコロンが自動挿入されるけど
return gulp
.src()
ならgulpの後にセミコロンは自動挿入されないでしょ
それよりfunction ejs(){}って名前がダメなんじゃないの?
.pipe(ejs())で再帰になってる
674(1): 2021/11/25(木)10:36 ID:QOEXsJ22(7/10) AAS
>>672
長さではなく、意味で切るんだよ。
>>673
> return gulp
> .src()
> ならgulpの後にセミコロンは自動挿入されないでしょ
されて gulp が返されるはずだぞ。
675(1): 2021/11/25(木)10:42 ID:6PNOZvLH(3/3) AAS
>>674
意味で切るならgulpと.src()の間で改行を入れてるのは明らかにおかしい
無意味な改行だ
上下前次1-新書関写板覧索設栞歴
あと 121 レスあります
スレ情報 赤レス抽出 画像レス抽出 歴の未読スレ AAサムネイル
ぬこの手 ぬこTOP 0.036s